Integrieren Sie AI-Chatbots und Sprachausgabe-Dienste in Unreal Engine-Projekte. Unterstützt führende Anbieter einschließlich OpenAI, Claude, DeepSeek, Gemini, Grok, Ollama, ElevenLabs, Google Cloud und Azure - mit voller Blueprint- und C++-Unterstützung.
Das Plugin bietet eine einheitliche API für die Kommunikation mit externen AI-Anbietern über HTTPS. Senden Sie den Konversationsverlauf und empfangen Sie gestreamte oder vollständige Antworten – sowohl für Chat als auch für TTS – alles aus Blueprint oder C++.
Stellen Sie beim Start einmalig Anmeldeinformationen für einen oder mehrere unterstützte Anbieter bereit.
Übergeben Sie den Konversationsverlauf, den Modellnamen und Parameter aus Blueprint oder C++.
Empfange Echtzeit-Token-Blöcke oder warte auf die vollständige Antwort – beide Modi werden unterstützt
Binde an Ergebnis-Delegates und leite Text oder Audio in deine Spiellogik ein
Sechs Anbieter, die das gesamte Spektrum großer Sprachmodelle abdecken – von cloud-gehosteten Frontier-Modellen bis hin zu lokal ausgeführten Open-Source-Alternativen.
GPT-4o, GPT-5, O1, O3 und die neuesten Reasoning- und multimodalen Modelle.
Claude Opus, Sonnet und Haiku – einschließlich der neuesten Claude 5-Familie.
DeepSeek Chat und DeepSeek Reasoner mit expliziter Reasoning-Ausgabe, die über separate Delegates bereitgestellt wird.
Gemini 2.5 Pro / Flash und Grok 3 / 4 – einschließlich der Reasoning-Varianten von Grok.
Jedes Modell in der Ollama-Bibliothek – Llama, Mistral, Gemma, Qwen und mehr. Kein API-Schlüssel erforderlich.
Vier TTS-Anbieter in Unternehmensqualität mit umfangreichen Stimmbibliotheken, Sprachabdeckung und Streaming-Unterstützung.
Natürliche Stimmen (Alloy, Nova, Shimmer und mehr) mit Streaming-Unterstützung und TTS-1-HD-Qualität.
Ausdrucksstarke, hochauflösende Sprachsynthese in über 90 Sprachen mit Eleven V4, Turbo-Modellen und weiteren.
Neuronale Stimmen und Studio-Stimmen von Google Cloud TTS sowie neuronale Azure-Stimmen mit Emotions- und SSML-Stil-Unterstützung. Programmatische Stimm-Erkennung für beide enthalten.
Über einfache Anfrage/Antwort hinaus bietet das Plugin Streaming, Reasoning-Ausgabe, Anfrage-Abbruch, Stimmen-Ermittlung und vollständige Fehlerbehandlung – alles zugänglich aus Blueprints oder C++.
Zwei Konversationsmodi: auf die vollständige Antwort warten oder Echtzeit-Token-Chunks empfangen, während sie generiert werden. Beide Modi werden von allen Konversationsanbietern unterstützt.
Konvertieren Sie KI-generierten Text in Sprache – mit vollständigem Audio in einer einzigen Antwort oder mit Echtzeit-Streaming von Audio-Chunks für die sofortige Wiedergabe längerer Ausgaben.
Greifen Sie auf explizite Reasoning-Spuren von Modellen zu, die diese bereitstellen – DeepSeek Reasoner und Grok-Reasoning-Modelle. Reasoning und finaler Inhalt werden über separate Delegates geliefert.
Brechen Sie jede laufende Anfrage jederzeit ab – unerlässlich für reaktionsschnelle Anwendungen, die die Generierung mitten im Stream unterbrechen und neu starten müssen.
Fragen Sie zur Laufzeit programmatisch verfügbare Stimmen von Google Cloud und Azure TTS ab. Filtern Sie nach Sprache und Locale, um Stimmen dynamisch im Spiel auszuwählen.
Für jede Anfrage werden detaillierter Fehlerstatus und Meldungsinformationen zurückgegeben. Behandeln Sie Anbieterfehler, Netzwerkausfälle und Ratenlimits elegant aus Blueprint oder C++.
Blueprint-Beispiel – Streaming-Konversation mit OpenAI
Eine Windows-Demo ist verfügbar, um die Fähigkeiten des Plugins aus erster Hand zu erleben. Die Demo deckt KI-Konversationen, Text-to-Speech und Multi-Provider-Umschaltung ab – zusätzlich ist ein vollständiges Blueprint-Quellprojekt als Referenz verfügbar.
Testen Sie Konversationen und TTS mit verschiedenen Anbietern Seite an Seite
Vergleichen Sie beide Antwortmodi mit benutzerdefinierter Live-Eingabe
Vollständige Blueprint-Implementierung im Demo-Projekt als Referenz
Video-Tutorial
Runtime AI Chatbot Integrator ist die KI-Intelligenzschicht der Georgy Dev Plugin-Suite – kombinieren Sie es mit Spracherkennung, Offline-TTS und Lip Sync, um vollständige sprachgesteuerte KI-Charakter-Pipelines zu erstellen.
Verarbeiten und Abspielen von TTS-Audioausgaben zur Laufzeit. Unverzichtbarer Begleiter für die Handhabung von Streaming-Audiodaten von jedem TTS-Anbieter.
Mehr erfahrenSteuern Sie Echtzeit-Lip-Sync auf MetaHuman und benutzerdefinierten Charakteren direkt aus KI-generierter Sprachausgabe.
Mehr erfahrenOffline-Spracherkennung (Speech-to-Text) powered by Whisper – wandeln Sie die Sprache des Spielers in Text um und speisen Sie diese direkt in den KI-Chatbot ein.
Mehr erfahrenVollständig Offline-Sprachsynthese mit über 2800 Stimmen. Ergänzt Cloud-TTS-Anbieter für Offline- oder datenschutzsensible Szenarien.
Mehr erfahrenGenerieren Sie Dialoge offline mit On-Device-LLMs und steuern Sie anschließend den Lip Sync aus der synthetisierten Sprache für vollständig Offline-Charakterinteraktionen.
Mehr erfahrenEine umfassende Dokumentation deckt alle Anbieter, Konversationsmodi, TTS-Workflows, die Ausgabe von Reasoning-Modellen, Stimmenerkennung und Fehlerbehandlung ab – mit durchgängigen Blueprint- und C++-Beispielen.
Schritt-für-Schritt-Anleitungen für alle Funktionen, mit Blueprint- und C++-Beispielen
Aktive Discord-Community mit Entwickler-Support
Maßgeschneiderte Integration oder Funktionsentwicklung - [email protected]
Blueprint-Beispiel - Senden einer Konversationsanfrage
Verfügbar auf Fab für UE 5.0 – 5.8. Unterstützt 9 KI-Anbieter, Streaming-Antworten, Reasoning-Modelle und TTS in Unternehmensqualität mit über 90 Sprachen.
