Integrieren Sie AI-Chatbots und Text-to-Speech-Dienste in Unreal Engine-Projekte. Unterstützt führende Anbieter wie OpenAI, Claude, DeepSeek, Gemini, Grok, Ollama, ElevenLabs, Google Cloud und Azure – mit vollständiger Blueprint- und C++-Unterstützung.
Das Plugin bietet eine einheitliche API für die Kommunikation mit externen AI-Anbietern über HTTPS. Senden Sie den Konversationsverlauf und empfangen Sie gestreamte oder vollständige Antworten – sowohl für Chat als auch für TTS – alles aus Blueprint oder C++.
Geben Sie beim Start einmalig Zugangsdaten für einen oder mehrere unterstützte Anbieter an.
Übergeben Sie Konversationsverlauf, Modellname und Parameter aus Blueprint oder C++.
Empfangen Sie Echtzeit-Token-Blöcke oder warten Sie auf die vollständige Antwort – beide Modi werden unterstützt
An Ergebnis-Delegaten binden und Text oder Audio in Ihre Spiellogik einspeisen
Sechs Anbieter, die das gesamte Spektrum großer Sprachmodelle abdecken – von cloud-gehosteten Spitzenmodellen bis hin zu lokal ausgeführten Open-Source-Alternativen.
GPT-4o, GPT-5, O1, O3 sowie die neuesten Reasoning- und Multimodalmodelle.
Claude Opus, Sonnet und Haiku – einschließlich der neuesten Claude-5-Familie.
DeepSeek Chat und DeepSeek Reasoner mit expliziter Reasoning-Ausgabe über separate Delegaten.
Gemini 2.5 Pro / Flash und Grok 3 / 4 – einschließlich Groks Reasoning-Varianten.
Jedes Modell aus der Ollama-Bibliothek – Llama, Mistral, Gemma, Qwen und mehr. Kein API-Schlüssel erforderlich.
Vier TTS-Anbieter auf Unternehmensniveau mit umfangreichen Stimmbibliotheken, Sprachabdeckung und Streaming-Unterstützung.
Natürliche Stimmen (Alloy, Nova, Shimmer und mehr) mit Streaming-Unterstützung und TTS-1-HD-Qualität.
Ausdrucksstarke, hochwertige Sprachsynthese in über 70 Sprachen mit Eleven V3- und Turbo-Modellen.
Neuronale und Studio-Stimmen von Google Cloud TTS, plus Azure Neural Voices mit Emotions- und SSML-Stilunterstützung. Programmatische Stimmfindung ist für beide enthalten.
Über einfache Anfrage/Antwort hinaus bietet das Plugin Streaming, Reasoning-Ausgabe, Anfrageabbruch, Stimmenermittlung und vollständige Fehlerbehandlung – alles aus Blueprints oder C++ zugänglich.
Zwei Konversationsmodi: Warten Sie auf die vollständige Antwort oder empfangen Sie Token-Chunks in Echtzeit, während sie generiert werden. Beide Modi werden von allen Konversationsanbietern unterstützt.
Konvertieren Sie AI-generierten Text in Sprache mit vollständigem Audio in einer einzigen Antwort, oder streamen Sie Audio-Chunks in Echtzeit für die sofortige Wiedergabe längerer Ausgaben.
Greifen Sie auf explizite Reasoning-Abläufe von Modellen zu, die diese bereitstellen – DeepSeek Reasoner und Grok-Reasoning-Modelle. Reasoning und endgültiger Inhalt werden über separate Delegates übermittelt.
Brechen Sie jederzeit jede laufende Anfrage ab – unerlässlich für reaktionsfähige Anwendungen, die die Generierung mitten im Stream unterbrechen und neu starten müssen.
Fragen Sie zur Laufzeit programmgesteuert verfügbare Stimmen von Google Cloud und Azure TTS ab. Filtern Sie nach Sprache und Gebietsschema, um Stimmen dynamisch im Spiel auszuwählen.
Detaillierte Status- und Nachrichteninformationen werden für jede Anfrage zurückgegeben. Behandeln Sie Anbieterfehler, Netzwerkfehler und Ratenbegrenzungen elegant aus Blueprint oder C++.
Blueprint-Beispiel - Streaming-Konversation mit OpenAI
Ein Windows-Demo ist verfügbar, um die Funktionen des Plugins aus erster Hand zu erleben. Die Demo umfasst KI-Konversationen, Text-to-Speech und den Wechsel zwischen mehreren Anbietern – mit einem vollständigen Blueprint-Quellprojekt, das ebenfalls als Referenz verfügbar ist.
Testen Sie Konversationen und TTS mit verschiedenen Anbietern nebeneinander
Vergleichen Sie beide Antwortmodi mit Live-Benutzereingabe
Vollständige Blueprint-Implementierung im Demo-Projekt als Referenz
Video-Tutorial
Runtime AI Chatbot Integrator ist die KI-Intelligenzschicht der Georgy Dev Plugin-Suite – kombinieren Sie ihn mit Spracherkennung, Offline-TTS und Lippensynchronisation, um vollständige sprachgesteuerte KI-Charakter-Pipelines zu erstellen.
TTS-Audioausgabe zur Laufzeit verarbeiten und abspielen. Unverzichtbarer Begleiter für die Handhabung von Streaming-Audiodaten von jedem TTS-Anbieter.
Mehr erfahrenSteuern Sie die Echtzeit-Lippensynchronisation bei MetaHuman- und benutzerdefinierten Charakteren direkt aus KI-generierter Sprachausgabe.
Mehr erfahrenOffline-Spracherkennung (Speech-to-Text) unterstützt von Whisper – wandeln Sie Spielersprache in Text um und führen Sie ihn direkt dem KI-Chatbot zu.
Mehr erfahrenVollständig offline Sprachsynthese mit 2800+ Stimmen. Ergänzt Cloud-TTS-Anbieter für Offline- oder datenschutzsensible Szenarien.
Mehr erfahrenGenerieren Sie Dialoge offline mit On-Device-LLMs und steuern Sie dann die Lippensynchronisation von der synthetisierten Sprache für vollständig offline Charakterinteraktionen.
Mehr erfahrenDie umfassende Dokumentation deckt alle Anbieter, Konversationsmodi, TTS-Workflows, Reasoning-Modell-Ausgabe, Stimmenfindung und Fehlerbehandlung ab – mit Blueprint- und C++-Beispielen durchgehend.
Schritt-für-Schritt-Anleitungen für alle Funktionen, mit Blueprint- und C++-Beispielen
Aktive Discord-Community mit Entwickler-Support
Maßgeschneiderte Integration oder Feature-Entwicklung - [email protected]
Blueprint-Beispiel - Senden einer Konversationsanfrage
Verfügbar auf Fab für UE 5.0 – 5.8. Unterstützt 9 KI-Anbieter, Streaming-Antworten, Reasoning-Modelle und Enterprise-TTS mit 70+ Sprachen.
