UE5 Plugin Runtime AI Chatbot Integrator (+TTS)

[MaximumMaxa]

V5.7

Пожалуйста, авторизуйтесь для просмотра ссылки.

Трейлер / Trailer:

Примечание: Изображения с примерами преобразования текста в речь были созданы с помощью плагина

Пожалуйста, авторизуйтесь для просмотра ссылки.

. Поэтому, чтобы воспользоваться этими примерами, вам также потребуется установить этот плагин. Однако вы можете реализовать собственное решение для обработки звука без его использования. Для преобразования текста в текст плагин Runtime Audio Importer не требуется.

Легко интегрируйте передовые чат-боты с искусственным интеллектом в свои проекты на Unreal Engine!​

Преобразите свои игры и приложения с помощью мощных возможностей ИИ для общения и естественно звучащей речи, используя самые передовые языковые модели, доступные на сегодняшний день. Этот плагин обеспечивает прямой доступ к моделям GPT от OpenAI, Claude от Anthropic, Gemini от Google, Grok от xAI, продвинутым моделям рассуждений от DeepSeek, а также к высококачественному преобразованию текста в речь от OpenAI, ElevenLabs, Google Cloud и Azure — и всё это с помощью простых узлов Blueprint!

​

Ключевые особенности:​

• Несколько поставщиков чат-ботов с искусственным интеллектом: Подключайтесь к OpenAI, Claude, Gemini, Grok и DeepSeek через их официальные API
• Несколько поставщиков TTS: высококачественное преобразование текста в речь от OpenAI, ElevenLabs, Google Cloud и Azure
• Поддерживаемые последние модели: Получите доступ к передовым моделям, включая GPT-5.1, Claude 4.5 Sonnet, Gemini 2.5 Pro, Grok 4 и DeepSeek Reasoner
• Гибкая обработка ответов: выбирайте между полными ответами или потоковой передачей в реальном времени (фрагмент за фрагментом)
• Расширенная потоковая передача TTS: Получайте фрагменты аудио по мере их создания в OpenAI и ElevenLabs для немедленного воспроизведения во время синтеза. ElevenLabs также поддерживает режим потоковой передачи фрагментов для динамического добавления текста во время синтеза
• Voice Discovery: просмотр и поиск доступных голосов в сервисах Google Cloud и Azure TTS
• Динамическая потоковая передача текста: потоковая передача с разбивкой на фрагменты от ElevenLabs позволяет постепенно добавлять текст во время синтеза, что подходит для синтеза ответов ИИ в чате в реальном времени
• Ready for Blueprint: простые узлы для немедленной интеграции без написания кода на C++
• Кроссплатформенность: работает на всех платформах, поддерживаемых Unreal Engine (Windows, Mac, Linux, Android, iOS, Meta Quest и других)
• Простая аутентификация: простое управление ключами API для всех сервисов

Технические детали / Technical Details:

Спойлер: 🔧 Supported models:

Text chat models:​

OpenAI:​

• GPT-5.1, GPT-5, GPT-5 Mini, GPT-5 Nano
• GPT-4o, GPT-4o Mini, GPT-4-32k, GPT-4 Turbo, GPT-4.1
• GPT-3.5 Turbo
• O1 Pro, O1, O3, O3 Mini, O4 Mini
• ChatGPT-4o Latest

Claude (Anthropic):​

• Claude 4.5 Sonnet, Claude 4 Sonnet
• Claude 4.1 Opus, Claude 4.0 Opus
• Claude 3.7 Sonnet, Claude 3.5 Haiku, Claude 3 Opus

DeepSeek:​

• DeepSeek Chat
• DeepSeek Reasoner (with dedicated reasoning output)

Gemini (Google):​

• Gemini 2.5 Pro, Gemini 2.5 Flash, Gemini 2.5 Flash Lite
• Gemini 2.0 Flash, Gemini 2.0 Flash Lite
• Gemini Flash Latest, Gemini Flash Lite Latest

Grok (xAI):​

• Grok 4, Grok 4 Fast Reasoning, Grok 4 Fast Non-Reasoning
• Grok Code Fast 1
• Grok 3, Grok 3 Mini
• Grok 2 Vision 1212, Grok 2 1212
• Grok Vision Beta

Text-to-Speech voices:​

OpenAI TTS:​

• Alloy, Ash, Ballad, Coral, Echo
• Fable, Onyx, Nova, Sage, Shimmer, Verse

ElevenLabs TTS:​

• Eleven V3
• Eleven TTV V3
• Eleven Multilingual V2
• Eleven Turbo V2
• Eleven Turbo V2.5
• Eleven Flash V2
• Eleven Flash V2.5

Google Cloud TTS:​

• Neural2, Studio, Wavenet, and Standard voices
• Custom voice support
• Multiple languages and locales

Azure TTS:​

• Neural voices across multiple languages
• Voice styles and emotions
• Custom voice support

Perfect for:​

• Interactive NPCs with intelligent conversations and voices
• In-game assistants and guides that speak naturally
• Creative content generation and narration on-the-fly
• Educational applications with AI tutoring and spoken instructions
• AI-driven gameplay mechanics with voice feedback
• Virtual companions with personality expressed through text and speech

Note: API usage requires accounts with respective services (OpenAI, Anthropic, Google, xAI, DeepSeek, ElevenLabs, Google Cloud, Azure) and may involve usage costs from these providers.

This plugin provides seamless integration with leading AI language models (OpenAI, Claude, DeepSeek) and TTS models (OpenAI, ElevenLabs) through their official APIs directly in Unreal Engine.

Documentation Link:

Пожалуйста, авторизуйтесь для просмотра ссылки.

Features:

• Direct API connections to OpenAI, Anthropic Claude, Google Gemini, xAI Grok, DeepSeek, ElevenLabs, Google Cloud, and Azure services
• Support for multiple response modes (complete responses and chunk-by-chunk streaming)
• Advanced reasoning model support with separate reasoning and content outputs (DeepSeek Reasoner, Grok reasoning models)
• Blueprint-friendly implementation with simple node-based setup
• Comprehensive model support across all providers (GPT-5, Claude 4.5, Gemini 2.5, Grok 4, DeepSeek)
• Multiple TTS providers with regular and streaming support (OpenAI, ElevenLabs, Google Cloud, Azure)
• ElevenLabs chunked streaming mode with dynamic text appending and sentence boundary detection
• Voice discovery APIs for Google Cloud and Azure TTS
• Configurable request parameters (temperature, max tokens, system prompts)
• Cross-platform compatibility (Windows, Mac, Linux, Android, iOS, Meta Quest, and more)
• Simple API key management
• Error handling and response validation
• SSML support for Google Cloud and Azure TTS
• No additional dependencies required beyond the plugin itself

V1.0 UE V5.7В личку