Processamento avançado de áudio em tempo de execução para Unreal Engine. Importe, transmita, transcodifique e manipule áudio em tempo de execução em todas as plataformas - com suporte completo a Blueprint e C++.
Uma solução abrangente para processamento dinâmico de áudio - desde carregar arquivos e transmitir dados ao vivo, até captura de microfone, detecção de atividade de voz e cancelamento de eco acústico - tudo sem sair do Unreal Engine.
Carregue áudio de arquivos ou buffers de memória em tempo de execução. Exporte para vários formatos com controle de taxa de amostragem e canais.
Gerenciamento dinâmico de buffers de áudio para transmissão contínua de dados de qualquer fonte, incluindo áudio de rede e TTS.
Captura de áudio em tempo real com permissões automáticas de plataforma, detecção de atividade de voz e eventos de limite de fala.
Converta dinamicamente entre formatos de áudio com controle total sobre qualidade, taxa de amostragem e número de canais.
O Runtime Audio Importer integra-se perfeitamente ao sistema de áudio nativo do Unreal Engine - ondas sonoras importadas se comportam exatamente como ondas sonoras integradas em todas as plataformas suportadas.
Caminho de arquivo, URL, buffer de memória, microfone ou qualquer provedor PCM
Decodificação no dispositivo com reamostragem opcional, mixagem de canais e conversão de formato
Uma onda sonora UE nativamente compatível, pronta para qualquer fluxo de trabalho padrão de reprodução
Controle total de reprodução com rastreamento de tempo, callbacks PCM e eventos de conclusão
Quatro tipos distintos de onda sonora para cobrir todos os casos de uso de áudio em tempo de execução.
Áudio importado em tempo de execução de arquivos ou buffers de memória, com controle total de reprodução. Suporta MP3, WAV, FLAC, OGG, BINK e RAW PCM.
Gerenciamento dinâmico de buffer para fluxos de áudio contínuos - adequado para saída de TTS, áudio de rede ou qualquer fonte PCM incremental.
Captura de microfone em tempo real com permissões automáticas de plataforma, detecção de atividade de voz, eventos de início/fim de fala e cancelamento acústico de eco.
Capture áudio diretamente dos microfones dos clientes do Pixel Streaming. Suporta as arquiteturas Pixel Streaming e Pixel Streaming 2, incluindo cenários multijogador.
Ampla cobertura de formatos e suporte de primeira classe para todas as principais plataformas alvo do Unreal Engine.
Além da importação, o plugin oferece gerenciamento abrangente de reprodução, acesso a PCM em tempo real, inspeção de metadados e manipulação avançada de áudio - tudo a partir de Blueprints ou C++.
Reproduzir, pausar, parar e retroceder com rastreamento preciso de tempo. Monitore a posição e a porcentagem da reprodução, vincule a eventos de conclusão e gerencie manualmente a memória de áudio.
Acesse dados PCM brutos em float de 32 bits enquanto o áudio é reproduzido por meio de callbacks. Adequado para visualizadores de áudio, analisadores de frequência e efeitos DSP personalizados.
Inspecione arquivos de áudio sem importá-los completamente - obtenha duração, taxa de amostragem, número de canais e formato sem o custo da decodificação completa.
Ajuste volume, tom, loop e modo de virtualização em tempo de execução. Re-amostre e misture canais, defina a taxa de amostragem e o número de canais desejados inicialmente.
Detecção precisa de limites de fala com duração de silêncio configurável e limites mínimos de fala. Vincule aos eventos de início e fim de fala.
Remoção de eco com tecnologia WebRTC AEC3 para ondas sonoras em streaming e capturáveis. Vincule qualquer onda sonora renderizada como sinal de referência para uma captura de voz limpa, sem vazamento do alto-falante.
Exemplo de Blueprint - Importar e reproduzir áudio em tempo de execução
O Runtime Audio Importer é a espinha dorsal de áudio do pacote de plugins Georgy Dev - alimentando sincronização labial, reconhecimento de fala, TTS e pipelines de personagens com IA.
Sincronização labial em tempo real para MetaHuman e personagens personalizados, alimentada por qualquer fonte de áudio fornecida por este plugin.
Saiba maisTranscrição de fala para texto offline com tecnologia Whisper, com suporte a transcrição e tradução em mais de 95 idiomas.
Saiba maisSíntese de fala totalmente offline com mais de 2800 vozes em 51 idiomas - nenhuma conexão com a internet é necessária.
Saiba maisChat de IA na nuvem e TTS por meio de vários provedores (OpenAI, Claude, DeepSeek, Gemini, Grok, Ollama, ElevenLabs, Google Cloud e Azure).
Saiba maisGere diálogo com LLMs no dispositivo offline, depois alimente a sincronização labial a partir da fala sintetizada para interações de personagens totalmente offline.
Saiba maisA documentação abrangente cobre todos os tipos de ondas sonoras, fluxos de trabalho de importação, captura de microfone, manipulação de dados PCM e orientações específicas da plataforma.
Guias passo a passo para todos os recursos, com exemplos de Blueprint e C++
Comunidade ativa no Discord com suporte para desenvolvedores
Integração personalizada ou desenvolvimento de recursos - [email protected]
Exemplo de Blueprint - Captura de microfone
Disponível na Fab para UE 4.24 – 5.8. Inclui documentação completa, exemplos de Blueprint e acesso ao ecossistema mais amplo de plugins.
