A ElevenLabs apresentou oficialmente o Dubbing v2, uma nova versão do seu modelo de dobragem focado em preservar a emoção e o desempenho originais das vozes transmitidas. O modelo encontra-se atualmente em fase alfa e oferece suporte para tradução em mais de 90 idiomas, garantindo que as nuances da interpretação não se percam no processo.
Como funciona a tecnologia por trás do Dubbing v2
Para alcançar este nível de fidelidade, o sistema desenvolvido pela ElevenLabs afasta-se dos métodos tradicionais baseados em transcrições de texto. Em vez disso, a tecnologia recorre ao condicionamento direto de áudio, o que ajuda a manter a expressividade da gravação inicial. Adicionalmente, o modelo foi desenhado para ser totalmente ciente da sincronização, otimizando o alinhamento temporal do áudio traduzido. Esta abordagem assenta no desenvolvimento moderno de ferramentas de IA focadas em voz.
Disponibilidade e integração em plataformas
Nesta fase inicial, o Dubbing v2 está disponível de forma integrada nos ecossistemas ElevenCreative e ElevenProductions. Para além do acesso através destas plataformas, a empresa confirmou que o lançamento de uma API dedicada faz parte dos planos de expansão, permitindo que criadores e estúdios integrem a ferramenta nos seus próprios fluxos de trabalho.
Nenhum comentário
Seja o primeiro!