News · A Descript transformou o ritmo da dobragem numa restrição do modelo, em vez de numa correção de pós-processamento

May, 264 min de leitura
Plataforma

A Descript transformou o ritmo da dobragem numa restrição do modelo, em vez de numa correção de pós-processamento

Como a Descript reconstruiu o seu pipeline de tradução com base na contagem de sílabas e em janelas de duração, recorrendo a modelos de raciocínio da OpenAI

O problema do esquilo ou do gigante sonolento

A funcionalidade de tradução da Descript começou pelas legendas, que funcionaram bem. Já a dobragem falhava por um motivo que nada tinha a ver com o significado: cada língua demora tempos diferentes a dizer a mesma coisa. O exemplo que apresentam é concreto — "Please review the safety guidelines before operating the machine" tem 18 sílabas em inglês e 24 em alemão, um aumento de 40%.

Para se ajustar a segmentos de vídeo de duração fixa, o áudio traduzido tinha de ser acelerado ou desacelerado. Aleks Mistratov, Head of AI Product, resumiu bem o resultado.

Acabava por sair uma coisa que parecia esquilos a falar, ou um gigante meio a dormir.Montana Labs

A principal queixa era o ritmo de fala pouco natural na língua de destino. As correções manuais — reajustar o tempo segmento a segmento ou reescrever traduções para encaixar — exigiam fluência quase nativa e impediam que a funcionalidade escalasse para a localização empresarial.

Por que a contagem de sílabas era a capacidade determinante

A decisão de engenharia interessante aqui é aquilo que a Descript testou antes de construir fosse o que fosse. Não começaram por gerar traduções; pediram aos modelos que contassem as sílabas num trecho de texto. Os modelos anteriores eram pouco fiáveis nesta tarefa, e essa única fragilidade tinha um efeito em cadeia: sem contagens de sílabas consistentes, o sistema não conseguia sequer visar uma janela de duração.

Isto reformula todo o problema. As abordagens anteriores otimizavam primeiro a fidelidade semântica e só depois corrigiam o tempo — produzindo traduções corretas no significado, mas que falhavam sistematicamente o orçamento de duração. A solução não foi um algoritmo de dobragem melhor; foi um modelo capaz de contar e acompanhar restrições de forma fiável. A Descript atribui essa consistência de raciocínio à série GPT-5.

Como o pipeline trata o ritmo como uma variável

O pipeline redesenhado divide a transcrição em segmentos, seguindo os limites das frases, as pausas naturais e os padrões de fala. Cada segmento é uma unidade de tempo suficientemente pequena para ser analisada, mas suficientemente grande para conter significado. O modelo conta as sílabas do segmento e, depois, usa pressupostos de velocidade de fala específicos de cada língua para estimar quantas sílabas o segmento traduzido deve visar.

O prompt pede ao modelo que otimize em simultâneo a adesão à duração e o significado, com os segmentos vizinhos incluídos como contexto para garantir coerência. É de notar que a Descript fez uma escolha deliberada: para a dobragem, aceitam um limiar semântico mais baixo do que para as legendas, porque na dobragem um ritmo mau arruína uma tradução que, de resto, estaria correta.

O rigor de medição por detrás dos números

A Descript definiu "natural" de forma empírica. Testes de audição concluíram que a fala com uma redução de até 10% de velocidade ou um aumento de até 20% ainda parecia aceitável; além disso, tornava-se distorcida. Isto deu-lhes uma janela de ritmo concreta contra a qual avaliar.

Segundo esse critério, os sistemas antigos mantinham apenas 40 a 60% dos segmentos dentro do intervalo, dependendo da língua; o novo pipeline atinge 73 a 83%. A adesão à duração melhorou entre 13 e 43 pontos percentuais, a adesão semântica manteve-se em 85,5% com pontuação de quatro ou cinco em cinco, e as exportações dobradas aumentaram 15% nos primeiros 30 dias. Como ambas as métricas são automatizadas, a equipa consegue avaliar cada novo lançamento de modelo e cada alteração de prompt em relação ao mesmo referencial.

O que isto revela sobre a implementação de modelos de raciocínio face a restrições rígidas

A lição que a Descript deixa é que uma funcionalidade pode ficar bloqueada por uma capacidade estreita e testável, e não pela tarefa principal em destaque. Não precisavam de uma tradução melhor — precisavam de uma contagem de sílabas fiável e de um acompanhamento rigoroso das restrições, e comprovaram que o modelo conseguia fazê-lo antes de avançarem para a reconstrução.

A implicação para quem trabalha com restrições de duração, orçamento ou formato é esta: identifique a subcompetência mais pequena e mensurável que condiciona a qualidade, confirme que o modelo a consegue realizar isoladamente e só depois incorpore a restrição na geração, em vez de a corrigir a posteriori. A Descript já está a olhar para o próximo limite — um pipeline multimodal que considera o áudio e o vídeo em conjunto com o texto, para preservar o tom e a ênfase, as partes que a contagem de sílabas, por si só, não consegue alcançar.

Find this story relevant to you?

Contact us to find a unique solution

Contact us

Precisa de um parceiro de engenharia de IA que saiba executar?

Ajudamos equipas em Portugal a integrar IA em produtos, automatizar processos de alto valor e modernizar os sistemas que suportam o negocio.

Get in touch

Leitura relacionada

Mais análises sobre entrega de produto, AI operacional e o trabalho de sistemas que faz com que a implementação funcione na prática.

Jul, 134 min de leitura
Plataforma

A Doppel automatiza a remoção de sites de phishing com um pipeline de cinco fases baseado em GPT-5 e RFT

Jul, 13Leitura de 4 min
Plataforma

A aposta da Deutsche Telekom em transformar as redes de voz na interface de AI

Jul, 134 min de leitura
Plataforma

A expansão de 5GW da Meta na Louisiana é anunciada através de bónus a professores, não de teraflops