Meu novo reprodutor de mídia favorito cria e traduz legendas instantaneamente, dizendo adeus aos arquivos SRT

Resumo

  • Parei de procurar SRT – o PotPlayer cria legendas de áudio em tempo real usando o Whisper.

  • Ele traduz diálogos estrangeiros ao vivo (Whisper + Google Translate), tornando a mídia estrangeira instantaneamente visível.

  • Configuração fácil: clique com o botão direito em Legendas -> Crie legendas de áudio, escolha o modelo Vulkan e Whisper.

Baixar legendas para um novo arquivo de mídia sempre foi uma “parte do ritual” para mim. Se os horários coincidirem após a extração do arquivo de legenda do site, ótimo, mas se não coincidirem, tentamos novamente. Esta parte nunca é difícil, mas definitivamente pode ser irritante o suficiente para interromper a experiência. Ainda hoje, muitos players de mídia ainda esperam que você mesmo faça o trabalho, e é claro que muitos de nós fazemos.

No entanto, desde que encontrei o PotPlayer e finalmente mudei para o VLC, o processo de busca por legendas parece desatualizado para mim. Em vez de procurar arquivos de legenda, simplesmente deixo o PotPlayer gerá-los em qualquer lugar, e esse recurso me ajuda em mais casos do que apenas um.

PotPlayer cria legendas enquanto assiste

Parece mágica até você perceber o que está acontecendo

Nos últimos meses, fiquei realmente impressionado com a lista de recursos que o PotPlayer oferece em comparação com outros reprodutores de mídia do mercado. No entanto, eu não esperava que as legendas em tempo real fossem uma delas e também funcionaria tão bem. Claro, presumi que o PotPlayer estava baixando os arquivos de legenda de algum lugar em segundo plano, como a integração do Bazarr no meu servidor Jellyfin. No entanto, ele realmente ouve a trilha de áudio do vídeo, converte a fala em texto e cria uma nova trilha de legenda no computador enquanto o filme está sendo reproduzido. Longe de ser apenas uma conveniência, é na verdade uma maneira mais inteligente de lidar com legendas.

A mágica é feita graças ao modelo de reconhecimento de voz OpenAI Whisper. O PotPlayer pode usar o Whisper para transcrever diálogos falados em tempo real e, em seguida, gerar legendas sem a necessidade de um arquivo SRT pré-existente. Como tudo é baseado no próprio áudio, não importa se o vídeo é um download de uma década atrás, um clipe aleatório dos meus arquivos ou algo que nunca teve legenda. Agora, para ser sincero, o resultado não é esse completamente impecável, mas extremamente preciso com áudio limpo e bem mixado.

As legendas em tempo real do PotPlayer não exigem o download manual de modelos ou mecanismos de IA. Todos os downloads são feitos pelo próprio media player.

Para usar este recurso, basta carregar qualquer arquivo de mídia (de preferência com áudio em inglês) no PotPlayer e clicar com o botão direito em qualquer janela. Passe o mouse Legendas para abrir o submenu de legendas e clique em Crie legendas de áudio (em tempo real). Selecione a opção Vulkan aqui Motor Whisper AI menu e, em seguida, selecione um Modelo Whisper AI da lista fornecida. Escolha os modelos “pequenos” se você usa o PotPlayer com hardware de baixo custo ou maior, modelos Whisper AI de bilhões de parâmetros se você deseja a mais alta fidelidade e deseja economizar de 5 a 6 GB de memória no PotPlayer. Finalmente, deixe Linguagem Whisper AI permanece definido para Carro.

O Potplayer levará alguns minutos para baixar o modelo escolhido (mais se você estiver usando modelos maiores) e, quando terminar, seus vídeos terão legendas em tempo real.

Também quebra barreiras linguísticas como se não fossem nada

A tradução em tempo real torna a mídia estrangeira muito mais acessível

Gerar legendas a partir de áudio em inglês em tempo real é bastante impressionante, mas o recurso de tradução do PotPlayer foi o que realmente me convenceu. Em vez de apenas transcrever o que está sendo dito, ele pode ouvir diálogos em outro idioma, reconhecer a fala e gerar legendas em inglês. Graças a isso, não procuro mais arquivos de legendas regionais antes de assistir a conteúdo estrangeiro, pois meu media player cuida dessa parte para mim. Claro, são necessárias algumas dicas de contexto para verificar rapidamente se tudo está em ordem, mas apenas algumas cenas depois, as coisas começam a fluir suavemente.

Novamente, o Whisper faz a maior parte do trabalho pesado aqui com a ajuda do Google Translate. Você pode até selecionar outros programas de tradução como Bing, Libre e LM Studio. Ele reconhece o diálogo falado, identifica o idioma de origem e converte-o para legendas em inglês enquanto o vídeo é reproduzido. É realmente impressionante a rapidez com que esse processo acontece, pois depois de alguns segundos começa a parecer que o arquivo de mídia tem legendas incorporadas desde o início.

A qualidade das legendas em tempo real do PotPlayer depende muito da qualidade do áudio do vídeo.

É claro que, como qualquer sistema de reconhecimento de voz, existem desvantagens. Os resultados são altamente dependentes da qualidade do áudio. Se estou assistindo a filmes, documentários e programas de TV dublados profissionalmente, provavelmente obterei excelentes traduções em tempo real porque o diálogo é limpo e isolado. Por outro lado, meus vídeos caseiros com ambientes lotados ou qualidade de microfone inconsistente ainda falham Tradutor integrado do PotPlayer. No entanto, para todos os tipos de mídia sofisticada, acho isso simplesmente verossímil.

Para esta configuração, clique com o botão direito em qualquer lugar da janela do player de vídeo e clique em Legendas de novo. Clique neste momento Tradução de legendase selecione google tradutor como o programa de tradução padrão. Eu descobri escolhendo Mostrar apenas tradução A opção ajuda a manter as coisas na tela organizadas, então alterne essa opção enquanto estiver fazendo isso. Você também pode encontrar opções para selecionar manualmente na parte inferior Idioma de origem e Idioma de tradução para ajudar o mecanismo de IA a funcionar melhor. Após alguns segundos, seu áudio regional em tempo real também deverá aparecer principalmente exatamente Legendas em inglês.

Ele remove um grande problema de atrito do processo de visualização de mídia

É incrível como não me lembro da última vez que baixei legendas manualmente depois de baixar o PotPlayer. Eu realmente economizei tempo nas noites de cinema e consegui manter as vibrações intactas, deixando o PotPlayer cuidar da entrega das legendas em vez de fazer os convidados esperarem enquanto eu procuro o arquivo SRT correto. Tudo o que tenho que fazer agora é apertar o play e presumir que tudo vai dar certo, o que acontece nove em cada dez vezes, graças aos incríveis recursos do PotPlayer.

Afinal, é por isso que o PotPlayer conquistou um lugar permanente no meu computador. Os recursos de IA não estão tentando roubar os holofotes, nem estão sendo divulgados em voz alta nos telhados. Eles simplesmente existem para me ajudar a resolver um problema que já dura décadas e, assim que o fazem, saem do caminho. O PotPlayer entende o que minha família e eu estamos assistindo e se ajusta de acordo, tornando realmente impossível voltar ao VLC.

Este é o tipo de IA que eu realmente quero

Por que nem todas as tecnologias de IA são usadas exatamente desta forma? Os modelos Whisper AI são diretamente integrados ao PotPlayer e tudo o que ele faz é chamar o modelo certo para assumir o controle localmente. Além disso, essas legendas e traduções em tempo real fazem com que as barreiras linguísticas e a busca por legendas pareçam problemas de uma época passada.

Ainda aprecio que os arquivos de legenda sejam selecionados manualmente de forma aleatória “( )” jogado aleatoriamente para uma boa medida. No entanto, desde o momento em que comecei a usar o PotPlayer, surgiram legendas instantâneas e precisas em tempo real, Eu me sinto liberado. Não preciso mais depender do arquivo de legenda ou site correto para meu nível de conforto. nunca Acho que vou conseguir.

Link da fonte