VideoLingo: transcrição de vídeo, legendas de linha do tempo em nível de palavra, tradução de legendas de vídeo e ferramentas de código aberto para dublagem localizada

Introdução geral

O VideoLingo é uma ferramenta completa de tradução de vídeo e dublagem de localização projetada para gerar legendas com qualidade Netflix, eliminar traduções automáticas rígidas e legendas de várias linhas e adicionar dublagens de alta qualidade para que o conhecimento global possa ser compartilhado além das barreiras linguísticas. Por meio da interface intuitiva da Web Streamlit, os usuários podem criar facilmente vídeos localizados com qualidade Netflix em apenas dois cliques, desde o link do vídeo até as legendas bilíngues de alta qualidade incorporadas e até mesmo as narrações.

Uma ferramenta mais integrada, mas o processo de transcrição não é tão detalhado quanto o dessa ferramenta:pyvideotrans: ferramenta de dublagem de tradução de vídeo

Lista de funções

• Download de vídeos de links do YouTube usando yt-dlp
• Reconhecimento de legenda de linha do tempo em nível de palavra com o WhisperX
• Segmentação de legendas com base no significado da frase usando NLP e GPT
• Base de conhecimento de terminologia de extração de resumo de GPT, tradução contextualizada
• Tradução direta em três etapas, reflexão, tradução em italiano, comparável ao efeito de tradução fina do grupo de legendas
• Verificado para comprimentos de linha única de acordo com os padrões da Netflix, sem legendas de linha dupla!
• Dublagem alinhada de alta qualidade usando métodos como o GPT-SoVITS
• Pacotes de integração com lançamento em um clique, filme em um clique no Streamlit

Usando a Ajuda

Processo de instalação

1. Faça o download do pacote de integração com um clique para o VideoLingo (cerca de 800M).
2. Descompacte o arquivo e clique duas vezes para executar o "One-Click-Boot.bat" na pasta.
3. Na janela aberta do navegador, faça as configurações necessárias na barra lateral e, em seguida, dê um clique no filme.

Função Fluxo de operação

1. Download de vídeoDigite o link do vídeo do YouTube na interface do Streamlit e use o yt-dlp para fazer o download do vídeo.
2. reconhecimento de legendasUse o WhisperX para reconhecimento de legendas na linha do tempo em nível de palavra para garantir que as legendas sejam alinhadas com precisão ao conteúdo do vídeo.
3. divisão de legendasAs legendas de uma linha compatíveis com a Netflix são geradas pela segmentação das legendas de acordo com o significado da frase usando as tecnologias NLP e GPT.
4. renderizaçãoO GPT resume e extrai uma base de conhecimento de terminologia e realiza traduções contextualizadas para garantir um fluxo natural do conteúdo traduzido.
5. dublagem (produção de filmes)Dublagem alinhada de alta qualidade usando métodos como o GPT-SoVITS, que produz efeitos de dublagem altamente consistentes com o conteúdo original do vídeo.
6. Saída de filme com um cliqueGeração de vídeos com legendas e dublagens bilíngues de alta qualidade com um único clique, depois que todas as configurações forem feitas na interface do Streamlit.

O guia do leigo para começar a usar a IA

Ajuda você a aprender a utilizar as ferramentas de IA com baixo custo e a partir de uma base zero.A IA, assim como o software de escritório, é uma habilidade essencial para todos. Dominar a IA lhe dará uma vantagem em sua busca de emprego e metade do esforço em seu trabalho e estudos futuros.

Ver detalhes>