VideoLingo : outils open source de transcription vidéo, de traduction de sous-titres vidéo et de doublage localisé.

Introduction générale

VideoLingo est un outil unique de traduction et de doublage de vidéos conçu pour générer des sous-titres de qualité Netflix, éliminer les traductions automatiques rigides et les sous-titres multilignes, et ajouter des voix off de haute qualité afin que les connaissances mondiales puissent être partagées au-delà des barrières linguistiques. Grâce à l'interface web intuitive Streamlit, les utilisateurs peuvent facilement créer des vidéos localisées de qualité Netflix en seulement deux clics, depuis le lien vidéo jusqu'aux sous-titres bilingues de haute qualité intégrés et même aux voix off.

Un outil plus intégré, mais le processus de transcription n'est pas aussi détaillé que cet outil :pyvideotrans : Outil de doublage pour la traduction de vidéos

Liste des fonctions

• Téléchargement de vidéos à partir de liens YouTube à l'aide de yt-dlp
• Reconnaissance des sous-titres de la ligne de temps au niveau des mots avec WhisperX
• Segmentation des sous-titres basée sur le sens des phrases à l'aide du NLP et du GPT
• Extraction de résumés GPT Base de connaissances terminologiques, traduction contextualisée
• Traduction directe en trois étapes, réflexion, traduction italienne, comparable à l'effet de traduction fine du groupe de sous-titres.
• La longueur des lignes a été vérifiée conformément aux normes de Netflix, pas de sous-titres à double ligne !
• Doublage d'alignement de haute qualité utilisant des méthodes telles que GPT-SoVITS
• Packs d'intégration avec lancement en un clic, film en un clic dans Streamlit

Utiliser l'aide

Processus d'installation

1. Téléchargez le paquet d'intégration en un clic pour VideoLingo (environ 800M).
2. Décompressez le fichier et double-cliquez pour exécuter le fichier "One-Click-Boot.bat" qui se trouve dans le dossier.
3. Dans la fenêtre ouverte du navigateur, effectuez les configurations nécessaires dans la barre latérale, puis sortez le film d'un seul clic.

Fonction Opération Déroulement

1. Téléchargement vidéoPour ce faire, il suffit de saisir le lien de la vidéo YouTube dans l'interface Streamlit et d'utiliser yt-dlp pour télécharger la vidéo.
2. reconnaissance des sous-titresWhisperX : Utilisez WhisperX pour la reconnaissance des sous-titres au niveau des mots de la ligne de temps afin de vous assurer que les sous-titres sont correctement alignés sur le contenu vidéo.
3. division des sous-titresLes sous-titres d'une ligne conformes à Netflix sont générés en segmentant les sous-titres en fonction du sens de la phrase à l'aide des technologies NLP et GPT.
4. l'équarrissageLe GPT résume et extrait une base de connaissances terminologiques et effectue des traductions contextualisées afin d'assurer un flux naturel de contenu traduit.
5. doublage (cinéma)Le doublage aligné de haute qualité utilisant des méthodes telles que GPT-SoVITS, qui produit des effets de doublage très cohérents avec le contenu vidéo d'origine.
6. Sortie de film en un clicLa solution : générer des vidéos avec des sous-titres et des doublages bilingues de haute qualité en un seul clic, après avoir effectué toutes les configurations dans l'interface de Streamlit.