AI Personal Learning
und praktische Anleitung
豆包Marscode1

VideoLingo: Videotranskription von Untertiteln auf Wortebene, Übersetzung von Videountertiteln und lokalisierte Synchronisation mit Open-Source-Tools

Allgemeine Einführung

VideoLingo ist ein Videoübersetzungs- und Lokalisierungs-Synchronisationstool aus einer Hand, das Untertitel in Netflix-Qualität erstellt, starre maschinelle Übersetzungen und mehrzeilige Untertitel eliminiert und hochwertige Voiceovers hinzufügt, damit globales Wissen über Sprachbarrieren hinweg geteilt werden kann. Über die intuitive Streamlit-Weboberfläche können Benutzer mit nur zwei Klicks lokalisierte Videos in Netflix-Qualität erstellen, vom Videolink bis hin zu eingebetteten hochwertigen zweisprachigen Untertiteln und sogar Voiceovers.

Ein stärker integriertes Werkzeug, aber der Transkriptionsprozess ist nicht so detailliert wie bei diesem Werkzeug:pyvideotrans: Werkzeug zur Videoübersetzung und Synchronisation

VideoLingo:视频语音转录为高品质字幕,字幕翻译和本地化配音开源工具-1

 

Funktionsliste

  • Herunterladen von Videos von YouTube-Links mit yt-dlp
  • Erkennung von Untertiteln auf Wortebene mit WhisperX
  • Segmentierung von Untertiteln auf der Grundlage der Satzbedeutung mit NLP und GPT
  • GPT Zusammenfassung Extraktion Terminologie Wissensbasis, kontextualisierte Übersetzung
  • Dreistufige direkte Übersetzung, Reflexion, italienische Übersetzung, vergleichbar mit dem Untertitel Gruppe feine Übersetzung Wirkung
  • Überprüft auf einzeilige Längen gemäß den Netflix-Standards, keine zweizeiligen Untertitel!
  • Qualitativ hochwertige Nachvertonung mit Methoden wie GPT-SoVITS
  • Integrationspakete mit Ein-Klick-Start, Ein-Klick-Out des Films in Streamlit

 

Hilfe verwenden

Einbauverfahren

  1. Laden Sie das Ein-Klick-Integrationspaket für VideoLingo herunter (ca. 800M).
  2. Entpacken Sie die Datei und doppelklicken Sie darauf, um die Datei "One-Click-Boot.bat" im Ordner auszuführen.
  3. Nehmen Sie im geöffneten Browser-Fenster die erforderlichen Einstellungen in der Seitenleiste vor, und klicken Sie dann den Film mit einem Mausklick aus.

Funktion Betriebsablauf

  1. Video-Download: Geben Sie den Link zum YouTube-Video in die Streamlit-Oberfläche ein und verwenden Sie yt-dlp, um das Video herunterzuladen.
  2. Erkennung von UntertitelnVerwenden Sie WhisperX für die Untertitelerkennung auf Wortebene, um sicherzustellen, dass die Untertitel genau auf den Videoinhalt abgestimmt sind.
  3. UntertitelsplitDie Netflix-konformen einzeiligen Untertitel werden durch die Segmentierung der Untertitel entsprechend der Bedeutung des Satzes mit Hilfe von NLP- und GPT-Technologien erzeugt.
  4. RenderingGPT fasst eine Wissensbasis von Terminologie zusammen, extrahiert diese und führt kontextualisierte Übersetzungen durch, um einen natürlichen Fluss der übersetzten Inhalte zu gewährleisten.
  5. Synchronisation (Filmemachen)Qualitativ hochwertige, abgestimmte Nachvertonung mit Methoden wie GPT-SoVITS, die Nachvertonungseffekte erzeugt, die mit dem ursprünglichen Videoinhalt in hohem Maße übereinstimmen.
  6. Filmausgabe mit einem KlickGenerieren Sie Videos mit hochwertigen zweisprachigen Untertiteln und Synchronisationen mit einem einzigen Klick, nachdem alle Konfigurationen in der Streamlit-Oberfläche vorgenommen wurden.

Darf nicht ohne Genehmigung vervielfältigt werden:Leiter des AI-Austauschkreises " VideoLingo: Videotranskription von Untertiteln auf Wortebene, Übersetzung von Videountertiteln und lokalisierte Synchronisation mit Open-Source-Tools
de_DEDeutsch