VideoLingo: 동영상 트랜스크립션 단어 수준 타임라인 자막, 동영상 자막 번역 및 현지화된 더빙 오픈 소스 도구

일반 소개

비디오링고는 넷플릭스 수준의 자막을 생성하고, 딱딱한 기계 번역과 여러 줄의 캡션을 제거하고, 고품질 보이스오버를 추가하여 언어의 장벽을 넘어 글로벌 지식을 공유할 수 있도록 설계된 원스톱 동영상 번역 및 로컬라이제이션 더빙 툴입니다. 직관적인 Streamlit 웹 인터페이스를 통해 사용자는 동영상 링크부터 고품질 이중 언어 자막 및 보이스오버까지 단 두 번의 클릭만으로 Netflix 품질의 현지화 동영상을 쉽게 만들 수 있습니다.

보다 통합된 도구이지만 전사 프로세스가 이 도구만큼 상세하지는 않습니다:파이비데오트랜스: 비디오 번역 더빙 도구

기능 목록

• yt-dlp를 사용하여 YouTube 링크에서 동영상 다운로드하기
• WhisperX를 통한 단어 수준의 타임라인 캡션 인식
• NLP 및 GPT를 사용한 문장 의미 기반 자막 세분화
• GPT 요약 추출 용어 지식 베이스, 문맥 번역
• 자막 그룹 미세 번역 효과에 필적하는 3단계 직접 번역, 반영, 이탈리아어 번역
• 넷플릭스 표준에 따라 한 줄 길이를 확인했으며, 이중 줄 자막은 없습니다!
• GPT-SoVITS와 같은 방법을 사용한 고품질 정렬 더빙
• 스트림릿의 원클릭 실행, 원클릭 필름이 포함된 통합 팩

도움말 사용

설치 프로세스

1. VideoLingo용 원클릭 통합 패키지를 다운로드하세요(약 800M).
2. 파일의 압축을 풀고 더블클릭하여 폴더에 있는 "One-Click-Boot.bat"을 실행합니다.
3. 브라우저 창이 열리면 사이드바에서 필요한 구성을 한 다음 필름을 한 번 클릭합니다.

기능 작동 흐름

1. 비디오 다운로드Streamlit 인터페이스에 YouTube 동영상 링크를 입력하고 yt-dlp를 사용하여 동영상을 다운로드합니다.
2. 자막 인식단어 수준의 타임라인 자막 인식에 WhisperX를 사용하여 자막이 동영상 콘텐츠와 정확하게 정렬되도록 하세요.
3. 자막 분할넷플릭스와 호환되는 한 줄 자막은 NLP 및 GPT 기술을 사용하여 문장의 의미에 따라 자막을 분할하여 생성합니다.
4. 렌더링GPT는 용어에 대한 지식 기반을 요약 및 추출하고 문맥에 맞는 번역을 수행하여 번역된 콘텐츠의 자연스러운 흐름을 보장합니다.
5. 더빙(영화 제작)원본 동영상 콘텐츠와 매우 일관성 있는 더빙 효과를 생성하는 GPT-SoVITS와 같은 방법을 사용한 고품질 정렬 더빙입니다.
6. 원클릭 필름 출력Streamlit 인터페이스에서 모든 구성이 완료되면 클릭 한 번으로 고품질 이중 언어 자막 및 더빙이 포함된 동영상을 생성할 수 있습니다.