하이브리드 빈센느 비디오: 고품질 비디오의 사실적인 영상 생성, 대형 모델의 텐센트 오픈 소스 비디오 생성

일반 소개

텐센트 하이브리드 텍스트 생성 비디오(위안바오 앱에서 사용 가능)는 텐센트에서 출시한 AI 기술을 기반으로 한 동영상 생성 플랫폼입니다. 이 플랫폼은 강력한 교차 도메인 지식과 자연어 이해 능력을 갖춘 텐센트 혼합 위안 빅 모델을 활용하여 사용자의 텍스트 설명을 기반으로 고품질 동영상 콘텐츠를 생성합니다. 사실적인 스타일이든 가상의 스타일이든, 텐센트 혼합 요소 텍스트 생성 동영상은 쉽게 구현할 수 있어 사용자가 자신의 창의성을 생생한 동영상 작품으로 전환할 수 있도록 도와줍니다. 이 플랫폼은 개인 창작물부터 상업용 애플리케이션에 이르기까지 다양한 창의적 표현 요구에 적합하며, 편리하고 효율적인 동영상 생성 솔루션을 제공합니다.

훈위안비디오는 고품질 동영상 생성 기능을 제공하는 것을 목표로 하는 텐센트의 오픈 소스 동영상 생성 프레임워크입니다. 이 프로젝트는 PyTorch를 기반으로 하며 사전 학습된 모델, 추론 코드 및 샘플 동영상을 포함하고 있으며, 데이터 큐레이션, 공동 이미지-비디오 모델 학습, 대규모 모델 학습 및 추론을 지원하는 효율적인 인프라 등 여러 가지 핵심 기술을 사용합니다. 130억 개가 넘는 모델 파라미터를 갖춘 이 모델은 오픈 소스 분야에서 가장 파라미터화된 동영상 생성 모델 중 하나로, 시각 품질, 모션 다양성, 텍스트-비디오 정렬 및 생성 안정성 측면에서 많은 주요 비공개 소스 모델보다 뛰어난 성능을 발휘합니다.

하이브리드 동영상 생성 모델의 가속 버전입니다:FastHunyuan원본 버전의 50단계보다 8배 빠른 6단계의 확산 단계만 거치면 고화질 동영상을 생성할 수 있습니다.

온라인 경험:https://video.hunyuan.tencent.com/

기능 목록

• 텍스트 생성 비디오사용자가 텍스트 설명을 입력하면 플랫폼이 해당 동영상 콘텐츠를 자동으로 생성합니다.
• 다양한 스타일 지원다양한 크리에이티브 요구 사항을 충족하기 위해 사실적인 스타일과 가상 스타일 모두에서 동영상 생성을 지원합니다.
• 고품질 출력높은 물리적 정확도와 장면 일관성을 갖춘 동영상을 생성하여 영화관 수준의 시각적 경험을 제공합니다.
• 지속적인 액션 생성연속 액션 장면을 생성하는 기능으로 부드럽고 자연스러운 영상을 보장합니다.
• 예술적 렌즈예술적인 동영상 프레젠테이션을 제공하기 위해 감독 수준의 영상 사용을 지원합니다.
• 물리적 규정 준수생성된 동영상은 물리 법칙을 준수하며 시청자의 부조화감을 줄여줍니다.

도움말 사용

기능 작동 가이드

텍스트 생성 비디오

1. 입력 텍스트 설명: 텍스트 상자에 생성하려는 동영상에 대한 설명을 입력합니다. 예: "겨울에 어린 소녀가 성냥을 켜고 하늘은 어둡고 땅은 눈으로 덮여 있다".
2. 스타일 선택: 실제 또는 가상 중 원하는 동영상 스타일을 선택합니다.
3. 비디오 생성'생성' 버튼을 클릭하면 시스템이 자동으로 해당 동영상 콘텐츠를 생성합니다.
4. 미리 보기 및 다운로드생성 후 동영상 효과를 미리 보고 만족스러우면 다운로드하여 저장할 수 있습니다.

다양한 스타일 지원

1. 스타일 전환동영상 생성 시 실제 스타일과 가상 스타일 사이를 자유롭게 전환하여 다양한 크리에이티브 요구 사항을 충족할 수 있습니다.
2. 스타일 사전 설정이 플랫폼은 사용자가 필요에 따라 동영상 제작에 적합한 스타일을 선택할 수 있도록 다양한 스타일 사전 설정을 제공합니다.

고품질 출력

1. 영화관 수준의 경험높은 물리적 정확도와 장면 일관성을 갖춘 동영상을 생성하여 영화관 수준의 시각적 경험을 제공합니다.
2. 세부 조정: 사용자는 생성된 동영상을 세부적으로 조정하여 모든 프레임이 기대에 부합하도록 할 수 있습니다.

지속적인 액션 생성

1. 연속 작업 설명 입력텍스트 설명에 연속 동작 장면을 입력합니다(예: "러닝머신에서 달리는 사람").
2. 연속 액션 비디오 생성부드럽고 자연스러운 움직임을 보장하기 위해 시스템이 연속적인 움직임의 동영상을 자동으로 생성합니다.

예술적 렌즈

1. 렌즈 선택이 플랫폼은 다양한 렌즈 옵션을 지원하므로 사용자가 적합한 비디오 렌즈를 선택하여 제작할 수 있습니다.
2. 예술적 표현결과 동영상에는 예술적인 영상이 사용되어 보다 표현력이 풍부한 시각적 효과를 제공합니다.

물리적 규정 준수

1. 물리적 규칙생성된 동영상은 물리 법칙을 준수하며 시청자의 부조화감을 줄여줍니다.
2. 시나리오 일관성동영상의 모든 장면에서 일관성과 일관성을 유지합니다.

일반적인 문제

• 비디오 생성 실패입력한 텍스트 설명이 요구 사항을 충족하는지 확인하거나 다시 생성해 보세요.
• 로그인 문제로그인할 수 없는 경우 휴대폰 번호와 인증 코드가 올바른지 확인하거나 고객 서비스에 문의하여 도움을 받으세요.

설치 및 배포 프로세스

1. 환경 종속성파이썬 3.8 이상이 설치되어 있고 필요한 종속 라이브러리가 설치되어 있는지 확인합니다.

   pip install -r requirements.txt
   

2. 사전 학습된 모델 다운로드프로젝트 페이지에서 사전 학습된 모델을 다운로드하여 지정된 디렉터리에 배치합니다.
3. 추론 코드 실행다음 명령을 사용하여 추론 코드를 실행하여 동영상을 생성합니다.

   python sample_video.py --input_text "生成视频的描述文本"
   

기능 작동 흐름

텍스트에서 동영상으로 생성

1. 입력 텍스트 설명: 명령줄 또는 Gradio 웹 데모에서 설명 텍스트를 입력합니다.
2. 추론 코드 실행: 추론 코드를 실행하여 해당 동영상 파일을 생성합니다.
3. 생성된 결과 보기출력 디렉토리에서 생성된 동영상 파일을 확인합니다.

이미지에서 동영상으로 생성

1. 이미지 파일 입력: 입력 이미지 파일 경로를 입력합니다.
2. 추론 코드 실행: 추론 코드를 실행하여 동적 동영상을 생성합니다.
3. 생성된 결과 보기출력 디렉토리에서 생성된 동영상 파일을 확인합니다.

멀티 GPU 병렬 추론

1. 멀티 GPU 환경 구성시스템에 여러 개의 GPU가 설치되어 있고 CUDA 환경이 구성되어 있는지 확인합니다.
2. 병렬 추론 코드 실행다음 명령을 사용하여 멀티 GPU 병렬 추론 코드를 실행합니다.

   python sample_video.py --input_text "生成视频的描述文本" --gpus 4
   

Gradio 웹 데모

1. 라디오 서버 시작하기: 다음 명령을 실행하여 Gradio 웹 데모 서버를 시작합니다.

   python gradio_server.py
   

2. 웹 데모 액세스: 제공된 URL을 브라우저에서 열고 텍스트-동영상 생성 기능을 체험해 보세요.

사전 교육 모델 다운로드

1. 프로젝트 페이지 방문하기훈위안비디오의 GitHub 프로젝트 페이지로 이동합니다.
2. 사전 학습된 모델 다운로드: 사전 학습된 모델 파일의 다운로드 링크를 클릭합니다.
3. 모델 파일 배치: 다운로드한 모델 파일을 프로젝트의 지정된 디렉터리에 배치합니다.

위의 자세한 도움말을 통해 사용자는 쉽게 HunyuanVideo를 시작하고 고품질 동영상 생성 기능을 경험할 수 있습니다.

하이브리드 비디오 원클릭 통합 팩

Quark: https://pan.quark.cn/s/ae28d498f451

바이두: https://pan.baidu.com/s/1PgJKZiey98rKWZzPFzT6-w?pwd=pwk8