SkyReels V2: 길이 제한 없는 동영상 생성을 위한 오픈 소스 AI 도구

1.8K 00

일반 소개

SkyReels-V2 是一个开源的视频生成模型，由 SkyworkAI 开发。它通过先进的 Diffusion Forcing 技术，支持生成无限长度的视频，适用于文本转视频（T2V）和图像转视频（I2V）任务。用户可以利用文本描述或输入图像，生成高质量、电影级别的视频内容。该模型在开源社区表现突出，性能媲美商业模型如 Kling 和 Runway-Gen4。它提供灵活的推理模式，适合开发者、创作者和研究人员使用。SkyReels-V2 的代码和模型权重公开在 GitHub，方便用户下载和部署。

기능 목록

길이 제한 없는 동영상 생성：支持生成任意时长的视频，适合短片到完整电影的创作。
텍스트 비디오 변환(T2V)：通过文本提示生成符合描述的视频内容。
이미지-비디오(I2V)：基于输入图像生成动态视频，保持图像特征。
멀티모달 지원：结合大型语言模型（MLLM）和强化学习，提升视频生成质量。
스토리 생성：自动生成符合叙述逻辑的视频故事板。
相机控制：提供导演视角，支持自定义镜头角度和运动。
多主体一致性：通过 SkyReels-A2 系统，确保多角色视频的视觉一致性。
高效推理框架：支持多 GPU 推理，优化生成速度和资源使用。

도움말 사용

설치 프로세스

SkyReels-V2 是一个基于 Python 的开源项目，需在本地或服务器上配置环境。以下是详细的安装步骤：

클론 창고
打开终端，运行以下命令获取 SkyReels-V2 代码：
```
git clone https://github.com/SkyworkAI/SkyReels-V2
cd SkyReels-V2
```
가상 환경 만들기
建议使用 Python 3.10.12 创建虚拟环境以避免依赖冲突：
```
conda create -n skyreels-v2 python=3.10
conda activate skyreels-v2
```
종속성 설치
安装项目所需的 Python 库，运行：
```
pip install -r requirements.txt
```
모델 가중치 다운로드
SkyReels-V2 的模型权重托管在 Hugging Face。使用以下命令下载：
```
pip install -U "huggingface_hub[cli]"
huggingface-cli download Skywork/SkyReels-V2 --local-dir ./models
```
确保有足够的磁盘空间（模型大小可能达数十 GB）。
하드웨어 요구 사항
- 最低配置：单块 RTX 4090（24GB VRAM），支持 FP8 量化降低内存需求。
- 권장 구성：多 GPU（如 4-8 张 A100），支持高效并行推理。
- 至少 32GB 系统内存和 100GB 磁盘空间。

사용법

SkyReels-V2 提供文本转视频（T2V）和图像转视频（I2V）两种主要功能。以下是具体操作流程：

텍스트 비디오 변환(T2V)

단서 준비
编写描述视频内容的文本提示，例如：

A serene lake surrounded by towering mountains, with swans gliding across the water.

可添加负面提示词以避免不需要的元素：

low quality, deformation, bad composition

생성된 스크립트 실행
수정 generate_video.py 的参数，设置分辨率、帧数等：
```
python generate_video.py --model_id "Skywork/SkyReels-V2-T2V-14B-540P" --prompt "A serene lake surrounded by mountains" --num_frames 97 --fps 24 --outdir ./output
```
- --model_id：选择模型（如 540P 或 720P）。
- --num_frames：设置视频帧数（默认 97）。
- --fps：帧率（默认 24）。
- --outdir：输出视频保存路径。
출력 보기
生成的视频将保存为 MP4 格式，例如 output/serene_lake_42_0.mp4.

이미지-비디오(I2V)

입력 이미지 준비하기
提供一张高质量图像（如 PNG 或 JPG），确保分辨率与模型匹配（默认 960x544）。

생성된 스크립트 실행
존재 generate_video.py 中指定图像路径：

python generate_video.py --model_id "Skywork/SkyReels-V2-I2V-14B-540P" --prompt "A warrior fighting in a forest" --image ./input_image.jpg --num_frames 97 --fps 24 --outdir ./output

--image: 이미지 경로를 입력합니다.
其他参数与 T2V 类似。

최적화 설정
- 활용 --guidance_scale（默认 6.0）调整文本引导强度。
- 활용 --inference_steps（默认 30）控制生成质量，步数越多质量越高但耗时更长。
- 사용 시작 --offload 优化内存使用，适合低显存设备。

주요 기능 작동

无限长度视频
SkyReels-V2 使用 Diffusion Forcing 技术，支持生成超长视频。运行长视频推理脚本：
```
python inference_long_video.py --model_id "Skywork/SkyReels-V2-T2V-14B-720P" --prompt "A sci-fi movie scene" --num_frames 1000
```
- 建议分段生成，每段 97-192 帧，再通过后期工具拼接。
스토리 생성
使用 SkyReels-A2 系统的故事生成功能，输入剧情描述：
```
A hero’s journey through a futuristic city, facing challenges.
```
실행 중입니다:
```
python story_generate.py --prompt "A hero’s journey" --output story_video.mp4
```
系统将生成包含故事板的视频，自动安排场景和镜头。
相机控制
통과(청구서 또는 검사 등) --camera_angle 参数设置镜头视角（如 “frontal” 或 “profile”）：
```
python generate_video.py --prompt "A car chase" --camera_angle "profile" --outdir ./output
```
多主体一致性
SkyReels-A2 支持多角色场景。提供多张参考图像，运行：
```
python multi_subject.py --prompt "Two characters talking" --images "char1.jpg,char2.jpg" --outdir ./output
```
确保角色在视频中保持视觉一致性。