LTX 비디오(LTXV): 고품질 비디오를 생성하기 위한 실시간 비디오 생성의 오픈 소스 모델입니다.

14.7K 00

일반 소개

LTX-Video는 라이트릭스가 개발한 최초의 DiT(확산트랜스포머) 기반 실시간 동영상 생성 모델입니다. 이 모델은 768x512 해상도에서 초당 24프레임의 고화질 영상을 실제 동영상 시청 시간보다 빠른 속도로 생성할 수 있으며, LTX-Video는 대규모의 다양한 동영상 데이터셋을 학습하여 사실적이고 다양한 콘텐츠의 고해상도 영상을 생성할 수 있습니다. 이 모델은 다양한 창의적이고 전문적인 애플리케이션 시나리오를 위한 빠르고 효율적인 비디오 생성 솔루션을 제공하도록 설계되었습니다.

간단한 큐 단어를 입력하거나 동영상 영상에 대한 자세한 설명을 제공하거나 큐 단어를 확장하지 마세요.

체험: https://huggingface.co/spaces/Lightricks/LTX-Video-Playground

LTX 비디오 이미지 - 비디오 워크플로우

LTX 비디오 텍스트-비디오 워크플로우

기능 목록

실시간 비디오 생성768x512 해상도에서 초당 24프레임으로 동영상을 생성합니다.
고품질 출력고해상도의 사실적이고 다양한 동영상을 생성합니다.
다중 세대 모드텍스트-비디오, 이미지-비디오 및 비디오-비디오 생성 모드가 지원됩니다.
성능 최적화LTX-VideoQ8 버전은 최대 3배의 성능 향상을 위해 NVIDIA ADA GPU에 최적화되어 있습니다.
통합 지원지원 및 ComfyUI 디퓨저와의 통합으로 유연한 워크플로우를 제공합니다.

도움말 사용

설치 프로세스

ComfyUI 설치::
- ComfyUI를 다운로드하여 설치합니다.
LTX-비디오 스토리지 복제::
- ComfyUI 설치 디렉토리의 사용자 정의 노드 폴더에 LTX-Video 리포지토리를 복제합니다.
- 다음 명령을 실행하여 필요한 Python 패키지를 설치합니다: bash cd custom_nodes/ComfyUI-LTXVideo pip install -r requirements.txt
- 휴대용 ComfyUI를 설치하려면 다음 명령을 실행하세요: bash .\python_embeded\python.exe -m pip install -r .\ComfyUI\custom_nodes\ComfyUI-LTXVideo\requirements.txt
모델 다운로드::
- 허깅 페이스에서 ltx-video-2b-v0.9.1.safetensors를 다운로드하여 모델/체크포인트 폴더에 넣습니다.
- T5 텍스트 인코더 설치(예: Googlet5-v11-xxl_encoder 전용이며, ComfyUI 모델 관리자를 사용하여 설치할 수 있습니다.

사용 가이드라인

텍스트에서 동영상으로 생성::
- ComfyUI에서 LTX-Video 노드를 선택합니다.
- 텍스트 설명을 입력하고 생성 매개변수를 선택한 다음 생성 버튼을 클릭합니다.
이미지에서 동영상으로 생성::
- ComfyUI에서 LTX-Video 노드를 선택합니다.
- 이미지 파일을 업로드하고 생성 매개변수를 선택한 후 생성 버튼을 클릭합니다.
비디오 대 비디오 생성::
- ComfyUI에서 LTX-Video 노드를 선택합니다.
- 동영상 파일을 업로드하고 생성 매개변수를 선택한 후 생성 버튼을 클릭합니다.