Wan2.2-Animate - 통이 완샹 오픈 소스의 액션 생성을 위한 제너레이티브 모델

Wan2.2-애니메이션이란 무엇인가요?

완2.2-애니메이트는 통이완샹의 오픈 소스 액션 생성 모델로, 액션 모방과 롤플레잉의 두 가지 모드를 지원합니다. 사용자는 캐릭터 사진과 참조 비디오 만 입력하면 모델이 비디오 속 캐릭터의 동작과 표현을 그림 캐릭터로 마이그레이션하여 그림 캐릭터에 동적 표현을 제공 할 수 있습니다. 모델은 원본 비디오의 움직임, 표정 및 환경을 유지하면서 비디오의 캐릭터를 사진의 캐릭터로 대체 할 수 있습니다. 이 모델은 짧은 동영상 제작, 댄스 템플릿 생성, 애니메이션 제작 및 기타 분야에 적용 할 수있는 운전 캐릭터, 애니메이션 이미지 및 동물 사진을 지원합니다. 음성, 표정, 신체 움직임을 포괄하는 대규모 캐릭터 영상 데이터셋을 구축하고, 통이완샹 투용 영상 모델을 기반으로 한 사후 학습을 통해 단일 모델과 두 가지 추론 모드의 호환성을 동시에 달성합니다. 동작 리디렉션 모듈과 함께 골격 신호와 암시적 특징을 각각 신체 움직임과 얼굴 표정에 사용하여 움직임과 표정을 정확하게 재현합니다.

Wan2.2-Animate의 기능적 특징

• 이동 및 표현 마이그레이션캐릭터 사진과 참조 동영상을 입력하면 동영상 캐릭터의 움직임과 표정을 그림 캐릭터로 마이그레이션하여 그림 캐릭터에 역동적인 표현력을 부여할 수 있습니다.
• 캐릭터 교체원본 동영상의 움직임, 표정, 환경을 유지하면서 동영상 속 인물을 사진 속 인물로 교체합니다.
• 여러 역할 유형 지원캐릭터, 애니메이션 이미지, 동물 사진 등 다양한 용도로 활용할 수 있습니다.
• 대규모 데이터 세트 구축모델 성능 향상을 위한 음성, 표정, 신체 움직임이 포함된 대규모 캐릭터 비디오 데이터 세트입니다.
• 조화로운 프레젠테이션 형식역할 정보, 환경 정보 및 작업을 통합된 표현 형식으로 표준화하고 두 추론 모드와 호환되는 단일 모델을 달성합니다.
• 정확한 재현몸의 움직임과 표정의 경우, 모션 리타겟팅 모듈과 함께 골격 신호와 암시적 특징을 각각 사용하여 움직임과 표정을 정확하게 재현합니다.
• 빛 융합 효과교체 모드에서는 완벽한 빛 융합을 보장하기 위해 별도의 빛 융합 LoRA가 설계되었습니다.

Wan2.2-Animate의 핵심 이점

• 효율적인 모션 마이그레이션레퍼런스 영상의 모션과 표정을 대상 캐릭터 영상에 자연스럽고 부드러운 마이그레이션 효과로 정확하게 옮겨 정적인 캐릭터에 생동감 있고 역동적인 표현을 부여할 수 있습니다.
• 자연과 환경의 통합캐릭터를 교체할 때 원본 영상의 움직임, 표정, 환경 정보를 완벽하게 보존하여 캐릭터와 배경의 자연스러운 통합을 실현하고 부자연스러운 위화감을 피할 수 있습니다.
• 다중 역할 유형 적응캐릭터, 애니메이션 피규어, 동물 등 다양한 캐릭터 유형을 지원하여 다양한 분야의 창작 요구를 충족시킬 수 있는 폭넓은 적용성을 제공합니다.
• 대규모 데이터 세트 지원음성, 표정, 신체 움직임이 포함된 대규모 캐릭터 비디오 데이터 세트와 풍부하고 다양한 데이터를 기반으로 학습을 진행하여 모델에 더 강력한 학습 및 일반화 기능을 제공합니다.
• 여러 모드가 있는 단일 모델캐릭터 정보, 환경 정보, 액션을 통합된 표현 형식으로 표준화하고, 액션 모방과 롤플레잉 추론 모드에 모두 호환되는 단일 모델을 구현하며, 모델 사용 비용을 절감하기 위한 것입니다.
• 정밀 복제 기술모션 리타겟팅 모듈과 함께 몸의 움직임과 얼굴 표정에 각각 골격 신호와 암시적 특징을 사용하면 움직임과 표정을 정확하게 재현하여 생성된 영상의 품질과 사실감을 향상시킬 수 있습니다.
• 광 융합 최적화독립적인 빛 융합 LoRA는 교체 모드에서 설계되어 빛의 일관성과 융합 효과를 효과적으로 보장하여 생성된 영상을 시각적으로 더욱 자연스럽고 조화롭게 만듭니다.

Wan2.2-Animate의 공식 웹사이트는 무엇인가요?

• 프로젝트 웹사이트:: https://humanaigc.github.io/wan-animate/
• 깃허브 리포지토리:: https://github.com/Wan-Video/Wan2.2
• 허깅페이스 모델 라이브러리:: https://huggingface.co/Wan-AI/Wan2.2-Animate-14B

Wan2.2-애니메이트의 적용 대상 집단

• 콘텐츠 크리에이터애니메이션, 광고, 짧은 동영상 등 창의적인 동영상을 빠르게 생성하여 창작 효율성과 콘텐츠 다양성을 높이는 데 사용할 수 있습니다.
• 애니메이터정적 캐릭터에 동적 효과를 부여하여 애니메이션 제작 프로세스를 간소화하고 제작 비용을 절감하며 애니메이션 품질을 향상시킬 수 있습니다.
• 댄스 애호가 및 크리에이터개인화된 댄스 템플릿을 생성하여 독특한 댄스 동영상 콘텐츠를 제작할 수 있는 기능입니다.
• 애니메이션 애호가좋아하는 애니메이션 캐릭터를 애니메이션으로 제작하여 개개인의 니즈를 충족하고 창작의 재미를 더할 수 있습니다.
• 교육자복잡한 동작 과정을 시연하는 등의 교육용 동영상을 제작하여 교육 효과와 흥미를 높이는 데 사용할 수 있습니다.
• 광고 및 마케팅 직원광고의 창의성과 호소력을 향상시키는 매력적인 광고 동영상을 빠르게 생성할 수 있는 기능입니다.