InfinityStar - 바이트 오픈 소스 통합 시공간 자동 회귀 비디오 생성 프레임워크

인피니티스타란?

InfinityStar는 고해상도 이미지 및 동영상 생성을 위해 설계된 ByteDance에서 오픈소스화한 통합 시공간 자동 회귀 프레임워크입니다. 개별 자동 회귀 접근 방식을 사용하여 단일 모델에서 텍스트 대 이미지, 텍스트 대 비디오 및 이미지 대 비디오 작업을 동시에 처리할 수 있습니다. 이 프레임워크는 VBench 벤치마크에서 83.74점을 기록하여 기존 자동 회귀 모델보다 성능이 뛰어나며 확산 모델보다 10배 더 빠릅니다. 핵심 기술에는 시공간 피라미드 모델링(비디오를 첫 번째 프레임 이미지와 동적 클립으로 분해), 효율적인 개별 시각적 모호화기(지식 상속 및 확률적 정량화기를 통한 학습 가속화), 최적화된 Transformer 아키텍처(시맨틱 규모 반복 및 시공간적 희소 주의 등)가 포함됩니다. 사용자는 단일 GPU로 5초 분량의 720p 동영상을 1분 단위로 생성하는 기능을 지원하는 Discord 커뮤니티를 통해 그 기능을 체험해 볼 수 있습니다.

InfinityStar 기능

• 고해상도 비디오 생성고해상도 콘텐츠의 요구 사항을 충족하기 위해 복잡하고 역동적인 장면을 빠르게 합성할 수 있는 고품질 720p 동영상 생성을 지원합니다.
• 멀티태스킹 지원텍스트 대 이미지, 텍스트 대 비디오, 이미지 대 비디오 등 다양한 생성 작업을 지원하여 다양한 콘텐츠 제작 요구 사항을 충족합니다.
• 효율적인 용량 생성5초 분량의 720p 동영상을 생성하는 데 58초밖에 걸리지 않아 기존 확산 모델보다 훨씬 빠르고 생성 효율이 크게 향상됩니다.
• 통합 공간-시간 모델링(UTM)외형과 동적 정보를 효과적으로 분리하는 시공간 피라미드 구조를 통해 공간 및 시간적 종속성을 효율적으로 캡처합니다.
• 지식 상속 전략지식 상속 전략을 활용하여 학습 시간을 단축하고 계산 리소스 소비를 줄이는 사전 학습된 가변 자동 인코더(VAE) 기반 구조.
• 오픈 소스 및 사용 편의성모든 코드와 모델은 연구자와 개발자가 빠르게 시작하고 추가 연구 및 애플리케이션 개발을 수행할 수 있도록 오픈 소스로 제공되었습니다.
• 고품질 결과 생성VBench 벤치마크 테스트에서 뛰어난 성능으로 다양한 애플리케이션 시나리오의 요구 사항을 충족하는 풍부한 디테일의 고품질 비디오 및 이미지를 생성합니다.

InfinityStar의 핵심 혜택

• 효율적인 생성 속도동영상 생성기는 5초 분량의 720p 동영상을 생성하는 데 58초밖에 걸리지 않아 기존 확산 모델보다 10배 빠르며 동영상 생성 효율이 크게 향상됩니다.
• 고품질 출력VBench 벤치마크 테스트에서 다른 모델보다 훨씬 높은 점수를 획득하여 풍부한 디테일과 뛰어난 시각 효과로 고품질의 동영상과 이미지를 생성합니다.
• 멀티태스킹 지원텍스트 대 이미지, 텍스트 대 비디오, 이미지 대 비디오 등 다양한 콘텐츠 제작 요구 사항을 충족하는 광범위한 생성 작업을 자연스럽게 지원합니다.
• 통합 공간-시간 모델링(UTM)시공간 피라미드 구조를 채택하여 외형과 동적 정보를 효과적으로 분리함으로써 효율적인 공간 및 시간적 종속성 캡처가 가능하고 모델 성능을 개선합니다.
• 지식 상속 전략지식 상속 전략을 활용하여 학습 시간을 단축하고 계산 리소스 소비를 줄이는 사전 학습된 가변 자동 인코더(VAE) 기반 구조.
• 오픈 소스 및 사용 편의성모든 코드와 모델은 연구자와 개발자가 빠르게 시작하고 추가 연구 및 애플리케이션 개발을 수행할 수 있도록 오픈 소스로 제공되었습니다.
• 긴 동영상 생성 기능긴 동영상 생성을 위한 기반을 마련하여 더 긴 고품질 동영상 콘텐츠 생성을 지원하고 동영상 생성의 응용 범위를 확장합니다.

인피니티스타의 공식 웹사이트는 무엇인가요?

• 깃허브 리포지토리:: https://github.com/FoundationVision/InfinityStar
• 허깅페이스 모델 라이브러리:: https://huggingface.co/FoundationVision/InfinityStar
• arXiv 기술 논문:: https://arxiv.org/pdf/2511.04675

인피니티스타는 누구를 위한 서비스인가요?

• 콘텐츠 크리에이터동영상 제작자, 애니메이터, 광고 크리에이티브 등 고품질 동영상 콘텐츠를 빠르게 생성하고 제작의 효율성을 높일 수 있습니다.
• 게임 개발자대화형 비디오 생성을 지원하는 대화형 게임 및 가상 현실(VR)/증강 현실(AR) 애플리케이션을 개발하여 사용자 경험을 향상시키는 데 사용할 수 있습니다.
• 교육자콘텐츠와 관련된 애니메이션 또는 비디오를 생성하여 교육 효과와 학생 참여도를 높이기 위한 교육용 비디오를 만드는 데 사용됩니다.
• 소셜 미디어 운영자소셜 미디어 플랫폼에 풍부하고 다양한 동영상 콘텐츠를 제공하여 사용자가 매력적인 동영상을 빠르게 생성하고 콘텐츠 배포를 강화할 수 있도록 지원합니다.
• (과학) 연구원컴퓨터 비전 및 인공지능 분야의 연구를 통해 비디오 생성 기술의 새로운 응용 분야와 경계 확장을 모색합니다.
• 기업 마케팅 팀광고 및 홍보 동영상 제작에 사용되며, 브랜드 톤에 맞는 콘텐츠를 빠르게 생성하여 마케팅 효과와 브랜드 영향력을 향상시킵니다.