지니 인비저너 - 베이항 등이 참여하는 Jiyuan의 오픈 소스 범용 로봇 플랫폼

지니 인비저너란 무엇인가요?

지니 인비저너(GE)는 지니 로보틱스 팀이 싱가포르 국립대학 및 베이징 항공우주대학과 협력하여 개발한 로봇 작동을 위한 통합 플랫폼입니다. GE의 핵심은 GE-Base, GE-Act, GE-Sim의 세 부분으로 구성됩니다. GE-Base는 실제 세계에서 로봇 상호 작용의 역학을 포착하는 명령 중심 비디오 확산 모델입니다. -Act는 GE-Base를 기반으로 잠재적 표현을 실행 가능한 동작 궤적으로 변환하여 다양한 형태를 가진 로봇을 지원하며, GE-Sim은 훈련 및 평가를 위한 고충실도 시뮬레이션 비디오를 생성하는 동작 조건부 신경 시뮬레이터입니다.

지니 인비저너 기능

• 통합 운영 플랫폼지니 인비저너는 다양한 로봇 형태에 적응하고 센싱부터 실행까지 엔드투엔드 처리가 가능한 범용 로봇 지향 운영 플랫폼입니다.
• 정신적 리허설 및 행동 계획로봇이 정신적 리허설을 통해 최적의 행동 방침을 생성한 후 실제 환경에서 실행하는 '선 상상, 후 행동' 모델은 작업 수행의 정확성과 효율성을 향상시킵니다.
• 멀티모달 융합GE-Base 모델은 로봇 상호작용의 시공간적, 의미론적 역학을 포착하여 시각, 음성, 동작의 멀티모달 융합을 가능하게 하는 명령 기반 비디오 확산 기법을 기반으로 합니다.
• 고충실도 시뮬레이션 및 교육GE-Sim은 동작 조건의 신경 시뮬레이터로서 고충실도 시뮬레이션 비디오를 생성하고 대규모 훈련 및 평가를 지원하며 로봇이 복잡한 환경에 더 잘 적응할 수 있도록 도와줍니다.
• 표준화된 평가 벤치마크로봇 성능의 표준화된 평가를 용이하게 하기 위해 시각적 충실도, 물리적 일관성 및 명령-동작 정렬을 측정하기 위한 EWMBench 벤치마크 제품군을 제공합니다.
• 오픈 소스 및 확장성모든 코드, 모델 및 벤치마크는 로봇 공학 발전을 위한 연구자와 개발자의 추가 탐색과 적용을 촉진하기 위해 공개될 예정입니다.

지니 인비저너의 핵심 이점

• 높은 활용성다양한 로봇 형태에 적용할 수 있으며 폭넓은 적용성으로 다양한 유형의 로봇 작업을 지원합니다.
• 엔드투엔드 기능환경 감지, 명령 이해, 동작 실행까지 전체 프로세스의 통합 처리를 실현하고 로봇의 자율성과 지능을 향상시킵니다.
• 정신적 리허설 메커니즘시뮬레이션 환경에서의 미리보기를 통해 작업 과정을 최적화하고 실제 작업에서 오류와 위험을 줄입니다.
• 고충실도 시뮬레이션GE-Sim은 로봇 훈련 및 전략 최적화를 효과적으로 지원하는 매우 사실적인 시뮬레이션 비디오를 생성합니다.
• 표준화된 평가로봇 성능의 표준화된 평가를 용이하게 하고 기술의 표준화를 촉진하는 EWMBench 벤치마킹 제품군을 제공합니다.

지니 인비저너의 공식 웹사이트는 무엇인가요?

• 프로젝트 웹사이트:: https://genie-envisioner.github.io/
• GitHub 리포지토리:: https://github.com/AgibotTech/Genie-Envisioner
• arXiv 기술 논문:: https://arxiv.org/pdf/2508.05635

지니 인비저너의 대상

• 로봇 공학 연구원지니 인비저너는 연구자들이 로봇 작업의 경계를 탐구하고 로봇 지능의 발전을 촉진할 수 있는 강력한 연구 도구와 오픈 소스 플랫폼을 제공합니다.
• 로보틱스 개발 엔지니어다양한 기능과 엔드투엔드 솔루션을 통해 엔지니어는 광범위한 로봇 하드웨어 및 작업 시나리오에 맞게 로봇 애플리케이션을 보다 효율적으로 개발하고 최적화할 수 있습니다.
• 대학 및 연구 기관교육 및 연구를 위한 표준화된 평가 기준과 풍부한 리소스를 제공하고, 로봇 공학 관련 교육 및 연구 프로젝트를 촉진하며, 전문가를 양성합니다.
• 산업 자동화 기업산업 생산 라인에서 로봇의 작동 프로세스를 최적화하고 생산성과 품질을 개선하며 사람의 개입을 줄이기 위해 사용할 수 있습니다.
• 서비스 로봇 개발자서비스 로봇 분야에 적용하여 복잡한 환경에서 로봇의 적응력과 작업 수행 능력을 향상시키고 서비스 로봇의 적용 시나리오를 확장할 수 있습니다.