CYAN.AI (Cyan Puppet Technology): большая модель для генерации действий, платформа искусственного интеллекта для генерации 3D-данных о действиях из 2D-видео.

Общее введение

Cyanpuppets Technology (Cyanpuppets) - ведущая компания в области технологий искусственного интеллекта, специализирующаяся на создании трехмерных данных о движении из двухмерных видео с помощью алгоритмов конволюционной нейронной сети (CNN) и глубокой нейронной сети (DNN). Основной продукт компании, платформа CYAN.AI, позволяет с высокой точностью фиксировать движения лица, выражения и тела и применяется в самых разных областях, таких как создание анимации, разработка игр и виртуальных социальных сетей. Платформа избавляет от необходимости носить сложное оборудование, поддерживает захват движений в реальном времени с чрезвычайно низкой задержкой и высокой точностью и широко используется в образовании, развлечениях, медицине и других отраслях.

Список функций

• 2D-видео для получения 3D-данных о движении: Использование алгоритмов искусственного интеллекта для извлечения ключевых особенностей движения человека из 2D-видео для создания высокоточных 3D-данных о движении.
• Высокоточный захват движений: Захват 208 ключевых точек, включая 140 точек на лице, 21 точку на пальцах и 30 точек на конечностях.
• рендеринг в реальном времениДостижение задержки до 0,1 секунды для плавного захвата движения в реальном времени.
• Мультиплатформенная совместимость: Поддержка Metahuman, Unreal Skeleton Asset, Daz, CC4, iClone, Unity avatar и других основных систем костных моделей.
• Экспорт одним щелчком мыши: Поддерживает экспорт FBX-данных одним щелчком мыши для упрощения постобработки и применения.
• Автоматическая калибровка: Автоматически распознает людей, фон и препятствия, адаптируясь к сложной обстановке.

Использование помощи

Процесс установки

1. Скачать программное обеспечение: Посетите официальный сайт Cyan Puppet Technology, чтобы загрузить установочный пакет платформы CYAN.AI.
2. Установка программного обеспечения: Запустите установочный пакет и следуйте подсказкам для завершения установки.
3. Зарегистрируйтесь для получения учетной записи: После запуска программы зарегистрируйтесь и войдите в свою учетную запись.
4. Настройка устройства: Подключите поддерживаемую камеру или промышленную камеру для настройки устройства.

Процесс использования

1. программное обеспечение для запускаОткройте платформу CYAN.AI и выберите "Новый проект".
2. Импортное видео: Импортируйте 2D-видеофайлы в программу, система автоматически распознает и обработает видеоматериал.
3. Параметры настройки: Установите необходимые параметры съемки, такие как частота кадров, разрешение и т.д.
4. Начать захватНажмите кнопку "Начать захват", и система начнет генерировать 3D-данные о движении в режиме реального времени.
5. Экспорт данных: После завершения захвата нажмите кнопку "One Click Export", чтобы экспортировать сгенерированные FBX-данные в локальную папку.

Детальное управление функциями

• захват лица: Высокоточный захват выражения лица с помощью 140 ключевых точек для виртуальной социальной и анимационной продукции.
• отпечаток пальца21 точка нажатия на клавиши для точной фиксации движений рук в анимационных сценах с тонкими манипуляциями.
• захват тела: 30 ключевых точек конечностей для полного захвата движений человека для разработки игр и анализа движений.
• Автоматическая калибровка: Система автоматически идентифицирует и вырезает людей, фоны и препятствия, адаптируется к сложным условиям и обеспечивает точность съемки.
• Мультиплатформенная совместимость: Поддержка основных моделей скелетных систем для легкой интеграции с другими программами и платформами.
• рендеринг в реальном времени: Низкая задержка до 0,1 секунды обеспечивает плавный захват движения в режиме реального времени для взаимодействия в реальном времени и сценариев прямой трансляции.