综合介绍
青色木偶科技(Cyanpuppets)是一家领先的AI技术公司,专注于通过卷积神经网络(CNN)和深度神经网络(DNN)算法实现2D视频生成3D动作数据。其核心产品CYAN.AI平台,能够高精度捕捉面部、表情和肢体动作,适用于动画制作、游戏开发、虚拟社交等多个领域。该平台无需穿戴复杂设备,支持实时动作捕捉,具有极低的延迟和高精度的特点,广泛应用于教育、娱乐、医疗等行业。
功能列表
- 2D视频生成3D动作数据:利用AI算法从2D视频中提取人体动作关键特征,生成高精度3D动作数据。
- 高精度动作捕捉:捕捉208个关键点,包括面部140点、手指21点、肢体30点。
- 实时渲染:实现低至0.1秒的延迟,提供流畅的实时动作捕捉体验。
- 多平台兼容:支持Metahuman、Unreal Skeleton Asset、Daz、CC4、iClone、Unity avatar等主流模型骨骼系统。
- 一键导出:支持一键导出FBX数据,方便后期处理和应用。
- 自动标定:自动识别并切割人物、背景和障碍物,适应复杂环境。
使用帮助
安装流程
- 下载软件:访问青色木偶科技官网,下载CYAN.AI平台安装包。
- 安装软件:运行安装包,按照提示完成安装。
- 注册账号:启动软件后,注册并登录账号。
- 配置设备:连接支持的摄像头或工业相机,进行设备配置。
使用流程
- 启动软件:打开CYAN.AI平台,选择“新建项目”。
- 导入视频:将2D视频文件导入软件,系统会自动识别并处理视频内容。
- 设置参数:根据需求设置捕捉参数,如帧率、分辨率等。
- 开始捕捉:点击“开始捕捉”按钮,系统将实时生成3D动作数据。
- 导出数据:捕捉完成后,点击“一键导出”按钮,将生成的FBX数据导出至本地文件夹。
详细功能操作
- 面部捕捉:通过140个面部关键点,实现高精度的面部表情捕捉,适用于虚拟社交和动画制作。
- 手指捕捉:21个手指关键点,精确捕捉手部动作,适用于精细操作的动画场景。
- 肢体捕捉:30个肢体关键点,全面捕捉人体动作,适用于游戏开发和运动分析。
- 自动标定:系统自动识别并切割人物、背景和障碍物,适应复杂环境,确保捕捉精度。
- 多平台兼容:支持主流模型骨骼系统,方便与其他软件和平台的集成。
- 实时渲染:低至0.1秒的延迟,提供流畅的实时动作捕捉体验,适用于实时互动和直播场景。