はじめに
Cyanpuppets Technology（Cyanpuppets）は、CNN（Convolutional Neural Network）とDNN（Deep Neural Network）のアルゴリズムにより、2D動画から3Dモーションデータを生成することに特化したAI技術のリーディングカンパニーである。主力製品であるCYAN.AIプラットフォームは、顔、表情、体の動きを高精度にキャプチャすることが可能で、アニメーション制作、ゲーム開発、バーチャルソーシャルネットワーキングなど幅広い分野に応用できる。このプラットフォームは、複雑な機器を装着する必要がなく、極めて低遅延で高精度のリアルタイムモーションキャプチャをサポートし、教育、エンターテインメント、医療などの業界で広く利用されている。
機能一覧
- 2D映像から3Dモーションデータを生成AIアルゴリズムを用いて2D映像から人の動きの特徴を抽出し、高精度な3Dデータを生成。
- 高精度モーションキャプチャー顔の140ポイント、指の21ポイント、手足の30ポイントを含む208ポイントを捕らえる。
- リアルタイムレンダリング0.1秒という低レイテンシーを実現し、スムーズなリアルタイムモーションキャプチャーを体験できます。
- マルチプラットフォーム対応Metahuman、Unreal Skeleton Asset、Daz、CC4、iClone、Unityアバター、その他主要なモデルのボーンシステムをサポートしています。
- ワンクリックでエクスポートFBXデータのワンクリックエクスポートをサポート。
- 自動キャリブレーション複雑な環境に適応し、人、背景、障害物を自動的に認識して切り抜ける。
ヘルプの使用
設置プロセス
- ソフトウェアのダウンロードCYAN.AIプラットフォームのインストールパッケージをダウンロードするには、Cyan Puppet Technologyの公式ウェブサイトをご覧ください。
- ソフトウェアのインストールインストールパッケージを実行し、プロンプトに従ってインストールを完了します。
- アカウント登録ソフトウェアを起動したら、アカウントに登録しログインします。
- デバイスの設定対応カメラまたは産業用カメラを接続してデバイスを設定します。
使用プロセス
- スタートアップソフトウェアCYAN.AIプラットフォームを開き、「新規プロジェクト」を選択する。
- インポートビデオ2Dビデオファイルをソフトウェアにインポートすると、システムは自動的にビデオコンテンツを認識し、処理します。
- パラメータの設定フレームレート、解像度などのキャプチャパラメータを必要に応じて設定します。
- キャプチャ開始Start Capture "ボタンをクリックすると、システムがリアルタイムで3Dモーションデータを生成します。
- 輸出データキャプチャ完了後、"One Click Export "ボタンをクリックすると、生成されたFBXデータがローカルフォルダにエクスポートされます。
詳細な機能操作
- フェイスキャプチャバーチャルソーシャルやアニメーション制作のために、140の顔キーポイントから高精度な表情をキャプチャします。
- フィンガープリント21本の指のキーポイントで手の動きを正確に捉え、繊細なアニメーションシーンを演出します。
- ボディキャプチャゲーム開発やモーション解析のために人間の動きを完全にキャプチャするための30肢キーポイント。
- 自動キャリブレーションこのシステムは、人物、背景、障害物を自動的に識別してカットし、複雑な環境に適応し、キャプチャ精度を保証します。
- マルチプラットフォーム対応他のソフトウェアやプラットフォームとの統合を容易にするため、骨格系の主流モデリングをサポート。
- リアルタイムレンダリング0.1秒という低レイテンシーで、リアルタイムのインタラクションやライブストリーミングシーンにスムーズなリアルタイムモーションキャプチャーを提供します。
