Mixed Motion 1.0 - Tencent Mixed Motion Team オープンソース テキスト生成3Dモーションモデル

ハイブリッド・モーション1.0とは？

ハイブリッド・モーション1.0（HY-Motion1.0）は、テンセントのハイブリッド・チームによるオープンソースのテキスト生成3Dモーションモデルで、10億パラメータの拡散トランスフォーマー・アーキテクチャを採用し、自然言語記述から高品質の3Dキャラクター・アニメーションを直接生成する。3,000時間の事前学習で動作認知の基礎を築き、400時間の高品質データ微調整で精度を向上させ、最後に強化学習で物理的合理性を最適化する。Windows/Mac/Linuxの全プラットフォームに対応し、8GBと4GBの2つのバージョンを提供する。 対応するComfyUIプラグインは、視覚的な操作を実現し、FBXフォーマットでエクスポートできるため、ゲームのNPC、映画やテレビの特殊効果などのシナリオに適している。このモデルはGitHubやHugging Faceなどでオープンソース化されている。

ハイブリッド・モーション 1.0の特徴

• 高精度のモーション生成スムーズで自然な動きを持つ、高品質で忠実度の高い3Dスケルトンアニメーションを生成します。
• 多彩な行動範囲基本的な変位、スポーツ、競技、社交、カジュアルなど、さまざまなタイプのアクションをカバー。
• テキストドライバー対応する3Dアクションは簡単なテキスト記述で生成でき、操作も簡単です。
• 高い互換性Blender、Unity、Unreal Engineなどの主要な3Dツールをサポートし、簡単に統合できます。
• オープンソースで使いやすい完全な推論コードと事前に訓練されたモデル重みを提供し、複数のオペレーティング・システムをサポートし、簡単に始めることができます。
• 学習の最適化人間のフィードバックと報酬モデルを組み込んだ最適化により、動きの質とコマンド追従性を向上。

ハイブリッド・モーション1.0の主な利点

• 効率的な発電テキスト記述から高品質な3Dスケルトンアニメーションを高速生成し、クリエイティブ効率を大幅に向上。
• 質の高いアクション生成される動きは滑らかで自然、ディテールも豊かで、要求の厳しいアニメーション制作に適しています。
• 多彩なモーション・ライブラリさまざまなシナリオやニーズに対応するため、幅広いタイプのアクションをカバーする。
• 強力な互換性主流の3Dツールと直接互換性があり、素早く簡単に統合できます。
• オープンソース・サポート二次開発や拡張が容易なように、フルコードと事前学習済みモデルが提供されています。
• パフォーマンスを最適化する強化学習を使って動きの質を最適化し、コマンドの追従性を向上させる。
• しきい値を下げるアニメーションの専門的なスキルは必要なく、一般のユーザーでも簡単に作成できます。

ハイブリッド・モーション1.0の公式ウェブサイトは？

• 効率的な発電テキスト記述から高品質な3Dスケルトンアニメーションを高速生成し、クリエイティブ効率を大幅に向上。
• 質の高いアクション生成される動きは滑らかで自然、ディテールも豊かで、要求の厳しいアニメーション制作に適しています。
• 多彩なモーション・ライブラリさまざまなシナリオやニーズに対応するため、幅広いタイプのアクションをカバーする。
• 強力な互換性主流の3Dツールと直接互換性があり、素早く簡単に統合できます。
• オープンソース・サポート二次開発や拡張が容易なように、フルコードと事前学習済みモデルが提供されています。
• パフォーマンスを最適化する強化学習を使って動きの質を最適化し、コマンドの追従性を向上させる。
• しきい値を下げるアニメーションの専門的なスキルは必要なく、一般のユーザーでも簡単に作成できます。

ハイブリッド・モーション 1.0が適用される人々

• アニメーターと映画プロデューサーこのモデルを使用することで、高品質なアニメーション素材を素早く生成することができ、制作時間やコストを削減し、制作効率を向上させることができる。
• ゲーム開発者ゲームキャラクターの豊かで多様な動きを生成し、ゲームのインタラクティブ性と楽しさを向上させることができます。
• バーチャル・キャスターとデジタル・ヒューマン開発者自然で滑らかな動きを生成し、バーチャル映像のリアリズムとインタラクティブ性を高める。
• 教育者鮮やかな教育用アニメーションを作成することで、生徒の理解を深め、学習効果を高めることができます。
• 広告・マーケティング・スタッフ視聴者の注意を引き、広告の効果を高めるパーソナライズされたアニメーション広告を作成するために使用されます。
• VR/AR開発者仮想現実や拡張現実アプリケーションのためのリアルタイムアクションを生成し、ユーザー体験を向上させます。