オープンソースの地平線:大衆のためのAIビデオ作成
エキサイティングなニュースです! AliCloudは、待望の次世代AI動画生成モデル「WanX 2.1」をまもなくオープンソース化することを正式に発表しました! 動画生成を再定義する」と称されるこのモデルは、リリース以来、業界で大きな注目を集めてきました。この度、AliCloudはWanX 2.1のオープンソース化を決定し、AI動画制作の分野に強力な新風を吹き込むことは間違いない。
WanX 2.1は、AliCloudのマルチモーダル・マクロモデル "Wanx "の最新作である。 2023年7月にデビューした "Tongyi Wanxiang "に対し、WanX 2.1はモデルシリーズにおける最新の技術的進歩を表している。 テキストコマンドに基づいて高品質の画像や動画を生成するだけでなく、中国語と英語のテキストエフェクトをサポートする世界初のモデルでもある。
優れたパフォーマンス:VBenchチャートのリーダー
WanX 2.1は、フォトリアリスティックな動画を生成するのに驚くほど優れています。 複雑なモーションシーンの処理でも、ピクセル品質の最適化でも、物理法則の正確な把握でも、WanX 2.1は卓越した性能を発揮します。 特に、ユーザーコマンドを理解し実行する精度の高さは、権威あるVBench Video Generation Modelsリストで際立っており、総スコアは84.7%で、ダイナミクス、空間関係、マルチオブジェクトの相互作用などの主要なメトリクスをリードしています。
この記事を書いている時点では、トップはミラクルビジョンV5に変わっている。
WanX 2.1が優れている理由は何でしょうか? それは、AliCloudの研究チームによる継続的な技術革新とブレークスルーと切り離すことはできません。
技術革新:よりリアルな映像世界の創造
究極の映像生成品質を追求するため、WanX 2.1の研究開発チームは、多くの主要技術分野で探求と革新を続けてきました:
- 自社開発のVAEおよびDiTフレームワークWanX 2.1は、Aliyun独自のVAE(Variable Auto-Encoder)とDiT(Denoising Diffusion)を採用しています。 変圧器)フレームワークにより、ビデオのタイミングと空間的関係を理解するモデルの能力が大幅に強化されました。 これにより、WanX 2.1は、複雑な動きや物理法則を含むシーンを扱う際に、よりリアルで自然な映像コンテンツを生成することができます。
- 全時間的注意メカニズムフルタイムアテンションメカニズムの導入により、WanX 2.1は現実世界の複雑で変化するダイナミクスをより正確に捉え、シミュレートすることができるようになり、生成される動画はより生き生きとしたものになりました。
- エクストラ・ロング・コンテキスト・トレーニングWanX 2.1では、テキストコマンドを理解し、実行するモデルの能力を高めるため、超ロングコンテクスト学習法を採用し、モデルの学習プロセスを加速させ、テキストコマンドとビデオコンテンツ作成のシームレスな接続を実現し、ビデオ作成をより速く、より直感的にします。
- 初の英語と中国語のバイリンガルテキスト効果WanX 2.1は、業界で初めてバイリンガルテキストエフェクトに対応した動画生成モデルであり、適用シーンを大幅に拡大し、広告デザインやショートビデオ制作業界の多様なクリエイティブニーズに応えます。
テキストヒント:「アイスリンクで演技する女性フィギュアスケーターのパノラマショット。紫色のスケート衣装と白いスケート靴を履き、回転技を披露している。腕を大きく広げ、体を後ろに傾け、その技巧と優雅さを見せている」。
これらの技術革新のおかげで、WanX 2.1は大きな体の動きや複雑な回転シーンを簡単に処理することができます。 フィギュアスケート、水泳、ダイビングなど、高度な軌跡と体の連動が要求される難しいシーンでも、WanX 2.1は優れた性能を発揮し、映像生成の新たな品質基準を打ち立てました。
オープンソースの共有:より広範な創造的エコロジーを可能にする
現在、WanX 2.1は中国の公式サイトで入手できる。 すべてお見通し 無料で体験できます。 個人の開発者や企業ユーザーは、Aliyun Model Studioプラットフォームを通じてWanX 2.1のパワーをいち早く体験することができ、創造性を解き放ち、高品質のビデオコンテンツを効率的に生成することができます。
今度のオープンソースは、WanX 2.1がもはや特定のプラットフォームに限定されることなく、より広範なAI技術エコシステムに統合されることを意味する。 より多くの開発者やクリエイターが巨人の肩に立ち、AI動画作成の無限の可能性を共同で探求し、AI技術とクリエイティブ産業の深い融合を真に実現できるようになる。 WanX 2.1がオープンソース化され、AI映像制作の新時代が到来する日を心待ちにしましょう!