Seedance 1.0 - 動画生成の基本モデルをByteDanceが発表

Seedanceとは 1.0

Seedance1.0は、ByteDanceのSeedチームによって発表された先進的な動画生成モデルです。Seedance1.0は、テキストと画像の入力をサポートし、シームレスなマルチカメラ切り替えで1080pの高画質動画を生成することができます。ネイティブのマルチカメラによるナラティブ機能を備え、遠景、中景、近景の切り替えが可能で、被写体の動きが安定し、自然で滑らかな映像を生成することができます。リアル、アニメ、映画、テレビなど様々な制作スタイルに対応し、生成速度が速く、低価格を実現した。第三者評価リスト「Artificial Analysis」において、Seedance 1.0はテキスト生成ビデオとグラフ生成ビデオの両タスクで1位を獲得し、強力な性能と利点を示しており、映画・テレビ制作、広告・マーケティング、ゲーム開発、教育・トレーニング、ニュースメディア、その他の応用シーンに適しています。

Seedance 1.0の主な機能

マルチカメラによるナレーション機能遠景、中景、近景の切り替えが可能で、核となる主題、ビジュアルスタイル、全体的な雰囲気に高い一貫性を持たせ、複雑な物語構成に適した、複数の一貫したショットを含む物語ビデオの生成をサポートします。
スムーズで安定した運動性能スポーツシーンやダイナミックなコンテンツ制作に適した、繊細な表情からダイナミックなシーンまで、安定感と臨場感あふれる動きのある映像生成をサポートします。
様々なスタイルの創造現実的な、アニメーション、映画やテレビ、広告やビデオの視覚効果を高めるために、さまざまなシナリオやニーズを満たすために、ビデオ生成の他のスタイルをサポートしています。
正確な意味理解とコマンド・フォロー複雑な自然言語コマンドを正確に解析し、複数の被写体のインタラクションや複数の動きの組み合わせを安定的に制御し、クリエイティブな意図を正確に実現するために豊富なカメラの動きをサポートすることができます。
低コストで高速推論Seedance1.0は、モデル構造の最適化と推論の高速化に基づき、短時間で動画作成を完了することができます。例えば、5秒間の解像度1080pの動画生成タスクの場合、計測された推論時間はわずか41.4秒（NVIDIA L20テストに基づく）であり、これは他の類似モデルよりも大幅に低く、作成コストを削減します。

Seedance 1.0のパフォーマンス

第三者レビューが先導権威あるレビュープラットフォーム人工分析 Seedance 1.0は、Text-to-Video (T2V)とImage-to-Video (I2V)の両タスクでトップの成績を収め、卓越したパフォーマンスと競争力を示しました。
社内テストでの優れたパフォーマンス社内ベンチマークでは、Seedance 1.0は、コマンドの順守、モーションの質、美的性能など、いくつかの中核的な項目で高いスコアを獲得し、他の類似モデルを大幅に上回りました。

シーダンス1.0の公式サンプル

原始動物マルチカメラ物語能力::
- プロンプトマルチショット。薄暗い部屋に入る刑事。テーブルの上の手がかりを調べ、テーブルの上の物を手に取る。思案する彼にカメラがパンする。

より強力にキャンペーン・ジェネレーション効果::
- プロンプト::真っ赤なキャットウォークを優雅に歩く黒の背抜きドレスのモデル。光が生地の流れを浮かび上がらせる。観客の視線はモデルを追い、ついに照明が落ちる。

アジュバント目の覚めるような様々なスタイルの創造::

Seedance 1.0のプロジェクトアドレス

プロジェクトのウェブサイト::https://seed.bytedance.com/zh/seedance
技術論文::https://lf3-static.bytednsdoc.com/obj/eden-cn/bdeh7uhpsuht/Seedance

Seedance 1.0の使い方

公式ウェブサイトを見るSeedance 1.0の公式プロジェクトサイトにアクセスし、"Experience Now "をクリックしてください。または、Dream、Beanbag、Volcano EngineのAPIインターフェイスをベースに利用を開始する。
テキスト入力ダイアログボックスに自然言語でわかりやすく入力してください。
画像入力ビデオの主題に関連する画像を入力してください。
その他のパラメータビデオのスタイル、再生時間、解像度などを自由に設定できます。
生成されたビデオをダウンロードする ビデオをダウンロードして編集したり、直接使用することができます。

Seedance 1.0 の主な利点

マルチカメラによるナレーション機能遠景、中景、近景の切り替えが可能で、核となる被写体、ビジュアルスタイル、全体的な雰囲気の一貫性が高く、複雑な物語構成に適した、複数の一貫したショットを含む物語ビデオの生成をサポートします。
スムーズで安定した運動性能スポーツシーンやダイナミックなコンテンツ制作に適した、繊細な表情からダイナミックなシーンまで、安定感と臨場感あふれる動きのある映像生成をサポートします。
様々なスタイルの創造現実的な、アニメーション、映画やテレビ、広告やビデオの視覚効果を高めるために、さまざまなシナリオやニーズを満たすために、ビデオ生成の他のスタイルをサポートしています。
正確な意味理解とコマンド・フォロー複雑な自然言語コマンドを正確に解析し、複数の被写体のインタラクションや複数の動きの組み合わせを安定的に制御し、クリエイティブな意図を正確に実現するために豊富なカメラの動きをサポートすることができます。
低コストで高速推論モデル構造の最適化と推論の高速化により、短時間で映像制作が完了し、制作コストの大幅な削減と制作効率の向上を実現。
強力な技術基盤マルチソースデータの照合、効率的な事前トレーニングフレームワーク、事後トレーニングの最適化、生成されたビデオの品質と速度を保証する複合報酬システムに基づく高度な技術。

Seedance 1.0は誰のためのものですか？

映画プロデューサー映画、テレビシリーズ、ドキュメンタリーや他の映画制作チームは、マルチカメラの物語ビデオを生成するために、創造的なショットやシーンの迅速な建設は、創造の効率を高める。
広告・マーケティング・スタッフ広告代理店やマーケティングチームは、さまざまなブランドや製品のプロモーションニーズに対応し、制作コストを削減するために、高品質の広告ビデオを迅速に作成します。
ゲーム開発者ゲーム開発チームは、ゲームの物語性と没入感を高めるために、ゲーム内のトランジションやダイナミックなシーンを生成します。
教育者教師や教育機関は、生徒が知識をよりよく理解し習得できるように、また教育効果を高めるために、教育用ビデオやトレーニング教材を作成する。
ジャーナリズムおよびメディア関係者報道機関やメディアチームは、ニュースやドキュメンタリーのダイナミックコンテンツを作成し、視覚効果を高め、コンテンツの魅力を向上させます。