フェイスフュージョン バージョン3.1.1に更新しました。今回のアップデートでは、バッチ機能、顔変更モデル、新しいUIインターフェイスが追加され、今回のバッチは、ジョブワークフローフォームの前のバージョンとは異なり、操作はより便利で簡単です。
この記事では、FaceFusionを使ってあるラッパークライアントを説明します:FaceFusion:ビデオ顔交換強化ツール|音声同期ビデオ口の動き 記事の最後をご覧ください。
更新情報
新機能
- とおす
バッチラン
バッチ機能導入コマンド - 調整可能なフェイス・マスカーとフェイス・パーサーの追加
- Gradioバージョン5のUIアップデート
- ライブ・フェイス・スワップ・モードでウェブカメラ・デバイスを選択するオプションの追加
新モデル
- 認知度を高める
ディープフェイス・ライブ
モデルサポート - 追加
hififace_256
顔面移植モデル - フレーム強化モデルの更新
最適化と問題解決
- ハロー効果を低減するための年齢修正プロセッサーの最適化
- 増加
---temp-path
パラメータで一時リソースのパスを変更する。 - ビデオエンコーダの追加
h264_qsv
歌で応えるhevc_qsv
- 時代遅れのものを取り除く
--スキップダウンロード
パラメトリック - ウェブカメラのストリームを閉じる際の問題を最適化
- 強制使用
libvpx-vp9
コーデックウェブム
扱う - プレビューの更新に一貫性がない問題を修正
- オーディオを復元する際のビデオの長さに関する問題を修正
- OpenVINOの問題の修正
- ビデオの抽出と結合にプログレスバーを追加する。
追加アップデート
バージョン3.1.1では、さらなる最適化と改善を行った。
- バッチ処理システム内蔵。
ノーマルモード
歌で応える一括モード
2種類だ。 - バッチモードは、写真やビデオのバッチ変更をサポートしています。
一括モード
📢 バッチモードは実験的な機能ですので、バグが発生した場合はフィードバックもお願いします!📢
バッチモード📂を使用する前に、2つのフォルダを準備する必要があります。
顔写真を保存するためのもの。(写真の解像度は一定である必要はありませんが、フォーマットは一定である必要があることに注意してください!)
1つは、変更したい写真やビデオを入れるため。(写真でもビデオでも構いません!私は動画をここに入れました)
(!!!!ファイルパスやファイル名に中国語などの特殊文字が含まれていないか確認してください。)
(!!!!ファイルパスやファイル名に中国語などの特殊文字が含まれていないか確認してください。)
(!!!!ファイルパスやファイル名に中国語などの特殊文字が含まれていないか確認してください。)
FaceFusionを開き、バッチモードを選択します。
ソース・ファイルのここに、フェイス・スワップ画像のパスを記入する。
Windowsのパスの例:D: \AIDUDU FACEFUSION
MACパスの例:/Users/ccua/Downloads/Dom-Lab/face/test
画像形式を選び、jpgならjpg、pngならpngを選ぶ用意がある(形式には大文字小文字の違いがあることに注意!jpgはjpgと同じではない!)。
デスティネーションファイルには、ビデオ/ピクチャを変更したいパスを入力します。
Windowsのパスの例:D: \AIDUDU FACEFUSION
MACパスの例:/Users/ccua/Downloads/Dom-Lab/face/target
ターゲットファイル形式を選択し、フォルダ内のファイル形式と同じ形式を維持します。(フォーマットには大文字と小文字の違いがあることに注意してください!MP4はmp4と同じではありません!!)
上記のパラメーターがすべて設定されていることを確認し、Startをクリックする。バッチがバックグラウンドで実行を開始します。進行状況はランチャーで確認する必要があります。
経過を見る。
生成された結果は、実行後に出力ディレクトリに表示される。
ディープファシリーブのモデル使用
実行モードはここで選択します。ディープファックライブ
.キャンセル顔移植
オプション
底が表示されますディープフェイス移植モデル
オプション
ここにはデフォルトでたくさんのスターモデルがいて、そのすべてがトレーニング済みだ。
例えばelon_musk_224
イーロン・マスクだ。エミリア_クラーク_244
エミリア・クラーク(『ドラゴン・マム』)のだ。
そのあと対象文書
変更したい画像/動画をアップロードすると、プレビューに対応する効果が表示されます。
しかし実際には、変化の表情が非常に "ムスッとしている "ことがある。これはディープファックライブ
モデルが関連しフェイシャル・エンハンスメント
歌で応えるフレーム強化
生成された結果には無効。
ビデオの効果
銘記する
モデルのサイズが比較的大きい(ほぼ100Gほど)ので、統合パックにはイペロフ
冒頭のマスク・モデル。他のモデルが必要な場合は、このアドレスからダウンロードできます。
https://huggingface.co/facefusion
ダウンロードしたモデルは.assetsmodels サフィックス
例えばフェイスフュージョン/ディープファシリーヴ・モデルズ・エデル
この中のモデルは、以下にダウンロードされる。assetsmodels
真ん中だ。
カスタムモデル
訓練された自分の使い方ディープファックライブ
モデル?
トレーニングについてディープファックライブ
スペースの都合上、ここでは詳しく説明しないので、各自で検索して学んでほしい。
プロジェクトのルート・ディレクトリassetsmodels
を作成する。カスタム
ファイル
自分の学習済みモデル(.dfmファイル)を.assetsmodels
カタログ
でFaceFusionを再起動する。ディープフェイス移植モデル
オプションは下に引っ張られ、入れられたカスタム・モデル・ファイルを見ることができる。
一般的な問題
- Q: バッチモードではどの程度の設定が必要ですか?通常モードとの違いは何ですか?
- A: 違いはありません!一方は個別に実行され、一方はバッチキューで実行されます!より大きなハードドライブを準備することができます(ビデオフレームをスライスする必要性の実行、あなたがビデオを準備する時間が長ければ長いほど、より多くのフレームがスライスされ、より多くのハードドライブを占有します!)
- Q: バッチモードとジョブワークフローの違い
- A: バッチモードはジョブワークフローに基づいており、ジョブワークフローの自由度が高く、難しいスケジュールを組むことができます!バッチモードはシンプルで、白人に適しています!
- Q: バッチ実行中に他の操作を行うことはできますか?
- A: 顔の交換やプレビューのために通常モードに切り替えないでください!
- Q: プログラムを途中でシャットダウンしても問題ないですか?
- A: フェイススワップを実行中にプログラムを終了すると、現在のビデオのキャッシュフレームファイルがローカルのハードドライブに残ってしまいます。解決策は、統合パッケージのルートディレクトリにあるファイルを削除することです。
\VideoCache
フォルダの中身だけで十分だ。
- Q: バッチモードにはなぜ3つのモードしかないのですか?
- A: その他のモードも順次サポートされる予定で、現在も開発・テスト中です。
- Q: バッチモードで1つの画像に対して複数のビデオを変更することは可能ですか?
- A: 1対多でも多対多でも構いません。
一例を挙げよう:
写真を入れ、3つのビデオを入れる。最後に、この写真に合わせて顔を変える3つの動画を生成します。
2枚の写真を入れ、ビデオを入れる。最後に、この写真に応じて顔を変更する2つのビデオを生成します。
枚の写真を入れ、3本のビデオを入れる。最後に、この写真に合わせて顔を変える9つのビデオが生成されます。
構成要件
勝利
Windows Nカードには6Gのビデオメモリが必要
統合パッケージにはcuda環境が付属しており、追加のcudaをインストールする必要はありません。
10シリーズグラフィックスカードユーザーの皆様へ 👇🏻👇🏻
統合パッケージがクダ関連のエラーで実行されている場合、実行メソッドをキャンセルする必要があります。クーダ
オプションを選択する。CPU
.
MAC
MAC アップルシリコンM1/M2/M3/M4チップ
8G以上のRAMを推奨