FaceFusion 3.1.x, Новая система пакетной обработки, Обновление модели, NSFW, Рекомендуемые обновления!

FaceFusion Обновлено до версии 3.1.1. В этом обновлении добавлена функция пакетной обработки, модель смены лиц и новый интерфейс пользовательского интерфейса, на этот раз пакетная обработка отличается от предыдущей версии формой рабочего процесса, операция более удобна и проста.

В этой статье используется FaceFusion для объяснения определенного клиента-обертки, чтобы получить больше клиентов-оберток, пожалуйста, перейдите:FaceFusion: инструмент для улучшения видеозаписи с заменой лиц | Voice Sync Video Mouth Moves Посмотрите конец статьи.

Обновления

новая функция

• пройти (законопроект, проверку и т.д.) batch-run Команда для введения пакетной функции
• Добавьте настраиваемый маскировщик и анализатор лиц
• Обновление пользовательского интерфейса для Gradio версии 5
• Добавьте возможность выбора устройства веб-камеры в режиме обмена лицами в реальном времени

Новые модели

• повышать осведомленность о DeepFaceLive Поддержка модели
• дополнительно hififace_256 модель для пересадки лица
• Обновленная модель улучшения кадра

Оптимизация и устранение проблем

• Оптимизация процессоров возрастной модификации для уменьшения эффекта ореола
• подниматься --temp-path параметр для изменения пути к временному ресурсу
• Добавьте видеокодер h264_qsv ответить пением hevc_qsv
• Удалить устаревшие --skip-download параметры
• Оптимизация проблем при закрытии потоков веб-камеры
• обязательное использование libvpx-vp9 кодеки webm иметь дело с
• Устранение непоследовательных обновлений предварительного просмотра
• Исправление проблемы с длиной видео при восстановлении звука
• Устранение проблем с OpenVINO
• Добавьте индикатор выполнения для извлечения и объединения видео

Дополнительные обновления

В версию 3.1.1 внесены дополнительные оптимизации и улучшения.

• Встроенная система пакетной обработки, теперь с возможностью переключения между普通模式ответить пением批量模式Два вида.
• Пакетный режим поддерживает пакетное изменение изображений и видео.

пакетный режим

Пакетный режим - это экспериментальная функция, пожалуйста, оставляйте отзывы, если вы столкнулись с ошибками! 📢

Перед использованием пакетного режима необходимо подготовить две папки 📂.

Один для хранения фотографий лиц. (Разрешение изображения не обязательно должно быть одинаковым, обратите внимание на то, что форматирование должно быть одинаковым!)

Один - для размещения изображений/видео, которые нужно изменить. (Картинки и видео - это прекрасно! Я поместил видео сюда)

(！！！！ Убедитесь, что в пути к файлу или в его имени нет специальных символов, например, китайских ！！！！)

(！！！！ Убедитесь, что в пути к файлу или в его имени нет специальных символов, например, китайских ！！！！)

(！！！！ Убедитесь, что в пути к файлу или в его имени нет специальных символов, например, китайских ！！！！)

Откройте FaceFusion и выберите Пакетный режим.

Заполните путь к изображению смены лиц здесь, в исходном файле

Пример пути для Windows:D:\AI\DUDU\facefusion\test

Пример пути MAC:/Users/ccua/Downloads/Dom-Lab/face/test

Выберите формат изображения, вы можете выбрать jpg, если jpg, png, если png. (Обратите внимание, что формат имеет разницу в регистре! JPG - это не то же самое, что jpg!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!).

В поле "Файл назначения" укажите путь, по которому вы хотите изменить видео/картинку.

Пример пути для Windows:D:\AI\DUDU\facefusion\target

Пример пути MAC:/Users/ccua/Downloads/Dom-Lab/face/target

Выберите формат целевого файла, сохраните тот же формат, что и формат файла в папке. (Обратите внимание, что формат имеет разницу в регистре! MP4 - это не то же самое, что mp4!!!)

Убедитесь, что все указанные выше параметры установлены, и нажмите кнопку Start. Пакет начнет выполняться в фоновом режиме. Прогресс можно просмотреть в программе запуска.

Просмотр прогресса.

Сгенерированные результаты после выполнения просматриваются в каталоге вывода.

использование модели deepfacelive

Здесь выбирается режим выполненияdeepfacelive. Отмена换脸处理Варианты.

Внизу появится深度换脸模型опции (как в настройках компьютерного программного обеспечения)

По умолчанию здесь много звездных моделей, все они уже обучены.

напримерelon_musk_224Это Элон Маск.emilia_clarke_244Это Эмилия Кларк (Мама-дракон).

после этого目标文件Загрузите изображение/видео, которое вы хотите изменить, и вы увидите, что в превью появился соответствующий эффект.

Однако на практике бывают случаи, когда лицо изменения оказывается очень "кашеобразным". Это связано с выборомdeepfaceliveмодель актуальна, а галочка脸部增强ответить пением帧增强Не действует для сгенерированных результатов.

Эффективность видео

принимать к сведению

Из-за относительно большого размера моделей (почти 100 Гб или около того), в интеграционном пакете у меня есть толькоiperov/Модель Musk в самом начале. Если вам нужны другие модели, вы можете скачать их по этому адресу.

https://huggingface.co/facefusion

Загруженные модели сохраняются в.assets\models\后缀Напримерfacefusion/deepfacelive-models-edelМодели в этом загружаются в.assets\models\edelСредний.

Пользовательские модели

Как использовать свой собственный тренингdeepfaceliveМодели?

Об обученииdeepfaceliveИз-за нехватки места мы не будем подробно останавливаться на этом, так что вы можете искать и изучать самостоятельно.

В корневом каталоге проекта.assets\models\Создайтеcustomфайл (бумажный)

Поместите собственную обученную модель (файл .dfm) в папку.assets\models\customкаталог

Перезапустите FaceFusion в深度换脸模型Опции спускаются вниз, чтобы увидеть файлы пользовательских моделей, которые были добавлены.

общие проблемы

• Вопрос: Сколько настроек требуется для пакетного режима? Чем он отличается от обычного режима?
• О: Никакой разницы! Одна выполняется индивидуально, другая - в пакетной очереди! Подготовить большой жесткий диск можно (при выполнении необходимо нарезать кадры видео, чем дольше вы готовите видео, тем больше кадров будет нарезано, занимая больше жесткого диска!)

• Вопрос: Разница между пакетным режимом и рабочим процессом
• A: Пакетный режим основан на рабочем процессе, свобода рабочего процесса может быть отправлена высокой и сложной! Пакетный режим прост и больше подходит для белых!

• В: Могу ли я выполнять другие операции во время выполнения пакета?
• О: Не переключайтесь в обычный режим для обмена лицами или предварительного просмотра!

• В: Не страшно ли выключать программу на полпути выполнения?
• Ответ: Закрытие программы при выполнении замены лиц приведет к тому, что файл кэш-кадров текущего видео останется на локальном жестком диске. Решение - удалить файлы в корневом каталоге пакета интеграции.\Cache\VideoCacheСодержимого папки достаточно.

• Вопрос: Почему в пакетном режиме есть только три режима
• О: Другие режимы будут поддерживаться в дальнейшем и пока находятся в стадии разработки и тестирования.

• В: Можно ли изменить одно изображение для нескольких видео в пакетном режиме?
• О: Это может быть как один ко многим, так и многие ко многим.

Пример:

Введите фотографию и добавьте три видео. В итоге он сгенерирует три видео, чтобы изменить лицо в соответствии с этой картинкой.

Вставьте две фотографии и вставьте видео. В итоге он сгенерирует два видео, чтобы изменить лицо в соответствии с этой фотографией.

Вставьте три картинки и вставьте три видео. В конце он сгенерирует девять видеороликов, чтобы изменить лицо в соответствии с этой картинкой.

Требования к конфигурации

WIN

Для карты Windows N требуется 6 Гб видеопамяти

Интеграционный пакет поставляется с окружением cuda, нет необходимости устанавливать дополнительный cuda

Вниманию пользователей видеокарт 10-й серии 👇🏻👇🏻

Если при выполнении интеграционного пакета возникла ошибка, связанная с cuda, метод выполнения следует отменить.cudaвыберитеcpu.

MAC

Чип MAC Apple Silicon M1/M2/M3/M4

Рекомендуется 8 Гб оперативной памяти или больше