HunyuanVideoGP: гибридная модель генерации видео с поддержкой работы на GPU низкого уровня

Общее введение

HunyuanVideoGP - это крупномасштабная модель генерации видео, разработанная DeepBeepMeep и предназначенная для пользователей GPU низкого класса. Модель представляет собой улучшенную версию оригинальной модели Hunyuan Video со значительно сниженными требованиями к памяти и графической памяти, что позволяет ей плавно работать на GPU объемом от 12 до 24 ГБ. HunyuanVideoGP значительно повышает скорость генерации за счет компиляции и методов быстрой загрузки/выгрузки, а также предоставляет множество профилей для различных конфигураций оборудования. Модель также включает в себя несколько предварительно обученных лоров, поддерживает множественные сигналы и множественную генерацию, а также позволяет пользователям легко переключаться между различными моделями и квантованными/неквантованными моделями. Вы также можете найти модель в pinokio Развертывание одним щелчком мыши.

Список функций

• Поддержка работы с GPU низкого класса (видеопамять от 12 до 24 ГБ)
• Значительно снижены требования к памяти и графической памяти
• Технология быстрой загрузки/выгрузки
• Несколько профилей для различных конфигураций оборудования
• Поддержка нескольких подсказок и нескольких генераций
• Интеграция нескольких предварительно обученных Loras
• Улучшенный интерфейс Gradio с индикатором выполнения и дополнительными опциями
• Автоматическая загрузка необходимых файлов моделей
• Поддержка компиляции в Linux и WSL

Использование помощи

Процесс установки

1. Подготовьте среду Conda:

   conda env create -f environment.yml

2. Активируйте окружающую среду:

   conda activate HunyuanVideo

3. Установите зависимости pip:

   python -m pip install -r requirements.txt

4. Дополнительно: установите поддержку Flash attention (легко установить для Linux, сложнее для Windows):

   # 具体安装步骤请参考官方文档

Процесс использования

1. Запустите сервер Gradio:

   bash launch.sh

2. Откройте браузер и перейдите по адресу локального сервера (обычно http://localhost:7860), чтобы получить доступ к интерфейсу Gradio.
3. В интерфейсе Gradio выберите нужный профиль и модель, введите слово подсказки и нажмите кнопку Generate.
4. Созданное видео отображается в интерфейсе и может быть загружено или отредактировано пользователем.

Основные функции

• Выбор профиля: Выберите соответствующий профиль в зависимости от конфигурации оборудования, чтобы оптимизировать скорость и качество генерации.
• Введите подсказку: Введите описательный текст в поле подсказки, и модель сгенерирует соответствующий видеоконтент в соответствии с подсказкой.
• Многочисленные поколения: Поддерживает создание нескольких видеороликов за один запрос, позволяя пользователю выбрать наиболее удовлетворительный результат.
• Переключение моделей: Поддержка переключения между различными моделями Hunyuan и Fast Hunyuan для удовлетворения различных потребностей.
• Количественное/неколичественное моделирование: Пользователи могут выбрать количественные или неколичественные модели, чтобы сбалансировать скорость и качество генерации.