Metaverse AI: версия с открытым исходным кодом инструмента для клонирования цифровых людей и создания коротких видеороликов

Общее введение

Metaverse AI (версия с открытым исходным кодом) - это проект, размещенный на GitHub и разработанный командой libn-net. Он может клонировать цифровые человеческие изображения и голоса с помощью технологии искусственного интеллекта для создания коротких видеороликов, а также поддерживает дубляж и субтитры. Инструмент доступен в виде инсталлятора для Windows, веб-версии, версии H5 и апплета, что делает его подходящим для индивидуальных проектов или небольших команд. Разработчик - 35-летний безработный программист, из-за того, что в самостоятельное создание коротких видео команды вкладывали миллионы долларов, но отдачи было мало, обратился к разработке этого проекта с открытым исходным кодом вместе с друзьями, направленного на снижение затрат на создание маркетинга. В настоящее время доступны основные функции, живые и другие части функций все еще находятся в разработке.

Список функций

• Клонирование изображений: загружайте фотографии или видео и обучайтесь, чтобы создать индивидуального цифрового человека с искусственным интеллектом.
• Клонирование звука: записывайте или загружайте аудио, чтобы создать эксклюзивный звук ИИ.
• Генерация видео: поддержка настраиваемых копий, закадрового голоса, фоновой музыки и субтитров для экспорта коротких видеороликов.
• Выпуск коротких видео: можно напрямую выпустить на Jittery, Shutterbug и других платформах.
• AI-дубляж: регулировка скорости и громкости речи, поддержка частного или публичного озвучивания.
• AI Subtitles: настройка шрифтов, размеров и цветов для автоматического создания субтитров.
• Функция прямой трансляции (в стадии разработки): поддержка текста в реальном времени и автоматическая трансляция вверх и вниз.
• Графический контент (в разработке): генерирует маркетинговые статьи или карикатуры.

Использование помощи

MetaWorld AI (версия с открытым исходным кодом) - это мощный инструмент. Чтобы использовать его, необходимо сначала установить или получить доступ к соответствующей версии. Ниже приведены подробные шаги и инструкции, которые помогут вам быстро начать работу.

Процесс установки

Существует несколько версий MetaWorld AI (Open Source Edition), здесь приведена версия для установки на Windows в качестве примера, иллюстрирующего шаги по установке.

1. Посетите страницу GitHub
   Откройте браузер и введите https://github.com/libn-net/marketing_creator_pro_max_pc, чтобы попасть на домашнюю страницу открытой версии MetaWorld AI. На странице есть код и основные инструкции.
2. Загрузить исходный код
   Нажмите на зеленый цвет в правом верхнем углу Code нажмите кнопку и выберите "Загрузить ZIP". После завершения загрузки распакуйте его в локальную папку, например на рабочий стол.
3. Проверка среды зависимостей
   Откройте распакованную папку, чтобы проверить, не README.md или инструкции по установке. Поскольку это инструмент искусственного интеллекта, для его работы может потребоваться среда Python:
   • Если у вас нет Python, зайдите на сайт https://www.python.org и скачайте последнюю версию (рекомендуется 3.9 или выше), а при установке поставьте галочку в поле "Добавить в PATH".
   • Откройте командную строку (пользователи Windows нажмите Win + R и введите cmd), перейдите в папку распаковки:

     cd Desktop\marketing_creator_pro_max_pc-main
     

   • Если есть requirements.txtВыполните следующую команду, чтобы установить зависимость:

     pip install -r requirements.txt
     

4. программа бега
   Найдите файл запуска (например. main.py), введите его в командной строке:

python main.py

Если запуск прошел успешно, появится интерфейс оператора или подсказка. В случае неудачи проверьте, завершена ли зависимость.

5. Установка других версий

• Веб-версия: Доступ к ссылке, предоставленной проектом (если таковой имеется), без локальной установки.
• H5/Small App Version: Посетите сайт https://github.com/libn-net/marketing_creator_pro_max_uni и следуйте инструкциям, чтобы загрузить и запустить его.
• Внутренний API: Для индивидуальной разработки загрузите https://github.com/libn-net/marketing_creator_pro_max_backend.

Основные функции

Вот как использовать основные возможности MetaWorld AI (версия с открытым исходным кодом).

1. клонирование изображений

• процедура::
  Запустив программу, войдите в модуль "Клонирование изображений". Нажмите "Загрузить" и выберите четкую фотографию или видеозапись вашего лица. Нажмите "Обучить" и подождите несколько минут, чтобы сгенерировать цифровое изображение человека с искусственным интеллектом. После этого вы можете просмотреть его в "Списке".
• точка::
  Фотографии должны быть лицевыми и без помех, а время обучения зависит от производительности компьютера и обычно составляет от нескольких минут до получаса.

2. Звуковое клонирование

• процедура::
  Откройте модуль "Звуковой клон". Нажмите "Запись", чтобы записать 1-3 минуты звука, или загрузите существующий аудиофайл. Нажмите "Обучить", чтобы сгенерировать звуковой клон. По окончании выберите его из "Списка".
• точка::
  Записи должны быть без посторонних шумов и поддерживать формат MP3 или WAV.

3. создание видео

• процедура::
  Перейдите к модулю "Генерация видео":
• копирайтерНажмите "Создать копию", введите ключевые слова (например, "выпуск нового продукта") или ссылки Jitterbug и нажмите "Имитация", чтобы сгенерировать текст.
• персонаж (в пьесе, романе и т.д.): Выберите изображение из списка "Private AI Digital Person" или "Public AI Digital Person".
• дубляж (кинематограф): Выберите клонированный голос, отрегулируйте скорость и громкость речи и создайте закадровый голос.
• фоновая музыка (BGM): Загрузите аудио или используйте общедоступные материалы и отрегулируйте громкость.
• титры: Включите "Генерация субтитров" и выберите шрифт, размер и цвет.
• вывести: Установите разрешение (например, 1080p) и формат (например, MP4) и нажмите "Создать видео".
• точка::
  Копию можно изменить вручную. Перед экспортом можно выполнить предварительный просмотр, чтобы подтвердить эффект.

4. Короткие видеовыпуски

• процедура::
  После создания видео нажмите "Опубликовать" и выберите платформу (например, Shutterstock). Введите информацию о своем аккаунте, загрузите и опубликуйте.
• точка::
  Вам необходимо предварительно войти в свой аккаунт на платформе, для чего может потребоваться проверочный код.

предостережение

• Функции прямой трансляции и графики находятся на низком уровне разработки (20% и 10%) и на данный момент недоступны.
• В проектах с открытым исходным кодом могут быть ошибки, и вы можете сообщить о них на странице GitHub "Issues".
• Разработчик уделяет первоочередное внимание ответам на вопросы ветеранов, безработных и мам, другие пользователи могут отвечать немного медленнее.

сценарий применения

1. Личный побочный заработок Создание коротких видеороликов
   Пользователи клонируют свои собственные изображения и голоса для создания рекламных видеороликов и размещают их на Jitterbug, чтобы получить доход от трафика.
2. Маркетинг для малого бизнеса
   Владельцы магазинов используют искусственный интеллект Yuanworld для создания рекламных видеороликов, демонстрирующих характеристики товаров и привлекающих покупателей.
3. Производство образовательного контента
   Учителя используют этот инструмент для клонирования изображений, создания коротких обучающих видеороликов и размещения их в видеономере, чтобы поделиться своими уроками.

QA

1. Является ли MetaWorld AI бесплатным?
   Да, версия с открытым исходным кодом полностью бесплатна, и пользователи могут загружать код для собственного использования или модификации.
2. Требуется знание программирования?
   Не обязательно. Обычные пользователи могут запускать ее напрямую, если же вам нужно установить или настроить код, то лучше разбираться в программировании.
3. Поддерживает ли он китайский контент?
   Поддержка. Интерфейс и генерируемый контент доступны на китайском языке, что идеально подходит для китайских пользователей.