PixVerse V4 переиздается с улучшенной реалистичностью видео, звуком и скоростью!

В начале 2025 года в видеопространстве ИИ быстрее, чем ожидалось, разворачивается новая технологическая гонка. Вскоре после выхода OmniHuman-1 компания PixVerse выпустила новую модель, официально объявив, что PixVerse Версия V4 уже на подходе. Как наблюдатель в области технологий искусственного интеллекта, я имел честь получить квалификацию PixVerse V4 пять дней назад. После всестороннего тестирования версия V4 продемонстрировала заметный прогресс в создании видео с текстом, видео с изображением и новых функций, а возможности базовой модели совершили качественный скачок.

Значительно улучшена генерация видеороликов из текста в фильм

Улучшенные возможности PixVerse V4 по генерации текста в видео впечатляют. Ниже приведены несколько примеров, протестированных автором, чтобы наглядно продемонстрировать эффект генерации новой модели:

Создание текста Видеопример 1: Фильм о катастрофе торнадо

В ролях. Торнадо, движение на высокой скорости, напряжение и волнение, винтажный оранжевый спортивный автомобиль 80-х годов на городской дороге, движущийся и дрифтующий на высокой скорости. Атмосфера фильма катастроф.

Создание текста Видеопример 2: Мисти Олень

В ролях. Бесплотный олень с телом из серебристого тумана, тускло мерцающего в лунном свете. Его рога украшены плавающими шарами света, а движется он бесшумно, оставляя за собой мерцающий след из тумана.

Видеопример 3 по созданию текста: скачок искривления пространства-времени

В ролях. Последовательность скачков с искривлением пространства-времени: уравнения поля Эйнштейна применяются для моделирования искривления пространства-времени, а камера перемещается вдоль интерфейса обзора черной дыры Керра, чтобы активировать визуальный эффект замедления времени. В точке скачка устанавливается пространственно-временная сингулярность, а для расчета искажения светового конуса (коэффициент искажения 145%) используется алгоритм решения Пенроуза.

Особенно хорошо в PixVerse V4 реализована поддержка научно-фантастических и хардкорных физических эффектов с потрясающими результатами генерации. Чтобы лучше представить себе возможности PixVerse V4 по улучшению научно-фантастических и хардкорных физических эффектов, давайте рассмотрим конкретный пример. Вот сценарий для генерации этого видео:

В ролях. Гиперсферическая линза Dimensional Leap Lens: 11-мерная пространственная проекция движения линзы с использованием алгоритма траекторий римановых многообразий для активации визуальной системы раннего предупреждения о топологических дефектах во время коллапса размеров.

В случае с прыжками в гиперсферических измерениях текст появляется в видео, но тесты показывают, что управляемость генерации текста в текущей версии оставляет желать лучшего; текст может быть сгенерирован в видео, сгенерированных текстом, но генерация текста пока не поддерживается в видео, сгенерированных изображениями, и поддерживается только английский ввод.

Скорость генерации значительно возросла, и модели V4 прочно заняли место в эшелоне T1.

Помимо значительного улучшения результатов генерации, еще одной впечатляющей особенностью PixVerse V4 является резкое увеличение скорости генерации. В режиме Extreme Mode видео можно сгенерировать примерно за 5 секунд, что значительно повышает эффективность. В целом, PixVerse V4 - это значительное улучшение по сравнению с V3.5, и новая модель V4, несомненно, является первым эшелоном в современной сфере AI-видео.

Оглядываясь на историю PixVerse, можно заметить, что темпы итерации технологии были поразительными: версия 1 вышла 15 января 2024 года, версия 2 - 24 июля, версия 2.5 - 22 августа, версия 3 - 29 октября, версия 3.5 - 29 декабря, а последняя версия v4 была выпущена 24 февраля. Стратегия PixVerse, заключающаяся в том, чтобы придерживаться возможности быстрого итеративного моделирования, является правильной. Несмотря на то, что PixVerse вызвала большой резонанс в социальных сетях благодаря функции шаблонов эффектов и даже возглавила чарты App Store в некоторых странах Ближнего Востока, PixVerse не замедлила итерацию моделей, а наоборот, ускорила их эволюцию.

с (какого-то времени) DeepSeek После того как ИИ привлек всеобщее внимание, в области ИИ сложилось общее мнение, что "единственное применение ИИ - это сам интеллект". Модельные возможности - краеугольный камень развития технологий ИИ. Оптимизация функций и опыта на уровне приложений должна снизить порог использования технологий ИИ для пользователей, как и коэффициент возможности моделирования. Например, если возможности модели составляют 10 баллов, то интересная функция шаблона спецэффектов подобна коэффициенту 10, а конечная производительность приложения может достигать 100 баллов. С другой стороны, если возможности модели составляют всего 1 балл, даже если приложение более мощное, конечный эффект будет неудовлетворительным.

С другой стороны, компания Runway, работающая в сфере видео с искусственным интеллектом, заслуживает признания за свои инновационные функции, такие как Act-One и Super Lens Motion. Однако за последние шесть месяцев, похоже, не произошло ни одного значительного итеративного обновления моделей Runway. Инсайдеры отрасли прекрасно понимают, что значит шесть месяцев в контексте быстро меняющихся технологий ИИ. PixVerse нашла баланс между итерациями технологии и инновациями в функциях: сохраняя быстрое итерационное обновление модели, она продолжает совершенствовать ее базовые возможности, что делает другие инновации в функциях более ценными.

Обновлены звуковые функции и шаблоны эффектов

В PixVerse V4 появилась новая интересная функция: звук.

Внимательные читатели могли заметить, что большинство примеров, приведенных в предыдущем разделе, выполнены в формате видео, а не GIF. Это связано с тем, что видео, сгенерированные PixVerse V4, уже содержат естественные и плавные звуковые эффекты. (Текстовые видеопримеры в предыдущем разделе не представлены в видеоформате из-за ограничения платформы на количество видео в одном посте). Пользователям просто нужно включить функцию "Звук", чтобы автоматически подобрать звуковые эффекты к создаваемым видео.

Кроме того, в PixVerse V4 добавлены такие новые функции, как Speech (синхронизация губ) и Restyle (перенос стиля), которые вы можете испытать самостоятельно. Как уже говорилось выше, сильная базовая модель является необходимым условием для эффективного функционирования каждой функции.

И, наконец, остановимся на главной особенности PixVerse - шаблонах FX. Будучи пионером в области FX-шаблонов, PixVerse поднял качество FX-шаблонов на новый уровень благодаря возможностям моделирования в версии V4.

Шаблоны эффектов PixVerse получили высокую оценку, а в версии V4 текстуры и движения получаемого видео были еще раз улучшены.

Одним словом, сильные возможности модели являются краеугольным камнем развития видеотехнологий AI. Только постоянно совершенствуя интеллект самой модели, можно по-настоящему реализовать потенциал прикладных функций, таких как спецэффекты, звуковые эффекты, миграция стилей и т. д., и подарить пользователям 혁신적인 опыт. Можно предположить, что конкуренция в области видео с искусственным интеллектом станет еще более острой, и технологические инновации, несомненно, являются ключевым фактором для таких производителей, как PixVerse, чтобы сохранить свои лидирующие позиции.