Производство фильмов и телепередач с использованием искусственного интеллекта: как Poly Dimension "Saiwa" Big Model меняет индустрию короткометражных драматических фильмов?

Технологии искусственного интеллекта с поразительной скоростью проникают во все отрасли, и кино- и телепроизводство - не исключение. На этой волне интеграции технологий и искусства развитие ИИ открыло беспрецедентные возможности для перемен в кино- и телеиндустрии. Особенно в области производства короткометражных драматических фильмов, которые уже давно сталкиваются со многими проблемами, такими как высокая стоимость производства, длительные производственные циклы и творческие узкие места. Компания Joly Dimension, специализирующаяся на технологиях искусственного интеллекта для кино и телевидения, открывает совершенно новый мир для производства короткометражных драм с помощью самостоятельно разработанной модели "Saiwa". Начиная с маршрута производства 3D-фильмов и телепередач с использованием искусственного интеллекта и заканчивая рядом ключевых технологий, таких как создание искусственного интеллекта актеров, создание искусственного интеллекта исполнителей и искусственного интеллекта действий, модель "Saiwa" компании Juridic Dimension глубоко расширила возможности каждого аспекта производства короткометражных драм, сделав его более эффективным, изысканным и полным творчества.

Метафизика: от игры на эрху: первый взгляд на промышленное применение искусственного интеллекта в скетч-театре

14 февраля на платформе Red Fruit появилась первая короткометражная драма с искусственным интеллектом промышленного уровня "Метафизическая иллюзия: начиная с игры на эрху". Эта короткометражная драма была создана совместными усилиями Poly Dimension, Impossible Technology и Zhongguancun Science Fiction Industry Innovation Centre. Используя код как иголку с ниткой, эта техническая команда вышила произведение, полное технологической эстетики в области цифрового кино и телевидения, что является смелой и инновационной попыткой. Выход этой драмы не только знаменует собой прорывной прогресс технологии ИИ в кино- и телепроизводстве, но и означает солидный шаг вперед в применении технологии ИИ на промышленном уровне.

В настоящее время технология ИИ широко используется в автоматизированном производстве, интеллектуальном обслуживании клиентов, распознавании голоса, создании изображений и многих других областях, практически повсеместно. Однако в кино- и телеиндустрии, несмотря на наличие некоторых экспериментальных проектов, основанных на технологии ИИ, очень мало случаев, которые действительно достигли промышленного уровня применения. Большинство приложений ИИ по-прежнему остаются на уровне развлечений на веб-странице, таких как генерация текста, selfie beauty, виртуальное одевание и т. д. Хотя это удобно и интересно, все еще существует большой разрыв с реальными производственными потребностями.

Однако с выпуском "Saiwa", мультимодальной 3D-видеомодели, в кино- и телепроизводстве AI наконец-то наступила новая эра применения в промышленных масштабах. Saiwa" не только обладает мощными возможностями генерации изображений, но и может эффективно управлять процессом создания видеоконтента, помогая профессиональным командам кино- и телепроизводителей создавать контент более эффективно и качественно. По сравнению с традиционным режимом производства фильмов и телепередач, применение технологии искусственного интеллекта делает процесс создания более гибким и быстрым, а также значительно повышает эффективность работы команды. Короткометражная драма "Метафизическая фантазия: начиная с игры на эрху" является успешным примером применения технологии искусственного интеллекта для преодоления узких мест традиционного кино- и телепроизводства.

Адаптированная по популярному интернет-роману, драма основана на теме "боевых искусств" и рассказывает историю слепого юноши, который благодаря своему изысканному мастерству игры на эрху меняет свою судьбу и попадает в мир таинственного и загадочного цзяньху. Сюжет плотный и стремительный, полный приключений и фантазии.

В эпизоде умело сочетаются сильная атмосфера боевых искусств и мир фэнтези, что придает сюжету неповторимое очарование. Технология искусственного интеллекта демонстрирует огромный творческий потенциал в процессе производства: от моделирования персонажей, дизайна сцен до хореографии действий - все они могут быть эффективно сгенерированы за очень короткий промежуток времени и представить потрясающий визуальный эффект. Особенно при создании спецэффектов и экшн-сцен, ИИ делает эти сцены еще более грандиозными и шокирующими, даря зрителям новые впечатления от просмотра.

Большие модели "Saiwa": преодоление границ создания ИИ

Основная бизнес-модель PolyVision заключается в расширении возможностей традиционной кино- и телеиндустрии на основе технологий искусственного интеллекта, особенно в производстве анимации. Основой технологической системы компании является большая модель "Saiba", которая интегрирована в "CyberDirector", полнопроцессную 3D-платформу для производства фильмов и телевизионных программ с использованием искусственного интеллекта, самостоятельно разработанную PolyVision. Платформа "CyberDirector" способна самостоятельно генерировать объекты в видео в структурированном 3D виде, обеспечивая их высокую согласованность, редактируемость и управляемость в различных кадрах и состояниях движения. Платформа также позволяет создавать реальные кино- и телепостановки на уровне "старого актера", а также поддерживает создание контента любой длины. С помощью этой инновационной платформы Polyvision надеется создать новую эру кино- и телепроизводства с использованием искусственного интеллекта, предоставив каждому возможность иметь собственную команду искусственного интеллекта и достичь цели - производить 10 минут высококачественного кино- и телеконтента в день.

Демо-изображение CyberDirector

"Одна из главных особенностей платформы CyberDirector заключается в том, что создателю не нужно физически участвовать в спектакле. Большая модель "Кибердиректора" ставит во главу угла основную потребность создателя - генерацию уникального объекта, то есть цифровой 3D-модели человека с привязками. Модель поддерживает мультимодальный ввод, включая случайную генерацию, текстовое описание, ссылки на изображения и другие методы, а также поддерживает мелкодисперсное редактирование.

Демо-изображение CyberDirector

Благодаря технологии генерации искусственного интеллекта Poly Dimension создает виртуальных актеров, которые могут играть и передавать эмоции. Эти ИИ-актеры не только очень реалистичны внешне, но и могут демонстрировать богатые эмоциональные изменения в соответствии с требованиями сценария. Ожидается, что в будущем, благодаря постоянному совершенствованию технологий, выразительные возможности ИИ-актеров будут сравнимы с реальными актерами. Внедрение ИИ-актеров эффективно решает проблемы нехватки актеров или жестких графиков, которые часто встречаются при производстве короткометражных драм. ИИ-актеры чрезвычайно гибки и могут быть "на связи" в любое время, чтобы исполнять роли разных стилей и эмоций, и даже могут поддерживать стабильный уровень актерского мастерства в условиях сложной сюжетной конструкции. Более того, ИИ-актеры не ограничены физическими условиями и способны "сниматься" в самых разных экстремальных условиях, будь то подъем в небо или погружение в морские глубины, ИИ легко справится с этим.

ИИ не только понимает эмоции и настройки персонажей в сценарии, но и автоматически генерирует действия, соответствующие личности персонажа, и оптимизирует эффект от исполнения с помощью алгоритмов. Это позволяет добиться качественной подачи боевых сцен, эмоциональных сцен и сложных экшн-конструкций в короткометражных драмах без живых актеров. Представьте, при поддержке технологии искусственного интеллекта сценка может легко представить высокоскоростное вращение боевой сцены, между тенью меча, изменениями позы персонажа, перемещениями и прыжками - все эти сложные действия искусственный интеллект выполняет одним махом. Благодаря точному захвату движения и детальной проработке действий, технология искусственного интеллекта не только делает картину более визуально привлекательной, но и значительно экономит производственные затраты и время при создании сценки.

Чжао Тяньци, основатель Poly Dimension, сказал, что в настоящее время стоимость производства короткометражных драматических фильмов составляет примерно от 500 000 до 1 миллиона юаней, что позволяет создать около 100 минут контента, а это значит, что стоимость одной минуты составляет примерно от 5 000 юаней до 10 000 юаней. Среди них стоимость 10 000 юаней за минуту короткометражной драмы уже является бутиком, в то время как 5 000 юаней за минуту - это стоимость нижней границы, ниже этого стандарта, качество контента будет трудно привлечь зрителей.

Чжао Тяньци отметил, что если нижний предел стоимости анимационных короткометражек не будет контролироваться на уровне 5 000 юаней за минуту, а достигнет 50 000 юаней за минуту, то вся индустрия столкнется с риском сокращения. Даже если сжать стоимость до предела, переместить производственную группу в город с очень низкой стоимостью рабочей силы и полностью пожертвовать прибылью, стоимость производства анимации вряд ли может быть ниже 15 000 юаней за минуту, что уже превысило верхний предел стоимости короткометражной драмы. Более того, даже если анимация стоит 15 000 долларов за минуту, качество ее производства часто не такое хорошее, как у короткометражной драмы живого действия за 5 000 долларов за минуту, а в некоторых аспектах она даже хуже.

Хотя доходы руководителя короткометражной драмы могут превышать миллионы и даже миллионы, но средний доход в индустрии составляет всего около 200 000 юаней, поэтому индустрия короткометражной драмы сталкивается с проблемой высокой стоимости и высокого риска. Для того чтобы снизить стоимость, большинство современных короткометражных драм относительно грубы, с меньшим количеством спецэффектов, отсутствием элементов анимации и единой формой общего содержания. Существующие методы производства кино и телевидения в основном двух видов: реальные съемки + небольшая часть виртуальных съемок + пост-продакшн; и чисто анимационное производство. На фоне стремительного развития технологии AIGC внедрение искусственного интеллекта стало основной тенденцией в кино- и телеиндустрии.

Компания PolyVision выбрала путь 3D, или, точнее, путь структурированной генерации 3D. В отличие от 2D-видеомоделей, PolyVision считает, что 3D-путь больше соответствует природе кино- и телепроизводства. С точки зрения работы камеры, освещения, согласованности и т.д., 3D-технология может быть эффективно решена без использования искусственного интеллекта. В отличие от этого, некоторые компании, производящие большие модели 2D-видео, утверждают, что их продукты могут реализовать управление камерой и предоставляют пользователям на выбор несколько методов управления камерой, но для этого требуется целенаправленное обучение. Под "3D", на которое делает упор Polyvision, подразумеваются не только трехмерные визуальные эффекты, но и, что более важно, "структурирование". Структурирование - это ключ к созданию управляемого, подвижного и редактируемого контента. Сочетание 3D и структурирования сохраняет преимущества 3D-технологии, такие как простота транспортировки зеркала, и в то же время позволяет независимо управлять, генерировать и комбинировать различные части модели. Такой подход позволяет разбить сложные задачи на более мелкие, одну за другой, избегая дилеммы неконтролируемой общей модели.

По мнению Чжао Тяньци, при обсуждении будущего кино и телевидения с искусственным интеллектом необходимо сначала уточнить определение понятия "кино и телевидение", чтобы оценить преимущества и недостатки 3D-пути, а также высокую и низкую стоимость. По его мнению, кино- и телепроизведения должны достичь того уровня производства, который общепризнан и любим публикой в рамках традиционного профессионального производственного процесса. Это и есть определение "кино и телевидения" как с точки зрения производственного процесса, так и с точки зрения конечного эффекта. С технической точки зрения кино и телевидение - это съемка и представление истории, происходящей в 3D-мире. Поэтому важно четко понимать определение "кино и телевидение", а также то, что кино и телевидение часто являются повествовательными, а не просто снятыми.

PolyVision выбрала путь 3D из-за его управляемости, что в большей степени соответствует природе кинопроизводства. Однако недостатком 3D-технологии является то, что все еще существуют определенные трудности в имитации эффекта живого действия, а также сложность в быстром создании быстро меняющихся визуальных эффектов. Поэтому бизнес-модель PolyVision основана на технологии визуального захвата AI для расширения возможностей традиционной кино- и телеиндустрии, особенно анимационного производства.

Чжао Тяньци также признает, что для небольших стартапов полагаться только на накопление отраслевых данных больше не является основной компетенцией. В настоящее время становится все проще и проще получить огромное количество бесплатных видео, изображений и текстовых данных. Он считает, что тенденция развития крупных моделей такова: "сильнейший всегда сильнее", и каждое улучшение параметров модели на порядок создает сокрушительное преимущество перед следующим порядком величины. Например, модель, инвестирующая миллиард долларов, превзойдет модель, инвестирующую 100 миллионов, а модель, инвестирующая 10 миллиардов, в свою очередь, превзойдет модель, инвестирующую миллиард. В конечном итоге на глобальном рынке может остаться лишь несколько главных игроков. Обучение мощной большой модели требует огромных инвестиций, которые могут стоить сотни миллиардов, а компаний с рыночной капитализацией, превышающей сотни миллиардов, всего несколько. Если стоимость обучения большой модели будет столь высока и в итоге на рынке останется лишь несколько победителей, то конкурентная среда будет совсем иной, чем в прошлом. Раньше компании могли использовать возможности в разных сегментах, идти разными технологическими путями, фокусироваться на разных направлениях применения, принимать разные бизнес-модели или предлагать дифференцированные услуги. Но в эпоху "больших моделей" такие возможности резко сокращаются.

Поэтому с точки зрения накопления данных мультимодальная крупномасштабная модель 3D-видео "Saiwa" может стать для PolyVision ключевой возможностью для прорыва в области AI-кино и телевидения. Поскольку в области 3D существует относительная нехватка высококачественных крупномасштабных наборов данных, PolyVision после длительного периода накопления данных уже получила определенное преимущество, которое составляет ее важный "ров" и труднодостижимо для других конкурентов.

В настоящее время платформа "CyberDirector" и технология крупной модели "Cywa" получили ряд правительственных наград, включая проект ускорения развития быстрорастущих предприятий в рамках "Нескольких мер по поддержке развития инноваций и развития Интернета 3.0 в районе Чаоян", проект поддержки отличных вертикальных моделей в рамках "Нескольких мер по содействию развитию инноваций и применения общего искусственного интеллекта в районе Чаоян" и др. Несколько мер по содействию развитию инноваций и применения общего искусственного интеллекта в районе Чаоян" для поддержки проектов отличных вертикальных моделей и так далее.

PolyVision заключила сотрудничество по производству короткометражных драм с рядом головных платформ и выпустит 20 короткометражных драм на базе ИИ в первой партии, а в будущем планирует увеличить производственные мощности до 10 или даже 1000 драм в месяц. Компания активно формирует команду элиты ИИ-кино и ТВ-производства и планирует сотрудничать с правительством, чтобы создать базу для производства ИИ-короткометражных драм, обучить студентов использованию платформы CyberDirector для производства ИИ-короткометражных драм и вырастить новое поколение ИИ-создателей кино и ТВ. Весь производственный процесс будет строго контролироваться PolyVision. В будущем Juridic Dimension планирует делиться доходами с правительством, университетами и студентами на основе контрактной модели, чтобы совместно способствовать развитию индустрии короткометражной драмы на основе искусственного интеллекта.

База короткометражных драматических фильмов AI: двухколесный привод для коммерциализации и индустриализации

Будучи пионером в индустрии короткометражных драм на основе искусственного интеллекта, компания Joly Dimension ставит своей целью не только технические исследования и разработки, но и создание профессиональной базы по производству короткометражных драм на основе искусственного интеллекта для всестороннего содействия коммерциализации и индустриализации производства короткометражных драм. Расцвет короткометражных драм с искусственным интеллектом не случаен, а основан на глубоком понимании PolyVision тенденций развития отрасли и перспективном планировании. Благодаря техническим возможностям модели "Saiwa" компания Juridic Dimension успешно продвинула создание короткометражных драматических фильмов на основе искусственного интеллекта на новый уровень и в будущем будет способствовать развитию отрасли в широких масштабах. При поддержке Пекинской муниципальной научно-технической комиссии и Административного комитета Чжунгуаньцунь Polyvision объединила усилия с Инновационным центром научно-фантастической индустрии Чжунгуаньцунь, чтобы создать в Пекине демонстрационный центр по производству короткометражных AI-драм. Являясь важной платформой для развития индустрии научной фантастики в Пекине, инновационный центр научной фантастики Чжунгуаньцунь стремится собрать все основные ресурсы индустрии научной фантастики. Центр фокусируется на инкубации и ускорении основных технологий индустрии научной фантастики, играет роль моста между тремя основными элементами индустрии научной фантастики, а именно ключевыми технологиями, оригинальными талантами и построением сценариев, повышает независимую инновационную способность индустрии научной фантастики и строит цепочку промышленных услуг "исследовательский институт + инкубатор + акселератор + промышленный кластер".

В 2023 году инновационный центр научно-фантастической индустрии Чжунгуаньцунь был удостоен ряда наград и квалификаций, таких как Новое аудиовизуальное пространство, Пекинский новый парк аудиовизуального искусства и База аудиовизуальной индустрии Пекин-Тяньцзинь-Хэбэй. В начале 2024 года в Пекине была официально открыта база цифрового прямого вещания, построенная Инновационным центром в сотрудничестве с компанией Polyvision, которая заложила прочный фундамент для технологий искусственного интеллекта, способных расширить возможности аудиовизуальной сферы. Создание Демонстрационного центра производства короткометражных драматических фильмов с использованием ИИ - это не только глубокое слияние технологий и творчества, но и ключевая веха на пути становления индустрии короткометражных драматических фильмов с использованием ИИ. В будущем Gathering Dimension планирует объединить усилия с университетами, правительством и предприятиями верхнего и нижнего звена промышленной цепи, а также широко развернуть базы по производству короткометражных драматических фильмов на основе искусственного интеллекта по всей стране. Благодаря глубоким исследованиям по соответствующим темам мы продолжим совершенствовать систему производства короткометражных драматических фильмов ИИ, расширять масштабы отрасли и всесторонне содействовать приземлению и популяризации производства короткометражных драматических фильмов ИИ по всей стране.

Metaphysical: Starting from Playing Erhu - это не только пример успешного применения технологии искусственного интеллекта, но и смелая инновация для всей индустрии кино и телевидения. Он в полной мере демонстрирует, как технология ИИ может играть центральную роль в создании короткометражных драм, и заставляет людей с нетерпением ждать будущего развития короткометражных драм с ИИ. В будущем, с непрерывным прогрессом технологий ИИ и ускорением индустриализации, будет появляться все больше высококачественного кино- и телеконтента ИИ. Каждый творец сможет реализовать свои творческие мечты с помощью ИИ как мощного инструмента.

Появление короткометражных драм с искусственным интеллектом знаменует собой новую эру кино- и телепроизводства. В эту новую эпоху ИИ является не только инструментом повышения эффективности, но и источником творчества, а также мощной движущей силой, способствующей постоянному расширению границ кино- и телетворчества. Заглядывая в будущее, мы имеем основания ожидать, что технология ИИ будет все шире использоваться в области кино и телевидения, от короткометражных пьес до фильмов, от телевизионных драм до анимации, ИИ преподнесет нам еще больше сюрпризов. Углубленное сотрудничество между Joly Dimension и инновационным центром индустрии научной фантастики Zhongguancun - это знак того, что индустрию короткометражных драматических фильмов с использованием ИИ ожидает расцвет. С развитием технологий и постоянным расширением масштабов индустрии, короткометражная драма с искусственным интеллектом перестанет быть "павильоном в небе" для нескольких человек, а станет реальностью, доступной каждому создателю. Давайте смотреть в ближайшее будущее, технология ИИ принесет нам беспрецедентно новый опыт кино и телевидения.