Я использовал Vidu Q4 Preview, чтобы создать бойз-бэнд из Ультрамена и Дарио, и начал танцевать под APT

Когда Марлон Брандо претендовал на роль Корлеоне в «Крёстном отце», студия посчитала, что он уже не в лучшей форме, и отказалась брать его на роль. В конце концов, он получил роль благодаря видеозаписи прослушивания: он засунул два комка ваты себе в щёки, сгорбился и хриплым голосом прочитал несколько реплик в камеру.

В Голливуде к этому аспекту относятся почти суеверно. Неважно, сколько наград вы получили или насколько высок ваш гонорар, если вы хотите попасть в актерский состав, сначала вам нужно сыграть для меня несколько десятков секунд.

Эта система звучит сурово, но она отсеивает самый дорогостоящий элемент в фильме: актёрскую игру. Эффективность одного взгляда, плавность передачи эмоции — всё это можно определить всего за несколько десятков секунд. Весь бюджет фильма, исчисляемый сотнями миллионов долларов, в конечном итоге зависит от этих нескольких секунд оценки.

Таким образом, суть прослушиваний заключается в проверке наиболее ценных способностей с минимальными затратами.

Недавно мы получили предварительную версию видеомодели. Следуя той же логике, она призвана позволить видеороликам, созданным с помощью ИИ, обладать самыми дорогостоящими актерскими навыками по более низкой цене. Стоимость тестового видеоролика начинается с 0,09 юаня в секунду.

Это новая предварительная версия Vidu Q4 от Shengshu Technology, модель видеопроизводства нового поколения. По сравнению со своим предшественником, Q4 значительно улучшена во всех аспектах. Официальное позиционирование модели — « высокопроизводительная флагманская модель », ориентированная на актерскую игру, напряжение камеры и сложные спецэффекты.

Мы заранее получили доступ к предварительной версии Vidu Q4 и отнеслись к ней как к прослушиванию актера, проверяя его «актерские навыки» сцена за сценой.

Когда видеомодели начинают представлять логически связные кадры, могут вращаться под разными углами и даже достигать разрешения до 4K, хорошей модели генерации видео может потребоваться знать, какие кадры снимаются. Тема, эмоции и ритм повествования не обязательно улучшаются просто за счет увеличения количества движений камеры.

Наше первое впечатление от Vidu Q4 Preview таково: это действительно очень "Vidu".

Кажется, эта технология никогда не довольствуется простым созданием видео в стабильном и прямолинейном режиме. Если она может показать драку, она сделает её максимально реалистичной; если она может снять видео с разных ракурсов, она не будет просто стоять на месте и снимать; если она может показать взрыв, она также добавит в кадр огонь, дым и людей.

В превью Vidu Q4 эта склонность к масштабным экшн-сценам, сложным планам и сильным эмоциям стала еще более выраженной. Однако на этот раз больше внимания стало уделяться тому, играют ли персонажи какую-либо роль, почему движется камера и могут ли эти элементы в конечном итоге объединиться для создания визуально привлекательного видео.

Ключ к способности Vidu Q4 Preview создавать отличные видеоролики заключается в расширенной выразительности и творческой свободе, при этом стоимость составляет всего 0,09 юаня в секунду.

На официальном сайте Vidu можно ознакомиться с последней предварительной версией Vidu Q4. Это первая предварительная версия Q4, выпущенная для создателей контента. В настоящее время она поддерживает до 15 эталонных изображений, 3 эталонных аудиосегмента и опциональные конфигурации вывода в формате 2K и 4K Ultra High Definition.

Ссылка на отзыв: https://www.vidu.cn/home/recommend

В качестве альтернативы вы можете ввести эксклюзивный пригласительный код APPSO APPSOQ4 для входа на vidu.cn. Новые пользователи могут получить 500 баллов при регистрации.

Один взгляд сложнее обнаружить, чем взрыв.

Если и существует наименьшая единица, определяющая хорошее качество работы, то это, безусловно, «реакция».

Нам достаточно двух секунд, чтобы услышать реплику, но изменение выражения лица персонажа за полсекунды — от момента, когда он её услышал, обработал и решил ответить — является основой для того, чтобы мы могли судить, «настоящий этот человек или вымышленный».

Те, кто утверждает, что ИИ не может заменить людей, также считают, что этим «реакциям» ИИ никогда не сможет научиться. ИИ может изобразить «грустное» выражение лица, но он не может воспроизвести процесс «грусти».

Мы нашли отрывок из «Дюны», который ранее тестировали с другими видеомоделями. В темно-синем дворце, напоминающем песчаные дюны, шок королевы сменяется страхом и гневом, и всё заканчивается одним-единственным взглядом. Вся сцена лишена движения или мизансцен; 16 секунд почти полностью состоят из двух крупных планов, один перед другим.

Естественно, полученный эффект не так хорош, как в оригинальной версии с живыми актерами, но последовательность реакции королевы в видео, созданном с помощью ИИ — от прослушивания, паузы, отведения взгляда и последующего медленного возвращения к реальности — в точности соответствует тому, как бы актер вживую «осознал правду».

Мы также нашли фрагмент из фильма «Король комедии», который включен в учебные материалы Пекинской киноакадемии, — сцена «Я о тебе позабочусь». Инь Тяньчжоу окликает Лю Пяопяо на улице после дождя, и Лю Пяопяо оборачивается, улыбается и говорит: «Тебе следует сначала позаботиться о себе», после чего отворачивается и в одиночестве, на заднем сиденье такси, начинает плакать.

Сложность этой сцены, вероятно, полностью заключается во второй половине, где Сесилия Чанг изображает переход от смеха к слезам, иллюстрируя обрушение плотины.

Видно, что в предварительной версии Vidu Q4 всё ещё есть некоторые недостатки. В ней показан весь процесс от смеха до слёз, но, помимо выразительности, общий ритм пока кажется недостаточно естественным.

Это соответствует цели предварительной версии: сначала передать модель создателям, выявить проблемы и собрать отзывы на основе реального использования, а затем продолжить доработку до официальной версии.

Однако, когда исполнение не требует столь резких эмоциональных перепадов, Q4 Preview будет гораздо лучше понимать состояние персонажа.

В другом эпизоде ​​«Дюны», после того как раненый солдат ответил: «Это не мое зрение», камера задержалась на его усталом, но бодром лице, при этом швы вокруг глаз были видны в нескольких точках съемки.

Эта более сдержанная игра на самом деле ощущалась гораздо естественнее. И эта выразительность отражалась не только в мимике; в динамичных сценах Vidu Q4 Preview также демонстрировала очень характерные для Vidu приемы игры.

В конце концов, по сравнению с тихим разговором двух человек, более узнаваемая сторона Виду — это масштабные, драматичные действия, которые немного по-детски наивны, немного страстны и заставляют вас захотеть бросить камеру на поле боя.

Поэтому мы просто поместили избранного из «Чёрного мифа»: Укуна и душу из «Теневого клинка Зеро» в полуразрушенный храм во время ливня и позволили им сражаться.

В подсказках мы указали полную комбинацию движений, включающую скользящий рывок, горизонтальный удар по голове, длинный удар посохом, вращательный размашистый удар назад, перепрыгивание через посох и последующий удар при приземлении. Модель демонстрировала это движение в зависимости от различных движений камеры.

Удивительно, но в нем не использовались частые крупные планы, чтобы скрыть положение двух персонажей, поскольку это самый распространенный «обманный» метод, используемый в сценах с участием ИИ в прошлом.

Созданный видеоэффект выполнен в типичном для Vidu стиле: сначала появляется захватывающая завязка, а затем поверх неё добавляются действия, ракурсы камеры и спецэффекты.

Движение камеры должно служить повествованию.

Если динамичные экшн-сцены и масштабные движения делают Vidu запоминающимся, то то, как камера синхронизируется с этими движениями, вероятно, составляет вторую половину "фирменного стиля Vidu".

В плохих и хороших фильмах часто используется одинаковое количество кадров; единственная разница заключается в том, знает ли камера, что снимает.

Подобно тому, как следование за объектом призвано помочь зрителю догнать этого человека, обведение по кругу призвано помочь нам ясно увидеть взаимоотношения, а продвижение камеры — довести эмоции до кульминации. Проблема с видеороликами, созданными с помощью ИИ, в прошлом заключалась в том, что камера действительно двигалась, но по мере движения человек исчезал, и пространство становилось хаотичным.

Сначала мы попросили модель создать несколько FPV-видео, демонстрирующих побег из пасти песчаного червя. Даже после значительного увеличения объема видеоматериала модель все еще могла находить то же яркое пятно в промежутке между зубами, а переход от темного к светлому достигался за счет перекрытия фактического выхода.

В другом видеоролике имитируется сцена из «Одиссеи», где древний корабль ускользает из лап циклопа. В превью Vidu Q4 добавлены дополнительные детали, демонстрирующие, как присутствие колоссального объекта реалистично влияет на освещение в сцене. Концовка видео, где кадр переключается с подавляющего рукава на бескрайнее золотое море, ясно показывает зрителю, что опасность миновала.

Более сложный приём съёмки — это механический песчаный червь в этой сцене из «Дюны», который перемещается от панорамного вида толпы к всаднику на вершине.

Камера следует за тремя гигантскими механическими песчаными червями, кружит вокруг них, поднимается и опускается одновременно. Объектив перемещается с уровня груди убегающей толпы к боковой части главного песчаного червя, а затем поднимается, чтобы догнать всадника наверху.

В целом, Vidu Q4 Preview превосходит конкурентов в плане управления камерой и стабильности съемки, но некоторые детали, такие как управление визуальным стилем и проблема иллюзий, часто встречающаяся в искусственном интеллекте, все еще нуждаются в оптимизации.

Изменения в мире после взрыва

Что касается спецэффектов, то впечатляющее и энергичное выступление Виду становится еще более очевидным.

Гигантские волны, чёрные дыры, ледяные разломы, взрывы, механические песчаные черви… почти ни один из выбранных нами случаев не является обычным. Но по-настоящему интересно в Q4 Preview не то, что игра наконец-то научилась добавлять больше ярких красок в графику, а то, что эти вещи начинают по-настоящему влиять на окружающий нас мир.

Мы используем видеосъемку от первого лица, чтобы показать километровую приливную волну на море на закате. С точки зрения первого лица видео показывает, как волна поднимается вдоль водной стены, закручивается вправо и создает водяную завесу, проходит над гребнем волны и опускается вдоль другой стороны ее хребта.

Совершенно очевидно, что полосы воды действительно растянуты вдоль волновой стены, а отражение на поверхности моря также меняется в зависимости от угла наклона. Слои воды превзошли мои ожидания от «плоских спецэффектов».

Ещё одно видео побега с космической станции, в котором используются спецэффекты, такие как взрывы и чёрные дыры, столь же чёткое и лаконичное.

Также присутствует видеоролик со спецэффектами, демонстрирующий ледяную долину, от падения в узкий ледяной каньон до попадания в воду и затем в открытое подземное море. В конце концов, гигантское существо, напоминающее синий флуоресцентный луч, постепенно превращается из темного силуэта в главный объект на переднем плане.

Спецэффекты, отвечающие за визуальное воздействие, также могут использоваться для проверки качества исполнения сложных сцен.

Благодаря возможности выбора разрешения 2K и 4K, мы видим, что свет от огня может освещать персонажей, а дым — мешать обзору. Спецэффекты хорошо взаимодействуют с окружающим миром.

Наш опыт работы с Vidu Q4 наиболее ярко проявляется в его функциях, которые, пожалуй, являются наиболее ожидаемыми. К этим функциям относятся возможность выражения эмоций персонажей в крупных планах, возможность создания множества динамичных кадров с перемещением вокруг цели, а также возможность плавного перехода к последующим действиям со сложными спецэффектами.

Эти готовые фильмы создаются не только на основе одного ключевого слова. Референсные изображения играют здесь решающую роль; они действуют как стопка рабочих фотографий перед началом съемок, определяя, как выглядят люди, куда обращена дверь и где в конечном итоге остановится камера.

Vidu была одной из первых видеомоделей, предложивших функцию "эталонный ученик", и в предварительной версии Q4 эта функция продолжала совершенствоваться в сторону более точного управления.

Официально Vidu Q4 Preview поддерживает максимум 15 эталонных изображений, но, по нашему опыту, важнее количества то, чтобы каждое изображение четко определяло свою роль.

Изображения персонажей используются для определения их личности, изображения окружающей обстановки определяют пространство, а последовательности действий задают цели постановки. Четкое определение этих требований имеет решающее значение для определения того, какие элементы были использованы в окончательной версии, а какие были исключены.

Возможность ссылаться на несколько изображений не только делает наши требования к творчеству более конкретными, но и служит основанием для принятия видеоролика.

После успешного прохождения прослушивания мы начали обсуждать зарплату.

От маленького экрана в наших руках до большого телевизора на стене дома, а затем и до гигантского экрана в кинотеатре — видеоролики, созданные с помощью искусственного интеллекта, практически полностью заняли наше поле зрения.

Наши ожидания от видеомоделей на основе ИИ все больше приближаются к ожиданиям от реального актера. Помимо их возможностей, нам также необходимо учитывать зарплату «актера», его популярность, актерские навыки и так далее.

Эти ситуации с моделью похожи на прослушивания, упомянутые в начале. Самый честный аспект процесса прослушивания заключается в том, что это двусторонний процесс: прослушивается актер, и съемочная группа тоже проходит прослушивание. Мы оцениваем, стоит ли соглашаться на роль, и команда, работающая над ролью, также оценивает, стоит ли присоединяться к съемочной группе.

Предварительная версия Vidu Q4 по сути представляет собой двустороннее тестирование. Компания Shengshu Technology заранее предоставляет эту «высокопроизводительную флагманскую модель» создателям контента, чтобы они могли оценить ее работу в реальном рабочем процессе; в то же время создатели контента используют эти несколько дней, чтобы решить, стоит ли включать этот «продукт» в свою будущую производственную команду.

От драки в древнем храме под дождем в «Черном мифе» и «Нулевом клинке тени» до гиганта, пытающегося схватить древний корабль в море, и персонажа, мгновенно переходящего от состояния скованности к обмороку за считанные секунды, эти случаи кажутся совершенно разными по тематике, но в конечном итоге они вызывают схожие чувства.

С курсом 0,09 юаня в секунду меняется то, что для достижения «импульса» больше не требуется идеальная ставка с первой попытки. Мы можем играть смело, продолжать попытки и создавать множество вариантов.

Что еще более важно, от недорогих пробных съемок в эпоху «сантиметров» до высококачественной съемки в эпоху «углового» изображения, различные уровни качества изображения еще больше снизили творческий порог. Создатели могут сначала проводить многократные пробные съемки с низкими затратами, а затем завершить финальный фильм с более высокими техническими характеристиками, тратя деньги на действительно качественные кадры.

Как и в кинопроизводстве, по-настоящему дорого обходится не столько несколько секунд, которые в итоге используются, сколько десятки или даже сотни кадров, которые были отбракованы заранее, чтобы найти эти несколько секунд.

То же самое относится и к видео, созданным с помощью ИИ. Как только стоимость генерации станет достаточно низкой, создатели смогут по-настоящему выступать в роли режиссеров, пробуя разные выражения лица, меняя ракурсы камеры и снимая множество дублей, прежде чем выбрать лучший.

Предварительная версия Vidu Q4 в настоящее время может рассматриваться как тестовый запуск, и она все еще находится в процессе непрерывной оптимизации. Однако, когда то, что изначально было самым дорогим и сложным для многократного тестирования, можно повторить всего за несколько центов, видео с использованием ИИ позволило нам протестировать удачный кадр, который изначально стоил очень дорого, по более низкой цене.

Более пятидесяти лет назад Марлон Брандо, засунув в рот два комка ваты, получил роль Корлеоне всего за несколько десятков секунд прослушивания.

Сегодня модели, снимающиеся в видеороликах, также борются за свою следующую роль. Прослушивания закончились, но настоящие съемки только начались.