Судя по результатам реальных испытаний в студии короткометражных драм JiDream Short Drama Studio, это может быть наиболее экономически выгодным способом использования Seedance 2.5

Создание короткого видеоролика продолжительностью около десяти секунд с помощью ИИ больше не является сложной задачей.

Благодаря развитию видеомоделей, все больше создателей экспериментируют с более сложным контентом. От одного видеоролика до полноценных короткометражных фильмов, рекламных роликов и сериалов с непрерывными сюжетными линиями и множеством персонажей, создание видео с помощью ИИ позволяет выпускать все более разнообразные работы.

Однако, когда предметом создания становится не отдельный видеоролик, а целое произведение, количество проблем, которые необходимо решить, также возрастает.

Как обеспечить единообразие во внешности персонажей, одежде и обстановке, если в кадре десятки или даже сотни фрагментов? Если мы изменяем сцену, можем ли мы одновременно корректировать последующие кадры? Если нас не устраивает всего несколько секунд уже сгенерированного видео, нужно ли пересоздавать весь ролик?

В прошлом компания Jimeng предоставляла множество инструментов для профессиональной творческой работы, например, для создания короткометражных фильмов и рекламных роликов. Теперь Jimeng начинает осваивать создание драматических сериалов и официально запустила свою студию короткометражных драм.

От написания сценариев, управления персонажами и сценами до 3D-режиссерской консоли, интеллектуальной предварительной визуализации, пересъемки сцен и сверхвысокого разрешения — JIMON интегрировал эти инструменты в полноценный творческий процесс.

Создатели могут начать с одного источника вдохновения или напрямую импортировать готовый сценарий и завершить последующую разработку раскадровки, создание видеоролика и внесение изменений в рамках одного проекта.

Компания APPSO ранее изучала процесс создания короткометражных драм с помощью искусственного интеллекта. Однажды мы использовали Little Lark для построения аналогичного рабочего процесса создания короткометражных драм и сняли короткометражный фильм в стиле «Дюны».

На этот раз студия коротких драм Jimeng Short Drama Studio также интегрировала некоторые возможности Little Lark Short Drama Agent, еще больше связав ранее исследованный рабочий процесс создания коротких драм с возможностями Jimeng по моделированию и генерации видео. В дополнение к этому, Jimeng добавила собственную разработанную модель сценариев DreamScript, обеспечивающую более полный анализ сценариев, управление ресурсами и функции 3D-консоли режиссера.

Мы также ознакомились с новым творческим процессом студии короткометражных драм, чтобы увидеть, какие новые возможности этот инструмент может открыть для производства видео с использованием ИИ.

Насколько искусственный интеллект может помочь нам в написании сценариев — от идеи до готового сценария?

Будь то съемка короткометражного фильма или создание сериала с цельным сюжетом, сценарий — это первый и неизбежный шаг.

Студия коротких драматических произведений Jimeng предлагает три способа подачи заявки: если у вас есть только одно предложение, вы можете начать с оригинального сценария; если у вас уже есть роман или другой интеллектуальный продукт, вы можете адаптировать его в короткую драму; если у вас уже есть готовый сценарий, вы можете загрузить его напрямую и продолжить последующий анализ ресурсов и создание раскадровки.

Мы считали себя пользователями, у которых не было идей, но которые хотели создавать собственные короткие драмы, отбирали оригинальные сценарии и использовали DreamScript, модель сценариев, разработанную DreamScript, для их создания.

Студия короткометражных драм предлагает чрезвычайно богатый выбор типов сценариев. Мы можем выбирать сценарии для отечественного рынка или для зарубежных рынков, а также количество серий, от 10 до 100. Что касается тематики, существуют различные категории, такие как предпочтения аудитории, предыстория, характеристики персонажей и соответствующий визуальный стиль.

Просто выберите эти теги; без необходимости вводить какие-либо подсказки, DreamScript сможет создать полноценный скрипт.

Мы выбрали распространенные ключевые слова для коротких драматических произведений, такие как «фэнтези», «городской», «путешествие во времени» и «динамичный», и попросили помощника сценариста дать творческое руководство. Он сразу предложил три разных варианта сюжета.

Читая эти слова, я почти представляю себе в своем воображении короткую драму.

Следует отметить, что появление DreamScript действительно показало нам, что он понимает специфику короткометражных драм, и внесло первое отличие между студиями, специализирующимися на короткометражных драмах, и предыдущими инструментами для создания видеоконтента, ориентированными на одну точку: он может решать вопросы «как сгенерировать», «что снимать» и как обеспечить дальнейшее использование уже созданного материала на последующих этапах.

Однако сценарий — это лишь отправная точка. Настоящие проблемы с короткометражными драмами, созданными с помощью ИИ, возникают после увеличения количества кадров.

Внешность, одежда и предполагаемый возраст одного и того же персонажа могут меняться в разных кадрах; если в одной и той же сцене меняется ракурс камеры, отношения между персонажами могут не совпадать; если меняется обстановка, но не синхронизируется с соответствующей раскадровкой, проблема может возникнуть позже.

Вторая ключевая компетенция студии коротких пьес заключается в преобразовании творческой информации из сценария в управляемые ресурсы.

Выберите сценарий из рекомендаций, предоставленных помощником сценариста, и он продолжит генерировать полную сюжетную линию, план эпизода и полный сценарий. Система может анализировать персонажей, сцены и взаимоотношения между ними, сначала создавая описания персонажей и генерируя подсказки, которые мы затем подтверждаем.

Anycook — это разработанная нами модель изображений, специально созданная для художественного оформления короткометражных драматических фильмов, позволяющая генерировать персонажей и сцены. После подтверждения персонажи, костюмы, пространственные отношения и визуальная атмосфера могут быть сохранены в качестве ресурсов, которые можно многократно использовать в последующих кадрах.

Здесь под ресурсами можно понимать актерский состав, библиотеку декораций и художественное оформление короткометражного драматического проекта. Искусственному интеллекту не нужно каждый раз заново генерировать этот контент, и эти уже существующие настройки можно использовать даже в сиквелах или сериалах.

Получив необходимые ресурсы, DreamShot затем переходит к вопросу «как снимать». Используя модель раскадровки, DreamShot объединяет сценарий и ресурсы проекта, чтобы разбить историю на конкретные кадры, организуя визуальные элементы, диалоги, действия, размеры кадров и темп повествования.

Мы можем свободно экспериментировать с композицией и визуальными эффектами на холсте или переключиться на раскадровку и расположить кадры в соответствии с последовательностью сюжета.

Хотя DreamScript, Anycook и DreamShot соответствуют сценарию, художественному оформлению и раскадровке соответственно, один и тот же набор проектных ресурсов от студии короткометражных драм объединяет их, используя серию кадров для завершения повествования.

Предварительный просмотр выполняется перед генерацией, а частичные изменения возможны после генерации.

После сопоставления всех этих этапов создания коротких драматических произведений возникает еще один практический вопрос: сколько средств должны вложить создатели в весь проект?

В создании видеороликов с использованием ИИ часто упоминается техника «вытягивания карточек». Мы написали подсказки и подготовили эталонные изображения, но соответствует ли итоговый видеоролик нашим ожиданиям, зачастую становится известно только после его создания.

Для работ с небольшим количеством кадров повторные попытки допустимы; однако, как только вы приступите к короткометражному драматическому проекту с множеством персонажей и сцен, такой «поэтапный подход» быстро увеличит затраты.

Третье изменение в студии короткометражных драм заключается в том, что теперь больше внимания уделяется оценке качества работы до начала самого производства.

Режиссёрская консоль 3D-моделирования позволяет создателям заранее корректировать положение персонажей, их ориентацию, реквизит, положение камеры и траектории движения в трёхмерном пространстве. В сценах с участием нескольких персонажей можно заранее уточнить, кто находится впереди, а кто позади, нужно ли приближать или отдалять камеру, и как должно меняться направление её движения, используя композицию и динамические референсы, прежде чем передать эти данные видеомодели для генерации.

Мы также опробовали умную режиссерскую консоль в студии для короткометражных спектаклей. Сначала мы обустроили простой зал и разместили внутри два белых манекена. Один стоял впереди, а другой — на более высоком месте позади. Затем мы установили начальную и конечную точки для камеры.

Его можно использовать в качестве динамического ориентира для размещения в видеоузлах, заменяя серый зал и гуманоидные модели оригинальной одеждой, каменными залами, световыми окнами и персонажами.

Между тем, настройка режиссерской платформы и сам процесс репетиций не потребляют вычислительных мощностей для генерации видео.

Интеллектуальная предварительная визуализация больше похожа на «репетицию» перед официальными съемками, позволяющую проверить общее направление с меньшими затратами до начала фактического производства. Она не просто проверяет отдельные раскадровки, а связывает несколько кадров воедино, позволяя создателям заранее оценить, насколько согласованы ритм, действия и пространственные отношения всей сцены.

Мы сжали и переписали оригинальный сценарий раскадровки для «Дела о пропавшей сушеной рыбе», превратив его в интеллектуальные подсказки для предварительной визуализации, которые можно напрямую передать узлу генерации видео для извлечения эталонных изображений раскадровки из скриншотов.

Нажмите на кнопку «Разобрать материал» и выберите «Извлечение рамки», чтобы получить резервную копию эталонного изображения.

В сочетании с оригинальной раскадровкой, созданная официальная версия более надежна и внушает больше доверия.

После создания видео я остался недоволен только одеждой персонажей в получившемся ролике. Что мне делать?

Если движение выглядит неестественно, фрагмент можно переснять; если звук неподходящий, аудио можно отделить и озвучить заново; если кадр содержит слишком много информации, его можно интеллектуально сегментировать.

Оставьте те кадры, которые вас не устраивают, используйте функцию аннотирования кадров, чтобы обвести те части, которые нужно изменить, и внесите желаемые изменения в диалоговое окно рядом с ними. Это очень просто.

Изображение | Аннотация к скриншоту

Изображение | Сравнение до и после редактирования

Работа над постпродакшеном в студии короткометражных драм ничем не отличается от постпродакшена в реальном кино- и телепроизводстве. Речь идёт не просто о доработке после завершения съёмок, а скорее о вовлечении в весь процесс проекта.

Разумеется, для создателей контента, которым необходимо многократно тестировать ключевые кадры, себестоимость единицы продукции остается прямыми затратами.

Компания SimuDream запустила ограниченную по времени акцию «Двойная одиннадцать» совместно со своей онлайн-студией короткометражных драм, предлагая годовые подписки со скидками от 45%, включая дополнительное время членства и бонусные баллы.

После объединения годового пакета Super VIP, бонусных баллов за участие в мероприятиях и скидок за потребление, стоимость генерации видео в разрешении 720P с использованием эталонного видео в Seedance 2.5 снижается до минимума примерно в 0,19 юаня/секунду, а стоимость звонков через CLI — до минимума примерно в 0,18 юаня/секунду.

Однако истинную стоимость короткой драмы нельзя рассчитать, основываясь исключительно на количестве секунд, затраченных на её создание. Цена создания определяет, насколько дорогостоящей будет одна попытка, в то время как повторное использование ресурсов, предварительные репетиции и частичные изменения влияют на количество необходимых попыток. Переход от «дешевого создания один раз» к «меньшему количеству переделок» может стать более полной логикой снижения затрат для этого рабочего процесса.

После завершения процесса вы все еще можете вносить изменения.

Если сценарий, персонажи, сцены и раскадровки удается сохранить, ценность произведения не обязательно должна ограничиваться адаптацией в готовый фильм.

Создатели могут использовать существующие ресурсы для продолжения сериала, что позволяет развивать персонажей и мир на протяжении всего сериала, не начиная каждый раз с нуля при запуске нового проекта.

Функция ремастеринга и перерисовки существующих короткометражных драм позволяет анализировать персонажей, сцены, реквизит и структуру кадров оригинального фильма. Сохраняя ритм сюжета и язык кадров, она может изменять стиль изображения и соотношение сторон, а также адаптировать персонажей, язык и детали окружения к различным регионам.

Мы перезагрузили наше предыдущее оригинальное видео о совете в пустыне, действие которого разворачивается в китайском регионе и выполнено в стиле ручной работы из глины. Два персонажа и зал были разделены, а костюмы, реквизит и диалоги в раскадровке также были локализованы.

Это также позволяет более широко использовать один и тот же контент, что дает возможность создавать продолжения, корректировать пропорции для разных платформ или создавать новые версии для разных рынков.

Одновременно запущенная командная версия системы управления дополнительно охватывает управление активами в нескольких учетных записях и управление баллами. Для студий и производственных групп постепенно становятся частью производственного процесса вопросы обмена творческими ресурсами и распределения созданных квот.

С этой точки зрения, студия короткометражных драм Jiming Short Drama Studio не просто стремится накапливать видеофайлы; она расширила создание короткометражных драм до набора контентных ресурсов, которые можно далее развивать. Персонажи, сцены и раскадровки, созданные в рамках одного проекта, могут стать основой для следующего сериала, следующего сезона или даже другой версии.

Для создания видео с помощью ИИ по-прежнему необходимы более удобные в использовании инструменты.

После всего процесса нам сложно описать работу Jimeng Short Drama Studio просто как «создание короткометражных драм в один клик».

Благодаря современным возможностям моделей посева, создание выразительного кадра перестало быть единственной проблемой для создателей. Настоящая сложность часто заключается в том, как сценарий интегрируется в производство, как повторно используются персонажи и сцены, как плавно соединяются раскадровки и как точно вносятся изменения в указанные места.

Студия короткометражных драм DreamShot больше похожа на реорганизацию производственного процесса драмы: DreamScript отвечает за развитие сюжета в сценарии, Anycook и управление ресурсами обеспечивают устойчивую основу для использования персонажей и сцен, DreamShot дополнительно разбивает сценарий на кадры, а режиссерский стол, интеллектуальная предварительная визуализация и постпродакшн-монтаж позволяют создателям продолжать вносить корректировки до и после производственного процесса…

Эти возможности не только устраняют проблемы при производстве короткометражных драматических произведений, но и сокращают другие, более повседневные расходы. Для различных типов видео и тем создателям больше не нужно начинать с нуля на каждом этапе, и им не приходится отказываться от всего проекта из-за неудовлетворенности какой-либо его частью.

Для создателей это изменение имеет большее значение, чем простое увеличение скорости генерации.

Если небольшая команда может легче завершить первый черновик, у них появляется возможность опробовать различные методы съёмки, многократно перерабатывать диалоги и решать, стоит ли продолжать работу над персонажем или отношениями после просмотра результатов. Таким образом, творческий процесс может превратиться из разового создания в постоянно совершенствующуюся работу.

Когда больше авторов привнесут свой собственный опыт и эстетику, контент получит возможность стать богаче.

На протяжении всего этого процесса человеческий фактор остается первостепенным: какие реплики следует вырезать, какая реакция требует более длительной паузы и почему персонаж поворачивается в определенный момент. Чем точнее инструменты выполняют эти решения, тем больше создатели могут сосредоточиться на сюжете.

Модели улучшают отдельные кадры, а рабочие процессы позволяют объединить эти кадры в единое целое. По мере совершенствования инструментов на уровне приложений, пространство для создания драматических произведений с помощью ИИ перестанет быть исключительной прерогативой тех, кто знаком с формулами короткометражных драм, и откроется для более широкого круга создателей с разнообразным опытом и эстетическими предпочтениями.

Следующая короткая драма, которую все с нетерпением ждут, возможно, будет написана кем-то, кто раньше писал рассказы только в виде служебных записок.