Музыкальная группа Brightmn Ашота Геворкяна, основателя студии видеопродакшена OMNI Production, 22 августа выпустила новый клип на одну из своих песен «Цунами» из нового альбома. Ролик создан только с помощью ИИ — создатель решил замахнуться на масштабную и технически сложную историю, работа над которой в итоге заняла 1,5 месяца.

 

Для «Большого Города» Ашот сделал большой разбор процесса создания и работы с инструментами ИИ — и даже показал кусочек процесса.

 

 

Ашот Геворкян

основатель студии видеопродакшена OMNI Production

— Имея практически безграничные возможности в выборе стилистики и наполнения, я решил замахнуться на романтическую историю любви и спасения в фантастическом сеттинге, где главной героиней является девушка, спасающая своего мужчину после крушения космической станции. Это некая отсылка к моему личному опыту взаимоотношений с супругой, но в космическом масштабе.

 

 

Основные инструменты для работы

— В Krea ai я создал консистентных персонажей и большую часть клипа в картинках.

— REVE использовал, когда лица были неважны, там создавал атмосферные кадры. В редких случаях помогали Higgsfield и Midjourney.

— Практически вся анимация сделана в Hailuo, на данный момент это один из лучших инструментов, который делает анимацию, в особенности динамичную.

— Более статичные кадры анимировал в Kling 2.1.

— Все картинки проходили доработку в Photoshop, чтобы в кадре всегда была одна и та же спасательная капсула.

Подходя к сложным динамическим сценам, я переживал, что их просто не получится сделать, но Hailuo каждый раз приятно удивлял пониманием промпта и того, что я хочу видеть в итоге. На героине всегда по центру костюма была молния, которая изначально забывалась сгенериться, и много мелких деталей, создающих целостность восприятия.

 

 

Процесс создания

— Вначале я сгенерировал и анимировал четыре разных кадра космических сцен, подставил в черновой отснятый материал с лайвом группы, чтобы посмотреть, насколько гармонично стыкуются отснятые кадры с космическими изображениями. На этой стадии нам показалось, что фактуры «клеятся» и можно продолжить работу.

Понадобилось сотни генераций, сотни дублей анимации и многочисленный перемонтаж материала, чтобы добиться точности персонажей, пространства и цельности истории.

Одной из главных задач была консистентность персонажей, чтобы в каждом кадре были определенные персонажи — это в нейросетях одно из сложнейших действий, особенно если речь идет о длинном по хронометражу видео. Конечно, если приглядеться, то персонажи иногда все-таки разнятся, но из-за насыщенности событий воспринимается только образ, а некоторые неточности сглаживаются.

 

 

В чем сложность

— Было много сложных моментов: например, как девушка добегает до спасательной капсулы своего мужчины, обнимает его и вытаскивает его из капсулы. У меня большая коллекция дублей, как героиня вытаскивает мужчину будто после жесткой пьянки, где он в полусознании. Иногда она просто выбрасывала его из корабля, иногда сливалась с ним в единое цело или хватала его крайне нелепо. Было одновременно и смешно, и грустно день за днем прорабатывать эту сцену, но в итоге у меня получилось найти оптимальные фазы кадров и монтажного ритма, чтобы сцена заработала.

Моим главным принципом при работе с ИИ все чаще становится поиск способов отвлечь зрителя от мысли, что работа сделана с помощью ИИ, и увлечь его внимание самой историей. На данном этапе это крайне трудно, многие зрители пока скептически относятся к новой визуальной реальности, поэтому качество создаваемого ролика должно быть на высоком уровне, чтобы человек поверил в технологию и воспринимал работу как отдельное произведение. Надеюсь, у нас это получилось.

 

Фотографии: Brightmn