Четче, чем люди: когда можно будет делать большое кино с помощью ИИ

А весной 2023 года случилась международная выставка оборудования и технологий для медиапроизводства CPS, в организации которой я участвовал как технический директор.

Приглашенные спикеры по нейросетям приехать не смогли, и мне пришлось самому подготовить доклад о своем опыте работы с ИИ и перспективах его применения в кино.

Для подготовки того выступления я, будучи человеком технически грамотным, хорошо изучил вопрос. После конференции меня начали приглашать на другие: тема и правда оказалась очень востребованной. После каждого мероприятия меня звали еще на три — так я и стал спикером по ИИ.

Чтобы поддерживать форму, приходилось постоянно мониторить все, что происходит в этой области. В итоге утро начиналось с новостей из мира нейросетей, днем я тоже что-то читал по теме, вечером конспектировал, проверял, тестировал. Примерно так это все до сих пор и продолжается. Сейчас я как разработчик вдобавок занимаюсь созданием двух сервисов с ИИ — инструментарий уже настолько развит, что проще сделать самому, чем заказывать. Хобби вышло на новый уровень, и это возможность не только для заработка, но и для реализации своих идей.

Сегодня нейросети в кино применяют не только для генерации видео. С их помощью создают любого вида контент, причем если раньше можно было отличить, что именно сделано посредством ИИ, то теперь грани размыты. Нейросети прекрасно имитируют звуки, голоса. Помогают писать сценарии: придумывают идеи, имена, структурируют и стилизуют диалоги. Могут сделать режиссерский сценарий с диалогами и чертежами мизансцен, хронометражем и раскадровкой, чередованиями планов и ракурсов, звуковым оформлением; сгруппировать сцены по локациям или артистам. Это уже административная история, но ИИ тут сильно экономит время.

Если говорить о нейросетевой музыке, то она уже настолько хороша, что я собрал отличный плейлист из треков, сгенерированных мной для видео, и слушаю его в машине.

Что касается видео, то при хорошей насмотренности работу ИИ сейчас отличают не по качеству (оно порой лучше того, что делают люди), а по структуре материала, сценарию, монтажу. По графике в вышедшем недавно Veo 3.1 уже невозможно понять, создана она людьми или нейросетью. Думаю, еще через полгода мы снова научимся узнавать ИИ видео — но уже за счет высочайшего качества, которого человек сумел бы достичь только с непропорционально высокими затратами.

Есть и проблемы, тормозящие распространение генеративных нейросетей в видеопроизводстве. Есть такой термин — консистентность. Применительно к кино он означает соответствие одного кадра другому. Нужно, чтобы совпадало все: одежда персонажей, лица, обстановка. Применительно к ИИ-видео задача решаемая, но сложная. Существуют технологии, позволяющие этого добиться. Например, сначала все рисуют в виде эскизов, создают стартовые кадры. Второй прием — референсы, которые можно задавать последовательно, и нейросеть будет довольно точно им следовать.

Кроме того, уже появились инструменты, позволяющие редактировать видео, меняя фрагмент кадра, например добавляя или удаляя людей и объекты. Впрочем, для крупного кинопроизводства это и раньше не было проблемой: там могли поправить что-то в кадре на стадии постобработки. Но для всех остальных консистентность остается главным фактором, тормозящим применение нейросетей для создания кино. Это не касается разве что создания мультфильмов.

Насколько я знаю, пока есть только одна полнометражная лента, полностью сделанная нейросетями. Это российский фильм «Чингис-хан», его даже показывали на Каннском фестивале. Но там все настолько плохо в плане изображения... Конечно, создатели картины заявили это как некий стиль. Но, объективно говоря, картинка в видео мыльная, она плавает и трансформируется.

Знаю, что в Голливуде есть две студии, созданные специально для работы с ИИ, но я пока не видел их продукции. Зато проводится много конкурсов короткометражных ИИ-фильмов. Среди участников преобладают специалисты по нейросетям, но и профессиональных киношников уже много. Раньше при просмотре картин с таких конкурсов просто кровь из глаз текла, настолько заметна была работа ИИ. А теперь, глядя на видео, уже не думаешь о том, что это сгенерировано, а завороженно следишь, как все круто придумано и реализовано.

Так что сейчас наступает эпоха инди-фильмов. Они и раньше существовали: их создатели сами писали сценарий и музыку, снимали, монтировали, играть приглашали друзей. А теперь не только камеру покупать не нужно — даже друзей не обязательно иметь. Просто садишься за компьютер и делаешь.

Искусственный интеллект из любых исходников сгенерит замечательное видео. Но есть важный нюанс: у всех бездарностей результат будет выглядеть прекрасно, но одинаково. В нем отразится почерк ИИ, а не стиль автора. Дело в том, что многие пишут простой промпт, получают нечто красивое и на этом успокаиваются. А настоящий художник — автор, режиссер, композитор, сценарист — не удовлетворится хорошей генерацией, он будет добиваться от нейросети реализации собственного видения. Так что ИИ не заменит людей творческих профессий — но те из них, кто научился работать с нейросетями, вытеснят неумеющих.

Полагаю, мы приближаемся к тому моменту, когда фильмы станут генерироваться в реальном времени. Зритель наденет очки виртуальной реальности и сможет ходить внутри картинки, которая будет создаваться прямо по ходу действия, причем в высочайшем качестве. Впрочем, где гарантия, что мы уже не в этих очках?..