ИИ до того, как стал известен

Сейчас искусственный интеллект ассоциируется у нас с новейшими технологиями — с генеративными нейросетями и большими языковыми моделями. На деле же в киноиндустрии его начали применять задолго до их появления. Самый яркий тому пример — фильмы по книгам «Властелин колец», которые еще до выхода на экраны считались «непригодными для экранизации».

В конце 1990-х годов Стивен Реджелус разработал программное обеспечение Massive crowd simulation специально для трилогии «Властелин колец». Перед создателями стояла непростая задача: показать масштабные сражения, в которых участвовали тысячи воинов. Количество персонажей, необходимое для экранизации битв и сражений, невозможно было создать с помощью обычной массовки, а работа над анимацией заняла бы огромное количество времени.

Программа Massive позволила решить эту проблему. Она генерировала тысячи цифровых агентов (орков, эльфов и людей) на основе готовых комплектов брони и одежды. Персонажи массовки могли самостоятельно перемещаться, реагировать на происходящее вокруг и выполнять различные боевые действия. Чтобы обучить агентов определенному набору движений, разработчики использовали технологию motion capture (захват движений актера) и анимацию.

При этом компьютерная графика лишь дополняла процесс съемки фильма, а не заменяла его. По настоянию Питера Джексона большинство визуальных эффектов создавались традиционными практическими методами.

Спустя несколько десятилетий ИИ научился не только управлять цифровыми персонажами. Нейросети начали участвовать в создании сценариев, изображений, голосов и персонажей.

Рынок искусственного интеллекта в сфере медиа и развлечений продолжает расти. По данным The Business Research Company, его объем увеличится c $28,32 млрд в 2025 году до $35,77 млрд в 2026-м при годовом темпе роста 26,3%. По прогнозу экспертов, рост рынка продолжится и к 2030 году он будет оцениваться в $87,44 млрд. TBRC также отдельно изучили рынок ИИ в киноиндустрии. По их оценкам, объем увеличится с &1,59 млрд в 2025 году до &1,97 млрд в 2026-м, а к 2030 году он будет составлять &4,6 млрд.

Сегодня вместо традиционного хромакея в некоторых студиях стоят LED-экраны, а для создания визуального контента постоянно используется ИИ. Например, сейчас на кинозаводе «Москино» действуют семь съемочных павильонов, в число которых входит студия виртуального продакшена XOVP со стационарной системой LED-экранов. Такая конструкция позволяет снимать кадры со сложным цифровым окружением. Съемочная группа объединяет физические декорации и компьютерную графику, используя также технологии искусственного интеллекта.

ИИ заменит анимацию?

Нет, но часть работы в киноиндустрии действительно могут взять на себя нейросети. Если раньше каждый кадр мультфильма детально прорисовывал человек, то со временем эти процессы упростила компьютерная графика, а сегодня — искусственный интеллект.

Генеральный продюсер студии «Союзмультфильм» Юлия Осетинская на открытой сессии «Ночь кИИно» рассказала, как компания внедряет ИИ в привычные процессы.

Сейчас студия пробует работать с вертикальным форматом, в нем задействованы почти все их культовые персонажи. По словам Осетинской, такие короткие ролики сейчас особенно популярны и для их создания искусственный интеллект как раз отлично подходит: он позволяет расширить «вселенную» мультфильма и добавить героев в различные миры. Делать такую анимацию вручную было бы долго и дорого.

Осетинская говорит, что эксперименты с ИИ позволяют продакшену быстро создавать предварительную черновую версию продукта: «Мы развиваем наши новые проекты, изучаем, куда можно пойти, как будет смотреться персонаж на экране. Раньше только через полгода работы мы начинали понимать, как герой выглядит в движении. А сейчас искусственный интеллект дает нам возможность моментально создавать прототипы».

Пока студия активно работает над созданием серий, искусственный интеллект позволяет генерировать видео, заполняющие промежутки между эпизодами, — такой контент отлично удерживает внимание и интерес маленького зрителя.

«При этом за всем стоит человеческий труд», — добавляет Юлия Осетинская. Режиссер создает короткий ролик вручную, а художник смотрит, чтобы образ сгенерированного персонажа совпадал с реальным.

Также «Союзмультфильм» использует ИИ для создания заставок с логотипом студии и героями мультфильмов. Правда, технология допускала ошибки при генерации персонажей и необоснованно меняла их размер в кадре, поэтому продакшн решил анимировать их вручную, а сам логотип и фон делать с помощью ИИ.

Сейчас студия планирует создать автономную ИИ-платформу для всего «Союзмультфильма», она позволит компании быть независимой от внешних моделей. Искусственный интеллект поможет команде на этапе разработки персонажей и займется созданием аниматиков (предварительных черновых вариантов будущего мультфильма. — Прим. ред.), генерацией фонов, стилизацией и текстурированием. Он также сможет анализировать сценарии и заменять рутинные процессы, например создавать монтажные листы. Кроме того, разработчики планируют запустить внутри платформы AI-ОТК (отдел технического контроля), который будет выявлять баги при создании анимации.

Сериал без актеров

На «Ночи кИИно» выяснилось, что ИИ уже проник и в процесс создания исторических картин. Например, чтобы сегодня снять сериал про передачу Аляски Соединенным Штатам, не обязательно туда ехать, — об этом рассказывает режиссер, сценарист и генеральный директор кинокомпании AP Entertainment Дмитрий Рудковский.

«У нас возникла идея — воссоздать историю передачи Аляски США на экране. […] В какой-то момент мы сделали хорошую разработку и вышли на защиту этого проекта с целью получить поддержку. Поддержку мы не получили, поломали голову, как нам оптимизировать косты. Затраты на производство — это один из краеугольных камней современного кинопроизводства», — отмечает Рудковский.

Трейлер сериала команда сняла в павильоне студии «Москино» XOVP с применением Virtual Production, технологии создания видеоконтента, которая объединяет реальные съемки с трехмерной компьютерной графикой в режиме реального времени, сцены создала в программе Unreal Engine 5 (это мощный игровой движок для создания трехмерной графики и видеоигр). Для генерации персонажей и массовки создатели фильма опирались на архивные фотографии — это позволило сделать картину максимально правдоподобной.«Наша фишка в том, что главный герой — это скан реально существующего актера, которого мы привлекали в первом тизере», — подчеркивает Дмитрий Рудковский.

Правдоподобность — то, к чему в целом сегодня стремятся все кинокомпании. На открытой сессии «Ночь кИИно» режиссер-постановщик сериала «Кайфск. Город гномов» Сергей Васильев рассказал, что у зрителя возникает чувство отторжения, если тот знает, что полтора часа будет смотреть полностью сгенерированный сериал. Поэтому компания решила максимально сохранить реальную, не сгенерированную фактуру в сериале «Кайфск. Город гномов» (производство «Место силы» для Okko).

Действие сериала происходит в настоящей питерской квартире — ее заняли гномы, которые построили там свой город «Кайфск». Художники рисовали опорные кадры, вручную создавали миниатюрные локации, в которых живут персонажи, и даже предметы, с которыми те взаимодействуют. Людей в кадре играли реальные актеры. Гномов изначально хотели создать с помощью компьютерной графики. Основных действующих лиц — 20, еще около 60 героев нужны для массовки. Подготовка каждого такого персонажа заняла бы много времени и стоила бы, как говорит Васильев, «запредельно дорого», поэтому команда решила воспользоваться ИИ.

Сергей Васильев отмечает, что нейросеть лучше всего работает с теми образами, которые уже хорошо знает: зачастую это люди и котики. А вот вымышленные персонажи вызывают у нее трудности, потому что искусственный интеллект не понимает, как они могут выглядеть, какого размера должны быть. Чтобы помочь ИИ разобраться, художники сделали фигурки гномов — это позволило точнее передать их масштаб.

Есть еще один нюанс: политика безопасности нейросетей ограничивает творческий потенциал многих сцен.

«Нейронки не позволяют персонажам драться, бить друг друга. Запрещено появление крови, какого-то насилия. Так как у нас персонажи будут драться с котом, воевать с крысами и летать на голубях, это накладывает некоторые ограничения. Приходится все это обходить, придумывать, как это преподнести нейросети», — рассказывает Сергей Васильев.

Получается, рабочие руки для создания кино все еще нужны

В этом уверен Сергей Рябов, генеральный директор компании AI-Lab: «Чтобы создавалось именно генеративное кино — оно должно делаться людьми, которые в принципе умеют делать кино. Потому что инструмент — это инструмент. Если человек никогда не работал над обычной сценой или обычной анимацией, он никогда не сможет сделать фильм или мультфильм с помощью ИИ».

Когда в AI-Lab только начали работу над ИИ-сериалом «Палыч», команда проекта состояла в основном из технарей и дизайнеров. Они быстро поняли, что им не хватает профессионалов из киноиндустрии, — так началось сотрудничество с кинокомпанией RWV (Russian World Vision). Со временем AI-Lab пополнил штат режиссерами, операторами и раскадровщиками.

Оказалось, что опытные киношники в команде сильно меняют дело. Во время экспериментов с вертикальными сериалами в компании заметили, что текст на русском языке нейросеть генерирует с трудом. Зачастую у них получалась смесь из нескольких языков, которая к тому же звучала неестественно. Рябов рассказал, что контент пришлось переозвучивать, — для этого в AI-Lab пригласили профессиональных актеров. Благодаря их голосам контент стал более живым и смотрибельным.

В итоге сериал от AI-Lab получил почти 1,5 млн просмотров на почти нулевом канале.

Команда нейросетей

Примеры того, как сделать ИИ частью творческой команды, уже есть. В России существуют полноценные платформы для производства кино с помощью искусственного интеллекта. Например, компания Magic Studio, которую основали Юлия Липатова и Макар Кожухов, разработала собственную программу для производства полнометражных фильмов и сериалов. Помимо ИИ, в команде есть свои режиссеры, художники и сценаристы. Этот внутренний софт уже около года применяется в производстве полнометражного фильма «Юный адмирал».

Как это работает: сначала формируется идея и сценарий, в котором описываются персонажи и локации. Если поменять характер главного героя, то все эпизоды с ним автоматически обновляются. Дальше фильм разбивается на сцены, для каждого кадра задаются отдельные настройки: свет, ракурс, движения. Всю рутинную работу берет на себя программа, режиссер просто контролирует ее работу.

На этапе финальной сборки в ней же можно работать со звуком, монтажом, цветом и музыкой. Поскольку весь фильм собирают в одной программе, при передаче задач между специалистами ничего не теряется.

При этом Magic Studio использует несколько нейросетей и не зависит от одной модели: под каждую задачу команда выбирает подходящий инструмент. У компании также есть прямые контракты с китайскими разработчиками, благодаря этому студия получает доступ к моделям, которых нет в открытом доступе.

Разработчики смогли построить единую производственную среду, в которой вся команда работает над одним проектом, начиная от первых эскизов и заканчивая финальной сборкой, — в этом главное преимущество платформы.

Похожую задачу решает еще одна площадка — это Forge Cinema, ее на открытой сессии представили Яна Шмайлова и Екатерина Кононенко. Работая в киноиндустрии, они поняли, что им не хватает инструмента, объединяющего все процессы в одном месте. Поэтому они создали его сами — в Forge сегодня можно работать и с фильмами, и с сериалами, и с анимацией.

Как объясняют Шмайлова и Кононенко, отправная точка всего производства — это сценарий. Их программа анализирует его, разбивает на сцены, создает досье персонажей, собирает раскадровку, связывает все материалы проекта и превращает каждый утвержденный кадр в готовое видео для монтажа.

Платформа позволяет структурировать работу с генеративным контентом: связывать промпты и референсы с конкретными кадрами, хранить историю генераций, а также работать с раскадровками, персонажами и другими материалами проекта.

В Forge Cinema все равно говорят о том, как важно работать с командой профессионалов из сферы кинопроизводства: «Кино невозможно создавать одному человеку, важно работать в команде, привлекать профессионалов. Важно рисовать раскадровки, понимать, какая у тебя творческая задача, нельзя на откуп отдавать все нейронкам», — подчеркивает Яна Шмайлова.

«Промт, пот и слезы»

Еще спикеры уверены в том, что нейросети нужно проявить себя в решении производственных задач, прежде чем она станет частью съемочной группы. Чтобы создать хороший кадр, человеку необходимо правильно выстроить цепочку промтов, подготовить референсы и почистить вручную результат от ошибок нейросети — это поможет исключить лишние пальцы на руке или незапланированное изменение внешности героя. Полноценные платформы, которые объединяют все эти задачи в одном месте, пока находятся на стадии разработки, зато под каждый запрос есть отдельные инструменты.

Так, для работы с изображениями многие используют Nano Banana от Google Gemini. Модель создает изображение в 14 форматах соотношения сторон, на одну генерацию уходит четыре-шесть секунд. Нейросеть упрощает работу над визуальным контентом за счет возможности сохранять образ персонажей и исходную структуру кадра во время правок.

Для генерации видео используется китайский сервис Kling AI. Программа создает ролик по текстовому запросу с частотой 60 кадров в секунду и разрешением до 4K. Нейросеть также анимирует изображения, добавляет диалоги и фоновые звуки, синхронизирует их с действием в кадре и управляет камерой, которая может приближаться, отдаляться или следить за объектом. Однако для длинных видео бесплатная версия не подойдет, ее хватит только для создания небольших роликов.

Нейросеть Seedance AI от ByteDance тоже может генерировать видео — и не простые, а кинематографичные. Программа способна создавать единый аудиовизуальный поток: система сама создает фоновый шум, адаптируя его под события на экране, что и делает картинку естественной.

В феврале этого года вышла эта же модель версии 2.0, которая стала вирусной после ролика с дракой Брэда Питта и Тома Круза, — настолько видео было реалистичным. И таких роликов было немало: Дарт Вейдер прогуливался по Нью-Йорку, а «Игра Престолов» получила альтернативный финал. Под давлением исков о нарушении авторских прав компания приостановила глобальный запуск модели, пока она работает только в Китае. В августе ByteDance и ассоциация кинокомпаний Голливуда Motion Picture Association подписали соглашение по усилению защиты авторских прав, чтобы ограничить создание контента без разрешения правообладателей.

Какое кино мы будем смотреть

Иногда нам трудно отличить сгенерированное видео с котятами от реального, в комментариях постоянно идут споры о подлинности контента — настоящее видео при этом называют иишным, иишное — подлинным.

Но в полном метре создать ИИ-продукт, который не отличить от обычного кино, вряд ли получится. Киноиндустрия не может развиваться без профессионалов. Сегодня искусственный интеллект хорошо справляется с короткими роликами для социальных сетей и с трейлерами, которые не требуют сложных режиссерских сцен и глубоких диалогов. Для более серьезных и масштабных проектов всегда нужна полноценная команда, которая умеет создавать кино и мультфильмы, потому что нейросети — это в первую очередь инструмент.