Будущее Голливуда — это не просто ввод промптов в базовые генеративные ИИ-модели
Несмотря на многочисленные разговоры о том, что генеративный искусственный интеллект готов революционизировать киноиндустрию, до сих пор не появилось проектов, созданных с помощью этой технологии, которые выглядели бы как развлечения, за которые люди готовы платить. Большинство видео-моделей ИИ-компаний по-прежнему способны выдавать лишь короткие фрагменты визуально непоследовательных кадров. А некоторые из крупнейших голливудских партнерств в области ИИ внезапно распались, что создает впечатление, будто студии не могут полагаться на новые технологии из Кремниевой долины. По большей части, низкокачественные короткие видео — это единственное, на что способны крупные производственные дома при использовании генеративного ИИ. Но ситуация может измениться, если студии возьмут на вооружение опыт экспериментальных проектов, дебютировавших в этом году на кинофестивале «Трайбека».
Хотя маловероятно, что генеративный ИИ когда-либо сможет создать увлекательный фильм с нуля, на «Трайбеке» было представлено несколько картин, продемонстрировавших, как человеческие художники могут эффективно использовать эту технологию.
Хотя ни один из фильмов с использованием ИИ, показанных на «Трайбеке», не был настолько плох, как низкокачественный видеоконтент, которым компании вроде OpenAI и xAI засоряют интернет, некоторые проекты стали наглядными примерами того, почему генеративный контент часто кажется безжизненным по сравнению с искусством, созданным человеком. Анимационный короткометражный фильм «Roar», созданный студией Illuminai Studios, выглядел скорее как дезориентирующий монтаж сгенерированных ИИ клипов, а не как цельное кинопроизведение. А картине «ChikaBOOM!» от Asteria Film Co. не хватило визуальной и звуковой огранки, необходимой для того, чтобы по-настоящему увлечь зрителя динамичным фэнтези о начинающем маге.
Общая шероховатость «Roar» и «ChikaBOOM!» казалась отражением внутренних технологических ограничений, заложенных в их производственные процессы с упором на ИИ. Но другие фильмы, такие как «Dear Upstairs Neighbors» от Google DeepMind и «Mauvais Soleil» от OpenAI, показали, как кинематографисты могут избежать этих проблем, если применяют генеративный ИИ с большей изобретательностью.
Сценарист и режиссер, ветеран Pixar Конни Цинь Хэ, в сотрудничестве с исследователями из Google DeepMind, создала «Dear Upstairs Neighbors» — историю об измученной девушке, которая пытается лечь спать. Все, чего хочет Ада, роль которой исполнила Марсия Майер, также выступившая продюсером короткометражки, это получить пару часов спокойного отдыха перед тем, как проснуться и вернуться к работе. Но каждый раз, когда она начинает засыпать, какофония шумов из квартиры соседей сверху резко будит ее и заставляет гадать, чем они могут заниматься посреди ночи.
Чтобы придать миру «Dear Upstairs Neighbors» уникальный стиль, Хэ привлекла производственного дизайнера Pixar Инцзуна Синя, который рисовал концепт-арт в Photoshop и на бумаге акриловыми красками. Экспрессионистская эстетика этих иллюстраций стала ключом к воплощению фантастической истории, но она также поставила уникальную задачу перед исследователями DeepMind. Для большинства моделей генерации видео живописный стиль иллюстраций было бы трудно превратить в визуально последовательные кадры. Однако инженеры DeepMind разработали пользовательские версии Veo и Imagen, специально предназначенные для того, чтобы дать художникам «Dear Upstairs Neighbors» возможность тонко настраивать результаты.
Здесь видно, как кинематографистам приходится обходить некоторые типичные ограничения генеративного ИИ.
Поскольку кастомные модели были обучены на концепт-арте Синя, они могли последовательно генерировать кадры, соответствующие видению проекта режиссером. Модели преобразования текста в видео отлично справлялись с воспроизведением определенных стилистических деталей, таких как визуализация звука при взаимодействии объектов друг с другом. Но чтобы по-настоящему выстроить сцены «Dear Upstairs Neighbors» так, чтобы они рассказывали связную историю, творческой группе короткометражки пришлось действовать более традиционными методами. Создавая черновую анимацию в Autodesk Maya, отраслевом стандарте для 3D-риггинга и визуальных эффектов, производственная команда могла гарантировать, что сцены будут разворачиваться именно так, как они задумывали. А загружая эти черновики в Veo, художники могли создавать сцены, которые были более визуально отполированы и готовы к дальнейшему улучшению с помощью дополнительных стилизованных активов, сгенерированных Veo и Imagen.
Больше, чем любой другой фильм на «Трайбеке», «Dear Upstairs Neighbors» выглядел как пример того, как генеративный ИИ может использоваться в качестве специализированного инструмента, который реально помогает художникам в развитии их идей. Весь рабочий процесс фильма опирался на созданное человеком искусство и людей, принимающих тонкие творческие решения, на которые текстовые видео-генераторы не способны самостоятельно. Важно помнить, что «Dear Upstairs Neighbors» не был бы настолько визуально впечатляющим, если бы его создавали с помощью базовых версий различных моделей Google. Модели хорошо сработали для этой конкретной короткометражки, но этого и следовало ожидать от проекта, который также во многом является рекламой технологий Google.
«Dear Upstairs Neighbors» смотрелся гораздо приятнее, чем фильмы, которые OpenAI привезла на фестиваль в этом году. В полуавтобиографической драме Элис Гу «Smoked» использовалась Sora для воссоздания пожара в Палисейдс, а «Mauvais Soleil» Юссефа Михрафа содержит ряд фотореалистичных сцен, сгенерированных с помощью творческих инструментов OpenAI. При просмотре обоих фильмов было видно, как их создателям приходилось обходить некоторые типичные ограничения генеративного ИИ. Широкие планы огненных сцен в «Smoked» выглядели немного мультяшными, но эффект работал несколько лучше на крупных планах, снятых с использованием установки, подобной Volume, где женщина и ее сын пытаются спастись от огня в машине. Большинство кадров в «Mauvais Soleil» длятся всего несколько секунд, а единственный говорящий персонаж — это невидимый рассказчик, но история фильма о том, как жизнь человека искажается искусственным интеллектом, заставляет воспринимать эти детали как преднамеренный художественный выбор.
Присутствие OpenAI на «Трайбеке» было несколько неожиданным, учитывая недавнее решение компании полностью закрыть Sora. Именно внезапное закрытие Sora привело к тому, что полнометражный фильм OpenAI «Critterz» не смог дебютировать на Каннском кинофестивале в этом году. Кажется, что OpenAI может отходить от приложений, ориентированных на видео, но в сфере генеративного ИИ по-прежнему есть другие игроки, создающие инструменты, которые кинематографисты могут использовать для реализации своих проектов.
Эти рабочие процессы действительно хорошо функционируют только тогда, когда ими руководят художники-люди.
Потратив всего 2000 долларов исключительно на вычислительные ресурсы, сценарист и режиссер Эш Куша смог в одиночку создать «Dreams of Violets» — документальную драму, посвященную общенациональным протестам, потрясшим Иран в течение прошлого года. Используя Kling AI, Claude, Gemini и Nano Banana, Куша рассказывает вымышленную историю о группе людей, которые оказываются в ловушке в переулке, пока полиция патрулирует улицы и жестоко обращается с гражданскими лицами. Проект занял у Куши всего несколько недель, и, хотя он опирается на мощный повествовательный фундамент, он не привносит ничего нового в визуальном плане.
Просматривая все эти фильмы, я отчетливо ощутил, что не существует будущего, в котором студии выпускали бы коммерчески жизнеспособные проекты, просто вводя промпты в модели генеративного ИИ. Такой контент, вероятно, никуда не денется, но это не то, под чем крупнейшие голливудские студии захотели бы поставить свои имена. Гораздо более вероятным кажется сценарий, при котором крупные ИИ-компании, такие как Google, будут сотрудничать со студиями для создания специализированных моделей, адаптированных под очень специфические рабочие процессы. И эти рабочие процессы действительно хорошо функционируют только тогда, когда ими руководят художники-люди с очень четким творческим видением.


