Впечатления от просмотра AI кинофестиваля в Токио, Япония. Что такое эффекты, которых не может достичь ChatGPT Sora?

Японский фестиваль фильмов с искусственным интеллектом (AIFJ) проходит в Токио, в Токийском инновационном центре (TIB), предоставляя зрителям уникальный опыт, позволяя witness инновационную энергию, рожденную слиянием искусственного интеллекта и киноискусства. В этом году на фестивале было показано более 70 короткометражек, созданных с использованием технологий ИИ, охватывающих различные жанры, включая игровые фильмы, анимацию, документальные и экспериментальные фильмы. Здесь представлена одна из выдающихся работ, получившая официальное специальное упоминание на фестивале, - это короткометражный фильм To The Bones, который также доступен на Youtube. Режиссер Клаудио Са на своем канале Youtube подробно объясняет, как он использовал инструменты ИИ, такие как ChatGPT Sora, Midjourney и Runway, в сочетании с традиционными Photoshop и Premiere для создания 3D анимации.

Введение в To The Bones

Режиссер “To The Bones” - Клаудио Са, он является основателем и анимационным директором Pistachio Studios, имеет более десяти лет опыта в производстве анимации. Этот короткометражный фильм был создан им с использованием ChatGPT Sora и других инструментов ИИ в сочетании с традиционным программным обеспечением, таким как Photoshop и Premiere.

История “До костей”

Уставший путешественник встретил маленького человека, который подарил ему сверкающий красный камень. После того как он положил этот камень при себе, у него возникло бесконечное желание, и в конце концов он заплатил за это цену. Фильм вдохновлен сказкой Джордана Питерсона.

Вызов по созданию AI-анимации “To The Bones” на 30 дней

Режиссер To The Bones бросил вызов создать 3D-анимационный фильм с использованием инструментов ИИ за 30 дней с очень ограниченным бюджетом. Режиссер не хотел, чтобы фильм выглядел как созданный искусственным интеллектом, и надеялся, что с помощью первоначальных набросков сценария и своего стиля кинотворчества он сможет создать более ручной, более последовательный и более ориентированный на сюжет проект. Этот 6-минутный короткометражный фильм использует такие инструменты, как недавно выпущенная платформа OpenAI Sora ChatGPT Open Art, Runway, а также традиционные программы, такие как Photoshop, Premiere Pro и After Effects.

ChatGPT + другие инструменты AI для создания анимационных фильмов

Сначала Клаудио сначала нарисовал эскиз персонажа в Photoshop, использовав Midjourney для генерации фона и одежды. Клаудио загрузил нарисованного персонажа и черновик истории в ChatGPT, чтобы AI получил некоторые текстовые подсказки (prompt), чтобы сделать детали сюжета более конкретными. Клаудио заметил, что история всё ещё недостаточно напряжённая, после чего добавил других персонажей, позволяя ChatGPT выполнять функции, упрощая сценарные работы и добавляя больше сюжета.

Функция ChatGPT Sora 360 позволяет персонажам естественно поворачиваться.

Открытие функции зеленого экрана в Sora позволяет заменять различные фоны. Клаудио использует функцию 360 градусов, чтобы персонажи могли поворачиваться. Если персонажи в анимационном фильме не могут естественно двигаться, это делает их очень неуклюжими и странными. На множестве фильмов на кинофестивале не удалось преодолеть эту трудность, но благодаря многолетнему опыту в производстве анимации Клаудио позволил ИИ выполнить часть работы. ChatGPT преобразует черновик истории в сценарий, а ElevenLabs озвучивает персонажей, добавляя как можно больше живых кадров, чтобы сюжет и изображение были более естественными и трогательными.

То, что OpenAI ChatGPT Sora не может сделать

Sora можно рассматривать как высококлассный кухонный прибор, такой как мультиварка или духовка. Если еда правильно приготовлена и помещена туда, то готовый продукт быстро превратится в вкусное блюдо. Успех To The Bones заключается в том, что «предварительная работа» и «последующая работа» обрабатываются с помощью ИИ. OpenArt генерирует сюжет, а Claudio переносит сцену в Photoshop для обработки каждого кадра. Он особенно рекомендует Runway и OpenArt для создания черновиков и изображений, одновременно тренируя OpenAI для генерации большего количества изображений. Однако главная проблема создания анимации с помощью ИИ заключается в «согласованности повествования». В анимационных фильмах с сюжетом необходимо связывать историю и сцену поэтапно. Сделать анимационный фильм несложно, но чтобы рассказать трогательную историю, нужно полагаться на сильные визуальные эффекты и неожиданные сюжетные повороты. В такой момент только люди с опытом в киноиндустрии и сценарном мастерстве могут решить эти технические трудности. Многие повороты сюжета все еще не предсказуемы для существующего ИИ. В этот момент вспоминается, что недавно в Японии было раскрыто дело, которое оставалось нераскрытым более двадцати лет. Японская домохозяйка была убита в своем доме, и у полиции не было никаких улик о мотивах и преступнике. Даже с научными методами, такими как ДНК-анализа, убийцу не удалось найти. В итоге мотив преступления оказался простым: убийца просто завидовал этой женщине, которая завоевала сердце мужчины, который ему нравился. Это и есть причина, по которой сложные операции человеческого мозга и художественный талант невозможно полностью заменить искусственным интеллектом. Чтобы создать историю с неожиданным поворотом, которая также логична, необходимы человеческий мозг и логика мышления, которые машина никогда не сможет полностью предсказать. Сценаристы Голливуда пока все еще имеют работу.

Справочные материалы:

До костей

Я снял фильм с ИИ. Вот что произошло.

To The Bones Используемые инструменты:

ChatGPT Sora от OpenAI

AI помощник Клинг

Скрипт Runway

Голосовое озвучивание AI Elevenlabs

Эта статья о впечатлениях от AI кинофестиваля в Токио, Япония. Каковы эффекты, которые ChatGPT Sora не может достичь? Впервые опубликовано в Chain News ABMedia.