Данный проект является учебной работой студента Школы дизайна или исследовательской работой преподавателя Школы дизайна. Данный проект не является коммерческим и служит образовательным целям

Уже сейчас искусственный интеллект задействован в огромном количестве систем, решении разнообразных задач и даже реальных проектах. Но многие технологии все еще скорее экспериментальны.

Получится ли использовать технологии на базе ИИ в работе над анимацией для реального проекта, дипломного короткометражного ролика «‎Ордалион»‎?

big
Исходный размер 1920x1080

Ордалион / 2023 / превиз

Синопсис: Бывалый охотник за жемчужинами по воле судьбы оказывается пленником мистической Рыбы-корабля, когда-то модифицированной людьми под военную машину. Герой исследует существо в попытках отыскать выход, а озлобленная на человечество рыба ему препятствует.

big
Исходный размер 2480x1350

Ордалион / 2023 / превиз

Эксперимент я буду ставить на примере двух сцен из превиза:

1. Персонаж в ужасе убегает, падает, продолжает бег. 2. Персонаж вбегает в помещение, резко заскользив и меняя направление движения.

Исходный размер 1200x450

2.1 Генерация анимации для проекта через текстовые запросы

Попробуем заполучить анимацию для первой сцены. Необходимые элементы успеха: бег, падение, продолжение движения.

(К получившемуся результату я прикрепляю точный запрос, отправленный боту).

/a frightened character runs forward in a panic, suddenly he stumbles, looks back, gets up and runs further in a panic

/character runs fast and falls down

/сharacter runs fast in fear and panic. He accidentally falls down but gets up and runs fast again

/character runs super fast and falls down

/character runs fast and falls down

Часто анимация противоречит реальному запросу. Вместо того чтобы упасть, персонаж прыгает, начинает трястись в конвульсиях встает на голову. Получить нужную анимацию можно, но маловероятно.
Исходный размер 1100x500

Генерация по текстовому запросу через сайт Replicate

Исходный размер 1100x500

Генерация по запросу: run fast, fall / Vmotionize

/character falls on his knees

Исходный размер 1920x1080

Смогут ли они подружится? / Главный герой мультфильма «Ордалион‎»‎

Исходный размер 1280x720

Одна их сгенерированных анимаций, перенесенная на персонажа мультфильма

2.2 Генерация анимации для проекта с помощью ИИ мокапов

Исходный размер 2480x584

Референсы к анимации для «‎Человека Паука: через вселенные»‎ / Emma (Pei-Hsuan) Shih

Для работы с этим инструментом потребуются видео-референсы. Многие редакторы на базе технологии предоставляют возможность покадрового редактирования, получившихся поз.

Исходный размер 2480x720

Запишем примерное движение для первой и второй сцены

Исходный размер 2480x1350

Покадровое редактирование получившихся поз с помощью функционала сайта

Исходный размер 2480x720

Анимация от DeepMotion

Исходный размер 1280x720

Вариант от Radical

Исходный размер 1280x720

Генерация от Plask

Наблюдается общая проблема: некорректный контакт рук и ног с поверхностью и сложность точного определения движений. Вероятно, для менее динамичных анимаций без большого количества беспорядочных и хаотичных движений ИИ-метод мокапа подойдет лучше.

Исходный размер 1280x600

Генерация от Radical

Глава 2. Эксперимент
Проект создан 01.01.0001
Глава:
1
2
3
4
Мы используем файлы cookies для улучшения работы сайта НИУ ВШЭ и большего удобства его использования. Более подробную...
Показать больше