На большие экраны Якутии с 19 марта стартует прокат семейной комедии «Мэхээлэчээн Булчут» («Мои таежные приключения»). По сюжету, юный герой раскроет для себя волшебный мир, в котором ему предстоит путешествовать по якутской тайге с говорящими животными, что происходит в местном кино впервые.
О том, как шла работа с анимацией и спецэффектами над экранизацией сказок Тимофея Сметанина и Якова Стручкова, рассказал известный специалист по VFX Петр Хики.
По словам Петра, работа над кинокартиной потребовала от команды не только классических навыков компьютерной графики, но и разработки собственных пайплайнов (схем работы) с использованием искусственного интеллекта.
«Наша команда делала липсинг животных уже на готовых голосах на якутском языке», — отмечает Хики. Это означало, что аниматорам нужно было точно попадать в артикуляцию, чтобы звери на экране «говорили» голосами якутских актеров. Саунд-дизайн VFX-кадров добавлялся уже после завершения анимации.
Фото: Улус МедиаПеред командой стояла задача анимировать множество пушистых персонажей. Стандартные методы (трекинг морды с наложением 3D-модели или полное воссоздание в 3D) были бы слишком трудоемкими. Поэтому выбор пал на самый современный метод — использование ИИ-генерации анимации через промптинг (написание запросов и инструкций нейросети).
Фото: Улус МедиаОднако, когда стартовал постпродакшн, готовых пайплайнов (схем работы) под такие задачи не существовало. Команде пришлось путем проб и ошибок создать свой метод и темп работы. Ведь проблема еще и осложнялась тем, что ИИ «не делает 4K и откровенно плохо воссоздает шерсть», а в фильме практически все кадры содержат животных и птиц с мехом и перьями.
Генерация стала лишь отправной точкой. Далее команда вручную улучшала качество.
Чтобы оптимизировать рабочий процесс и не оформлять множество подписок на зарубежные сервисы, команда недавно разработала собственную ИИ-платформу PIKLY.RU. Этот стартап объединил все актуальные фото-видео нейросети в одном месте.
«Без него мороки было бы намного больше», — признается специалист.
Сцены, требующие резкой реакции или смеха персонажей, делались через сложную промпт-инженерию. Это был настоящий вызов: нейросеть постоянно «выходила из-под контроля». Команде приходилось делать множество попыток, перегенерировать результат и буквально склеивать удачные куски из разных версий, чтобы швы между кадрами были незаметны.
Самый сложный персонаж — Волшебный олень — создавался по-другому. Его делали в полноценном 3D, с риггингом (скелетом для анимации) и грумингом (созданием шерсти).
Ключевые кадры рендерили, а затем внедряли в съемку для дальнейшей нейроанимации.
«Мы боялись, что нейросеть уничтожит детали наших трудов и эффект волшебства самого существа, — говорит Петр Хики. — Но мы смогли нашими классическими методами VFX воссоздать все как нужно».
Помимо главных героев, команда оживила целый мир: комаров, бабочку, двух смышленых жуков, бабушку сову, маленького лисенка и воронов. Особого внимания заслуживают сцены взаимодействия анимации с живыми актерами. Например, в кадрах, где мальчик обращается к псу Сэргэху, а тот органично отвечает, использовались методы композитинга и аккуратного внедрения персонажей в кадр.
Фото: Улус Медиа«Наша команда сделала гигантскую работу за очень короткий срок», — резюмирует Хики, выражая благодарность своей команде: арт-директору Николаю Туди, 3D-моделлеру Петру Гуляеву, менеджеру и промптеру Анне Борисовой, композерам Евгению Осипову и Арсену Герасимову и другим.
