ИИ на службе у кино

В мае в американский прокат выйдет первый полнометражный фильм с «визуальным дубляжом», сообщает издание New Atlas.

Шведский научно-фантастический фильм «Смотри на небо» использует инновационную технику «визуального дубляжа», позволяющую изменить движения губ актеров и синхронизировать их с дублированным английским диалогом. При этом ни одна сцена не потребовала пересъемки.

Это стало возможным благодаря лос-анджелесской компании Flawless, специализирующейся на использовании искусственного интеллекта в кино и технологии TrueSync. Она анализирует игру актера, создает объемную 3D-модель его лица и затем в готовом фильме уже на этапе постпродакшена адаптирует движения губ.

TrueSync существует уже несколько лет. Но всеобщее внимание технология привлекла, когда её использовали для удаления нецензурной лексики из британского survival-хоррора 2022 года «Вышка», режиссёром которого является генеральный директор компании Flawless Скотт Манн.

Посмотрите трейлер - на месте героя фильма вы бы тоже выругались, если бы оказались на вершине гигантской радиовышки без возможности спуститься. Технология TrueSync помогла заменить 35 нецензурных слов на менее обидные, такие как «чёрт возьми», при этом не потребовалось переснимать ни одной сцены. Вот как это стало выглядеть в итоге.


На этот раз технологии компании Flawless использовались для визуального дубляжа целого фильма. «Смотри на небо», который дебютировал в родной стране в 2022 году под названием «НЛО Швеция», рассказывает о девушке-подростке, которая ищет своего пропавшего (возможно, похищенного инопланетянами) отца с помощью клуба наблюдателей за НЛО.


Актёры, сыгравшие в оригинале, дублировали свои роли на английском языке в студии звукозаписи, поэтому их шведский акцент сохранился.

«Мы уверены, что зрители воспримут этот фильм как англоязычную картину, не замечая технических изменений, — заявил Альбин Петтерссон из производственной компании Crazy Pictures. - Результат превзошел все наши ожидания».

Технология также включает систему управления правами, которая гарантирует, что редактирование с помощью ИИ будет осуществляться только с согласия артистов. Кроме того, утверждается, что TrueSync позволяет сэкономить до 50 % средств на пересъёмке сцен для дубляжа по сравнению с традиционными методами.

Скоро у всех американских зрителей появится возможность лично оценить, насколько реалистично общаются шведские герои на английском языке. Фильм «Смотри на небо» выйдет в американский прокат 9 мая.

---

Перевод Татьяны Мурусидзе
Иллюстрация: «За рубежом», Midjourney