Amazon внедряет ИИ для «синхронизации губ» актёров с дублированной речью
Amazon начала внедрять технологию на основе искусственного интеллекта и визуальных эффектов, которая подгоняет движения губ живых актёров под человеческий дубляж на английский язык. Компания сообщает, что новая функция синхронизирует «движения губ актёров с человеческой дублированной аудиодорожкой, создавая бесшовный опыт просмотра и позволяя зрителям полностью погружаться в сюжет». По заявлению Amazon, технология разработана для повышения удобства и доступности просмотра для глобальной аудитории.
Первой серией, где появилась эта опция, стала популярная международная драма Maxton Hall. Две ранее выпущенные серии шоу уже получили обновлённые «lip‑sync»‑дубли, а при выходе третьего сезона платформа также предложит его с такими специальными дубляжами. На странице Maxton Hall на Prime Video логотип шоу обновлён: рядом с ним появился значок с надписью «With Lip Sync For English Dub», указывающий на наличие новой опции.
Amazon предоставила короткий демонстрационный ролик, сравнивающий традиционный метод дублирования и подход с применением ИИ. В ролике видно, что синхронизация с помощью ИИ выглядит более естественно: губы актёров кажутся более согласованными с английской речью, чем при обычной подгонке закадрового голоса поверх оригинального изображения. Однако авторы наблюдений отмечают, что результат пока не абсолютно безупречен и местами всё ещё попадает в «долину зловещего»: видны тонкие несоответствия, придающие изображению искусственность.
Наряду с демонстрацией преимуществ технологии у аудитории возникли вопросы этического и художественного характера. В первую очередь — было ли получено одобрение актёров Maxton Hall на изменение их внешних выступлений с помощью ИИ и как подобные вмешательства согласуются с актёрской волей и правами. Также остаётся неясным, насколько точно алгоритмы способны распознавать и передавать эмоции и тонкие нюансы мимики, чтобы не искажать авторское исполнение и не утратить выразительность при переводе.
Кроме того, критики обращают внимание на границы допустимого: если уже меняются губы и синхронизируется устная речь, то где провести линию между технологическим улучшением качества восприятия и манипуляцией актёрской игрой? Эти вопросы актуальны в контексте планов Amazon расширять применение технологии на другие проекты — компания сообщает о намерении внедрять lip‑sync‑дубли и в дополнительных титулах, чтобы «принести улучшенный опыт просмотра ещё большему числу пользователей и контенту».
На фоне запуска новой функции часть зрителей остаётся сторонниками оригинальной версии произведений с субтитрами. Они указывают, что чтение субтитров сохраняет неподдельную интонацию и ритм исполнителей, предотвращая риск искажения персонажей и режиссёрского замысла посредством автоматизированной подгонки речи.
Подытоживая: Amazon делает шаг в сторону автоматизированной адаптации международного контента для англоязычной аудитории, предлагая технологию, которая делает дублированную речь визуально более совпадающей с артикуляцией актёров. Одновременно это порождает важные вопросы о согласии исполнителей, точности передачи эмоций и этических границах вмешательства ИИ в художественные работы. Компания планирует расширять использование технологии на другие проекты, тогда как часть зрителей предпочитает сохранять оригинальные озвучки с субтитрами.