Авторы Cyberpunk 2077 применили нейросеть для синхронизации речи и анимации губ персонажей игры
CD Projekt рассказала о том, что применила нейросеть для создания липсинка в русской версии Cyberpunk 2077.
Впрочем, других языков это тоже касается.
Ведущий технический директор персонажей проекта Матеуш Поплавский рассказал, что для этой цели разработчики выбрали нейрость Jali. Последняя анализирует сказанные слова, учитывая тон и любые другие мельчайшие подробности, и соответствующем образом подгоняет анимацию мимики и лица.
Сообщается, что в ролике-примере липсинк для всех языков был создан исключительно Jali.
Напомним, что Cyberpunk 2077 выходит 19 ноября.
в 22:27 20 окт 2020
Новости и статьи по тегам:
- 29 Metroid Dread запустили на эмуляторе на PC за три дня до официального релиза
- 25 5 минут геймплея Resident Evil Village на PS4 Pro
- 43 Создатели эмулятора RPCS3 смогли улучшить производительность в The Last of Us и God of War 3
- 46 30 минут геймплея Assassin’s Creed Valhalla
- 19 CDPR не покажет аддон для Cyberpunk 2077 на Gamescom
- 52 Вышла первая серия «Возвращения в Простоквашино» от «Союзмультфильма»
Ну вот и дошли технологии до уровня, когда я не могу отличить “ущербную старую анимацию” от “прогрессивной анимации от ИИ”
Так вроде у вальвов такое было с релиза сурса, для разных языков и без ИИ всяких. Кстати, отлично все работало, хз почему с них пример никто так и не взял. Много отличных локализаций пришлось пропустить из-за потраченного липсинка.
@OakSorcererПросто технология анимации лиц работает на уровне движка, а source мало кто использует. Там используется автоматическая генерация анимаций речи персонажей на основе аудиофайлов.
Где-то там тихо в углу плачет Андромеда..
@OakSorcerer нужно делать видео сравнение, в памяти у тебя все круто и красиво, а потом запускаешь и думаешь — да какого... все такое странное?!? =)
@DexEx там использовались технологии которые опередили свое время… слишком =)
Прикольно, такое внимание к мелочам брови, глаза и даже движение головы