Авторы Cyberpunk 2077 применили нейросеть для синхронизации речи и анимации губ персонажей игры
CD Projekt рассказала о том, что применила нейросеть для создания липсинка в русской версии Cyberpunk 2077.
Впрочем, других языков это тоже касается.
Ведущий технический директор персонажей проекта Матеуш Поплавский рассказал, что для этой цели разработчики выбрали нейрость Jali. Последняя анализирует сказанные слова, учитывая тон и любые другие мельчайшие подробности, и соответствующем образом подгоняет анимацию мимики и лица.
Сообщается, что в ролике-примере липсинк для всех языков был создан исключительно Jali.
Напомним, что Cyberpunk 2077 выходит 19 ноября.
в 22:27 20 окт 2020
Новости и статьи по тегам:
- 1 На GOG.com стартовала распродажа в честь 12-летия магазина
- 4 Подборка геймплейных роликов Cyberpunk 2077 от прессы и блогеров
- 17 Демонстрация геймплея Shenmue 3 с диалогами и боевой системой
- 1 Релизный трейлер дополнения Echoes Of The Eye для космической адвенчуры Outer Wilds
- 5 Второй выпуск дневников разработчиков сюжетной RPG Deck of Ashes
- 10 На старте в сервисе Uplay+ будет доступно более 100 игр
Ну вот и дошли технологии до уровня, когда я не могу отличить “ущербную старую анимацию” от “прогрессивной анимации от ИИ”
Так вроде у вальвов такое было с релиза сурса, для разных языков и без ИИ всяких. Кстати, отлично все работало, хз почему с них пример никто так и не взял. Много отличных локализаций пришлось пропустить из-за потраченного липсинка.
@OakSorcererПросто технология анимации лиц работает на уровне движка, а source мало кто использует. Там используется автоматическая генерация анимаций речи персонажей на основе аудиофайлов.
Где-то там тихо в углу плачет Андромеда..
@OakSorcerer нужно делать видео сравнение, в памяти у тебя все круто и красиво, а потом запускаешь и думаешь — да какого... все такое странное?!? =)
@DexEx там использовались технологии которые опередили свое время… слишком =)
Прикольно, такое внимание к мелочам брови, глаза и даже движение головы