NCSOFT показала собственную технологию лицевой анимации в Project M

На GDC 2023 разработчики Lineage показали набор собственных технологий синтеза речи и лицевой анимации на основе искусственного интеллекта.

Компания представила видео на презентации State of Unreal от Epic Games на GDC, посвященном новым инструментам и технологиям Unreal Engine. Директор по стратегии NCSOFT Сонги Юн была на сцене мероприятия, чтобы представить последний проект компании Project M и его трейлер.

В этом трейлере цифровая версия главного креативного директора компании Тэкджина Кима появилась на экране и провела зрителей через мир Project M и основной игровой процесс нвого приключенческого боевика с интерактивными элементами, разрабатываемого для консолей. Основной игровой процесс построен на расширении и изменении истории с помощью информации, которую игрок получает на протяжении всей игры.

Этот цифровой человек был разработан с использованием собственной технологии искусственного интеллекта в сочетании с художественными и графическими технологическими возможностями. Голос в трейлере был сгенерирован с помощью технологии синтеза текста в речь (TTS) компании AI. Он используется для перевода текстовой информации в естественную человеческую речь, отражающую голос определенного человека, его речевой акцент и эмоции.

Выражение лица и липсинк были созданы с помощью новой технологии компании. Это технология лицевой анимации на основе искусственного интеллекта, которая автоматически создает лицевую анимацию, соответствующую заданному тексту или голосу.

Сонги Юн заявила: «Project M — это наша последняя инновация, позволяющая использовать мощь передовых технологий искусственного интеллекта и графики на беспрецедентном уровне». Она добавила: «С помощью Unreal Engine мы реализовали наше видение Project M с плавной интеграцией нашей базовой технологии искусственного интеллекта, что привело к захватывающим дух деталям».

Совсем недавно NCSOFT рассказывала о ещё одном своём проекте – Project G, который является стратегией в реальном времени, ориентированной на PC и мобильные устройства.