JALI Research: процедурный липсинк, который стоит за Cyberpunk 2077

Ночному городу не хватает многого, но точно не реплик. В Cyberpunk 2077 — сотни персонажей, десятки часов диалогов и десять с лишним языков локализации, и каждый персонаж должен говорить «своим ртом»: с правильной артикуляцией, мимикой, характером. Анимировать это вручную покадрово невозможно — и CD Projekt Red не пыталась. Поверх классического пайплайна в игре работает процедурная система JALI Research: она генерирует липсинк и полноценную мимику из звуковой дорожки, а аниматорам оставляет контроль.

Разбираемся, как устроен этот софт, почему он не «чёрный ящик» и как он встаёт рядом с захватом движения.

Что такое JALI

JALI Research Inc. — разработчик программного обеспечения для автоматизированной лицевой анимации и липсинка. Компания выросла из исследовательского проекта в Университете Торонто в 2016 году, а сегодня её инструментами пользуются больше пятидесяти игровых студий: CD Projekt Red, Activision, Blizzard Entertainment, Riot Games, Obsidian, DON'T NOD, 2K. Среди клиентов есть и неигровые: анимационные сериалы, виртуальное производство, цифровые ассистенты, VR-тренинги и чат-боты.

Миссия формулируется просто: дать создателям цифровых персонажей делать их выразительными без многолетней ручной работы над каждым кадром.

Не «чёрный ящик»

Главная претензия к процедурной анимации всегда была одна: теряется контроль. Софт генерирует движение — и аниматору остаётся принимать результат как есть, потому что внутри непрозрачная кухня.

JALI устроен иначе. Система выдаёт разреженные одномерные кривые — тот же формат, которым оперирует аниматор в Maya. Их можно править, итерировать, смешивать с кейфрейм-анимацией и данными mocap. Результат выглядит так, будто его положил аниматор, — и редактируется так же. Это делает JALI не заменой ручной работы, а её ускорителем: рутину генерирует машина, творческие решения остаются человеку.

Под капотом: от звуковой дорожки до мимики

На входе — аудиодорожка диалога и текст (или TTS). Система разбирает речь на фонемы, извлекает тон и эмоциональную окраску, а затем вычисляет соответствующие движения лицевых мышц и применяет их к ригу персонажа. Языкоспецифичный липсинк — за секунды, а не за смену.

Но липсинком дело не ограничивается. JALI управляет полной лицевой производительностью:

• Глаза — моргание, взгляд, саккады
• Брови и пользовательские выражения
• Настройки речи и профилирование персонажа
• Тегирование эмоций и асимметрия
• Движения головы и шеи

Отдельная деталь — Heart & Mask, система, построенная на теории актёрского мастерства и психологии. Аниматор смешивает внутреннюю эмоцию персонажа («сердце») с внешней маской, которую тот показывает окружающим. Так получаются многослойные исполнения: герой говорит спокойно, а в глазах читается напряжение.

Масштаб Cyberpunk 2077

Самый громкий кейс JALI — Cyberpunk 2077. Система управляет лицевой анимацией каждого персонажа игры — во всех языках локализации. Как описывает эффект Себастьян Калемба, глава анимации CD Projekt Red:

«Общее качество лицевой производительности — это одно, но другое дело — попасть в правильный, разговорный, языкоспецифичный способ говорить, которого каждый носитель ждёт от персонажа. Персонажи, которые пересекают международные границы таким личным образом, — это очень мощно».

Показательна и повседневная механика. Если персонаж должен кричать, а не бормотать, аниматор не перезапускает работу — переключает атрибут стиля речи с «mumble» на «shout», и кривые пересчитываются на лету. Процедурный подход позволяет анимировать «снова и снова, в огромном масштабе», как формулирует Сара Уотлинг, CEO JALI Research.

Интеграция в пайплайн

JALI встраивается в существующие производственные цепочки, а не требует их перестраивать:

Интерактивный интерфейс рига не зависит от языка и подключается к индустриальным и собственным ригам студий, добавляя настраиваемое управление фонемами и action units. Весь рабочий процесс автоматизируется скриптами: пакетная обработка анимации, подключение ригов, экспорт. Поэтому JALI одинаково пригоден и для производства с тысячами реплик, и для небольшой команды.

Партнёрства и инициативы

JALI не сидит в изоляции. В 2026 году компания объявила о стратегическом партнёрстве с Goodbye Kansas: движко-независимый пайплайн цифровых людей, где процедурная лицевая анимация JALI работает в связке с системой риггинга Project Freya. Решение целят в AAA-игры, но лёгкая и потокобезопасная архитектура позволяет масштабировать его на консоли, ПК, локационные аттракционы и интерактивных AI-персонажей.

На GDC 2025 JALI стала одним из инициаторов Anim Revolution — коллаборации с Immersive Enterprise Labs, House of Moves, Ozone Story Tech, mGear, Xencelabs, Vicon и Lenovo, которая демонстрирует сквозной производственный цикл: от дизайна и 3D-моделирования до риггинга, лицевой анимации и цифрового рисунка.

Третье направление — JALI Education: программа для начинающих аниматоров, дающая практический опыт с индустриальными рабочими процессами и фундаментальными принципами.

JALI и mocap: кто кого

Подходы к лицевой анимации часто противопоставляют, но работают они на разных уровнях задачи:

Для студий, работающих с захватом движения, JALI логичнее рассматривать не как конкурента, а как пару: mocap даёт общую пластику и телесную выразительность, JALI — точный липсинк и тонкую мимику. И то и другое сводится в одном риге.

Вердикт

JALI Research занимает нишу, которая с ростом объёмов контента и требований к локализации становится только критичнее: автоматизация без потери авторского контроля. Софт снимает с аниматоров рутину и возвращает им время на творческие решения — и именно поэтому он прижился в студиях, где цену каждой реплике считают буквально.

Если ваш пайплайн живёт вокруг Maya или Unreal Engine 5, а персонажам нужно говорить на нескольких языках — JALI стоит оценить на своём материале.