위처 시리즈로 유명한 CD PROJEKT RED 스튜디오에서 2020년 말 출시할 Cyberpunk 2077에는 JaliResearch의 얼굴 애니메이션 기술이 사용되었습니다. 주 목적은, 3D 캐릭터가 다양한 표정을 지을 수 있도록 하고, 다국어 음성에 맞게 입 모양을 자연스럽게 만드는 것이라고 합니다. 다음은 JaliResearch에서 공개한 영상입니다.
JaliResearch의 홈페이지에 가 보면 대략적인 접근 방법이 나와 있는데 규칙 기반의 AI를 사용했고 기존 3D 모델과의 밀접한 통합을 통해 입술, 눈, 눈썹 등 얼굴 전체를 애니메이션 시켜 좀 더 자연스럽게 결과물을 생성할 수 있도록 했다고 합니다. 최근 딥러닝 계열의 기술들이 데이터 기반의 생성 방식을 취하고 있는 것에 비해서, 애니메이션 전문가의 인사이트에 기반한 방법을 사용하고 있다는 것이 눈에 띕니다. 다음은 JaliResearch의 홈페이지입니다.