ソニーは先日、ゲームNPC向けの次世代リップシンクシステムに関する新たな特許を発表しました。このシステムは、ゲームの多言語版において、翻訳されたセリフと口の動きを簡単に一致させることができます。また、対応言語全てにおいてNPCの口の動きのパフォーマンスを評価し、開発者が参照できる類似度スコアを生成することができます。さらに、自動修正ソリューションも搭載されており、翻訳された音声の長さとキャラクターの顎の動きの軌跡を動的に調整することで、元のセリフのタイミングリズムを正確に一致させることができます。

ソニーは、NPCの口の形とローカライズされた音声のずれは没入感を損ない、プレイヤーを失望させると主張しています。従来の手作業による調整方法は時間と労力を要しますが、この技術は開発チームを反復作業から解放します。この技術が最終的に実用化されれば、ゲーム開発期間を大幅に短縮できる可能性があります。