ゲーム開発者向けのフェイシャル アニメーションの実装を改善するためのソニー ファイルの特許

AIが生成した顔の画像をキャプチャすることでアニメーターの労力を軽減する方法について、ソニーが特許を申請したという報告があります。ソニー インタラクティブ エンタテインメントのスタジオは、ビデオ ゲームで実際のパフォーマンスを再現する業界で最高のスタジオです。

過去の世代のコンソールでは、忠実度が大幅に向上しました。過去 10 年間で、Naughty Dogや Sony Santa Monicaなどの開発者は、骨の折れる顔の手描きやモーション アニメーションから、純粋にパフォーマンス キャプチャによるゲームやキャラクターの作成へと移行しました。したがって、ソニーがさらに別の革新的なパフォーマンス キャプチャ システムの特許を申請したことは驚くべきことではありません。

2022 年 4 月 1 日にSony Interactive Entertainment LLC によって導入された特許技術は、人間の俳優からのグリッド情報を使用します。彼の顔の奥行きをとらえるために、彼は 3 次元で撮影されました。このメッシュは、多くの場合、ソースとしてモーション キャプチャ アクターの顔の頂点を使用してアニメーターによって手作りされます。

ゲーム開発で正確な人体モデルを作成するために使用されます。この方法は現在、Insomniacの今後のSpider-Man 2を含む、ほとんどの AAA レベルのビデオ ゲームで使用されています。3Dカメラと2Dカメラの組み合わせを使用して、顔の表情を正確に記録し、人間の介入なしでメッシュ データを生成できる人工知能プログラムをトレーニングすると、このシステムは自動的にメッシュ データを生成します。

この発明は、人工知能 (AI) を使用して、業界の傾向に沿って、以前は多くの手作業を必要としたタスクを作成します。最近、ビデオ ゲーム ビジネスにおける AI の使用が大幅に増加しています。タスクは、よりスムーズなゲームプレイのためのフレーム補間からテクスチャ解像度のスケーリングまで多岐にわたります。実際、AAA ゲームで AI を使用することは、ゲーム コミュニティにとって目新しいことではありません。Rockstar Gamesは最近、 GTA Trilogy RemakeでAI アップスケーリングを使用したことで批判に直面しました。これにより、さまざまな要素で厄介なスペルミスが発生しました。

この特許で明示的に述べられているように、この場合の AI の使用は、労力を削減し、フェイシャル アニメーションの法外なコストを抑えることを目的としています。この方法は時間と費用がかかり、何百人ものアニメーターが何千ものディザ シェイプと接続ファイルを作成して、ビデオ シーケンスのパフォーマンスを複製する必要があります。