索尼新专利曝光:AI 可在 GPU 渲染完成前预测下一帧画面,减少游戏卡顿 – IT之家

索尼新专利曝光:AI 可在 GPU 渲染完成前预测下一帧画面,减少游戏卡顿 – IT之家


IT House News の 10 月 18 日のテクノロジー メディア TechSpot の本日の報道によると、ソニーは最近、次のシナリオを説明する特許を申請しました。つまり、GPU がレンダリングを完了する前に AI が次のフレームを予測できるようにすることで、フレーム生成テクノロジーによって引き起こされる追加の遅延を回避しながらゲーム画面のラグを削減できます。

索尼新专利曝光:AI 可在 GPU 渲染完成前预测下一帧画面,减少游戏卡顿 – IT之家

IT House は、元のレポートから、このテクノロジがフレーム生成の欠点を解決できることを学びました。これにより、表示画面は 2 つのフレームのレンダリングが完了するまで待たずに、それらの間に挿入される中間フレームを生成できるようになります。代わりに、生成された画像を直接使用して次のフレームを予測します。、2 つのフレームを補間するのを待つ必要はありませんゲームがより安定したフレーム出力リズムを維持するのに役立ちます。

同時に、ソニーは共同トレーニングされたコーデックを使用して、レンダリングされた画像を埋め込み表現に変換し、画像にコンパクトな数値表現を与え、デコーダーがこれらのキューを使用して予測フレームを生成できるようにします。ゲームの実行中、システムはグラフィック レンダリング パイプラインと並行して動作します。。ハードウェアが次のフレームをレンダリングすると、AI は前のフレームを処理し、予測を表示バッファーに送信します。したがって、次のフレームのレンダリングが完了する前に、、予測画面が先に表示される場合があります。

さらに、システムはモーション ベクトルとプレーヤーの最近のコントローラー アクションを利用します。プレイヤーのキャラクター操作の履歴は、次のフレームの行動を予測する基礎となります。システム トレーニング プロセスでは、連続ビデオ フレームが使用されます。ニューラル ネットワークは、最初にランダムに初期化された重みを使用し、1 つのフレームを入力として受け取り、次のフレームの予測を試みます。次に、予測が実際の後続の映像と比較され、予測誤差の尺度として損失が計算されます。

索尼新专利曝光:AI 可在 GPU 渲染完成前预测下一帧画面,减少游戏卡顿 – IT之家

ただし、この技術が役立つかどうかは、レンダリング速度が遅くなったときに、フレーム出力のギャップを埋める正確な画像を A​​I が迅速に生成できるかどうかにかかっています。



Source link

Leave a Reply

Your email address will not be published. Required fields are marked *