索尼新专利曝光：AI 可在 GPU 渲染完成前预测下一帧画面，减少游戏卡顿

据科技媒体 TechSpot 于今日（10 月 18 日）报道，索尼近期提交了一项专利申请，其中描述了一种方案：在 GPU 尚未完成渲染时，由 AI 预判接下来的一帧画面，以此减轻游戏过程中的卡顿现象，同时规避帧生成技术所附带的额外延迟。

IT之家从原始报道中了解到，该技术旨在解决帧生成方式的缺陷，使显示画面不再需要等待两帧完成渲染后才能生成插入的中间帧。它直接利用已生成的画面来推测下一帧，无需等待两帧即可进行插值，从而帮助游戏保持更平稳的帧输出节奏。

此外，索尼采用了联合训练的编解码器，将完成渲染的画面转化为嵌入表示，对图像进行紧凑的数值化处理，使解码器能借助这些提示生成预测帧。在游戏运行时，这一系统会与图形渲染管线同步运作。当硬件渲染下一帧时，AI 会处理上一帧，并将预测结果发送至显示缓冲区。因此，在下一帧渲染完成之前，预测画面可能已经先行显示。

该系统还可借助运动矢量以及玩家近期的控制器操作，将玩家操控角色的历史作为预测下一帧动作的基础。训练过程中使用了连续的视频帧。神经网络初始时采用随机初始化的权重，以单帧画面为输入，尝试预测下一帧。之后，系统会将预测结果与实际后续画面进行比对，并计算一个反映预测误差的损失值。

不过，这项技术能否在实际中发挥效用，取决于 AI 是否能够快速生成准确的画面，从而在渲染速度下降时填补帧输出的空缺。