索尼申请新专利 AI预测下一帧减少游戏卡顿

驱动中国10月18日消息，据外媒 TechSpot 报道，索尼申请一项新专利，提出利用 AI 在 GPU 完成渲染前预测下一帧画面，以减少游戏卡顿，并避免帧生成技术带来的额外延迟。

该专利针对帧生成技术的不足展开设计。传统帧生成通常需要等待两帧画面完成渲染，再生成插入其中的中间帧；索尼提出的方案则利用已生成画面预测下一帧，无需等待两帧画面即可进行插值，从而帮助游戏维持更稳定的帧输出节奏。

在具体实现上，索尼采用联合训练的编解码器，将渲染完成的画面转换为嵌入表示，对图像进行紧凑的数值化表达，并由解码器利用这些提示生成预测帧。游戏运行时，该系统与图形渲染管线并行工作：硬件渲染下一帧时，AI 处理上一帧，并将预测结果发送至显示缓冲区，使预测画面可能在下一帧完成渲染前先行显示。

该系统还可利用运动矢量和玩家近期手柄操作，将玩家操作角色的历史作为下一帧动作预测的基础。训练过程使用连续视频帧，神经网络最初采用随机初始化权重，以一帧画面作为输入并尝试预测下一帧；随后，系统将预测结果与实际后续画面进行比较，并计算用于衡量预测误差的损失值。

不过，这项技术能否发挥实际作用，取决于 AI 能否迅速生成准确画面，从而在渲染速度下降时填补帧输出间隙。