AIHere

索尼专利披露AI帧生成技术,可预测PlayStation未来画面

索尼互动娱乐公司的一项专利描述了利用神经网络结合手柄输入预测后续游戏帧的方法,旨在降低帧生成的延迟。

AIHere 新闻编辑部· 1 分钟阅读🇯🇵 日本
插图:来自游戏手柄的信号流入屏幕上一连串预测生成的图像帧。
图片: mliu92 from San Mateo / Wikimedia Commons, CC BY-SA 2.0

索尼互动娱乐公司获得了一项帧生成方法的专利,该方法旨在减少输入延迟,而输入延迟正是这项技术在电子游戏中的主要弊端之一。该专利文件题为《Generation Super Sampling》,发布日期为2026年10月15日,文中描述了在游戏引擎渲染画面之前,利用AI预测图像帧的方法。

现有方案,例如NVIDIA DLSS和AMD FSR的帧生成技术,是在显卡已经输出的两帧之间插入AI生成的画面。由于系统必须等待第二个真实帧,屏幕帧率的提高并不意味着游戏对玩家操作的反应更快。NVIDIA Reflex等工具可以降低延迟,但无法彻底消除。

编码器、解码器与手柄输入

索尼的方法则是分析之前的帧来预测下一帧,因此无需等待后续的真实帧。该方法依赖两个神经网络:编码器将引擎输出压缩为紧凑的场景表示,解码器则利用这一表示生成预测帧。

专利称,运动矢量和手柄指令也可以作为预测的依据。例如,若玩家按下跳跃键,系统便可将该输入纳入考量,以预判角色接下来的动画帧。据文件披露,相关输入可能发生在15毫秒的时间窗口内,或早于两秒之前。训练过程中,预测帧会与真实帧进行比对,网络参数则根据两者之间的差异进行调整。

该文件还涵盖了一次生成多个未来帧,并在引擎完成下一个真实帧之前将其显示的方案。此外,文件还概述了一种非神经网络的替代方案,称为算法帧生成(Algorithmic Frame Generation),它根据运动矢量和已渲染的帧来构建合成帧。

尚待解答的问题

这一思路与《街头霸王6》等格斗游戏中使用的回滚网络代码相似,后者会猜测玩家的下一步操作,并在必要时修正游戏状态。然而,猜测错误可能会在节奏快速的射击游戏和动作游戏中,因快速运动或突然的镜头切换而产生视觉瑕疵。

该专利未包含真实游戏中的延迟或画质测试结果,也未列出当前主机所不具备的特殊硬件。这并不能证实该技术将会登陆PlayStation 5或PlayStation 5 Pro。索尼尚未表示哪些主机可能采用该技术、何时采用,或者它是否会最终成为商业功能。

#索尼#PlayStation#帧生成#AI#专利#游戏

评论

请保持尊重。评论会自动审核;垃圾信息、侮辱性言论和个人数据将被删除。问题可能由 AI 作答。

暂无评论。发起讨论或提出问题吧。

相关

研究🇺🇸 🇫🇷
Calif.io展示AI辅助的iOS 27无束缚越狱

在巴黎Hexacon大会上,Calif.io团队演示了一种可无束缚越狱的方法,适用于最高至iOS 27.0.1的系统,包括iPhone 18 Pro,且利用AI协助找到漏洞利用链。