陈根:Facebook开发神经超采样技术,虚拟现实进一
SIGGRAPH 2020大会即将召开,Facebook研究人员近日更新了一篇文章,介绍了“神经超采样”(neural supersampling)技术。这是一种根据人工智能为基础的提高图像清晰度的算法技术,跟NVIDIA的DLSS“深度学习超采样”技术相似。不同的是,这个神经超采样并不需要专门的硬件或者软件就能实现,基本可以媲美DLSS的效果。
这种“神经超采样”算法可以获得低分辨率的渲染帧并将其放大16倍,这意味着未来科技方向上将发生更多的变化。例如,未来的耳机,理论上可以驱动双3K面板,每只眼睛只渲染1K甚至不需要眼睛跟踪。
能够以较低的分辨率进行渲染,意味着更多的GPU功能可以自由运行详细的着色器和高级效果,这可以弥合从移动到控制台的差距。虽然这并不能把移动芯片变成游戏机,但它应该在某种程度上缩小差距。
Facebook声称它的是最先进的,它的性能超过了所有其他类似的算法这也是它能够实现16倍升级的原因。在所提供的示例图像中,Facebook的算法似乎已经达到了可以重建线条或网格图案等精细细节的地步。
事实上,早在3月份,Facebook就发表了一篇类似的文章。文中描述了利用神经上采样来释放GPU功耗的思想。研究人员的期望找出一个“框架”,在当前的渲染管道(低延迟)内实时运行算法,他们实现了这一点。将该框架与相结合可以使这项技术实用化。
随着AR/显示器向着更高分辨率、更快的帧速率和更高的真实感的方向发展,神经超采样方法可能是通过从场景数据中推断出清晰细节而不是直接渲染这些细节的关键。这项工作为未来的高分辨率指明了方向,不仅仅是显示器,还有实际驱动所需的算法。
目前,这只是一个研究,研究人员“相信通过进一步的网络优化、硬件加速和专业级的工程设计,这种方法可以明显更快”。Facebook将这种方法归类为“神经渲染”,科技的更迭正以超出了任何人的预期的速度发展着。
人工智能培训
- 真正能和人交流的机器人什么时候实现
- 国产机器人成功完成首例远程冠脉介入手术
- 人工智能与第四次工业革命
- 未来30年的AI和物联网
- 新三板创新层公司东方水利新增专利授权:“一
- 发展人工智能是让人和机器更好地合作
- 新春贺喜! 经开区持续推进工业互联网平台建设
- 以工业机器人为桥 传统企业如何趟过智造这条河
- 山立滤芯SAGL-1HH SAGL-2HH
- 2015国际智能星创师大赛火热报名中!
- 未来机器人会咋看人类?递归神经网络之父-像蚂
- 成都新川人工智能创新中心二期主体结构封顶
- 斯坦德机器人完成数亿元人民币C轮融资,小米产
- 到2020年,智能手机将拥有十项AI功能,有些可能
- 寻找AI机器人的增长“跳板”:老龄化为支点的产
- 力升高科耐高温消防机器人参加某支队性能测试