英伟达(Nvidia)打算重新推出其主要产品之一: DLSS。 缩写代表 深度学习超级采样通过人工神经网络进行超级采样。

你必须从远处开始 了解为什么我们提出了这项技术。 电子游戏的局限性之一是在特定硬件上可获得的性能。 在PC领域中,可以通过调整图形参数来获得多种不同的体验。 我可以通过偏爱图形细节来以30 FPS的速度播放,或降低每个设置以能够以120 FPS的速度播放。 预算一直是限制:200€GPU当然不具备1000€GPU的容量。 GPU的任务是去确定组成最终图像的像素的颜色。 像素数越少,完成计算就越快,因此具有更好的性能。

分辨率门

然而, 触摸分辨率似乎是PC游戏世界上最大的禁忌之一,而在控制台世界中则每天使用。 主要是因为在距离屏幕不远的地方播放,所以散布比显示器上的原始分辨率低的分辨率图像所引起的细节损失非常明显。 因此,通常,最好至少播放一次,但始终以显示器的原始分辨率播放,以获得最大的视觉清晰度。

近年来,随着 4K 和走向使用的意愿 光线追踪,根据光线的扩散而计算的实时照明,尽管在计算上非常接近现实,但已经设计出许多新的放大技术,能够从较低的图像开始重建高分辨率的图像,并且算法越来越多高效而有效。 临时重建技术,例如在《彩虹六号:围攻》和《看门狗2》中使用的技术,或在PlayStation 4上使用的方格渲染,均具有出色的效果。 它们是仍然存在许多伪像和明显质量损失的技术,但是它们是具有良好性能的良好折衷。

少即是多

近年来,基于深度学习算法的许多图像重建和放大技术得到了发展,其结果非常显着,优于任何其他先前存在的程序或人工工作。 这些计算不是实时进行的,因此对于恢复旧电影或因时间而毁坏或损坏的作品,或以较低的分辨率(技术上更短的时间)改善照片库很有用。 Nvidia在这里看到了一个机会:如果她设法在与生成框架相当的时间内执行神经算法,则可以在视频游戏中实时应用相同的规则。

因此,这就是图灵架构如此密集的计算单元的原因之一。 FP32单元用于经典图形计算,INT32单元可处理许多不需要浮点精度的效果而无需中断主管道。 RTX模块可加快光线与游戏世界的几何形状相交的计算速度,从而实现逼真的照明。 最后,这项技术的主角: Tensor Core。 在深度学习计算的基础上,优化了计算单元以详细阐述矩阵,代数结构的计算单元。

DLSS 2.0培训
从网络重建的图像针对原始分辨率为16K的图像进行测试,以找出算法错误的地方,并使其自动进行改进

因此,在2018年底,DLSS 1.0出现了。 当然不是玫瑰和花朵,相反,这项技术特别不成熟。 英伟达的方法特别是“以图像为中心”。 该技术在对静态图像进行简单的按比例放大(或者说确定性的)方面效果很好,但对视频游戏的动态和动态效果却效果不佳。 每个软件都需要特定的神经网络培训。 张量核的执行算法非常慢,这意味着某些配置不可用。 风险本来是性能降低而不是提高。 最终图像的质量只有在以获取4K为目标时才可以通过,而试图以Full HD方式使用则是自杀。 尽管由于对网络进行进一步的培训而有望实现改进,但变化不大。

永远珍惜你的错误

因此,英伟达决定重新考虑该技术,使其值得使用,尤其是更易于使用。 DLSS 2.0是向前迈出的一大步,这是一种从第一次迭代中重建图像的全新方法。 我们有一个通用算法,不再为每个游戏都专门构建,因此适用于所有软件和所有分辨率。 据该公司称,该算法现在已经以以前两倍的速度运行,从而加快了算法的速度,完全消除了任何配置限制。 要替换以前的专用网络为每个游戏生成的信息, Nvidia集成了有关运动的矢量信息 在框架内。 以这种方式,在生成第一图像之后,生成时间反馈,并且从第二开始,生成时间稳定的图像。

此方法是基于时间反锯齿技术(以TAA命名)的基础,该技术的任务是平滑图像的角角。 因此,可以说,DLSS 2.0将高质量的升频器与TAA滤波器相结合,大大简化了Nvidia技术人员的工作。 结果,这需要两个世界的力量,而不是最不利的一面。 该算法也更加灵活,并以三种质量级别向播放器展示自身:质量,平衡和性能。 后者的分辨率为最终分辨率的50%(是高端分辨率的4倍),B​​alanced的分辨率为最终分辨率的57%,质量为66%。

Nvidia的DLSS 2.0,官方演示和技术潜水。
即使在许多细节上与原始分辨率相比,不仅性能更好,而且渲染图形质量更好!

支持新游戏,希望增加

这不仅是宣传,没有什么可触动的。 Nvidia致力于减轻开发人员实施该技术的负担。 但是,它需要从游戏引擎访问上面的矢量信息,这在使用TAA的情况下在今天很幸运,但是仍然不能直接从任何现有软件的驱动程序中进行操作。 我自己必须在DLSS 2.0中尝试 送我们月亮,获得了我从未想到的性能,能够以超过2560 FPS的RTX 1080的超高帧速(包括RTX效果)全速播放,包括RTX效果。

德国国际质量控制及仪器仪表展,美丽的Remedy Entertainment射击游戏向我们展示了DLSS 2.0的味道,并在常规FP32内核上执行了初步的变体。 现在,它将在下一个扩展中获得真正的DLSS 2.0。 让我倾向于第二次跑的新闻。 为了证明不需要RTX可以从DLSS提供的性能提升中受益,Mechwarrior 5将配备此技术。

我不知道您是谁,但我非常赞赏这种向技术寻求转变的趋势,这些技术试图在不牺牲整体图形质量的情况下提高性能,从而使我们的图形卡更加通用和耐用。 可变速率阴影将是未来,因为它会在下一个游戏机,图灵及后续显卡上得到采用,但我坚信DLSS的这种新形式确实是革命性的,并且是需要重点关注的领域中的王牌。 由我自己决定,我希望从这里开始直到结束时,它都能在所有PC游戏中实现.