Nvidia的下一代DLSS可能会利用AI

Nvidia的JensenHuang透露了这家市值万亿美元的GPU公司计划如何利用深度学习超级采样(DLSS)的未来迭代。在Computex2024的问答环节中(由MoreThanMoore报道)，黄仁勋回答了一个与DLSS相关的话题，他表示，未来我们将看到纯粹通过AI创建的纹理和对象。黄仁勋还表示，AINPC也将纯粹通过DLSS生成。

使用DLSS生成游戏内资产将有助于提升RTXGPU上的游戏性能。将工作转移到张量核心将减少对着色器(CUDA)核心的需求，从而释放资源并提高帧速率。黄解释说，他认为DLSS可以自行生成纹理和对象并提高对象质量，类似于当今DLSS升级帧的方式。

我们可能已经接近DLSS技术的下一代迭代。Nvidia已经在研究一种新的纹理压缩技术，该技术考虑了经过训练的AI神经网络，以显著提高纹理质量，同时保留现代游戏类似的视频内存(VRAM)需求。传统的纹理压缩方法的压缩率限制为8倍，但Nvidia新的基于神经网络的压缩技术可以将纹理压缩到16倍。

这项技术应该适用于黄仁勋讨论的通过DLSS增强物体图像保真度。游戏中的物体只是包裹在3D空间中的纹理，因此这项纹理压缩技术必然会提高纹理质量。

黄仁勋未来DLSS迭代更有趣的方面是游戏内资产生成。Nvidia的DLSS3帧生成技术的这一增强功能可在真实帧之间生成帧以提高性能。资产生成比DLSS3帧生成更进一步，游戏内资产完全通过DLSS从头开始​​生成。(DLSS需要被告知资产需要放置在游戏世界中的何处以及需要渲染哪些资产，但它们将完全从头开始生成(创建)。)

黄仁勋还讨论了围绕NPC的DLSS的未来。黄仁勋不仅希望DLSS能够生成游戏内资产，还设想DLSS能够生成NPC。他举了一个例子，一个视频游戏中有六个人;其中两个是真实人物，而另外四个则完全由AI生成。

这是对2023年演示的NvidiaACE的回调。ACE是一款游戏内LLM，旨在让NPC栩栩如生，结合游戏中其他角色的用户互动，为他们提供独特的对话和响应。Nvidia认为ACE(或某种未来形式)将在PC游戏中发挥重要作用，并成为DLSS不可或缺的一部分。