DLSS Transformer模型退出beta測試 準備正式部署

今年英偉達在新一代Blackwell架構GPU上引入了DLSS 4，具備多幀生成功能，在每個傳統渲染的幀之間生成多達三個額外的幀。DLSS 4還加入了自2020年發佈DLSS 2.0以來對其AI模型的最大升級，DLSS光線重建、DLSS超分辨率和DLAA將由Transformer模型驅動，這是Transformer模型首次在圖形領域的實時應用。

近日英偉達發佈了NVIDIA DLSS SDK 310.3.0，除了錯誤修復和穩定性改進外，還明確表示Transformer模型已正式退出beta測試。按照英偉達之前的說法，在Transformer模型基礎上不斷改進，預計在未來數年裡，圖像質量會持續提升。

Transformer模型通過改進的時間穩定性、減少鬼影以及運動中的更高細節來提升圖像質量，將進一步提升RTX 20/30/40系列顯卡的DLSS性能體驗。之前DLSS使用卷積神經網絡（CNN）通過分析局部上下文並在連續幀中跟蹤這些區域的變化來生成新像素，經過六年的持續改進，已經達到了極限。新的Transformer模型使用了視覺Transformer變壓器，使自注意力機制操作能夠評估整個幀中每個像素的相對重要性，並且跨越多個幀。

Transformer模型採用兩倍於CNN模型的參數來實現對場景的更深層次理解，從而生成提供更高穩定性、減少鬼影、運動細節更多以及場景邊緣更平滑的像素。在密集的光線追蹤內容裡，新的Transformer模型能大幅提升圖像質量，在複雜的光照條件下會有更明顯的優勢，穩定性會加強，重影會減少，閃爍現象也會消失。