數天前,英偉達發佈了NVIDIA DLSS SDK 310.3.0,除了錯誤修復和穩定性改進外,還明確表示Transformer模型已正式退出beta測試。按照英偉達之前的説法,在Transformer模型基礎上不斷改進,預計在未來數年裏,圖像質量會持續提升。

英偉達 表示 ,在NVIDIA DLSS SDK 310.3.0中優化了Transformer模型的顯存使用,相比於之前的310.2.0,從1080P到8K分辨率,不同程度減少了使用的顯存容量,平均降幅約為20%。這意味着DLSS只需要更少的顯存,就能運行超分辨率及光線重建模型。
| 項目 | CNN (310.2.0) | Transformer (310.2.0) | Transformer (310.3.0) |
| 1920 x 1080 | 60.83MB | 106.9MB | 85.77MB |
| 2560 x 1440 | 97.79MB | 181.11MB | 143.54MB |
| 3840 x 2160 | 199.65MB | 387.21MB | 307.37MB |
| 7840 x 4320 | 778.3MB | 1517.60MB | 1225.17MB |
Transformer模型通過改進的時間穩定性、減少鬼影以及運動中的更高細節來提升圖像質量,將進一步提升RTX 20/30/40系列顯卡的DLSS性能體驗。之前DLSS使用卷積神經網絡(CNN)通過分析局部上下文並在連續幀中跟蹤這些區域的變化來生成新像素,而新的Transformer模型使用了視覺Transformer變壓器,使自注意力機制操作能夠評估整個幀中每個像素的相對重要性,並且跨越多個幀。