Nvidia DLSS 3 nasıl çalışıyor ve FSR neden şimdilik yetişemiyor?

Bu hikaye, Jacob Roach'un PC oyun ve donanım dünyasını kapsayan ReSpec serisinin bir parçasıdır.

Nvidia'nın RTX 40 serisi grafik kartları birkaç kısa hafta içinde gelecek, ancak tüm donanım iyileştirmeleri arasında Nvidia'nın altın yumurtası olabilecek şey yatıyor: DLSS 3. Bu, Nvidia'nın popüler DLSS (Derin Öğrenme Süper Örnekleme) özelliğine yönelik bir güncellemeden çok daha fazlasıdır ve sona erebilir. Nvidia'nın yeni neslini tanımlıyor grafik kartlarının kendisinden çok daha fazlası.

AMD, hedefine ulaşmak için çok çalışıyor. FidelityFX Süper Çözünürlük (FSR) DLSS ile eşit ve son birkaç aydır başarılı oldu. DLSS 3 bu dinamiği değiştirecek gibi görünüyor ve bu kez FSR yakın zamanda yetişemeyebilir.

DLSS 3 nasıl çalışır (ve nasıl çalışmaz)

DLSS 3'ün tamamen yeni bir versiyonu olduğunu düşündüğünüz için affedileceksiniz. DLSS, ama değil. Ya da en azından, tamamen yeni değil. DLSS 3'ün omurgası, bugün DLSS oyunlarında bulunan süper çözünürlük teknolojisinin aynısıdır ve Nvidia muhtemelen onu yeni sürümlerle geliştirmeye devam edecektir. Nvidia, DLSS 3'ün süper çözünürlüklü bölümünü artık grafik ayarlarında ayrı bir seçenek olarak göreceğinizi söylüyor.

Yeni kısım çerçeve üretimidir. DLSS 3, temelde gördüğünüz her sekiz pikselden yedisini oluşturan, her karede tamamen benzersiz bir kare oluşturur. Aşağıdaki akış şemasında bunun bir örneğini görebilirsiniz. 4K durumunda, GPU'nuz pikselleri yalnızca 1080p için işler ve bu bilgiyi yalnızca geçerli kare için değil, bir sonraki kare için de kullanır.

Nvidia'ya göre çerçeve üretimi, süper çözünürlükten ayrı bir geçiş olacak. Bunun nedeni, çerçeve oluşturmanın şimdilik yalnızca RTX 40 serisi GPU'larda çalışması, süper çözünürlüğün ise DLSS 3'e güncellenen oyunlarda bile tüm RTX grafik kartlarında çalışmaya devam etmesidir. Söylemeye gerek yok, ancak karelerinizin yarısı tamamen oluşturulmuşsa, bu, performansınızı şu kadar artıracaktır: çok fazla.

Yine de, çerçeve oluşturma yalnızca yapay zekanın gizli bir sosu değildir. İçinde DLSS 2 ve FSR gibi araçlar, hareket vektörleri, yükseltme için önemli bir girdidir. Nesnelerin bir kareden diğerine nerede hareket ettiğini tanımlarlar, ancak hareket vektörleri yalnızca bir sahnedeki geometri için geçerlidir. Gölgeler, yansımalar ve parçacıklar gibi 3B geometriye sahip olmayan öğeler, görsel kusurları önlemek için geleneksel olarak yükseltme sürecinde maskelenir.

Bir yapay zeka, RTX 40 serisi GPU'lardaki Optik Akış Hızlandırıcının devreye girdiği tamamen benzersiz bir çerçeve oluştururken maskeleme bir seçenek değildir. Bir hareket vektörü gibi, ancak grafik kartı tek tek piksellerin bir kareden diğerine hareketini izliyor. Bu optik akış alanı, hareket vektörleri, derinlik ve renkle birlikte yapay zeka tarafından oluşturulan çerçeveye katkıda bulunur.

Her şey olumlu gibi görünüyor, ancak yapay zeka tarafından oluşturulan çerçevelerle ilgili büyük bir sorun var: gecikmeyi artırıyorlar. Yapay zeka tarafından oluşturulan çerçeve asla PC'nizden geçmez — bu "sahte" bir çerçevedir, bu nedenle onu oyunlarda veya FRAPS gibi araçlarda geleneksel fps okumalarında görmezsiniz. Bu nedenle, çok fazla ekstra çerçeveye sahip olmasına rağmen gecikme azalmaz ve optik akışın hesaplama yükü nedeniyle gecikme aslında artar. Bu nedenle, DLSS 3 gerektirir Nvidia refleksi daha yüksek gecikmeyi dengelemek için.

Normalde CPU'nuz, GPU'nuzun hiçbir zaman yapılacak işi beklememesini sağlamak için grafik kartınız için bir işleme kuyruğu depolar (bu, takılmalara ve kare hızı düşüşlerine neden olur). Reflex, oluşturma sırasını kaldırır ve GPU'nuz ile CPU'nuzu senkronize eder, böylece CPU'nuz talimatları gönderir göndermez GPU bunları işlemeye başlar. Nvidia, DLSS 3'ün üstüne uygulandığında, Reflex'in bazen bir gecikme azalmasına bile yol açabileceğini söylüyor.

Yapay zekanın fark yarattığı yer

AMD'nin FSR 2.0'ı AI kullanmıyor ve bir süre önce yazdığım gibi, yapabileceğinizi kanıtlıyor. DLSS ile aynı kaliteyi elde edin makine öğrenimi yerine algoritmalarla. DLSS 3, benzersiz çerçeve oluşturma yeteneklerinin yanı sıra optik akışın tanıtılmasıyla bunu değiştirir.

Optik akış yeni bir fikir değil - onlarca yıldır var ve video düzenleme uygulamalarından sürücüsüz arabalara kadar her alanda uygulamaları var. Fakat, makine öğrenimi ile optik akışı hesaplama AI modellerini eğitmek için veri kümelerindeki artış nedeniyle nispeten yenidir. AI kullanmak istemenizin nedeni basittir: yeterli eğitim verildiğinde daha az görsel hata üretir ve çalışma zamanında çok fazla ek yükü yoktur.

DLSS çalışma zamanında yürütülüyor. Her bir pikselin bir kareden diğerine nasıl hareket ettiğini tahmin etmek için makine öğreniminden bağımsız bir algoritma geliştirmek mümkündür. sonraki, ancak hesaplama açısından pahalıdır, bu da ilk örnekteki süper örneklemenin tüm noktasına aykırıdır. yer. Çok fazla beygir gücü ve yeterli eğitim verisi gerektirmeyen bir AI modeliyle - ve emin olun, Nvidia çalışmak için çok sayıda eğitim verisi — yüksek kalitede optik akış elde edebilir ve Çalışma süresi.

Bu, CPU sınırlı oyunlarda bile kare hızında bir iyileşmeye yol açar. Süper örnekleme yalnızca, neredeyse tamamen GPU'nuza bağlı olan çözünürlüğünüz için geçerlidir. CPU işlemeyi atlayan yeni bir çerçeve ile DLSS 3, eksiksiz bir çerçeveye sahip olsanız bile oyunlarda kare hızlarını ikiye katlayabilir. CPU darboğazı. Bu etkileyici ve şu anda yalnızca yapay zeka ile mümkün.

FSR 2.0 neden yetişemiyor (şimdilik)

AMD, FSR 2.0 ile gerçekten imkansızı başardı. Harika görünüyor ve markadan bağımsız olması gerçeği daha da iyi. hazırdım FSR 2.0 için DLSS'yi hendekleyin ilk gördüğümden beri ölüm döngüsü. Ancak FSR 2.0'dan ne kadar zevk alsam ve bunun AMD'nin harika bir kiti olduğunu düşünsem de, yakın zamanda DLSS 3'ü yakalayamayacak.

Yeni başlayanlar için, özellikle yoğun ince ayrıntılara sahip 3B bir ortamda, yapay olmayan çerçeveler arasındaki her pikseli izleyebilen bir algoritma geliştirmek yeterince zordur (Siberpunk 2077 en iyi örnektir). Mümkün ama zor. Bununla birlikte, daha büyük sorun, bu algoritmanın ne kadar şişirilmiş olması gerektiğidir. Her pikseli 3B uzayda izlemek, optik akış hesaplaması yapmak, bir çerçeve oluşturmak ve yol boyunca meydana gelen aksilikleri temizlemek - sorulacak çok şey var.

Bunu bir oyun yürütülürken çalıştırmak ve yine de FSR 2.0 veya DLSS seviyesinde bir kare hızı iyileştirmesi sağlamak, bu sorulacak daha da fazla şey. Nvidia, özel işlemcilere ve eğitimli bir modele sahip olsa bile, optik akışın dayattığı yüksek gecikmeyi dengelemek için yine de Reflex'i kullanmak zorundadır. Bu donanım veya yazılım olmadan, FSR muhtemelen çerçeve oluşturmak için çok fazla gecikmeyle ticaret yapacaktır.

AMD ve diğer geliştiricilerin eninde sonunda hedefe ulaşacağından veya sorunu çözmek için başka bir yol bulacağından hiç şüphem yok, ancak bu birkaç yıl sonra olabilir. Şu anda söylemek zor.

Söylemesi kolay, DLSS 3 çok heyecan verici görünüyor. Tabii ki, Nvidia'nın performans iddialarını doğrulamak ve görüntü kalitesinin nasıl olduğunu görmek için burada olana kadar beklememiz gerekecek. Şimdiye kadar, Digital Foundry'den DLSS 3 çekimini (yukarıda) gösteren kısa bir videomuz var, daha fazla üçüncü taraf testi görene kadar izlemenizi şiddetle tavsiye ederim. Mevcut bakış açımızdan, DLSS 3 kesinlikle umut verici görünüyor.

Bu makalenin bir parçası ReSpec - PC oyunlarının arkasındaki teknoloji hakkında tartışmalar, tavsiyeler ve derinlemesine raporlar içeren iki haftada bir devam eden bir sütun.

Editörlerin Önerileri

• Nvidia RTX 4060 Ti neden 2023 için yeterli değil?
• Redfall Bite Back Edition'ı Nvidia'dan ücretsiz olarak nasıl alacağınız aşağıda açıklanmıştır
• Bir aylığına AMD GPU'ya geçtim - işte bu yüzden Nvidia'yı özlemiyorum
• AMD'nin RX 7900 XTX iddiaları doğruysa Nvidia'nın başı büyük belada olabilir
• Nvidia, sınıf davasıyla karşı karşıya kalırken AMD, eriyen RTX 4090 adaptörünü yırttı