隨著 RTX 視頻超分辨率 (RTX Video Super Resolution) (VSR) 的發布,GeForce RTX GPU 將提升 PC 版 Google Chrome 和 Microsoft Edge 瀏覽器上視頻內容的質量。
如今,近 80% 的互聯網流量來自于直播視頻。其中 90% 的內容在 1080p 或更低的分辨率下傳輸,包括斗魚,虎牙,嗶哩嗶哩等熱門平臺上的直播視頻。
然而,當觀眾(如 PC 用戶)使用高于 1080p 分辨率的顯示器時,瀏覽器必須縮放視頻以匹配顯示器的分辨率。大多數瀏覽器使用基礎的放大技術,這導致最終的圖像色彩不夠亮麗或畫面模糊。
通過 RTX VSR,GeForce RTX 40 和 30 系列 GPU 用戶可以利用 AI 將較低分辨率的內容提升到 4K,與他們的顯示器分辨率相匹配。該技術中的 AI 可消除塊狀的壓縮偽影,提高視頻的銳度和清晰度。
就像戴上有度數的眼鏡可以瞬間聚焦全世界一樣,RTX 視頻超分辨率 (RTX Video Super Resolution) 讓 GeForce RTX 40 和 30 系列 PC 的用戶能以清晰的畫面觀看視頻直播。
玩家現可通過下載最新版 GeForce Game Ready 驅動獲取 RTX VSR 支持,該驅動還為《原子之心》(Atomic Heart)和 THE FINALS 封測版等新推出的全新游戲帶來最佳體驗。
AI 圖像放大技術 (AI upscaling) 的演變
AI圖像放大技術 (AI upscaling) 是將低分辨率圖像轉換為高分辨率圖像的過程,其通過將低分辨率圖像輸入深度學習模型來預測生成高分辨率圖像。為提升預測準確性,神經網絡模型必須在不同分辨率下用無數圖像進行訓練。
然后,部署的 AI 模型可以為低分辨率的視頻帶來令人難以置信的清晰度和豐富細節,這是傳統的縮放技術無法重建的。AI 模型使邊緣更銳利,毛發更真實,風景更清晰。
2019年,該技術的早期版本和 SHIELD TV 同時發布。該突破改進了針對電視的串流內容,針對從480p 分辨率到 1080p 分辨率的視頻流,并優化120 寸屏幕的觀看體驗。
由于 4K 顯示器不得不拉伸低分辨率圖像以適應屏幕,導致視覺效果變得模糊。使用 AI 提升直播視頻質量,讓低分辨率的圖像無與倫比的清晰。
PC 觀眾通常比電視觀眾更靠近顯示器,因此需要更高等級的處理和細化來實現圖像放大。用戶可在GeForce RTX 40 和 30 系列 GPU 所擁有的極其強大的 Tensor Cores AI 處理器作用下,通過 RTX VSR 開啟新一代的 AI 圖像放大體驗。
RTX 視頻超分辨率 (RTX Video Super Resolution) 如何工作
RTX VSR是 AI 圖像處理的一個突破,它超越了傳統的邊緣檢測和特征銳化技術,極大地提升直播視頻內容的質量。
塊狀的壓縮偽影是直播視頻長期存在的問題。無論是服務器、客戶端還是內容本身的錯誤,在傳統的圖像放大中上述問題往往被放大,給直播觀眾帶來不太愉快的觀看體驗。
RTX VSR 可減少或消除因壓縮視頻而產生的偽影, 如塊效應、邊緣的振鈴偽影、高頻細節的消失和平坦區域的帶狀現象, 同時減少紋理損失。它還能銳化邊緣和豐富細節。
該技術使用深度學習網絡,在單次推理中進行圖像放大和減少壓縮偽影。該網絡分析低分辨率的視頻幀并預測目標分辨率下的殘差圖像。然后,殘差圖像被疊加到傳統的圖像增強上,糾正偽影錯誤并銳化邊緣以匹配輸出分辨率。
該深度學習網絡使用不同壓縮程度的內容進行訓練。它學習那些在未壓縮圖像中不存在,但存在于低分辨率或低質量視頻中的壓縮偽影的類型,把這些偽影及其未壓縮圖像作為網絡訓練的參考。深度學習網絡還進行廣泛的視覺評估,確保生成的模型適用于幾乎所有的真實世界和游戲內容。
啟用 RTX VSR
RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU,并且幾乎適用于 Google Chrome 和 Microsoft Edge 瀏覽器中的所有視頻內容。
欲使用該功能,請更新到最新的 GeForce Game Ready 驅動(現已發布),或將于 3 月份發布的下一個NVIDIA Studio 驅動。Chrome 瀏覽器(110.0.5481.105 或更高版本)和 Edge 瀏覽器(110.0.1587.56 版)近期已新增 RTX VSR 支持。
要開啟該技術,請打開 NVIDIA 控制面板,并打開”調整視頻圖像設置”。勾選”RTX 視頻增強”下的超分辨率框,并選擇質量 1 到 4 中的一個等級——質量等級表示圖像增強的質量并且也有賴于 GPU 性能。
審核編輯:湯梓紅
-
圖像
+關注
關注
2文章
1083瀏覽量
40417 -
AI
+關注
關注
87文章
30146瀏覽量
268411 -
人工智能
+關注
關注
1791文章
46858瀏覽量
237552
發布評論請先 登錄
相關推薦
評論