Streamingul video pe PC prin intermediul browserelor Google Chrome și Microsoft Edge primește astăzi un upgrade, odată cu lansarea RTX Video Super Resolution (VSR).
Aproape 80% din lățimea de bandă a internetului în prezent este reprezentată de streaming video. Iar 90% din acest conținut este transmis la 1080p sau mai puțin, inclusiv din surse populare precum Twitch.tv, YouTube, Netflix, Disney+ și Hulu.
Cu toate acestea, atunci când telespectatorii folosesc ecrane mai mari de 1080p – așa cum fac mulți utilizatori de PC-uri – browserul trebuie să scaleze videoclipul pentru a se potrivi cu rezoluția ecranului. Majoritatea browserelor folosesc tehnici de scalare de bază, care au ca rezultat imagini finale care sunt moi sau neclare.
Cu RTX VSR, utilizatorii de GPU-uri GeForce RTX 40 și 30 Series pot folosi AI pentru a upscale conținutul cu rezoluție mai mică până la 4K, potrivindu-se cu rezoluția afișajului. AI elimină artefactele de compresie blocante și îmbunătățește claritatea și claritatea videoclipului.
La fel cum punerea unei perechi de ochelari de vedere poate pune instantaneu lumea la punct, RTX Video Super Resolution le oferă spectatorilor de pe PC-urile GeForce RTX 40 și 30 Series o imagine clară în lumea streaming-ului video.
RTX VSR este disponibil acum ca parte a celui mai recent driver GeForce Game Ready, care oferă cea mai bună experiență pentru noile lansări de jocuri precum Atomic Heart și THE FINALS closed beta.
Evoluția upscaling-ului AI
AI upscaling este procesul de conversie a mediilor de rezoluție mai mică la o rezoluție mai mare prin trecerea imaginilor de rezoluție mică printr-un model de învățare profundă pentru a prezice versiunile de înaltă rezoluție. Pentru a face aceste predicții cu o precizie ridicată, un model de rețea neuronală trebuie antrenat pe nenumărate imagini la diferite rezoluții.
Ecranele 4K pot distorsiona imaginile prin faptul că trebuie să întindă imaginile de rezoluție mai mică pentru a se potrivi cu ecranul lor. Folosind inteligența artificială pentru a mări dimensiunea imaginilor video transmise în flux, imaginile de rezoluție mai mică se potrivesc cu o claritate de neegalat.
Modelul de inteligență artificială implementat poate apoi să ia imagini video de rezoluție redusă și să producă o claritate incredibilă și detalii îmbunătățite pe care niciun scaler tradițional nu le poate recrea. Marginile par mai ascuțite, părul pare mai scund, iar peisajele ies în evidență cu o claritate izbitoare.
În 2019, o versiune timpurie a acestei tehnologii a fost lansată împreună cu SHIELD TV. A fost o descoperire care a îmbunătățit conținutul difuzat în flux destinat televizoarelor, în mare parte variind de la 480p la 1080p, și optimizat pentru o experiență de vizionare la 3 metri.
Telespectatorii de PC-uri sunt de obicei așezați mult mai aproape decât telespectatorii de televizoare față de ecranele lor, ceea ce necesită un nivel mai ridicat de procesare și rafinament pentru upscaling. Cu GPU-urile din seriile GeForce RTX 40 și 30, utilizatorii dispun acum de procesoare AI extrem de puternice cu Tensor Cores, permițând o nouă generație de upscaling AI prin RTX VSR.
Cum funcționează RTX Video Super Resolution
RTX VSR este o descoperire în domeniul procesării pixelilor AI care îmbunătățește dramatic calitatea conținutului video transmis în flux, dincolo de detectarea marginilor și accentuarea caracteristicilor.
Artefactele de compresie reprezintă o problemă persistentă în transmisiile video în flux. Fie că este vina serverului, a clientului sau a conținutului în sine, problemele se amplifică adesea cu upscaling-ul tradițional, lăsând o experiență vizuală mai puțin plăcută pentru cei care urmăresc conținutul transmis.
RTX VSR reduce sau elimină artefactele cauzate de compresia video – cum ar fi blocajul, artefactele de tip ringing în jurul marginilor, spălarea detaliilor de înaltă frecvență și banding-ul pe zonele plate – reducând în același timp texturile pierdute. De asemenea, îmbunătățește claritatea marginilor și a detaliilor.
Tehnologia utilizează o rețea de învățare profundă care realizează mărirea și reducerea artefactelor de compresie într-o singură trecere. Rețeaua analizează cadrul video de rezoluție inferioară și prezice imaginea reziduală la rezoluția țintă. Această imagine reziduală este apoi suprapusă peste o imagine supradimensionată tradițională, corectând erorile de artefacte și accentuând marginile pentru a corespunde rezoluției de ieșire.
Rețeaua de învățare profundă este antrenată pe o gamă largă de conținuturi cu diferite niveluri de compresie. Aceasta învață despre tipurile de artefacte de compresie prezente în videoclipurile de rezoluție redusă sau de calitate scăzută, care sunt altfel absente în imaginile necomprimate, ca referință pentru antrenarea rețelei. Se utilizează o evaluare vizuală extinsă pentru a se asigura că modelul generat este eficient pentru aproape toate conținuturile din lumea reală și din jocuri.
Cum se utilizează
RTX VSR necesită un GPU GeForce RTX 40 sau 30 Series și funcționează cu aproape toate conținuturile transmise în Google Chrome și Microsoft Edge.
Funcția necesită, de asemenea, actualizarea la cel mai recent driver GeForce Game Ready, disponibil astăzi, sau la următorul driver NVIDIA Studio care va fi lansat în martie. Atât Chrome (versiunea 110.0.5481.105 sau o versiune mai recentă), cât și Edge (versiunea 110.0.1587.56) au fost actualizate recent pentru a suporta RTX VSR.
Pentru a-l activa, lansați panoul de control NVIDIA și deschideți „Adjust video image settings”. Bifați căsuța de super rezoluție de la „RTX video enhancement” și selectați o calitate de la unu la patru – de la cel mai mic impact asupra performanței GPU la cel mai înalt nivel de îmbunătățire a redimensionării.
Aflați mai multe, inclusiv alte configurații de configurare, în acest articol din NVIDIA Knowledge Base.