Mediaspeler VLC ondersteunt binnenkort Nvidia's RTX Video HDR

De RTX Video HDR-functie van Nvidia is 'binnenkort' beschikbaar in de gratis mediaspeler VLC. De mediaspeler biedt momenteel al ondersteuning voor de upscalingfeature Super Resolution.

Nvidia's RTX Video HDR-functie maakt gebruik van AI om sdr-beelden om te zetten naar hdr-content, wat de kwaliteit van video's verbetert. Nvidia noemt geen concrete datum voor de komst van de functie naar de VLC-mediaspeler.

Ook de videobewerkingssoftware DaVinci Resolve krijgt 'binnenkort' ondersteuning voor RTX Video om videobestanden van lagere kwaliteit op te schalen naar 4k-resolutie en sdr-materiaal om te zetten naar hdr-bestanden.

Reacties (58)

[mjtdevries]

Is er iemand die kan ontdekken wat de toegevoegde waarde van de "AI" is?

Als ik naar de voorbeeld beelden kijk, dan kun je exact hetzelfde super simpel op hedendaagse hardware en software bereiken.
- simpelweg het contrast iets verhogen (geeft al een gevoel van extra scherpte)
- en een simpel sharpening filter.

Oh wacht, ik zie wellicht toch iets van AI... in het rechter voorbeeld lijkt het er op dat er drie autos bij gefantaseerd zijn, die niet in het originel beeld zitten.
Volgens mij is dat niet helemaal de bedoeling. Dat lijkt op de AI functionaliteit van Samsung telefoons die een foto van de maan gingen vervangen door een andere foto van de maan met meer detail.

[Reactie gewijzigd door mjtdevries op 22 juli 2024 22:31]

[loekf2]

Ik lees ook dat gezichten veel meer "plastic" worden, dat klinkt inderdaad als good old sharpening en contrast. Ben even de namen vergeten, maar vroeger in beeld buis TV land had je Philips met z'n upscaling features wat ook neer kwam op sharpening en contrast (incredible HD ??).

[Wolfos]

Contrast Adaptive Sharpening (CAS) waarschijnlijk. In games kan DLSS veel betere kwaliteit bieden dan dat, maar dan gaat er ook meer dan alleen RGB video informatie in.

[pennywise666]

Gewoon alleen Barbie kijken achter elkaar, dan heb je er geen last van.

[Pep7777]

AI maakt het mogelijk om met minder rekenkracht bepaalde taken uit te voeren. 98% van het effect met maar 2% van de rekenkracht, dus daar zit zeker waarde. (En ja die 98% maakt dat het soms ook nog een beetje fout gaat).

[mjtdevries]

Het contrast iets verhogen en een beetje sharpening toevoegen kost heel weinig rekenkracht.
Dus ten eerste is het daarvoor niet nodig.
Je kan met een AI een bepaalde upscaling doen, maar dan zou je verschillen zien in het beeld waar sommige objecten een betere upscaling hebben dan andere.
In het voorbeeld zie je duidelijk een algemene sharpening die volstrekt gelijkmatig is over het gehele beeld. Duidelijk niet iets waar AI iets nuttigs heeft toegevoegd.

(Waarschijnlijk is AI hier 99% buzzword)

[holoduke51]

klopt dat er zaken bij worden verzonnen. maar of dat altijd erg is. Je kan je voorstellen dat het best leuk is om oude 320x240 videos te upscalen naar 4k. Oude VHS banden om te zetten naar knisper heldere videos. Of telefoon video om te zetten naar 35mm hdr film.

[mjtdevries]

Ja dat is erg. Ik wil namelijk een upscaled versie van de inhoud van die oude video zien.
Ik wil niet een hogere resolutie versie van een andere video zien.

[Schway]

Of misschien is het paar frames later

[mjtdevries]

Nee, dat lijkt extreem onwaarschijnlijk. Je ziet linksonder bv een auto en vrachtauto die net over de stopstreep zijn gereden en op precies dezelfde plek staan in beide afbeeldingen.
Precies boven het RTX-off vakje.

Maar in het midden boven waar je op het rechter plaatje extra autos ziet, heeft niet de lichtsporen op de weg die je op het linker plaatje ziet.

Het lijkt er haast op alsof er in de frames hierna meerdere autos gearriveerd zijn en ook voor het stoplicht staan te wachten en de AI die vrolijk heeft toegevoegd in de eerdere frames om wat extra detail te maken?

[sam1987]

Heeft niks te maken met "AI". Er zijn gewoon bepaalde technieken (Checkerboard rendering etc.) die van lagere resolutie beelden door het toevoegen van "pixels" een beter beeldkwaliteit indruk geven op hogere resolutie en op grote schermen. Daarbovenop worden door machine learning enorme beeld datasets geanalyseerd om die ingevoegde en toegevoegde pixels er zo natuurlijke en correct mogelijk te laten uitzien.

Een van de nadelen om bv. pure 4K-video met hoge frame snelheid te presenteren is de bandbreedte en de tijd die hardware nodig heeft om dit te analyseren. Wat het bijna onmogelijk maakt om daar een live gamma en kleuren overlay verbetering aan toe te voegen. Het hele HDR-gedoe is afhankelijk van veel factoren en het beeldscherm en waar deze zich bevindt, is een van de voornaamsten. Ik kan ook geen uren echte HDR content bekijken, omdat het gewoon te intens en vermoeiend voor de ogen is.

[Dual Infinity]

Het plaatje is niet in HDR en kan dus het effect niet goed weergeven. Als je de RTX Video HDR aanzet, wordt sRGB video daadwerkelijk uitgebreid tot een bredere HDR-range in felheid.

Dit werkt redelijk. De AI moet informatie verzinnen en dus niet elke pixel die wit (255,255,255) is als maximaal fel in HDR weergeven. Dat is afhankelijk van wat de rol van de pixel in het plaatje is. Voor specular highlights werkt dit algoritme echt vrij goed en dingen die in daglicht zijn opgenomen voelen dan ook daadwerkelijk meer zo, zonder dat het er kunstmatig uitziet.

Voor video van games en dingen in gemiddeld 'kamer'licht is het wat meer hit en miss. Dan is de gewone SDR-versie soms een stuk aankijkbaarder dan de fake RTX HDR versie.

[pennywise666]

Het is niet te doen om naar deze fake HDR te kijken met gemiddeld kamerlicht of minder omdat het hele beeld veel te fel is. Ik krijg meteen koppijn. Dat heb ik met echte HDR niet. Wanneer ik het contrast of oledlight op 50 zet dan is het pas te doen, maar dat lijkt me nou ook weer niet de bedoeling om dat lager te zetten he?

[Reactie gewijzigd door pennywise666 op 22 juli 2024 22:31]

[George Verboven]

Ai scherp gezien👍🏼

[Balance]

Zit zo te zien al in zowel de 4.0 als de 3.0 development branches:

• d3d11: enable NVIDIA RTX TrueHDR SDR to HDR converter
• [3.0] d3d11: enable NVIDIA RTX TrueHDR SDR to HDR converter

De 3.0 MR hangt aan de 3.0.21 milestone vast, die waarschijnlijk deze maand nog gereleased wordt.

Ik denk ook dat hij dus al in de nightly builds zit.

[pennywise666]

Ja klopt, ik kan nu de fake HDR selecteren bij output modules. Zojuist getest.

[M-Bullseye]

Ik gebruik K-Lite Codecpack en dan heb je MPC-HC standaard erbij en het zit er allemaal op.

[Hell-Slave]

MPC-HC staat al 6 jaar stil en met VLC heb je geen codec packs nodig.

[M-Bullseye]

Dat is niet waar, laatste build (2.2.1) is van 10 april 2024.

[Hell-Slave]

https://mpc-hc.org/

MPC-HC is not under development since 2017. Please switch to something else.

[pennywise666]

Even 2 seconden verder kijken dan je neus lang is:
https://github.com/clsid2/mpc-hc/releases

[phoenix2149]

Nice. Weten we voor welke series dit gaat gelden of is het in het algemeen voor alle RTX kaarten?

[Lau1406]

Ik gok dat de ondersteuning hetzelfde is als wat nvidia aangeeft.

Q: What GPUs support RTX Video?

A: RTX Video supports all RTX GPUs on consumer notebook and desktops. RTX Video Super resolution originally launched on NVIDIA RTX Ampere and Ada generation GPUs.

https://nvidia.custhelp.c...a_id/5448/~/rtx-video-faq

[Kees]

En als ik het goed heb (correct me if i'm wrong) zijn de 'Ampere' en 'Ada' generations de 30xx en 40xx consumenten gpu's.

[phoenix2149]

Mijn RTX A1000 in mijn laptop is dus een Ampere, maar weer geen consumer GPU helaas.

[phoenix2149]

Helaas focus op consumer RTX dus geen Quadro RTX zo lijkt het.

[InjecTioN]

Dus we kunnen hiermee de DVD's weer van onze zolders afhalen en afstoffen, om ze op onze 4K TV's af te kunnen spelen? (Daar zitten namelijk nogal wat pareltjes tussen, die er nu niet meer uit zien op een 4K TV.)

[Marctraider]

Waarom zou je die nog willen afspelen? 99% daarvan is of in 1080p of 4k te vinden.

Okee, wat dingetjes daargelaten, maar upscaling kwaliteit is niet zo denderend.

[Reactie gewijzigd door Marctraider op 22 juli 2024 22:31]

[InjecTioN]

Omdat een groot deel niet (in Nederland) op streaming diensten te vinden is. Nou is het tegenwoordig gangbaar om meerdere streaming abonnementen (en VPN diensten) af te sluiten, maar lopen de kosten zo flink op. Een bak DVD's die op zolder staat is dan natuurlijk wel een oplossing, als ik dan toch een "gouwe ouwe" wil kijken.

[Reactie gewijzigd door InjecTioN op 22 juli 2024 22:31]

[slamhk]

Dat niet alleen, sommige Blu-Ray films zijn "remastered" waardoor bepaalde artistieke keuzes veranderd worden (overbelicht, te donkere contrast, compleet andere tones).

Een DVD versie kan er soms "beter" uit zien dan een HD-Remaster in Blu-Ray (andersom ook natuurlijk, maja daar gaat het nu niet om).

[GigaHenk]

Ik moet zeggen dat LG via super resolution al leuke dingen kan doen.
Maar AI zou veel beter zijn
Heb ik van insiders begrepen (iemand die in AI ontwikkeling zit) dat het re-renderen van low res materiaal (bijvoorbeeld DVD) naar hi-res materiaal (4K) zeer reken intensief is. Denk aan dag per plaatje.
Zal nog wel te duur zijn voor de industrie om dat te doen

[Hell-Slave]

En nog steeds geen klik op de video om te pauzeren zoals bij youtube.

[Zilverdael80]

werkt dit niet gewoon?
https://github.com/nurupo/vlc-pause-click-plugin

[Nevalus]

Niet dat ik zelf behoefte heb aan deze functie, maar een plugin moeten installeren voor zo'n basis functie is wel wat omslachtig vind ik.

[masauri]

Spatiebalk induwen?

[Hell-Slave]

Waarom niet gewoon een optie?
Dit is een lang en veel gevraagde functie die mensen graag zouden willen hebben.

[Crocidolite]

Helemaal mee eens, voor mij mogen ze dat er als optie inbakken.

Ik kijk veel YouTube, en af en toe een serie of film met VLC en dan klik ik altijd op het scherm om te pauzeren omdat ik dat bij YT gewend ben. Maar dat werkt niet bij VLC, en dat schijn ik maar niet te kunnen onthouden.

[Kees]

Ik vind dat eerlijk gezegt vrij irritant. Ik pauseer zelf meestal met spatie, en gebruik een click op de video om dat scherm de focus te geven, niet om het te pauzeren.

[Hell-Slave]

Daarom een optie, kan u het uitzetten en ik aan, iedereen blij.
Als ik op de spatiebalk klik komt bij mij bijna altijd de aspect ratio pulldown tevoorschijn.

[qbig1970]

gebruik dan MPC-HC (x64)... daar kan het allebei!
(Media Player Classic)

[Hell-Slave]

Werkt het dan ook voor Linux?

[qbig1970]

Geen idee.. probeer het en je weet het... voor een gratis programmaatje kun je daar geen buil aan vallen.

[Hell-Slave]

Ik heb al gechecked, het is windows only.

[qbig1970]

Je zou dit kunnen proberen ( Op Eigen Risico! ) :

https://snapcraft.io/mpc-hc

[Hell-Slave]

Nah ik klik wel op de play knop en het wordt al 6jaar niet meer ondersteund.

[Reactie gewijzigd door Hell-Slave op 22 juli 2024 22:31]

[moviegeek]

Kan al met andere codec packs

[Reactie gewijzigd door moviegeek op 22 juli 2024 22:31]

[pennywise666]

In Windows HDR mode kan je gewoon de SDR slider naar 0 zetten zodat het niet fel is.

[moviegeek]

Thx dat had ik nog niet gezien.
Te snel afgezet en niet verder gekeken

[Hell-Slave]

Gebruik Linux en volgens mij geen K-lite pack installeren.

[moviegeek]

Hoi ik heb op de zolder ook een iMac met Ubuntu, sindsdien weet ik dat ik Win11 niet kan vervangen door Linux. Ik krijg er simpelweg geen Dolby Surround uitgeperst. Mijn iPod aansluiten is ook niet gelukt, laat staan iTunes via Wine ofzo. Ik heb wel geëxperimenteerd met easyeffects, maar zo easy was het niet. De rest werkt wel.

[GigaHenk]

Zou toch mooi zijn als er ook eens een functie komt om:
- 59,94i om te kunnen zetten naar 59,94p
- 50i om te kunnen zetten naar 50p
- 24p om te kunnen zetten naar 48p

Dit kan natuurlijk realtime in de meeste TV's via motion -> smooth. Alleen dat werkt niet vlekkeloos bij bepaalde pans, camera moves
Zou natuurlijk mooier zijn dat je dat op basis van een soort AI opnieuw kan redeneren, zodat het in alle gevallen goed gaat. Er is dan iets meer tijd om het goed te doen dan realtime. Vooral bij concerten zou dit erg aangenaam zijn

[micla]

Voor realtime kun je SVP 4 Pro eens proberen. Dat is een soort injector dat werkt met verschijdene afspeel programma's. Ook met VLC. Werkt tot 240 fps en redelijk stabiel.

Voor hardcoding kun je naar flowframes kijken. Die herschrijft de hele film in hogere fps. Deze maakt ook gebruik van Ai om extra frames te interpoleren.

[pennywise666]

SVP 4 Pro werkt goed met de AI engine.

[GigaHenk]

Thx,

Is niet helemaal wat ik zoek. Heb paar jaar geleden geïnvesteerd in Oppo speler om al van alle onnodige frame drops/hiks af te zijn (erg gevoelig voor) en gewoon het beste beeld te hebben (qua speler).
Zou mooi zijn dat er iets is, dat het beeld uppitched en dat daar een mp4/mkv uitkomt, zodat deze in mijn afspeel flow meekan.....Zal hier eens naar kijken, zit geloof ik een Nvidia kaart in mijn laptop

Update
Oh ik zag pas later dat er naast de player ook een encoder is.
En ik vond later deze ook: https://encodegui.com/

Genoeg om wat zaken mee te proberen

[Reactie gewijzigd door GigaHenk op 22 juli 2024 22:31]

[pennywise666]

De fake HDR ziet er niet uit. Alles is veel te fel.
Ik heb het vergeleken met ESPN en ESPN UHD.

Super Resolution geeft trouwens geen zichtbaar/geen duidelijk verschil en is het niet waard wanneer je het afweegt tegen de kosten.

[Reactie gewijzigd door pennywise666 op 22 juli 2024 22:31]

[Eef1992]

Heb je de hdr instellingen in Windows wel eens bekeken en de HDR kalibratie doorlopen? Dat maakte, iig bij mij, een wereld van verschil.

[pennywise666]

Ja gedaan. En ook de tonemapping in mijn LG oled staat uit.

[KaiZas]

Potplayer heeft dit al eventjes, samen met de RTX upscaler.