Arm voorziet de gpu's in zijn chipontwerpen vanaf volgend jaar van Neural Super Sampling, een upscalingtechniek die 'de graphics van een desktop' mogelijk moet maken op mobiele toestellen. De techniek vereist speciale hardware en komt dus niet beschikbaar voor huidige Arm-chips.
Arm voorziet zijn nieuwe gpu's vanaf volgend jaar van neural accelerators, zo bevestigt het bedrijf in een briefing met journalisten. Deze moeten bepaalde grafische rekentaken kunnen uitvoeren met behulp van AI. Op termijn moeten er verschillende applicaties komen die gebruik kunnen maken van deze neural accelerators.
De eerste die daarvan beschikbaar komt, is dus Neural Super Sampling. Het betreft een upscalingtechniek, net als bijvoorbeeld Nvidia's DLSS en AMD's FSR. De techniek laat de gpu games renderen op een lagere resolutie en vervolgens met AI opschalen naar een hogere resolutie. Dat maakt hogere framerates mogelijk zonder al te veel kwaliteitsverlies.
Net als veel andere upscalingtechnieken gebruikt Arm Neural Super Sampling verschillende gegevens van de game-engine. Daaronder vallen de traditioneel gerenderde frames, naast data over de diepte en bewegingen tussen verschillende frames. De techniek voert deze gegevens in een AI-model, dat vervolgens een opgeschaalde frame uitspuugt, inclusief anti-aliasing. Arm borduurt daarmee voort op zijn bestaande upscalingtechniek, Arm Accuracy Super Resolution, hoewel de aanstaande Neural Super Sampling-techniek dus niet beschikbaar komt voor de Arm-chips die momenteel beschikbaar zijn.
Volgens Arm is Neural Super Sampling in staat de resolutie te verdubbelen met een latency van 4ms per frame, bijvoorbeeld van 540p naar 1080p. De techniek maakt volgens de fabrikant 'pc-kwaliteit' mogelijk op een telefoon; aangezien de gpu minder pixels traditioneel hoeft te renderen, kan de grafische kwaliteit omhoog, hoewel ontwikkelaars die besparing ook kunnen gebruiken voor een betere accuduur. Volgens Arm komt zijn NSS-techniek in de buurt van Nvidia DLSS 2, terwijl het wel gebruikmaakt van een kleiner AI-model dat specifiek is geoptimaliseerd voor mobiel gebruik.
Ontwikkelaars moeten ondersteuning voor de techniek wel handmatig aan hun game toevoegen. Het bedrijf komt daarvoor op dinsdag met een sdk. Het bedrijf komt ook met een plug-in voor Unreal Engine 5, een emulatielaag voor de Vulkan-api en vooraf getrainde opensource-AI-modellen. Die laatste worden gepubliceerd op GitHub en Hugging Face, zegt Arm.
Arm Neural Super Sampling verschijnt in 2026, net als de eerste Mali-gpu's die het ondersteunen. Op termijn komt het bedrijf met andere AI-renderingtechnieken, waaronder een soort framegenerationtechniek voor hogere framerates en een denoisingmodel, beide op basis van AI. Dat laatste moet helpen met het mogelijk maken van pathtracing op smartphones, door relatief goede beeldkwaliteit te bieden met zo min mogelijk rekenintensieve rays en bounces.
:strip_exif()/i/2007674092.jpeg?f=imagenormal)