Gamingtak Sony koopt start-up die foto's en video's omzet naar 3d

Sony Interactive Entertainment, de gamingtak van het Japanse bedrijf, heeft Cinemersive Labs overgenomen. De Britse start-up ontwikkelt tools om 2d-foto's en -video's om te zetten in 3d-ervaringen. Het is niet bekend wat SIE heeft betaald voor het bedrijf.

SIE wil naar eigen zeggen meeslependere game-ervaringen ontwikkelen met de overname. Cinemersive Labs, dat in 2022 is opgericht, sluit aan bij de Visual Computer Group van SIE. Daar gaat het team zich richten op toepassingen van machinelearningtechnieken in games, bijvoorbeeld om gameplaybeelden te verbeteren en renderingtechnieken te optimaliseren.

Sony heeft de afgelopen jaren meer focus gelegd op de toepassing van AI om de beeldkwaliteit in games te verbeteren. De PlayStation 5 Pro, die eind 2024 uitkwam, introduceerde een AI-upscaler in de vorm van PlayStation Spectral Super Resolution (PSSR). In oktober deelden AMD en Sony ook meer details over de technologie die de volgende PlayStation-console zal gebruiken. Die is veelal bedoeld om de upscaling-, raytracing- en pathtracingkwaliteit van de console te verbeteren. Verder werkt Sony ook aan technologie om frames te genereren met AI.

De PlayStation 5 Pro

Reacties (25)

[johanneslol]

Op zich een logische aankoop. Ik denk dat het bedoeld is om de 2d games die de Playstation heeft om te zetten naar 3D voor hun Playstation vr headset

[downtime]

Of om jouw gezicht in te scannen waarna een levensechte versie van jezelf in het spel meespeelt. Ook leuk voor multiplayer. Al je vrienden met hun echte gezicht in de 3d omgeving zien.

[YopY]

Maar ik begrijp niet waarom ze daar een bedrijf voor over zouden nemen, ik ben er vrij zeker van dat dit soort techniek al jarenlang bestaat en als dienst afgenomen kan worden of in licentie genomen kan worden, zeker vanaf moderne smartphones die gezichtsscanners ingebouwd hebben.

[jhnddy]

Simpel. Het hebben van veel developers betekent niet direct een geschikte tool. Als jij een featurerijke tool wilt bouwen, ben je gerust 3-5 jaar verder voordat het het niveau heeft wat je nu direct kunt kopen. Nog los van het risico van uitloop, scope creep, etc.

Ik merk dat veel managers zo denken. Iets wat een 6 maanden kost om te bouwen door 5 developers, kost niet opeens 2 maanden als je er 15 op zet. Maar je hebt serieuze overhead met afstemmen, terwijl je het iteratieproces niet kunt versnellen (we bouwen het op manier X, nee toch op manier Y nu we gezien hebben dat het slecht werkt)...

edit:
Het voordeel van kopen i.p.v. as service is natuurlijk dat je wel gelijk de code kunt aanpassen naar je eigen doel vanaf het punt dat je het koopt.

[Reactie gewijzigd door jhnddy op 3 april 2026 12:20]

[raschaoot]

Dat was precies mijn gedachte. Tenzij Sony nog een nieuw 3D product in de pijplijn heeft zitten is dat het enige waar 3D iets uit kan maken.

[tmmke]

Op het werk zitten wij samen met Sony om hier binnenkort een demo van te krijgen.

Wat voor ons belangrijk is, is om eenvoudig een 3D ruimte te maken voor ICVFX (Virtuele producties met LED Volumes (denk aan de Mandolorian)). Nu gebruiken wij voor de opbouw van onze werelden 2 technieken, ofwel de hele omgeving in Unreal opbouwen, ofwel via gaussian splatting. En stiekem hopen wij dat deze tool een 3e techniek kan zijn, of zelfs de andere 2 (deels) kan vervangen.
Zo is de tool trouwens ook voorgesteld aan ons op een beurs een paar weken terug.

Dus ik vermoed dat er naast gaming ook nog een heel groot potentieel zit in virtuele producties. Daar is Sony de laatste trouwens wel meer op aan het inzetten. Zie naar camera tracker Ocellus, of hun gamma LED walls voor virtuele productie.

[Ryuukami]

Ik heb een YouTube video gezien over gaussian splatting gaat een beetje mijn pet te boven maar zag er wel heel cool uit. Vooral in combinatie met een 3d camera of drone.

[jerisson]

Misschien dat je al wat interactieve demos gezien hebt, maar zoniet kan je hier eens kijken: https://superspl.at/

In een scene als deze kan je ook rondwandelen (op mobiel door de plaats waar naartoe wilt aan te klikken): https://superspl.at/scene/ff1d0393

[jerisson]

Mag ik vragen waarom je hoopt of denkt dat de techniek van Cinemersive Labs Gaussian Splatting kan vervangen? Lopen jullie tegen bepaalde beperkingen van GS aan?

Nu, ik kan me inbeelden dat als je de techniek van Cinemersive Labs uitbreidt naar 360 graden camera's, het handiger is om even een foto of video te nemen en deze om te zetten naar een model met beperkte parallax. Voor virtual production lijkt me dat al voldoende?

Bij 3DGS ben je vaak gebonden aan statische scenes, langere processing times, en de grotere bewegingsvrijheid heb je waarschijnlijk niet nodig bij VP?

[Bulls]

3D hoeft niet enkel voor VR te betekenen. Er kan zoveel gedaan worden met 2D naar 3D voor game development

[johanneslol]

Dat klopt, maar als ik zo lees wat zij doen leek mij dat het meest logische.

[Taipan]

Lijkt mij eerder handig om 3d modellen mee te maken.

Waarom 3 uur bezig zijn met een tafel modeleren als je hem ook kan inscannen?

[johanneslol]

Maar dat kan al langer, daar hoef je deze software niet voor te hebben.

[Dekar]

Ik snap niet helemaal wat de twee met elkaar te maken hebben. Het genereren van AI slop op basis van foto's heeft niet zo heel veel te maken met 3D modelleren. Of worden die AI beelden van Cinemersive Labs gegenereerd in de vorm van 3D modellen?

[ray1618]

Nee zo te zien niet, ze spreken met parallax zelf meer over volumetric foto’s. Een beetje zoals spatial foto’s op de iPhone alleen dan beter. En er is maar 1 bronfoto nodig.

Zie Cinemersivelabs.com

[svenk91]

Misschien dat ze het willen inzetten voor nieuwe framegen technologie. Dan kunnen ze met zulke tech misschien net iets beter de laatste echte frame extrapoleren.

[Smash1231]

Misschien will Sony in de toekomst radiance fields zoals Gaussian Splatting toepassen in hun games. Daarvoor moeten ze via een hele reeks foto’s een Volumetric Capture opnemen. Met de techniek van Cinemersive Labs kan het wellicht met veel minder camera’s of foto’s dan nu het geval is.

[spep]

Op zich wel een goede techniek om ergens een foto van te maken ,en dat als 3d te zien en opnieuw te printen.

Vooral bij kleine plastic onderdelen die anders dan 50 euro kosten

[MeltedForest]

Als je eerst iets van 300 euro uitgeeft aan iets als een 3DMakerPro Moose Lite, kan je daarna goedkoop onderdelen printen.

[Heroic_Nonsense]

Mwa, ervaring leert dat bij dat soort oplossingen de maten niet kloppen en er geometrische afwijkingen optreden.

Beter is een 3D-scanner, en dan het liefst een met LIDAR. Voor 300 euro heb je er al een (zonder LIDAR dan wel), hoewel in dit geval "duurder=beter" wel opgaat.

Vooralsnog werkt het m.i. nog altijd het accuraatst als je het object fotografeert, als canvas toevoegt in je CAD-software en op basis van de foto een schets maakt (en die vervolgens te calibeert op de maten die je met een schuifmaat hebt gemeten).

Ik denk eerder dat Sony dit wil hebben om eenvoudig 3D-scenes te bouwen in hun games.

[Reactie gewijzigd door Heroic_Nonsense op 3 april 2026 09:11]

[Alcmaria]

Mooi voor als ze Astrobot 2 willen maken. Het kan aan mij liggen maar ik vind die nimmer aflatende drang naar nog mooiere graphics totaal onnodig. Als ik perfect gerenderde blaadjes en raytracing wil zien ga ik wel naar buiten. Als ik lekker ontspannen een leuk spelletje wil spelen kan dat wat mij betreft gewoon een heerlijk pixelart spelletje zjin (Dave the Diver anyone?). Ik zou liever zien dat ze een startup overnemen die zich focust op leuke gameplay, het hoeft (nogmaals wat mij betreft) niet mooier, het moet weer leuker zijn.

[Wolfos]

Maar Astro Bot leunt net zo goed op dezelfde grafische technieken, en was op oudere hardware ook niet dezelfde ervaring geweest.

[svenk91]

Ik zou liever zien dat ze een startup overnemen die zich focust op leuke gameplay,

Laat de creative ontwikkelaars toch lekker onafhankelijk. Laat Sony zich er hoogstens als uitgever mee bemoeien.

[sjakie66]

helaas ben je een n=1, nou er zijn er genoeg, tegelijkertijd, er zijn genoeg mensen die ook graag een heel mooi perfect blaadje willen zien.


Ik kan er heel erg van genieten in ieder geval.

[Reactie gewijzigd door sjakie66 op 3 april 2026 09:13]

[Wilglide]

Lumepad 2 kan dit ook. Je kan ook eens zoeken op switch 2 in 3d, zelfde idee.