Gurman: Apple overweegt 'domme' headset te maken die met iPhone verbindt

Volgens Bloomberg-journalist Mark Gurman onderzoekt Apple verschillende opties om zijn AR/VR-aanbod betaalbaarder te maken. Een van de mogelijkheden is een 'domme' headset die met de iPhone verbindt.

Apple brainstormt volop na Meta's recente onthullingen van de betaalbare Quest 3S-headset en het prototype van de Orion-bril. Gurman meldt dat Apples Vision Products Group meerdere scenario's bestudeert. Naast een goedkopere variant van de huidige Vision Pro, overweegt het bedrijf een model waarbij de rekenkracht en batterij naar de iPhone worden verplaatst. Dit zou de headset lichter en goedkoper maken. Andere opties zijn slimme brillen vergelijkbaar met Meta's Ray-Ban-brillen, of een uitbreiding van de AirPods Pro met camera's en AI-functionaliteit. Het ultieme doel blijft een volwaardige AR-bril, maar de technische uitdagingen zijn vooralsnog te groot.

Door Andrei Stiru

Redacteur

01-10-2024 • 08:45

64

Lees meer

Reacties (64)

64
62
30
1
0
15
Wijzig sortering
Een super lichte bril met enkel display en audio waarbij de computer en accu in je zak/aan je riem zit met een dun flexibel kabeltje naar de headset is ook gewoon een prima idee en je kunt je nog steeds vrij rondbewegen.

Snap eigenlijk niet zo waarom alles IN de headset moet zitten, maakt hem alleen maar zwaarder.

[Reactie gewijzigd door Navi op 1 oktober 2024 08:52]

Snap eigenlijk niet zo waarom alles IN de headset moet zitten.
Photon to photon passthrough latency. Apple heeft de VP zo gemaakt dat tussen het beeld dat de camera inkomt en de beeld dat de schermen uitklomt niet meer dan 12ms zit. Daarvoor hebben de camera's via de R1 direct snelle toegang tot het geheugen op de SoC. Zet je processing in een puck buiten de headset of doe je het on device op de iPhone, dan verhoog je daarmee de latency van mixed reality en mogelijk ook de rendered output. Bron is Apple zelf in de VP announcement keynote en hier: https://www.apple.com/apple-vision-pro/specs/.

Ik ben ook voor een veel lichtere bril en ik denk dat een puck daarvoor ook een oplossing kan zijn, maar als dat vervolgens aan Apple z'n eigen standaard moet voldoen, moet de bus waarover die praat snel genoeg zijn en dat is vermoed ik de uitdaging.
stel er zit een kabel aan van 1.5 meter. Signaal moet van de bril naar de telefoon en weer terug dus moet het 3 meter afleggen. Elektrische signalen verplaatsen zich bijna met het snelheid van het licht.
Dus 3/300000000 = 0.01 us extra latency door het in de broekzak te doen
Tja, jammer dat ik dit op Tweakers moet uitleggen, maar vooruit:

Het gaat natuurlijk ook om de bandbreedte. De sensorische informatie van de Vision Pro betreft 12 camera's, een depth sensor, een Lidar scanner, 4 intertia units, een flicker sensor en een light sensor. De memorybus van de R1 is precies om die reden 256GB/s. Dat haal je simpelweg niet met bijvoorbeeld USB4 en zelfs niet met PCI-express 4.0 of zelfs 5.0.

Daarnaast heeft een kabel extra latency. Er is geen kabel die direct op memory kan worden aangesloten, omdat de integriteit dan simpelweg niet gewaarborgd kan worden. Omdat je minder bandbreedte hebt moet je ook meer serializeren en dat kost tijd.
Het is niet jammer dat je dit moet uitleggen, maar net de bedoeling van een community.
Tal van tweakers zijn net op andere vlakken actief: analisten, electronica, wetenschappers, etc... Niet ieder heeft dezelfde kennis of opleiding. Het is net op een plek als deze waar je kan bijleren van mensen die wél goed zijn in hun vak.
Het enige wat jammer is, is als iemand pas een uitleg geeft nadat die anderen zich dommer of niet welkom laat voelen.

Los daarvan: Leuk dat je meer informatie geeft. Langs de andere kant legt Apple ook de lat relatief hoog in kwaliteit; ze gaan geen zwaar minderwaardig product op de markt zetten, dus "onmogelijk" is het alvast niet.
Het is niet jammer dat je dit moet uitleggen, maar net de bedoeling van een community.
Met 25 jaar op dit platform, waarvan 10 jaar actief betrokken crewlid, snap ik dat echt wel. De frustratie zit hem erin dat ik in deze thread meerdere keren mensen armchair-engineering heb zien doen terwijl, wat je ook van Apple vindt, het stuk engineering dat hier in is gaan zitten is echt heel erg goed. En ja, Apple legt die lat hoog, dat doet Meta idd anders. Die zet vooral in op betaalbaarheid. Maar dat doet toch niets af aan dat dát de reden is dat Apple alles in één apparaat heeft zitten? Mensen hebben hun mening voor wat betreft Apple vaak al snel klaarliggen.

[Reactie gewijzigd door mOrPhie op 2 oktober 2024 11:44]

Met 25 jaar op dit platform, waarvan 10 jaar actief betrokken crewlid, snap ik dat echt wel.
Zeer indrukwekkend, maar dan snap ik eigenlijk de reactie van jou nog minder goed. Ik begrijp dat je in die tijd vast al talloze tandenknarsende en frustrerende zaken bent tegengekomen, maar geef toe, dit hier kon anders verwoord worden en zonder dat je dit effect zou gecreëerd hebben.

Het klinkt cliché, maar "laat een ander zijn woorden/acties nooit de jouwe beïnvloeden; dat is een controle over jezelf die je nooit wilt afstaan". Ik ben zelf ook niet heiliger dan de paus hoor, maar ik zag op 1 thread 2x dezelfde oneerbiedige toon van eenzelfde persoon en dat deed mijn nekhaar omhoog komen.
Daarom ook mijn reactie die ik zo correct en constructief mogelijk heb proberen te omschrijven.

Mag ik voorstellen om dit te laten voor wat het was (een slechte dag) en dat we beiden terug constructief meebouwen aan de community - zoals jij dat al die knappe 25 jaar doet?
De kabel is natuurlijk niet te vergelijken met de memory bus of de connectie tussen de camera en het geheugen.
Niet enkel heb je meer electromagnetische storing waar rekening mee gehouden moet worden, je hebt ook pre- en post- processing om de data over minder "lijnen" tot het andere toestel te brengen.

Wat wél een optie zou zijn is om de middelground te nemen en dus de bril nog steeds camera to screen te laten doen en het toestel objecten te laten renderen. Vervolgens kan de bril de objecten -zoals hij nu doet- op de camera layer "plakken". Dit zal het hele process om de objecten te berekenen offloaden naar het aangesloten toestel.

Dit is natuurlijk complexer dan hoe ik het hier schets, maar het is wel een manier om de misselijkheid tegen te gaan (of het lopen tegen het koffietafeltje :-p)
In een embeddeded systeem kan je de codec met de de scanline mee laten draaien, verwaarloosbare latency.
Even los van alles waar je met gemak aan voorbij gaat: Als er een kabel tussen zit is het geen embedded system meer.
Een kabel kan heel goed PCI-e zijn. Dan ben je functioneel op het juiste niveau.
Van de zotte dat ik dit op Tweakers moet uitleggen, maar:

PCI-e 5.0 x16 haalt 63GB/s. Dat is een factor 4 trager dan de 256GB/s die de R1 nu ter beschikking heeft. Daarvoor heb je echter een kabel nodig die praktisch zo breed is als een PCI-e x16 slot. En dan nog los van het volledig onpraktische karakter daarvan: dan nog is het geen embedded system.

Dus als de vraag is "waarom zit het allemaal in 1 behuizing", dan is dat gewoon het antwoord. Welnu, je _zou_ een systeem kunnen maken dat minder bandbreedte vereist, maar dan gaat de latency omhoog en de capability omlaag.
Zelfs met draadloos kan de latency met een lossy codec zoals H264 in het midden verwaarloosbaar zijn.

Kwestie van geen biderectionele frames gebruiken, synchronisatie met scanning van de bron&uitgang, geen TCP, etc.
Misschien biedt Thunderbolt 5 met bandwidth boost voldoende bandbreedte anders is het wachten op de volgende versie van TB of USB.
Thunderbolt 5 is 120Gb/s, dat is een factor 17 trager dan de memory bandwidth van de R1 chip. En Thunderbolt introduceert extra latency.

[Reactie gewijzigd door mOrPhie op 2 oktober 2024 11:49]

Mijn AVP gaat maar 2 uur mee op de batterij.
Die een stuk dikker lijkt dan mijn hele iphone, ik wil zelfs zeggen wel dubbel zo dik.

Ik zet mijn twijfels bij de ervaring als mensen ook 2 uur met die bril kunnen doen maar dan wel hun telefoon leeg is.
De AVP is dan ook een volledige MacBook, niet een single purpose OS als de iPhone. Flink verschil.
AVP draait vooral spatial apps die in basis qua functionaliteit toch meer op een iPad lijken. Excel op de AVP is echt iets heel anders dan Excel op je mac.
Bedoel niet alleen het OS, maar qua hardware. De Quest 3 heeft telefoon hardware, maar meeste ruimte qua fysiek volume gaat naar de lenzen, camera’s, mechanisme om IPD te regelen, ventilator, etc.

Er zijn gewoon ifixit teardowns van waarbij je kunt zien waar de volume in zit qua formaat, i.t.t een telefoon.
Eens, maar de software beperkt de hardware weer eens, zoals we ondertussen wel gewend zijn van Apple (iPad, iPhone, AVP)
Hoezo dan? Als ie nu al niet met een ingebouwde accu kan, maar tethered omdat ie anders in een uur leeg is, hoe gaat dat dan als je een volledige macOS draait? (2x rendered ivm beide displays + 3D effect)

AVP is gewoon niet geschikt voor macOS. Daarom draait Meta gewoon een aangepaste Android, en doet daar bizar veel dingen mee om het zoveel mogelijk features te laten krijgen die de AVP ook doet. Op de bestaande minimale telefoon-grade hardware.

Eigenlijk draait de AVP een hevig gemodificeerde macOS voor de iPad app ondersteuning enz.
Klopt maar ik neem aan dat een bril aan een iphone zeker qua ervaring in de buurt zal moeten komen van de huidige AVP? Althans is een ruige aanname van me.
Dan drained het de batterij wel enorm.
Ik denk dat ze juist willen gaan mikken op de vooruitgang van Meta met de Orion bril. Dat is het doel wat Apple voor ogen had.
Lijkt me ook toekomstbestendiger om dat met een iPhone te doen.
Een beetje sjieke 3D en AI compute is wel fijn bij VR/AR.
Een enkele iPhone is nog steeds erg weinig daarvoor. Als dit idee heel goed zou kunnen dan had Apple volgens mij geen Vision Pro uitgebracht. Dat gewicht en die prijs hadden zij ook liever niet gekozen uiteraard.

Voor een mobiel apparaat heeft een iPhone best wat rekenkracht, maar echt goede VR en AR is zwaar. Zelfs een AAA game spelen zonder VR is nog twijfelachtig op de iPhone: lage frame-rates, lage resolutie, laag grafisch detail (zie Resident Evil 4 en 7 op iPhone). Dat is nog zonder al het extra rekenwerk voor AR/VR. En de batterij gaat behoorlijk snel leeg met zo'n zware last over uren continu.

Het is niet voor niks dat de standalone VR-brillen zo groot en zo duur zijn, en dat er voor andere modellen een flinke pc of PS5 bij nodig is. Zelfs dan zijn er beperkingen als je hoge frame-rate, resolutie en grafisch detail wilt combineren. Zelfs als twee van die drie hoog moeten zijn is het al erg pittig. AR/VR kan zelfs een RTX 4090 zomaar op de knieën krijgen als het moet.

Als het Apple lukt om een relatief dunne en kleine bril te maken met de iPhone voor rekenkracht, dan verwacht ik relatief lage beeldkwaliteit en een heel korte accuduur. Daar zou de prijs dan ook naar moeten zijn, en dan is het afwachten hoeveel afnemers hierin geïnteresseerd raken boven het gebruik van andere VR, of geen (de smartphone alleen doet al veel dingen snel en handig in het dagelijks leven).
Het voegt gewicht toe, alhoewel ook weer niet heel veel... wat weegt zo'n moederbordje nou? Het is denk ik ook vooral goed voor de "levensduur" van het apparaat als het niet meer dan een "domme" display is... dan krijgt zo'n ding in principe de upgrades qua prestaties via de telefoon.
Omdat je dan een irritant kabeltje tussen de bril en computer/accu hebt die je continu voelt, in de weg zit enzo.

En nu ga je vast aankomen met argumenten dat je het kabeltje onder je kleding door laat lopen of wat dan ook, maar dat gaat gewoon niet werken. Om dezelfde reden als waarom mensen geen kabeltje tussen telefoon en oortjes willen, maar iedereen draadloze oortjes gebruikt.
Omdat je dan een irritant kabeltje tussen de bril en computer/accu hebt die je continu voelt, in de weg zit enzo.
Klinkt heel logisch, in relatie met de Apple Vision Pro is het alleen niet zo relevant. Die heeft dat kabeltje namelijk al voor de accu.
Is het niet zo dat iedereen draadloos ging omdat die jack aansluiting gewoonweg er niet meer aan werd toegevoegd? En dat iedereen boos was dat Apple hem wegliet? Nu weten we niet beter, maar ken nog genoeg mensen die een telefoon speciaal voor de jack aanschaffen ivm headset.
Ik denk dat het hier geen duidelijke kip-ei situatie is. Ik vermoed dat er al heel veel mensen over waren gestapt op draadloze oortjes, DUS kon Apple de jack weglaten, DUS de mensen - ook nog heel veel - die niet over waren werden boos op Apple.
Alleen is niemand in dat soort dingen geïnteresseerd. Echt niemand gaat met een headset die aan een smartphone zit, leven.
Ooit wel eens een VR headset gebruikt ? Elke vorm van kabel is waardeloos. Je moet vrij kunnen bewegen.
Meerdere zelfs, kabel naar je PC of iets anders waar je echt vast zit is inderdaad niets, kabeltje over je rug naar een kastje aan je riem heb ik geen enkele moeite mee.

Het is denk ik een kwestie van voor en nadelen, weegt het extra gewicht/warmte op je gezicht op tegen het kabeltje. (Waar je aan je riem mogelijk ook een grotere accu kwijt zou kunnen)
Probleem waar ik wel eens heb met de accu aan de riem is dat ze er bij bukken/springen er nog wel eens af willen schieten, naast dat het gewoon weer extra tijd kost om te kunnen beginnen. Ik merk dat ik daarom alleen al sneller maar ff mn Pico 4 pak dan mn HTC Vive Pro/Wirelessmodule, en dan dus ook mezelf beperk tot mobile VR, want mn router is nog niet eens Wifi 6(twijfel zelfs of die al wel 5 is, is inmiddels ook zo'n 10 jaar oud).
Omdat ze geen minuscule nucleaire batterij willen gebruiken lol
https://www.bright.nl/nie...aar-mee-zonder-laden.html

Die is verdomd erg piepklein. Hedendaagse accu’s lopen altijd snel leeg als je het intensief gebruikt, dus het maakt accu compleet waardeloos.
Sorry, ik vind hedendaagse accu’s inferieur technologie na het zien van nucleair battery.

Ik vraag me wel af… of het ook met elektrische auto’s kunt gebruiken… het scheelt heel enorm van het gewicht !!! :P Dat zet je het wel op het idee ;)

DJI drones met nucleair batterij… dan blijft DJI drone ontzettend erg lang in het lucht!

[Reactie gewijzigd door Dark Angel 58 op 1 oktober 2024 09:50]

als ik het zo lees is het voor sensors een oplossing maar er zit niet veel juice in; 100 microwatt op 3 volt. genoeg voor een analoge klok? Er zijn grotere oplossingen voor satellieten van 500 tot 4kwatt.
Perfecte batterij voor een rookmelder, niet voor een AR/VR bril
Met een ongeluk in een auto is er dan wel een groot probleem denk ik. Maar mooie technologie!
Je bent helaas voor sensatie marketing/desinformatie gevallen. Dit soort accus hebben nul relevantie.
Apple wil alles los.
Verdienmodel.
Een slimme headset kunnen ze vast in tig variaties.
Een domme headset niet. misschien kleur en afwerking.
Ipad 7(?) modellen met verschillende geheurgens.
Iphone x? modellen.
Een Mate X achtig ding komt er nooit. Eten ze hun ipad markt op.
Daarom zal Ipad Pro zal altijd zn eigen os houden.
Liever 2 volledig opgetuigde apparaten verkopen.
Dat dunne, flexibele kabeltje beperkt de bewegingsvrijheid wel degelijk, tenzij het lang genoeg is uiteraard. Maar dan blijf je er makkelijk achter dingen ermee haken, raak je kwijt, of breekt (al dan niet kabelbreuk)... Er zijn genoeg redenen te bedenken waarom je niet meer met een dergelijk kabeltje wilt lopen. Dit waren althans de frustraties die ik had, toen ik nog bedrade oortjes had bij mijn disc- of nog ouder walkman had.
Als dat technisch al haalbaar was dan deed iemand het al. Het kan gewoon nog niet, sowieso is AR/VR gecombineerd aardig complex met waar je je ogen op focust. Een kleine licht bril wordt dan al lastig, nog los van de elektronica.
Google glasses concept. Wat al bestaat.
Omdat ook dat kabeltje itritant is, eigen ervaring bij mijn HTC Vive Pro met de kabel van de wirelessmodule naar de batterij. Een goed gebalanceerde headset maakt voor mij het gewicht niet uit. Dus Ja, het hoeft niet helemaal in de front headset te zitten, bij de Quest 3 bv zit alles in principe in de bril zelf, maar bij de Pico 4 zit de batterij achter in de headstrap.
Ieder zo zn voorkeuren. Zodra je draadloos kunt zenden zal het me niet veel uitmaken. Maar ik zag op aliexpress (inclusief wat reviews daarvan op youtube) al chinese AR glasses gebaseerd op de XR2 gen2 chipset waarbij ook alles in de bril zelf zat, en toch redelijk 'dunne' bril (let wel die zijn dus puur voor AR en niet VR).
Apple zou moeten overwegen om een soort DEX toe te voegen aan hun iPhones. Een iPhone is gemiddeld al even snel al niet sneller dan een simpele laptop. Maarja, wishfull thinking.
Daarom is het hele sustainable verhaal van Apple ook niets meer dan greenwashing, bedoel de iPhone is ondertussen zo krachtig, dat zou je enige device kunnen zijn als je Stage Manager zou kunnen gebruiken. Ze verkopen liever van iedere categorie een device aan je (tablet, desktop, en telefoon).
Valt ook wel mee. Ze moeten hun eigen business niet kapot maken natuurlijk. Maar ondertussen recyclen ze wel een hoop materialen (zware metalen) wat een hoop belasting scheelt op natuur en mens. Het is een middenweg denk ik meer. En nee, ze zijn niet heilig, maar een paar procent recyclen op die aantallen heeft al een flinke invloed.
Hetgebruik van nog werkende toestellen is echt beter. En materialen hergebruiken doen de gewone recyclers echt wel.
nee, want dan gaat men minder macbooks en macs kopen 8)7
iPhone is niet zo krachtig qua cpu en accu. Ik zie het niet gebeuren, het blijven geruchten waar je niet zoveel waarde aan kunt hechten.

Ik denk wel dat het een goede zet was van 'the zuck' om Apple eens flink onder druk te zetten, maar aan de andere kant 'Orion' is absoluut nog niet iets wat je op korte termijn kunt kopen. En de demo's waren erg geregiseerd, niets meer dan een poging investeerders tevreden te stellen, dat hele reality labs is toch een soort van bodemloze put. Horizon Worlds is nog nooit van de grond gekomen.

[Reactie gewijzigd door 19JM81 op 1 oktober 2024 08:55]

Je weet dat dat Apple VR/AR ding ook maar een uur op accu alleen meegaat? Het lijkt mij best mogelijk. Wireless connecten zoals met CarPlay en gaan. Mocht je toch met dat ding op weg zijn kan je makkelijk een powerbank aansluiten.
Ten eerste is het twee uur (als je film kijkt) :-) en de avp kan je ook aansluiten op een powerbank zoals de Anker 737 die hem tot zeker twee toe kan laden wat tesamen zes uur maakt. Maar geloof mij, dan wil je de avp ook wel van je hoofd hebben na die zes uur.

Maar goed, ik stoor me wel soms mateloos aan die kabel. Een hoody is een redelijke uitkomst, maar gewoon doodstil op de bank zitten ermee is het beste lol.
Geweldig initiatief! Net zoals een computer met een monitor wordt verbonden, spreekt de modulariteit van dit ontwerp me aan. Het vervangen of upgraden van een iPhone is makkelijker dan het vervangen van een volledige headset, en bovendien is de kans kleiner dat het snel kapot gaat.
Dit leest als chatGPT...
Ik vermoed dat Apple bijna elke vorm van VR headset aan het "overwegen" is.
maar de technische uitdagingen zijn vooralsnog te groot.
Dit is toch gewoon onzin? Anderen kunnen het ook. Ze kunnen het volgens mij gewoon niet goedkoop genoeg maken.

De vision pro geeft wel laten zien dat mensen geen Apple prijzen willen betalen voor een niche product als VR/AR.
En natuurlijk niet met zo’n stomme duikbril de hele dag willen lopen. Ik heb er het geld wel voor over, maar ik wil niet eruit zien alsof ik op vakantie ga en alvast m’n ski-bril op heb gedaan.
Ondanks het geklungel met Glass en Nord, is er denk ik nog steeds een grote markt voor AR met een beperkte FOV, als het maar licht genoeg is.
Wat betreft AR/VR is het jammer dat de camera's van de iPhone bovenaan zitten en niet precies in het midden anders had je met een Google Cardboard achtige constructie heel goedkoop een minimale AR/VR ervaring kunnen bieden.
Dat zeiden ze ook over de Apple Watch en de iPad.

Ik denk dat jouw reactie van een random Apple hater is. En waarom denk ik dan? Deze brillen icm de aanstormende technologie voorzie ik zelfs toepassingen om de werkdruk en tekorten aan vakmensen te verlagen.

Ik ben het ook niet met alles eens. Het zal er sociaal niet beter op worden met die brillen, maar ik zie echt mogelijkheden voor bepaalde maatschappelijke vraagstukken.

Tevens snap ik ook niet echt wat je bedoeld met gebrek aan creativiteit en innovatie. Zo’n bril is toch een enorme doorbraak? Kwestie van finetunen en zelflerend maken en er staat een monsterproduct.
ai ai ai, aannames aannames. Nogal wiedes iemand uit te maken voor Apple hater alvorens je weet of hij/zij gebruik maakt van Apple devices. Zowel in werk als privé.

Welke doorbraak je aanhaalt, mis ik even. Deze brillen zijn er al sinds 2012. Ze gaan dus al een poosje mee. Laten we het dus niet groter maken dan dat het is. Een leuke gimmick.
Zit je op een spijker?

Aannamen zijn jouw niet vreemd, zo te zien. Jij vindt het toch alleen voor de gimmick liefhebber? Een flop zelfs? Gebrek aan innovatie/creativiteit? Dat zijn erg stellige aannamen hoor. Ook nergens op gebaseerd. Je weet totaal niet wat er op de achtergrond speelt en wat er met al deze info wordt gedaan. Je weet ook helemaal niet met welk product ze kunnen gaan komen of waar ze dit in gaan implementeren. Je schiet het al bij voorbaat af. Als Apple met iets komt dan werkt het meestal beter dan bij een ander. Leuk dat een bedrijf het eerder uitbrengt, maar wie het laatst lacht...Met een Nokia kon ik ook eerder bellen, snap je?

En ja, ik denk dat jij een Apple hater bent. Als dat niet zo is dan vind ik dat ook prima. Maar gezien de tendens van je bericht denk ik dat te weten.

Op dit item kan niet meer gereageerd worden.