Chirurgen Erasmus MC hebben zo'n 20 longoperaties verricht met behulp van vr

Chirurgen van het Erasmus Medisch Centrum in Rotterdam hebben met succes een kleine twintig patiënten aan de longen geopereerd met behulp van virtual reality. Van meerdere ct-scans wordt een 3d-omgeving gemaakt die in de voorbereiding en uitvoering gebruikt wordt.

In een reportage van de NOS is te zien dat de software geleverd wordt door het bedrijf MedicalVR en de hardware lijkt een Oculus Rift S te zijn. De beelden zijn niet alleen door de chirurg met de head-mounted display te zien, maar zijn perspectief wordt ook getoond op een monitor in de buurt, inclusief zijn controllers en een laserwijzer. De verschillende bloedvaten, de luchtpijp en de tumor zijn door de artsen met kleur gecodeerd voor betere visuele duidelijkheid.

De artsen zelf noemen het 'een absolute revolutie' vanwege het versterkte inzicht in de long van de patiënt. Iedere long heeft weer een net andere 'lay-out', wat beter inzicht zo waardevol maakt. Niet alleen wordt het werk van de chirurgen makkelijker, maar het wordt ook effectiever. Door het verbeterde inzicht kunnen tumoren doelgerichter verwijderd worden, wat betekent dat er minder gezond longweefsel meegenomen kan worden bij een biopsie.

De geïnterviewde artsen verwachten dat de techniek zich ook zal ontwikkelen in het domein van de augmented reality, waarbij een plaatje van een orgaan op de patiënt geprojecteerd kan worden. Ook is de verwachting dat het niet beperkt zal blijven tot behandelingen van de longen, maar ook tot screenings en andere lichaamsdelen.

NOS VR Surgery

Door Mark Hendrikman

Redacteur

19-09-2020 • 13:12

73

Reacties (68)

68
66
21
2
2
36
Wijzig sortering

Sorteer op:

Weergave:

Wij ontwikkelen min of meer hetzelfde maar dan met HoloLens2 voor hartoperaties, orthopedie en leveroperaties (verwijdering van tumoren.). Nog niet tijdens de operatie (want: goedkeuring) maar wel voor het plannen.
Overigen ligt de echte uitdaging bij augmented reality tijdens operaties bij het continu “matchen” van het virtuele orgaan met het echte orgaan. Veel organen zoals lever en longen veranderen continue (longen vanwege ademen, lever omdat als je erin snijdt het gelijk deformeert).

Bij die long operaties zal de uitdaging zijn: hoe kun je in realtime het instrument in de longen tracken en op de juiste plek in de AR visualisering tonen (afgezien van het eerder genoemde probleem van het matchen van de visualisering met de patiënt).
Je denkt misschien: ok SLAM tracking via een piepklein cameraatje op de punt van het instrument. Maar voorlopig is de kleinste camera nog 10x te groot.

[Reactie gewijzigd door Menesis op 23 juli 2024 13:39]

Leuk dat we dit soort technieken nu ook in Nederland beginnen te zien! Maar voor we onszelf nu teveel op de borst beginnen te kloppen: in China zijn ze op het gebied van VR en robot-ondersteunde operaties wel wat verder dan hier hoor... Daarbij gebruiken ze zowel in China ontwikkelde technologie als tientallen uit de VS geïmporteerde Da Vinci Surgical Systems (die laatste zijn al wat ouder en qua kosten-baten een tikje omstreden, zie bijvoorbeeld Questions About Robotic Hysterectomy). In een kort artikeltje in Nature van juni dit jaar wordt met drie grafiekjes geïllustreerd hoe snel de toepassing van operatierobots in China is gegaan, zie Medical robotics in China: the rise of technology in three charts. Het gaat daar sneller dan je je voor kunt stellen! Maar goed, dan gaan hun treinen ook natuurlijk.

Quote: "Between 1999 and 2019, the number of papers published by at least one Chinese author in the combined fields of biomedical engineering and robotics increased from 142 to 4,507, and spiked twice during that period (see ‘Published papers’), according to data from the Web of Science. One peak was in 2008, two years after a robotic system for minimally invasive operations called da Vinci was first deployed to hospitals in China. The second was in 2017, a year after the first Chinese-designed robot for minimally invasive spinal surgery was approved for sale."

Remote operaties
Operaties kunnen daar ook 'remote' via 5G (!) gedaan worden, zie Remote surgery using robots advances with 5G tests in China, en daar deed Huawei natuurlijk ook aan mee: World's First Remote Operation Using 5G Surgery. Vorig jaar baarde de robo-tandarts wel wat opzien (zie: Robot dentist in China is first to fit implants in patient without any human involvement) maar zelf vind ik de ontwikkelingen op het gebied van de orthopedische robotchirurgie interessanter.

Robotondersteunde orthopedische ingreep
Een vriend van me is vorige maand in China met behulp van zo'n machine geopereerd aan zijn ruggegraat, echt ongelooflijk hoe dat gaat. De orthopedisch chirurg kon real time alles volgen op het 3D-scherm en op de micrometer bijsturen. Een operatie van krap anderhalf uur, een zeer klein gaatje van nog geen centimeter (!) en het afgebroken stuk bot werd weer precies op zijn plek gelijmd (!) - dus geen hechtingen of klemmen die later weer verwijderd hoeven te worden en de speciale lijm blijft voor altijd op zijn plek. Als er grotere wervelbeschadigingen waren geweest hadden ze na een MRI-scan met een speciale 3D-printer 'custom' vervangend botweefsel (!) kunnen 'printen' dat op de micrometer :) overeenkomt met de te vervangen werveldelen en de nieuwe delen op dezelfde wijze (met vermoedelijk een iets groter gat om het door de huid heen te krijgen) kunnen inbrengen. De operatie was een succes en hij mocht de volgende dag alweer naar huis! :D Last but not least, de kosten waren, zoals gebruikelijk in de Chinese gezondheidszorg, belachelijk laag (minder dan hij hier voor alleen een MRI-scan plus specialistenconsult kwijt was geweest).

Medisch tourisme
Derhalve verbaast het me niets dat ze het bij de 2020 China International Fair for Trade in Services (CIFTIS) in Beijing van begin deze maand ook hadden over de opkomst van 'medisch tourisme' naar China. Ook die ontwikkeling zal veel sneller gaan dan veel mensen hier denken of willen weten. Ter vergelijking: veel huisartsen in Zeeland verwijzen al jaren patiènten voor operatie door naar Antwerpen en de verzekeraars vergoeden dat gewoon: geen wachtlijsten, uitstekende service en niet duurder dan in Nederland. Met de technologische voorsprong die China inmiddels heeft en de verslechterende relatie met Nederland (na de weinig tactische ASML-misser |:( van dit kabinet onder druk van Trump & co in januari dit jaar (de Nederlandse regering durft sindsdien geen hulp meer aan China te vragen en probeert alles buiten de Chinese regering om te doen met als gevolg groot gebrek aan type IIR en N95 mondkapjes in Nederland (en dan gaan we nog even voorbij aan de 600.000 'verkeerde' mondkapjes die een ambtenaar op het ministerie zonder de proefmonster door TNO of de artsen te laten testen bij een Chinese modefirma (!) besteld had en waarvan de exportvergunning fijntjes 'not for medical use' vermeldde'))) kun je wel verwachten dat de meest geavanceerde Chinese medische technologie nu niet zo gauw naar Nederland komt (wel naar Duitsland denk ik) zodat patiënten voor geavanceerde operaties meer en meer naar China zullen reizen. De operatiekosten zijn daar nog steeds zeer laag, het kennisniveau en serviceniveau van de Chinese artsen in eerstelijnszorg en ziekenhuizen is, tot mijn spijt, vaak hoger dan hier en als je kijkt naar het totale kostenplaatje (operatiekosten, na een dag alweer terug in je hotel, te lage vliegkosten bij gebrek aan tax op kerosine) zal je wel gek zijn als verzekeraar als je niet overweegt dit soort operaties naar China te outsourcen.
Ik zou er echter niet van opkijken als een Chinese medische firma in de nabije toekomst zijn operatierobots zelf naar Nederland haalt en hier, of op afstand vanuit China (5G + internet), operaties zal gaan aanbieden. Het enige wat dat nog zou kunnen belemmeren is de lokale regelgeving hier. Maar daar zou ik me geen zorgen over maken. Een paar jaar geleden heeft een Chinese medische robot al met succes zijn medisch examen afgelegd: Chinese robot becomes world's first machine to pass medical exam. 8-)

edit: extra info, correcties

[Reactie gewijzigd door quadsimodo op 23 juli 2024 13:39]

[...] Ik zou er echter niet van opkijken als een Chinese medische firma in de nabije toekomst zijn operatierobots zelf naar Nederland haalt en hier, of op afstand vanuit China (5G + internet), operaties zal gaan aanbieden. [...]
Een probleem blijft dat de afstand van NL naar Beijing toch bijna 8000km is 'zoals de vogel vliegt'. Met een rechtstreekse glaskabel door vacuum doet licht dat in 27ms one-way. Heen en weer is dat dus al 54ms. Maar je zult geen rechtstreekse kabel hebben, er zitten nog repeaters/switches tussen, moet de signalen nog verwerken aan beide kanten. Oftewel je zalt met de meest high tech technologie gewoon nogsteeds wat lag hebben, wat bij bewegende delen in een lichaam toch wel funest kan zijn.

Wie weet kunnen we ooit data dwars door de aarde sturen, via neutronen die (bijna) met lichtsnelheid gaan ofzo, dan komen we wel onder de 50ms ping voor heen en weer :)
“Quantum Internet”
*kwijl, slurp, kwijl*
Ook quantum kan niet sneller dan de lichtsnelheid hoor
Voor zover ik, een leek, heb begrepen ondervindt licht op bepaalde punten in het netwerk ietwat vertraging op. D.m.v. quantum tech wil men die vertragingen omzeilen.

De verbeelding spreekt natuurlijk boekdelen als men uiteindelijk op grote afstanden gebruik zou kunnen maken van die “spooky action at a distance”. Volgens mij, zo uit mijn hoofd, zit dat ook op quantum niveau. Quantum Net 2.0 wellicht?

Lichtsnelheid blijft dan natuurlijk ook wel leuk... voor de kids ;)
Nee, want Quantum heeft een informatie-flow nodig. Deze informatie-flow is gebonden aan netwerksnelheden van reguliere netwerken.
Wel positief blijven. ;)

Voor je het weet is er een doorbraak (van de natuurwetten :P) en hebben we die langzame glasvezelkabels niet meer meer nodig.

Honderd jaar geleden hadden ze ons uitgelachen als we het over het produceren van antimaterie zouden hebben.

0,0ms ping :9~
Misschien toch maar door aan het begin lijnen te tekenen op de lever en die al ijking te gebruiken of zo?
Zolang je dit maar uitbrengt op Steam ipv eerst een jaar op Epic Games.
Heeft Facebook straks ook alle data van onze organen :P
Geen rare vraag aangezien het een rift s
Dat hebben ze al omdat ieder lichaam dezelfde organen bevat 8-) :Y) :9
Maar zo kunnen ze straks wel gericht niermedicatie aan nierpatienten, of rollators aan mensen met kunststof heupen adverteren, natuurlijk.
True, gelijk ook even in je FB status aangeven of je donor bent of niet.

[Reactie gewijzigd door doobieters op 23 juli 2024 13:39]

Dat is niet helemaal waar. Er zijn ook mensen waarbij een bepaald orgaan ontbreekt of niet volgroeid is. En ook al zijn dat uitzonderingen, dan nog kan er van alles aan de hand zijn met die organen, dus met alleen "de meeste personen hebben een hart, lever, nieren, etc." kan FB nog niks.
Niet helemaal waar ;)

https://nl.wikipedia.org/wiki/Situs_inversus

Situs inversus (ICD-10 Q89.3) is een zeldzame verstoring van de links-rechtsconfiguratie binnen het lichaam. Met andere woorden, de organen zijn in spiegelbeeld gepositioneerd in het lichaam. De lever zit dan bijvoorbeeld links in plaats van rechts. De normale positionering van de organen heet situs solitus.
Zo leer ik elke dag wel wat bij. Toch een leuk weetje voor op de verjaardagen ;-)
Haha ja, inderdaad. En iedereen, oh hoe weet jij dat?

Tweakers 8-)

Heel herkenbaar :*)
Zou wel gaaf zijn als hiermee er ooit een tijd komt dat chirurgen in NL mensen in bijvoorbeeld Afrika kunnen opereren.
Of chirurgen in lageloonlanden mensen in onze streken opereren omdat ze goedkoper werken ;)
En daarna neemt AI het over. Scheelt een hoop personeel.
Heb je gelijk ook minder patiënten. 8-)
Of het worden nanobots aangestuurd door een controller van buitenaf over waar ze ongeveer moeten zijn en wat ze moeten doen. Soort van borg en federation medical technology combined :P
Wat ik bedoel is dat useless eaters worden afgemaakt.

Dat zie je aan hoe die 3.000 bejaarden nu zijn afgemaakt 'wegens corona'.
Nederland heeft meer doden in verzorgings- en bejaardentehuizen dan Frankrijk, Japan en Finland samen! Daar heeft bijna niemand tegen geprotesteerd en dat is opgemerkt door de executeurs.

Dus volgende keer zijn de werklozen aan de beurt.
Je gaat als calculerende regering useless eaters toch geen basisinkomen geven?
Dus volgende keer zijn de werklozen aan de beurt.
Je gaat als calculerende regering useless eaters toch geen basisinkomen geven?
Waarom niet?
Nee, zo werkt dat niet. Er moet een goede reden zijn voordat je iets doet als regering. :9
Wat zijn "goede redenen"? Noem er eens een paar
Ik zie geen goede redenen, daarom doe je zoiets ook niet. Blijven we zo in de rondte praten? 8)7
Dat klinkt in theorie natuurlijk gaaf, maar dan moeten de voorzieningen alsnog getroffen worden. Een wachtruimte is nog niet van het grootste belang, maar je wilt geen operatie uitvoeren midden in de bush-bush - de OK moet toch echt volledig gesloten en extra schoon zijn. En als ze dat allemaal bouwen, kost het niet veel meer om Afrikaanse artsen aan te nemen dan dat ze dure Nederlandse artsen (in verhouding) betalen om het op afstand te doen.
Nee maar in noodsituaties (natuurrampen, oorlog, whatever) is het wel handig als je extra mankracht kunt laten “inbellen”.
Als er oorlog is, zal ongetwijfeld het netwerk worden platgelegd, dus dan heb je er al niks meer aan. En bij natuurrampen kan het netwerk schade oplopen. Bovendien moet er ook nog personeel beschikbaar zijn, want het is niet zo dat wij maar onbeperkt personeel hebben. Ook vóór de coronacrisis waren de wachttijden voor Nederlandse operaties al een stuk langer dan de regulaties voorschreven, dus dat zegt al genoeg.

[Reactie gewijzigd door TheVivaldi op 23 juli 2024 13:39]

Op militaire compound hebben ze in oorlogsgebieden echt wel een netwerkverbinding. Anders kan je helemaal geen oorlog voeren.
Maar vie zegt dat die OK's op militaire compound staan? En dan nog kan daar wat mee gebeuren, denk aan rebellen die apparatuur of kabels opzettelijk beschadigen danwel vernielen of door het netwerk te ddossen of iets dergelijks. Of de overheid die ook dáár de verbinding afkapt en alleen in het regeringsgebouw een verbinding in tact laat (is al wel eens voorgekomen).

Netwerk en internet zijn top en ondenkbaar, maar nog altijd enigszins broos.
In principe is, zeker met robotica, niet meer dan een vrachtwagentrailer nodig, een heel gebouw is nergens voor nodig.
Je hebt ook ruimte nodig voor als het misgaat en er tóch lokaal personeel naar binnen moet. In een trailer is niet zo veel ruimte, dus kun je niet goed snel handelen en bewegen (en jezelf ook niet goed desinfecteren, wat in een OK een must is, omdat er geen ruimte is voor een desinfectatielocatie - en nee, in een trailer ernaast is geen optie, want je moet nog steeds van de ene naar de andere met alle mogelijke gevolgen van dien).

Daarnaast is een trailer veel minder makkelijk GOED te ventileren, helemaal als je met al dat extra personeel zit dat daar naar binnen moet in geval van nood. En de brandveiligheid komt het ook niet ten goede.

Daarnaast zit je ook nog met het weer: een gebouw is veel steviger dan een trailer in geval van noodweer.

En er zullen vast nog een paar complicaties zijn waar ik nu even niet aan denk.

Zo'n trailer is een noodoplossing voor bijv. oorlogsgebied, maar dan ligt het netwerk vaak plat (of is overbelast), dus dan heb je weer niks aan de chirurgen op afstand.

[Reactie gewijzigd door TheVivaldi op 23 juli 2024 13:39]

het is allemaal wel mogelijk, zolang je de visie maar hebt en je je niet beperkt. Alle punten die je opnoemt zijn gewoon mogelijk met een trailer variant.
Uit ervaring kan ik je zeggen dat je ongelijk hebt (behalve dan, zoals gezegd, in een noodsituatie waarin het ook echt móet, maar dan zijn er weer andere mogelijke complicaties w.b.t. de artsen op afstand).

[Reactie gewijzigd door TheVivaldi op 23 juli 2024 13:39]

Een schone OK is inderdaad de ideale situatie, maar als dat er niet is kan er overal worden geopereerd. Misschien dat er wat desinfectie spul gebruikt wordt.

En het heeft niet veel met de kosten van Afrikaanse vs. Nederlandse artsen te maken, eerder met kennis en kunde. Het zou natuurlijk hartstikke mooi zijn als Nederlandse (of beter: artsen uit verder ontwikkelde landen) op afstand hun collega's in ontwikkelingslanden kunnen helpen.
Een schone OK is inderdaad de ideale situatie, maar als dat er niet is kan er overal worden geopereerd. Misschien dat er wat desinfectie spul gebruikt wordt.
Eh, nee, zo werkt dat niet.
Ik kan u als microbioloog wel melden dat desinfectie een schijnveiligheid op bouwt.
Dat vernield je de hele natuurlijke huidlaag (dus de natuurlijke bescherming)
Waar ik mij ruim 8 jaar geleden wel druk om heb gemaakt.
Mijn moeder was begin 80 en die viel op een zaterdagmiddag rond 16:00 uur. en brak haar heup.
Dat was op zaterdagmiddag en vanuit ons redelijk grote dorp konden er niet eerder dan zondagmiddag 2 artsen komen vanuit 2 verschillende ziekenhuizen om haar te opereren.
Ik woon toch niet in de rimboe?
Ik woon in Nederland en dat dit kan gebeuren vind ik een zeer kwalijke zaak.
Vreemd dat ze hier een Rift voor nemen, en niet een Varjo of die andere 8k bril
HoloLens lijkt me zelfs nóg geschikter.
nee echt in de verste verte niet, in ieder geval niet de eerste hololens. ik heb zon ding opgehad, en de resolutie, en vooral de kijkhoek valt erg tegen, alsof je zonder bril een kartonnen doos met twee gaatjes op hebt.
interessant, thanks!
Hololens is AR geen VR, en nogal een heel stuk duurder dan een Rift s, die goed genoeg is om zulke test projecten mee uit te voeren.
Omdat die niet beschikbaar waren EN vele malen duurder zijn. Maar zal me me niets verbazen als de volgende gebruikte headset een hp reverb g2 zal zijn of een pico neo 2.. veel duurder is niet echt nodig.
Op het niveau van dat soort budgetten is de meerprijs van een varjo heel goed te doen. Ik kan me niet voorstellen dat het totale budget voor dit project minder is dan 100K, en dan is die 4000$ verschil niet veel, en scheelt wel een hele hoop op het eindresultaat. Met operaties heb je die resolutie echt heel hard nodig, meer nog dan de super high res schermen die ze vaak gebruiken in die sector.

[Reactie gewijzigd door mixil op 23 juli 2024 13:39]

De goedkoopste Varjo is 5000 euro en dat is headset only, daar komt dus nog basestations en controllers bij (of de 6000 euro versie welke handtracking(van leapmotion) heeft ingebouwd). Daar kun je ongeveer 10 Oculus Rift S'en van kopen, waarmee je dus een grotere groep kunt gebruiken (en veel goedkoper als er 1 kapot gaat), naast dat de Varjo ook nog lastiger te verkrijgen is en de vraag dan ook nog is, hoe land duurt het om een vervanging te krijgen als die kapot gaat. EN natuurlijk dus geen externe hardware nodig voor positional tracking wat het allemaal een stuk praktischer maakt voor zo'n chirug...
Ja. met operaties ansich heb je hogere resoluties nodig, maar zover zijn ze nog niet, het is nu alleen nog maar een project/test om voorbereidingen etc te kunnen doen.
Naast dat je ook wilt weten hoe feasible dit is om snel en goedkoop te kunnen leveren, want de Nederlandse zorg is toch al vele malen te duur ten opzichte van de landen rondom ons (en bv in duitsland is de kwaliteit vaak zelfs beter).
Ook is de hardware die nodig is om een Rift S aan te sturen een stuk goedkoper dan om een Varjo op de volle resolutie te benutten.
De beeldkwaliteit van headsets wordt steeds beter naarmate ook de GPU's krachtig genoeg worden om die hoge resolutie scherm op 90+hz aan te sturen in volle glorie. En dit soort projecten gaat vaak over langere tijd, en zal waarschijnlijk al wel gestart zijn met de originele Rift (of Vive).
Goeie punten. De rekenkracht valt op zich wel mee trouwens, het slimme van een Varjo is dat alleen het midden van het scherm een hoge resolutie heeft, en de randen niet. Een soort poor mans foveated rendering dus. Voor de volgende versie zijn ze bezig om dit te verbeteren met oogtracking, zodat de hotspot zich verplaatst naar waar je kijkt.
Waarschijnlijk gewoon omdat de Rift voldoet/voldeed voor deze trial.
Fantastische ontwikkelingen. Ga zo door zou ik zeggen, hoop niet dat ik er ooit gebruik van hoef te maken maar als 't zo kan ben ik in ieder geval geruster over de uitkomst.
Dit is echt geweldig. De details waarmee ze zoiets inzichtelijk kunnen maken wat normaal met een kijkoperatie niet kan is echt heel netjes. Ben benieuwd hoe dit zich verder ontwikkeld.
Wordt dit al standaard gebruikt of was het een test?

Dit is wel geweldig voor de medische wereld en patienten, top.
Zou je straks niet juist een vorm van AR willen gebruiken, wanneer je in mensen gaat snijden.

Uit een radiogesprek gebruikten de chirurgen dit als voorbereiding op de operatie, of als geheugensteun tijdens de operatie. De operatie gaat dus nog ouderwets.

Nu heb ik nog nooit een VR bril opgehad, maar wel een hololens van Microsoft. Met dat ding kan je wel snijden inclusief hulp krijgen van zo'n laag extra informatie en beelden. Dat zou een enorme aanwinst zijn.

[Reactie gewijzigd door mavaros op 23 juli 2024 13:39]

En dan een hangende verbinding hebben :+

[Reactie gewijzigd door Heijmenberg99 op 23 juli 2024 13:39]

Dit is slechts het bekijken van een 3D model gemaakt met data van CT Scan als voorbereiding op een operatie :) Niet op afstand opereren ofzo.
Nee, maar het is ook niet alleen ter voorbereiding. Ik begrijp het uit verhaal dat het gebruikt wordt in de voorbereiding én tijdens de operatie.
Dat is werk voor ons ICT-ers. Als dat faalt is het onze schuld (of in ieder geval de schuld van onze beroepsgroep) :-)
En sommigen maar zeggen dat VR dood is... :D
VR is zeker niet dood. Het is alleen nog zoeken naar en uitwerken van nuttige toepassingen. De gedachtefout die vaak gemaakt wordt is dat iets direct een massaproduct moet worden om succesvol genoemd te mogen worden. Maar je kunt beter, zoals in dit geval, naar niche-toepassingen zoeken. Daar is het vaak veel makkelijker om nieuwe technologie te gaan gebruiken omdat de gebruikers er meer voor open staan.

Op de BBC hadden ze een tijdje terug een programma waar VR werd gebruikt voor verbouwingen van huizen. Ik kan me goed voorstellen dat binnenhuisarchitecten dat dan willen hebben om hun klanten te laten zien hoe het gaat worden. Maar ook hier weer: het is een niche.
Kent iemand de Nintendo VR32 nog?
Jup, die heb ik nog liggen in een doos, blijft leuk om zo nu en dan wat op te spelen :D

Op dit item kan niet meer gereageerd worden.