Google laat robots samenwerken in de fysieke wereld door Gemini Robotics ER 2

Google presenteert versie 2 van Gemini Robotics ER. Dit verbeterde AI-model laat robots de fysieke wereld zien en doorgronden, waarbij ze taken in meerdere stappen kunnen opdelen en met elkaar kunnen samenwerken. Het doel is om mensen bij te staan in alledaagse omgevingen.

De nieuwe versie 2 is volgens Google een grote upgrade ten opzichte van de voorgaande versie 1.6. Het vernieuwde 'brein' verwerkt videobeeld van de fysieke wereld zodat robots uiteenlopende taken met objecten en obstakels kunnen uitvoeren. Ze gebruiken daarbij alle ledematen en mogelijkheden daarvan, zoals fijnmotorische grip van individuele vingers bij humanoïde robots.

Gemini Robotics ER (embodied reasoning) 2 zet een flinke stap vooruit voor echt flexibele robots in gewone omgevingen waar mensen leven en werken, aldus Google. De ontwikkelaars bij AI-afdeling DeepMind stellen dat de meeste robots voorgeprogrammeerd zijn of op afstand worden bediend en dat ze alleen beperkte, herhalende taken aankunnen.

Elkaar dingen leren

"Ze missen het vermogen om echt zelf te leren of zich aan te passen aan onvoorspelbare omgevingen", schrijft roboticstopvrouw Carolina Parada in een blogpost. Verder is het 'enorm moeilijk' om geleerde vaardigheden over te dragen van het ene robotlichaam naar een heel ander robotlichaam. De nieuwe AI-software voor fysieke robots brengt hier verandering in.

Google toont in een video onder meer hoe een humanoïde robot (Apollo) samenwerkt met een stationair model (Duo) dat uit twee industriële armen bestaat. Apollo geeft Duo spraakcommando's om een krat met huishoudspullen en gereedschap op te ruimen. Daarnaast laat de video zien hoe de humanoïde robot een cassettebandje in een boombox plaatst, boeken in een kast zet, een gamecartridge in een vintage Atari 2600-gameconsole plaatst, een lamp verwisselt en een vuilniszak dichtknoopt.

Reacties (5)

[Chip.]

Weet nog dat de TU/e RoboEarth lanceerde , video: RoboEarth: een internet voor robots. Denk eigenlijk dat dit waarschijnlijk nog meer in lijn ligt van dat gedachtengoed. Mooie ontwikkeling. Zeer benieuwd waar we over 10 jaar staan.

[raymondw]

Een robot die een cassette bandje in een boombox plaatst

Wie bedenkt de combinaties...🥴

[Recursio]

Iemand die zich nog goed herinnert welke fine motor skills / verfijnde motoriek je aan de dag moest leggen om dat te kunnen doen.

[Pasteis]

We hebben het natuurlijk momenteel erg veel over LLM en de toepassing in het dagelijks leven, maar de allergrootste ontwikkeling die in de achtergrond eigenlijk afspeelt is de toepassing van AI in robots.

Dit verbeterde AI-model laat robots de fysieke wereld zien en doorgronden, waarbij ze taken in meerdere stappen kunnen opdelen en met elkaar kunnen samenwerken.

Er wordt momenteel massaal menselijke handelingen opgenomen. Ik heb zelfs een video gezien waarin iemand een camera (volgens mij op het hoofd) bij zich droegt om alledaagse klusjes te filmen zodat de beelden gebruikt werden voor het trainen van modellen.

AI, ofwel de LLM's die we nu kennen zijn vooral digitaal aanwezig. Robots fysiek... dat vind ik persoonlijk nog wel een veel grotere disruptieve ontwikkeling die er aankomt dan LLM's.

[HenkEisDS]

Hoorde laatst van een Nederlands bedrijf dat robots traint middels videogames. Erg slim bedacht, want zo kun je oneindig veel materiaal simuleren om uiteindelijk complexe real-world problemen op te lossen. https://archive.is/zGdhz