Google Gemini gaat mogelijk ook WhatsApp-berichten versturen en telefoneren

Google Gemini krijgt mogelijk extensies voor WhatsApp, Google Messages en systeemnotificaties van Android. In een bètaversie van de app zijn mogelijkheden gevonden om de extensies aan te zetten, hoewel ze nog niet werken.

De mogelijkheden werden gevonden door Android Authority in een apk-teardown van versie 15.34.32.29.arm64 bèta van Gemini. De extensies werken nog niet, omdat ze nog niet live staan. Maar er is al wel een toggle voor toegevoegd, ontdekte de website.

Met de extensie voor Google Messages kunnen gebruikers berichten laten voorlezen door Gemini of Gemini gebruiken om op berichten te reageren. De extensie voor WhatsApp laat gebruikers via een spraakcommando berichten versturen en lezen, en telefoneren via de app.

Wat de extensie voor Android-notificaties precies mogelijk gaat maken, is niet helemaal duidelijk. Android Authority speculeert echter dat Gemini mogelijk ontvangen notificaties kan samenvatten of ze kan indelen op basis van hoe belangrijk ze zijn. Een andere optie is mogelijk dat Gemini taken uitvoert op basis van specifieke notificaties.

Het is nog maar de vraag of Google de extensies daadwerkelijk gaat activeren en wanneer dat dan zou gebeuren. Google heeft zelf nog niets over de extensies aangekondigd. Wel kondigde het bedrijf eerder deze week aan dat Gemini de komende dagen weer afbeeldingen van mensen kan genereren. Deze functie werd in februari gepauzeerd, omdat de dienst historisch onjuiste afbeeldingen maakte. De functie is in de afgelopen maanden verbeterd, aldus Google.

Door Eveline Meijer

Nieuwsredacteur

29-08-2024 • 09:01

73

Reacties (73)

73
72
17
0
0
45
Wijzig sortering
Op bepaalde punten werk de oude vertrouwde Google Assistent toch nog gewoon beter... Als ik zeg: "Bel naar contactpersoon-x " dan belt Gemini naar random zoekresultaten op internet...
Als ik met de normale Google Assistent zeg "Bel Papa" dan belt ie papa Johns...... Staat niet eens in mijn contacten
"Bel bomma" (mijn grootmoeder staat als bomma in mijn telefoon)
- "Ok, ik bel naar Restaurant De Bomma".

"Navigeer naar huis."
- "Ok, ik navigeer naar compleet willekeurig adres ergens in de UK omdat daar een zaak is met het woord 'huis' in hun naam."

Ik heb het gevoel dat die spraakassistent pakweg 5 jaar geleden een pak slimmer was dan nu.
Ik heb het gevoel ook. Zeker met mijn android auto.
Ik kan sinds vorig jaar niet meer zeggen "stuur whatsapp bericht aan [persoon]", en vervolgens de tekst. Ik moet nu zeggen "stuur bericht" dan de persoon, dan de app, dan bericht en als het allemaal lukt kan ik versturen.
Bijzonder - ik gebruik dat juist wél ("Verstuur een bericht via Whatsapp naar [persoon]") vanuit Android Auto. Ik heb Gemini als assistent geselecteerd, maar ik twijfel nog steeds of dat nou altijd gebruikt wordt. Te vaak krijg ik namelijk een "Ik begrijp je helaas niet" terug als het gaat om data die opgezocht moet worden.
Volgens Gemini zelf werkt Gemini nog niet in Android Auto ;).
Ik zie naast jouw en andere reacties dat het wellicht bij mij ligt. Geen idee waarom mij juist moeilijker is geworden Ik heb dit vorige maand getest. Nu ik wat google denk ik dat wellicht bij mij de fout kan zitten in het feit dat het moeite heeft met de taalinstellingen. Die heb ik vorig jaar aangepast. Toch gaat het default op engels over terwijl mijn maps/ en telefoon nu nederlands als hoofdtaal hebben. Ik denk dat ik het maar eens opnieuw naloop en waar mogelijk herinstalleer.
Dé reden dat ik nadat ik overgestapt was naar Android direct weer terug ging naar iOS. Apple Carplay is v.w.b. stembediening m.i. stukken beter. Vooral als je het dagelijks gebruikt. Ik houd mijn hart vast wanneer de nieuwe Siri komt, of het dan ook allemaal een stuk "dommer" wordt ;(

[Reactie gewijzigd door Peaul op 29 augustus 2024 11:04]

Siri en Google Assistant zijn allebei erg slecht in mijn ervaring.
Navigeer naar huis, bel papa en stuur whatsappbericht naar mama ("oké, wat is het bericht?"), werkt bij mij gewoon op Android Auto.
Ik denk dat er wellicht aan mijn telefoon instellingen iets misgaat. Ik ga het nalopen. Ik moet zeggen Navigeer naar Thuis. Huis snapt 'ie niet. Bel persoon werkt gelukkig wel. Maar berichten zenden is veel trager.
het is een constante bergafwaarts. Voorheen kon ik tijdens het stofzuigen aan de andere kant van het huis een commando geven, nu reageert ie soms niet eens op 'stop' om een timer uit te zetten op 2 meter afstand in een stil huis.

Sinds een paar maanden is de Assistent ook compleet nutteloos op mijn telefoon. Er is een update geweest waardoor hij alle Home commando's gewoon googlet: Set timer for 10 mins > google pagina met resutlaten om timer te zetten. Dat zelfde geldt voor lampen aan en uit zetten, hij googlet gewoon alles.
Alleen Stop heeft die inderdaad geen idee meer. Dat is gekoppeld aan muziek/video spelen. Speelt er nergens iets dan krijg ik gewoon de mededeling dat er niets speelt om te stoppen, terwijl de timer maar blijft rinkelen.

Moet dan echt specifiek "stop timer" zeggen, al is de kans dat die dan reageert met "er is geen timer" terwijl die gewoon afgaat. Alleen "verwijder timer" lijkt dan nog te helpen.

Weet ook niet waarom dat zo moeilijk gaat tegenwoordig. De helft van de timers eindigen bij "maak een timer van 30 minuten met de naam Aardappelen" in een timer van 30 minuten met de naam "naam" of "minuten".
Er is een update geweest waardoor hij alle Home commando's gewoon googlet

Is dat het? Ik dacht dat het aan mij lag (wellicht stem ietwat veranderd door verkoudheid of iets), maar inderdaad - "doe lampen uit thuiskantoor" gaat ie nu inderdaad opzoeken, terwijl het een 2 maanden geleden gewoon werkte.
Toevallig sinds vorige week een nieuwe telefoon en daarbij is het ook zo, dus het ligt iig niet aan het device. Echt ontzettend irritant!
Ben je niet de enige.
Ik heb home assistant zo ver gekregen om te kunnen bellen. Alles met tracings te volgen.
wooooow kan je daar iets van delen!
Natuurlijk. Ik heb een asterisk systeem wat een script heeft van nextcloud om alle vcards in een sql en ldap op te slaan zodat mijn asterisk systeem snel (nextcloud is traag) de telefoon nummers te krijgen. Zodat ik namen krijg bij nummers en emails en numers bij namen.

Dat nextcloud script in een addon en iedereen kan aan de slag. (Met tasker)

https://community.home-as...s-using-your-voice/757460
Weinig animo
Als ik met de normale Google Assistent zeg "Bel Papa" dan belt ie papa Johns...... Staat niet eens in mijn contacten
Dat lijkt mij geweldig als je vader op dat moment bij Papa Johns werkt. :)
Als ik Gemini vraag "wat voor weer wordt het deze week" krijg ik als antwoord "als taalmodel kan ik je niet vertellen..." met een lange uitleg over hoe ik weerwebsites kan gebruiken en wat voor soorten weer er allemaal wel niet zijn.

Ik heb in de instellingen mooi alles weer naar Assistant gezet, die drie keer per week dat ik dat spul gebruik heb ik echt helemaal niks aan Gemini.
Dat was tot voorkort een probleem, maar weer werkt iig wel weer. Stap voor stap komen ze er (hopelijk)
Eergisteren niet :)

Soms doet hij het wel, soms niet. Dat maakt het probleem alleen maar frustrerender. Misschien stel ik de vraag verkeerd ofzo, maar zou juist iets zijn waar LLM's goed in zouden moeten zijn.
Zal het zelf eens in de gaten houden. Had het nu geprobeerd maar toen werkte hij...

Komt vast ooit goed :)
Inderdaad, belachelijk. Ik kan zelfs niet meer vragen: "hoeveel Euro is 100 dollar?". We gaan erop achteruit zolang het Gemini niet deftig kan terugvallen naar de assistant die wel op die zaken kan antwoorden.

De ene keer kan ik wel mijn rolluiken bedienen, de andere keer niet. Als backup gebruik ik nu vooral assistant op mijn watch... Dat is tenminste nog niet Gemini. Hopelijk krijgen ze die zaken snel in orde want nu is het geen vooruitgang.

[Reactie gewijzigd door venqwish op 29 augustus 2024 11:10]

Als ik Gemini vraag "wat voor weer wordt het deze week" krijg ik als antwoord "als taalmodel kan ik je niet vertellen..."
Net getest, werkt perfect bij mij. Ik heb het gevoel dat Google voor elke gebruiker andere settings test...

[Reactie gewijzigd door Ritchie01 op 30 augustus 2024 20:16]

Simpel op te lossen door te zeggen: "Bel naar contact naam-contactpersoon".
Het punt van AI is nou net dat jij het ding niet hoeft te begrijpen, maar dat het ding jou begrijpt.
Op het moment dat dat niet meer van toepassing is, is het een faal.
Het is een interpretatie en prioriteit verschil. Gemini is een assistent die zwaar afhankelijk is van het internet en interpreteert een opdracht om iemand te bellen als een zoekopdracht voor het internet, tenzij je duidelijk aangeeft dat jij de contactenlijst prioriteit wilt geven.

De afhankelijkheid van het internet van Gemini is nu net het verschil met de Google Assistent. Die laatste was juist ontwikkeld om jouw telefoon te bedienen. Voor Gemini is het bedienen van de telefoon een bijzaak.
Dat zijn toch ook twee hele verschillende producten?
Jij weet het misschien niet, maar Gemini weet dat "contactpersoon-x" zijn mobiel op stil staat en zich bij "random" zoekresultaat bevindt. Veel efficienter dan rechtstreeks contactpersoon-x te bellen als die het toch niet hoort. :)
Als ik m'n Google Home Mini vraag om een email adres uit m'n Google Contactenlijst snapt ie totaal niet wat Google überhaupt is of kan of wil.

Als ik m'n Google Home Mini vraag om adresgegevens uit m'n Google Contactenlijst krijg ik een oorverdovende stilte terug, gevolgd door een 'ja sorry hoor maar integratie met onze eigen rommel hebben we nog nóóit van gehoord'
Voorlopig allemaal US-only neem ik aan? Ik heb voor de aardigheid eens Gemini geïnstalleerd maar die was zelfs niet in staat om een meeting in mijn calendar te zetten. Hij vertelde me gewoon om de kalender app te openen en het zelf te doen.
Voor zover ik na kan gaan zit de agenda nog niet in de integratie, maar ook in gmail moet je de geavanceerde AI opties aanzetten om het te laten werken. Tevens moet dan bij de instellingen van Gemini aanstaan dat hij de google assistent mag gebruiken hiervoor. Staat standaard uit.
Laat ze eerst maar de functies in Gemini integreren die Google Assistent nu ook doet of heeft gedaan.
Ik heb het idee dat sinds de komst van Gemini, Assistant een stuk "dommer" is geworden dan voorheen.
Simpele taken zoals het weer opzoeken, agenda afspraken oplezen of iets minder simpel: een specifieke Hue lamp uitdoen lukken niet meer.

Jammer is dat Gemini dit ook niet kan en ik nu met een aantal speakers in huis zit die op alles antwoorden dat het niet kan.

[Reactie gewijzigd door MattiM90 op 29 augustus 2024 09:56]

stekker er al eens uitgetrokken? ik merk dat ze na een tijdje zich dom gaan gedragen. Een herstart verhelpt dat bij mij. is al jaren zo en bij google zeggen ze dan: "dat geven we door" en verder gebeurt er niks.
Ook ik ben er in getrapt Gemini te installeren, met een domme assistent tot gevolg. Ik heb het verwijderd/uitgeschakeld toen ik een melding op mijn telefoon voorbij zag komen dat Gemini constant alles op mijn scherm mag zien en doorsturen naar Google.

Google Assistent mag ik niet meer installeren "niet beschikbaar voor deze telefoon" zegt de PlayStore. (F21 FE)
Laat maar, ik was onzin aan het praten

[Reactie gewijzigd door GurbieV op 29 augustus 2024 12:16]

Blijf gewoon lekker uit mijn berichten zou ik zeggen. Je moet het zelf activeren, maar het feit dat die toegang er überhaupt is geeft me al een nare bijsmaak.
Die toegangen zijn precies waarvoor ik voor Gemini kies. Aan chatGPT kan ik niet vragen wanneer ik mijn aardappelen heb geplant en wanneer ze zullen klaar zijn omdat die geen toegang heeft tot mijn foto's.
Je hebt vrijwillig een Google AI op je Google telefoon geïnstalleerd en ligt er vervolgens wakker van dat diezelfde Google door de berichten in je Google berichtenapp kan struinen? |:(

Ik heb een vervelende mededeling voor je: Google weet al alles over jou en die AI wel of geen toegang geven tot diezelfde berichten gaat daar niets aan veranderen…
Je installeert helemaal niets, dat krijg je allemaal gratis gepushed van Google.
??? Ik moest het toch echt zelf installeren op mijn pixel.
Dacht toch echt dat ik iets van Gemini zag toen ik per ongeluk assistent triggerde maar dat zie ik nu niet meer. Was misschien iets om het mij te laten installeren ofzo.
Gemini = Skynet :o

Laten we hopen dat er wetten en regels gaan komen hoever deze AI in de komende 25 jaar dingen kan doen.

Anders kon James Cameron wel eens gelijk krijgen met zijn films :+
Heerlijk. Als ik zie hoeveel berichtjes ik tegenwoordig krijg de hele dag. En dat naast alle telefoontjes, emails en andere werkverplichtingen. Zoveel social pressure. Lijkt mij fantastisch als Whatsapp die berichtjes voortaan zelf beantwoordt 😬
Je doet het zelf, hè. Je kunt er ook voor kiezen om wat later (of helemaal niet) te reageren.
I know. Maar toch creëert het een gevoel van druk.
Dan laat je je misschien log leiden door Fomo. Keer dat om, zet alle berichten uit (op de belangrijkste na) en kies een paar momenten per dag om te reageren/lezen. Van teveel gaat het brein voeg of laat aan het gas door overdaad, en dat wil je niet.
En dan dit bericht met onder de microsoft sway mogelijkheid voor ellende. Dit lijkt een nog makkelijkere manier, heel fijn 🫣
Kan iemand mij uitleggen waarom ik wel een Nederlands sprekende Gemini live heb?

Mijn Pixel 9 Pro XL staat in het Engels en
In mijn account staat de voorkeurstaal Engels en als tweede Nederlands. ( Altijd al geweest) Met deze instellingen krijg ik een mannelijke Nederlandse Gemini stem, die Nederlands spreekt en verstaat.

Waarom kan het zo wel en niet out of the box?
Misschien omdat het de oorspronkelijke app nog is, die had ik via sideloaden op de 6. Na het verwijderen daarvan en opnieuw installeren vanuit de store was dat gefixt.
En jij hebt Gemini live nu ook gewoon Nederlands sprekend? Want dat was me ook niet geheel duidelijk of dat wel of niet zou komen vanwege de DMA
Net geprobeerd, ik vraag om het weer en krijg zoel in tekst als spraak een reactie :)
Top! bedankt voor je reactie ;-)
Krijgt? Ik kan sinds vorige week al met Gemini chatten in Google messages. Daar vind ik het overigens prima. Toegang tot apps als WhatsApp is een ander verhaal. Dat omzeilt de hele end-to-end encryption als Google gewoon kan gaan meelezen. Ik gebruik al jaren geen whatsapp meer maar dan heb ik nog een reden erbij om dat zo te houden.

Op dit item kan niet meer gereageerd worden.