Google laat gebruikers Spotify aansturen via Gemini

Google heeft een Spotify-extensie voor Gemini uitgebracht, waardoor mensen de muziekdienst kunnen besturen via de chatbot. Hiervoor moeten gebruikers wel de Engelse taal gebruiken. Het is de tweede Gemini-extensie die niet voor een Google-dienst is, na een WhatsApp-extensie.

Gemini-extensies zijn integraties waardoor de chatbot kan samenwerken met een externe dienst. Met de Spotify-extensie kunnen gebruikers daardoor Gemini vragen muziek te vinden of af te spelen in Spotify. Hiervoor moeten gebruikers hun Spotify-account koppelen aan hun Google Account. De extensie werkt alleen in de Engelse taal, als Gemini Apps Activity aan is en met de Gemini-Android-app.

De extensie kan geen playlists aanmaken of Spotify-radio gebruiken. Gemini heeft ook een YouTube Music-integratie. Als gebruikers zowel de Spotify- als de YouTube Music-extensie hebben ingeschakeld, gebruikt Gemini automatisch de laatst gebruikte extensie. Willen gebruikers de andere dienst gebruiken, dan moeten ze de naam van de dienst noemen.

Google bracht eerder deze maand een WhatsApp-extensie uit voor Gemini. Dat was de eerste extensie die niet voor een Google-dienst was. Eerder kregen de sms- en telefoonapps, Home en Gmail Gemini-extensies. Bij WhatsApp ging het om een gefaseerde uitrol; mogelijk is dit bij Spotify ook het geval.

Door Hayte Hugo

Redacteur

27-11-2024 • 19:49

22

Lees meer

Reacties (22)

22
22
13
0
0
4
Wijzig sortering
Zou liever een API zien zodat ook gelijk niet-spotify gebruikers dit kunnen gebruiken. Ik als Deezer gebruiker bijv mis vaak dit soort dingen. Los van het feit dat ik hier persoonlijk het nut absoluut niet van in zie met mijn gebruik (sowieso eigenlijk niet). Is het wel fijn als we wat inclusiever kunnen zijn in de tech-space.
Dit zijn nou net van die handige functies waar ik wel op zit te wachten. Zeker als dit bijvoorbeeld met Android Auto samen kan werken. Terwijl ik rijdt bijvoorbeeld vragen om "dat ene jaren 80 nummer af te spelen waar de zanger in de videoclip aan het stofzuigen is". Of "kinderliedjes, maar enkel in het Engels/Nederlands".
Dat zou ik wel snappen inderdaad, maar werkt het daadwerkelijk zo goed?
Ik heb het nooit in de praktijk getest, maar zulke vragen aan Gemini/ChatGPT/etc worden doorgaans wel correct beantwoord, al dan niet met doorvragen. Dus dan lijkt me dat het een simpele moeite is dit door te zetten naar apps als Spotify.
Laad me raden.... liedje van Queen met Freddie Mercurie die verkleed als vrouw aan het stofzuigen is.... is dat niet I want to be free?
"Jaha, speel nou maar gewoon af!"
Het is nog vroeg dag, maar er is een beste kans dat het maken van dit soort connecties veel makkelijker gaat zijn in de toekomst. Anthropic heeft eerder deze week het Model Context Protocol geïntroduceerd. Dat is een standaard waarmee databronnen, diensten en AI-apps met elkaar verbonden kunnen worden.

Het zou dan dus kunnen zijn dat Deezer bedienbaar wordt via MCP en dat je die dan in jouw favoriete AI-app kan toevoegen.

Zover is het nog niet, maar er wordt aan gewerkt....
Heel fijn, daar zat ik nog op te wachten. Iets wat met Google Assistant nog wel kon, maar waar Gemini zei: "Ik kan je hier nog niet mee helpen, maar ik ben nog aan het leren!"
Precies! Heel veel functies zijn vervallen door de overstap naar Gemini. Tegenwoordig moet ik eerst mn telefoon ontgrendelen als ik de lampen wil dimmen.
Bij mij doen de lampen het nog helemaal niet in Gemini helaas.

Dit is het antwoord dat ik krijg als ik zeg: "alle lampen uit":
Als een groot taalmodel kan ik helaas geen lampen aan of uit doen. Om je lampen uit te doen, kun je:
* De lichtschakelaar gebruiken: Dit is de meest directe manier.
* Een slimme assistent gebruiken: Als je een slimme speaker of assistent hebt (zoals Google Assistant, Siri of Alexa), kun je een spraakopdracht geven zoals "Hey Google, doe alle lichten uit".
* Een slimme home-app gebruiken: Met apps zoals Google Home of de app van je slimme lampen kun je alle lampen in je huis op afstand bedienen.
Let op: Om een spraakopdracht of een slimme app te gebruiken, moet je slimme lampen of een slimme thuisassistent hebben.
Wil je meer informatie over het bedienen van je lampen?

[Reactie gewijzigd door GurbieV op 27 november 2024 22:12]

Heb precies het zelfde, daarom nu terug naar Google Assistent.
Google Gemini als hulp vergeleken met ChatGPT is maar heel slecht. Ik heb afgelopen week voor de grap eens Gemeni uitgeprobeerd om C# code problemen mee op te lossen. Bijna standaard kwam er elke keer uit dat wat ik vroeg heel moeilijk was en werden met eventuele oplossingen gegeven met Python ook al had ik 100 keer aangegeven dat ik geen Python voorbeelden wilde, ChatGPT daar in tegen deed tenminste nog een poging om mij op weg te helpen.
Gemini wil ook iets met mijn sms. Geen idee wat maar ren dikke NEE
Ik snap gewoon niet waarom het nu extensies zijn, Google Assistant had gewoon services en klaar.
Nu moet alles een voor een uitkomen... Ik vind het eerder achteruit gang ipv vooruitgang.
Dat komt omdat het een compleet ander product is.
Google Assistant is een generieke spraakgestuurde afstandsbediening. Google Assistant kan niets meer dan wat voorgeprogrammeerde commando's uitvoeren die het uit een spraak-opdracht probeert te vissen.
Ik bedoel dit niet flauw, want ik kan me voorstellen dat het best complex kan zijn qua ontwerp dat:

Zet het licht in de woonkamer aan
Doe de lamp in de woonkamer aan
Doe de woonkamerlamp aan
(enz.)
allemaal hetzelfde is.

Met die services kon een derde partij diens opdrachten inhaken in die afstandsbediening.

Gemini is een taalmodel. Het enige dat een taalmodel kan, is taal verwerken. Dat is een compleet andere tak van sport dan een afstandsbediening. Een boekverslag schrijven of iets op het internet zoeken en dat naar mensentaal om te smurfen (taalverwerking) op basis van wat sleutelwoorden is wat anders dan op een generieke manier de Spotify-API aanspreken.

Gemini is niet 'ontworpen' om dat laatste te kunnen. Wat Gemini waarschijnlijk dus doet, is wanneer het taalmodel doorheeft dat het om een verzoek naar Spotify gaat. Dat het dan een opdracht opbouwt naar 'niet-mensentaal' en dat doorstuurt naar Spotify.

Waar bij Google Assistant, Spotify domweg kon inhaken op: "Ik ben een muziekdienst" (versimpeld gezegd)
Het is niet dat ik het niet begrijp,
Naar mijn idee doen ze het precies verkeerd om.
Het enige wat ze hadden moeten doen is juist Google Assistant uitbreiden met een LLM i.p.v. een LLM uitbreiden met taken die de assistent had.

In principe konden de normale commando's gewoon blijven, het enige wat moest verander is als je een algemene vraag stelt bijvoorbeeld tot hoe laat is de winkel open dat de assistent dan pas reageert met een LLM zodat het antwoord wat completer is.

Ze gaan nu eigenlijk een LLM ombouwen naar een assistent, terwijl de assistent eigenlijk super goed was alleen niet op alles een antwoord had, en dat daar had juist de LLM kunnen inspringen.

Overigens is Gemini tegenover ChatGTP nog steeds compleet waardeloos echt ik snap niet dat mensen het kunnen gebruiken, als ik alleen al vraag om te zoeken naar een bepaalde API krijg ik alleen maar antwoorden dat hij niks kan vinden en als ik hetzelfde vraag aan ChatGTP krijg ik 20 opties.
Het voordeel van Gemini is dat je Gemini live onbeperkt kunt gebruiken, waar je bij chatgpt gelimiteerd bent tot 15 minuten per 30 dagen...

Google zou wel het grote voordeel hebben als allerlei diensten zelf extensies kunnen maken en kunnen aansluiten.

Hoe dit op de achtergrond werkt ben ik wel benieuwd naar. Moeten ze een soort haakje als startprompt meegeven als je deze extensie actief hebt? "Als de gebruiker vraagt om iets van muzieknummers af te spelen, stuur het verzoek dan door naar mijn extensie software". Zoiets?
Ja het zal zoiets moeten zijn,

In de basis zonder extensie als je vraagt
"Speel X af op Spotify" dan reageert die waarschijnlijk met "Dit kan ik nog niet"

Nu die extensie er is, zullen waarschijnlijk heel veel keywords toegevoegd zijn die dan dit bericht doorgeven aan de extensie van Spotify, en Spotify zal dan on device de muziek hopelijk afspelen, ik heb de extensie niet ook geen idee of de Spotify extensie muziek kan afspelen op bijvoorbeeld een Google Home speaker.
Volgens mij is dit alleen nog maar met de Engelstalige gemini mogelijk. Ikzelf gebruik de Nederlandstalige versie en zie geen extra extensies voor gemini.
Dat klopt. Staat ook letterlijk in het artikel:
De extensie werkt alleen in de Engelse taal,
Ik heb zowel de whatsapp als de spotify extensie niet als optie, terwijl hij wel op Engels staat, doe ik iets fout of wordt het langzaam uitgerold?

Op dit item kan niet meer gereageerd worden.