Gurman: Siri krijgt AI-functies en kan apps binnenkort via stem bedienen

Apple zal Siri voorzien van meer AI-functies. Dat schrijft techjournalist Mark Gurman. De virtuele assistent zou volgend jaar de mogelijkheid krijgen om standaardapps via de stem te bedienen. Apple zou de onderliggende software van Siri hiervoor op de schop hebben genomen.

Gurman claimt in zijn nieuwsbrief dat Siri op termijn in staat moet zijn om alle specifieke appfuncties op een iOS-apparaat uit te voeren. Aanvankelijk gaat het enkel om de standaardapps van Apple zelf, maar Siri zou op termijn ook apps van derde partijen moeten ondersteunen. Gurman geeft ook enkele voorbeelden. Zo moet het mogelijk worden om via een spraakopdracht individuele documenten te openen, een notitie te verplaatsen, een mail te verzenden of te verwijderen, een artikel uit Apple News te bekijken, een link te mailen of een samenvatting van een website te laten genereren.

Volgens Gurman kan de virtuele assistent aanvankelijk slechts één opdracht per keer verwerken. Op termijn zou het echter wel mogelijk moeten zijn om meerdere commando’s per spraakopdracht uit te voeren. De onderliggende software kan ook zelf bepalen of een functie via de cloud moet worden verwerkt, of op het apparaat zelf. De data die dan wordt verwerkt, wordt volgens Gurman dan opgeslagen in de Secure Enclave van iOS-apparaten.

Gurman schrijft dat Apple de nieuwe AI-functies op WWDC wil introduceren. Dat evenement vindt plaats op dinsdag 10 juni. Het Amerikaanse bedrijf zou de nieuwe functies op dat moment echter nog niet willen uitrollen en mikt volgens Gurman op een latere release van iOS 18 die volgend jaar moet plaatsvinden.

Gurman schreef de afgelopen weken al meermaals over aankomende AI-functies in iOS 18. Deze versie van het mobiele besturingssysteem zou diverse AI-functies bevatten, waaronder een functie om aangepaste emoji's te maken, samenvattingen van notificaties, berichten, websites en e-mails te laten genereren en spraakopnames te laten transcriberen. Sommige van deze functies zouden onderdeel zijn van Safari 18 .

Door Jay Stout

Redacteur

03-06-2024 • 15:32

34

Lees meer

Apple kondigt iOS 18 aan
Apple kondigt iOS 18 aan Nieuws van 10 juni 2024

Reacties (34)

34
34
14
3
0
13
Wijzig sortering
Het wordt hoog tijd dat Siri meegaat met de tijd. Ik ben een half jaar geleden gewisseld van Android naar iOS. Waar ik Google Assistent regelmatig gebruikte, gebruik ik Siri eigenlijk nooit (behalve om iemand te bellen in de auto).

Als je iets vraagt, dan is het antwoord standaard 'ik kan je hier niet bij helpen' of iets in die richting. Echt belabberd gewoon... Ik verbaas en frustreer me er regelmatig over.

Dus hop hop Apple. Beetje tempo maken :)
Dat heb ik andersom met Google Assistent (in m'n Home Mini).

Siri kan wél gewoon m'n Google Contacten inzien
Siri kan wél gewoon mails voorlezen die vanuit m'n Gmail komen
Siri kan wél gewoon Whatsapp-berichten versturen (bijv in de auto)

Google kan dit niet, ondanks dat die eerste 2 opties gewoon vanuit m'n Google account komen....
Dat van de mails weet ik niet. Maar de Google assistant kan prima de andere twee dingen. Ik doe het regelmatig.

Ik : Stuur whatsapp naar Karel van Doorn.
Google: Whats App naar Karel van Doorn, wat is het bericht?
Ik: Ik kom wat later
Google: Het bericht is IK KOM WAT LATER. Moet ik het sturen of wil je het aanpassen.
Ik : Sturen.
Google: Oke ik stuur je bericht
Heeft bij mij nog nooit gewerkt, vanaf m'n Home Mini......
Of gewoon minder een digitale assistent gebruiken, zoveel spannende taken kunnen ze ook niet voor je uitvoeren :).
Ik moet zeggen maak er helemaal geen gebruik van.
  • Zet een timer van x minuten
  • Zet x op mijn boodschappenlijst
  • Herinner me morgenochtend aan x
  • Zet een alarm om x
  • Bel x
Deze dingen kan je écht niet sneller via de normale interface van je telefoon.
Dit zal echt niet zo heel veel schelen als je het zelf doet, je zult er amper tijd mee verliezen.
Goed herinner mij morgen aan iets, dat gebruik ik nooit. Gebruik ook de herinnering app niet(Het zit gewoon in mijn hoofd wat ik moet onthouden).

Alarm zetten, iemand bellen, timer zetten is echt binnen enkele seconden zo gebeurt.
Try it. Ik geloof er niks van… alleen met unlocken loop je al 2 seconden achter.

In mijn geval met Watch en of AirPods zeker. Telefoon blijft in mijn zak.

En voor elke keer pasta of rijst koken alleen scheelt het al significante tijd per jaar.
2 seconden al wauw de wereld vergaat hoor :+, maar goed jij handiger vind dat kan uiteraard.
timers tijdens het koken is inderdaad superhandig, niet omdat het minder tijd zou kosten maar omdat je dan met iets bezig bent (koken, duh :D ) , handen zijn vuii,...
echt ideaal.
Maar om een aflopende timer te stoppen lukt dan niet altijd...
Meh. Volgend jaar pas. Zo traag.

En voorlopig zitten we met de gescripte versie van Siri die nauwelijks is veranderd in de laatste 10 jaar en echt zo flut werkt vergeleken met de revolutie van AI LLM's.

Ik heb Siri's (Homepods mini) in huis omdat die van Google en amazon er gewoon bij voorbaat al niet binnen komen hier. Maar ik vind het vrij waardeloos werken allemaal. Vreemd, want zo'n LLM lijkt me echt gewoon ideaal voor een spraakassistent. Zelfs Google en Amazon hebben ook nog niks ermee. Ik snap niet dat dat zo moeilijk moet zijn.

[Reactie gewijzigd door Llopigat op 23 juli 2024 00:00]

De concurrentie handelt zwaar in data ook privacy tja dat geeft hun voorsprong als je dat beschikbaar hebt voor ML doeleinden.
Apple verzamelt die data net zo goed, ze delen het alleen minder met anderen.

Maar de concurrentie heeft dit ook nog niet, vergeet dat niet! Google assistant en Alexa hebben ook nog geen AI functies.
Wat heeft een LLM te maken met privacy? We hebben beiden geen enkel beeld van de informatie die Apple en anderen gebruiken om AI's te trainen.
Heb tot nu toe helaas nog weinig succes gezien in het vertalen van LLM naar daadwerkelijke acties. Misschien komt dit nog maar vooralsnog komt het allemaal niet veel verder dan tekst. Denk dat acties toch echt wezenlijk anders zijn het genereren van tekst waarin veel meer marge voor error zit.
Oh? Mijn vorige organisatie heeft in een jaar tijd enkele miljoenen bespaard, van customer care tot aan het genereren van documentatie.

Ik zie een grote tweedeling in de markt: organisaties die het nog niet integreren in hun activiteiten, met als gevolg dit soort reacties, en organisaties die enorm productief en efficiënt zijn geworden.
Ik heb er juist wel succes mee.

Als ik zeg: "Als ik vraag om XYZ te doen, zeg dan "ACTIE <xyz> op apparaat <abc>"" en dan pikt een script het weer op. Maar je moet wel een redelijk goed model hebben daarvoor. En dan een tabelletje erbij met de juiste apparaatnamen.

Het gaat niet echt 100% van de tijd goed, maargoed dat gaat het met Siri zeker niet :') Die denkt de helft van de tijd dat ik muziek wil spelen ofzo (ik wou dat je dat kon uitschakelen want ik wil nooit muziek spelen).

[Reactie gewijzigd door Llopigat op 23 juli 2024 00:00]

Een LLM die acties kan maken kan wel zorgen leveren...
Als ik merk hoeveel stroom de huidige AI apps vragen op mijn iPhone, ben ik benieuwd. Of komen die "nieuwe" AI functies dan in een van de energiebespaarstanden terecht? Ik heb al een powerbank sleeve besteld. Omdat mijn iPhone het niet haalt als ik een dag weg ben.
Hoezo hoeveel stroom de huidige AI functies gebruiken?, ik doe 3 dagen met mijn 15 pro Max(tevens daar voor ook met mijn 13 pro Max).
Goed always on uit, veel notificaties en achtergrond gebruik uit.

Maar dan nog einde van de dag niet red, wat doe je dan wel niet met je telefoon(of is die niet gewoon versleten ).
Als je halve dag films loopt te kijken of spelletjes speelt snap het nog, anders moet het einde van de dag best wel lukken.

[Reactie gewijzigd door Carlos0_0 op 23 juli 2024 00:00]

Ja sommige mensen zitten zo gigantisch veel uren per dag op hun telefoon… maar films kijken (mits native player) zou zo 10 uur moeten kunnen. Je hebt btw een max he, die gaan sowieso langer mee.

Afhankelijk van wat ik doe kan ik een dag. Als ik dan elke 10 min de koers van bitcoin kijk gaat dat niet natuurlijk. Ook apps als instagram (gebruik ik niet maar) of snapchat (idem) zijn ENORM energiezuipend.

Een beetje appen en bellen zou ik makkelijk 2 dagen kunnen halen.
Ja hij had dan over de huidige AI functies, ik vraag mij af welke AI functies.
Ja ik snap het sowieso verder niet, waarom je uren op je telefoon moet zitten.

Ik zat vandaag in de trein uurtje heen en uurtje terug, maar keek bijna de volledige reis naar buiten(eens whatsapp even nieuw berichtje).
Ik heb wel Instagram maar staat uit, geen notificaties of achtergrond gebruik(ik kijk wel wanneer ik zin heb).
Ik kijk soms eens filmpjes die ik door stuur, afgelopen zondag zag ik 3 grappige filmpjes achter elkaar maar toen stopte ik met kijken(ik zou niet weten waarom ik maar door moet blijven scrollen als een zombie?)
Ja ik tegenwoordig ook hoor! Maar probeer het te begrijpen: veel mensen die de hele dag lopen te scrollen zijn kinderen/jongeren. Ik ben ook zo geweest maar wat later (~30 nu). Het is verslavend. Wat je zegt is net als zeggen “ja ik rookte 3 sigaretten achter elkaar, maar ik ga niet de hele dag door lopen roken!”, dat is voor sommige mensen dus veel lastiger. Ik was er ook door gepakt, en dat maakte me depressief. Het enige waardoor m’n gedachten wat positiever werden en waardoor ik me “ok” voelde was verder scrollen. Op dat moment weet je hoe zielig dat is, maar het is ECHT moeilijk om eruit te komen. Nu ik eruit ben, zit ik ook heerlijk naar buiten te kijken bijvoorbeeld.

Het is daadwerkelijk mentaal verslavend, zeker voor gevoelige mensen (jong / adhd / depressie / verslavingsgevoelig / etc). Elke keer weer een dopamine hit, wat via natuurlijke wijze veel lastiger te krijgen is. Daarom kiest je brein de makkelijke weg (de mijne in ieder geval).
SeeingAI, Be my eyes om twee voorbeelden te geven. AI scanning van voorwerpen/omgeving kost veel stroom. Dan nog BlindSquare/Lazarillo i.c.m. Apple Kaart voor loopnavigatie.
Ja hij had dan over de huidige AI functies, ik vraag mij af welke AI functies.
Ja ik snap het sowieso verder niet, waarom je uren op je telefoon moet zitten.
Er is een groep mensen voor wie AI een essentieel deel van hun leven uitmaakt. Vaak vergeten. AI scanning van objecten en omgeving kost veel stroom. Neem de AI functies van SeeingAI of Be My Eyes. BlindSquare of Lazarillo i.c.m. Apple Kaart. Dan hebben we het niet eens over de Orcams die bijvoorbeeld de kinderen herkennen, brieven kunnen voorlezen, etiketten herkennen in de supermarkt.
Hoezo hoeveel stroom de huidige AI functies gebruiken?, ik doe 3 dagen met mijn 15 pro Max(tevens daar voor ook met mijn 13 pro Max).
Goed always on uit, veel notificaties en achtergrond gebruik uit.

Maar dan nog einde van de dag niet red, wat doe je dan wel niet met je telefoon(of is die niet gewoon versleten ).
Als je halve dag films loopt te kijken of spelletjes speelt snap het nog, anders moet het einde van de dag best wel lukken.
Het nieuws dat Siri binnenkort apps via stem kan bedienen klinkt veelbelovend, maar er zijn nog best wat vragen. Apple heeft eerder moeite gehad om Siri op hetzelfde niveau te krijgen als Google Assistant en Alexa. Gaan deze nieuwe AI-functies echt een verschil maken, of is het een poging om de concurrentie bij te benen?

Ook is het in het begin alleen voor Apple's eigen apps beschikbaar. Gaan ze ontwikkelaars genoeg tools geven om Siri in hun apps te integreren, of blijft het beperkt?

En hoe zit het met privacy? Apple zegt dat data in de Secure Enclave wordt opgeslagen, maar hoe veilig is dat echt als er ook dingen in de cloud gebeuren?

Tot slot, de nieuwe functies worden aangekondigd op WWDC, maar komen pas met iOS 18 volgend jaar. Dat is nog een lange tijd wachten. In die tijd kunnen concurrenten alweer verder vooruit zijn.

Kortom, de plannen klinken goed, maar of Siri echt kan concurreren met andere assistenten en of Apple zijn beloften kan waarmaken, blijft de vraag.
Wees eerlijk: heb je deze reactie gegenereerd met ChatGPT?
Tóch kun je het lezen he, als een reactie of artikel met ChatGPT geschreven is ;) het is toch een bepaalde stijl die gebruikt wordt.
Ja, dat was de grap. 8)7
FTFY:

Eindelijk, Apple pakt de handschoen op en gaat Siri een flinke upgrade geven met AI-functies. Het werd echt tijd dat die slappe zak van een assistent eens een opknapbeurt kreeg

volgens die Gurman-gast kunnen we straks met onze stemmetjes apps bedienen. dat klinkt als een fijne feature, zeker als je met je poten onder de frikandellenbroodjes zit. al zal het wel beperkt blijven tot de Apple-apps in het begin, jammer voor de paar zielen die buiten die walled garden durven te kijken het mooiste is dat Siri straks meerdere commando's achter elkaar kan verwerken. geen gezeik meer met "Hey Siri, doe dit... Oh wacht, en doe dat ook nog even". gewoon in één keer een hele reeks taken opsommen, dat scheelt een hoop getier.

wat me wel een beetje zorgen baart is dat privacygezeik. Apple wil data van Siri in die Secure Enclave opslaan. mooi verhaal, maar we weten allemaal hoe betrouwbaar ze zijn als het op privacy aankomt. ik hou m'n pettendop maar op.

al met al klinkt het als een flinke upgrade voor Siri. misschien wordt die sufferd dan eindelijk een bruikbare assistent in plaats van zo'n nutteloze lachspiegel. maar goed, ik wacht de daadwerkelijke release wel af voordat ik al te enthousiast word. Apple en hun beloftes, je weet maar nooit.
https://www.perplexity.ai...-x9Lqo0vWSwSdD2MdhkVXPQ#0
Toch leuk zo een AI ;)
Nog wat verfijnd met chatGPT: https://chatgpt.com/share...2d-45c4-a4fb-0849cac9c651

[Reactie gewijzigd door seth007 op 23 juli 2024 00:00]

Ik hoop inderdaad de Siri ook kan communiceren met de Apple TV app. Op zich lukt het om B-films of slashers uit de jaren 80 te vinden, maar Siri kijkt nooit naar je bibliotheek of streamingdiensten. Of naar andere Labels, zoals films/series over Titanic of Simpsons kerst afleveringen. Voor mij de belangrijkste update, Siri op de Apple TV.
Maar komt dit ook naar Apple TV? Want er staat alleen Siri voor iOS, niet tvOS.
Ik ben trouwens benieuwd of er nog een nieuwe Apple TV komt deze maand. Ik wil voor het eerst naar Apple TV, maar ik wacht even of er een nieuwe komt. Ik weet dat het enigszins offtopic is, dus geef me gerust een 0, maar ik moest er toch even aan denken, met name omdat Gurman degene was die het over een nieuwe Apple TV had eerder dit jaar.

Op dit item kan niet meer gereageerd worden.