Mozilla start test met spraakbediening Firefox

Mozilla is een bètatest gestart voor Firefox Voice. Met deze experimentele extensie kunnen gebruikers de desktopversie van de browser bedienen met spraakcommando's. De functie gebruikt Googles Cloud Speech.

Firefox Voice is een experiment van Mozilla Emerging Technologies. De add-on werkt momenteel alleen bij de desktopversie van Firefox, waarbij Mozilla adviseert om de Nightly of de Developer Edition bij de bètatest te gebruiken. Het doel is om te kijken of en hoe stembediening als goede manier voor interactie met de browser is in te zetten.

Mozilla heeft een groot aantal toepassingen voor Voice op een rij gezet. Zo biedt de functie de mogelijkheid om vragen te stellen, muziek via YouTube of Spotify af te spelen, pagina's voor te lezen of te vertalen, tabs te zoeken, te sluiten of te openen en informatie te zoeken binnen een groot aantal diensten.

Gebruikers dienen op een microfoonicoontje te klikken om de dienst te activeren. Er lijkt geen hotword te zijn om deze met spraak te openen. Mozilla maakt voor de WebSpeech-api in Firefox gebruik van Googles Cloud Speech-to-Text. Mozilla stuurt data eerst via zijn eigen proxy voordat de gegevens naar Google gaan, deels om gebruikersinformatie te verwijderen, aldus de organisatie.

Reacties (41)

[NiLSPACE]

Jammer dat Mozilla gebruik maakt van een Google service hiervoor in plaats van hun eigen Common Voice project. Nu wordt je step naar de servers van Google stuurt. Ik verwacht dat Common Voice nog niet op een hoog genoeg niveau zit hiervoor.

[Reactie gewijzigd door NiLSPACE op 23 juli 2024 18:02]

[JanW]

Was hier ook benieuwd naar. Op Reddit is ook een post gemaakt hierover, daar heeft een dev van Firefox op gereageerd:

(Firefox Voice dev here.)

This isn't what we want long-term, but we want to develop both the voice recognition and voice-enabled products in parallel, which means we need the scaffolding of a more mature transcription product like Google's.

That said, Google is contractually obligated not to record or use these, and I think it's reasonable to trust them on this, at least for commercial services. I also trust them to not read the contents of a server I have hosted with them, or many other situations. Google isn't entering into any formal agreement with someone who loads a page with some tracking on it. (Of course Google might be compelled not to respect privacy, but the same is true for Mozilla.)

Also, Google literally charges less if you agree to let them use the audio for training. We did not sign up for that level of service!

Ik begrijp het wantrouwen naar Google, maar het lijkt erop dat Mozilla goede afspraken heeft gemaakt met Google hierover.

[Reactie gewijzigd door JanW op 23 juli 2024 18:02]

[NiLSPACE]

Is bekend waar die servers staan? Het mooiste is als je data nooit Nederland verlaat.

[wica]

Internet en je data nooit Nederland verlaat is haast niet mogelijk. Daar op Internet de beste route voor dat moment gekozen kan worden of door dar een netwerk beheerder per ongeluk zegt dat een prefix via zijn netwerk moet gaan.

[Balance]

Een probleem voor ons als Nederlanders is dat de Nederlandse dataset nog veel te klein is om bruikbaar te zijn, en veel te biased naar jonge mannen. Nu weet ik niet of we hier op Tweakers dat laatste probleem op gaan lossen, maar we kunnen in ieder geval de dataset helpen uitbreiden.

Iedereen kan teksten inspreken en kan ingesproken teksten verifiëren op:

• https://voice.mozilla.org/nl

Een account aan maken is aan te raden, Mozilla kan dan corrigeren voor demografische verschillen (leeftijd, geslacht, etc.), en je krijgt zelf leuke statistieken!

Het Common Voice-project is een initiatief van Mozilla om machines te helpen leren hoe echte mensen spreken.

Spraak is natuurlijk, spraak is menselijk. Daarom zijn we enthousiast over het maken van een bruikbare spraaktechnologie voor onze machines. Maar voor het maken van spraaksystemen hebben ontwikkelaars een extreem grote hoeveelheid spraakgegevens nodig.

De meeste gegevens die door grote bedrijven worden gebruikt, zijn voor de meeste mensen niet beschikbaar. We denken dat dat innovatie belemmert. Daarom hebben we Common Voice gestart, een project dat helpt spraakherkenning voor iedereen open en toegankelijk te maken.

Meer informatie over Hoe, Wat en Waarom: https://voice.mozilla.org/nl/about

[Reactie gewijzigd door Balance op 23 juli 2024 18:02]

[uip]

Verdeling van de stemmen in het Nederlands: 72% Mannelijk, 2% Vrouwelijk (rest ongekend). Werk aan de winkel ...

[Reactie gewijzigd door uip op 23 juli 2024 18:02]

[erik.k]

en waar geef je toestemming voor:

Permission request messages for Firefox extensions:
Access your data for all websites
Access your data for sites in the “named” domain
Access your data in # other domains
Access your data for “named site”
Access your data on # other sites
Read and modify bookmarks
Read and modify browser settings
Clear recent browsing history, cookies, and related data
Get data from the clipboard
Input data to the clipboard
Extend developer tools to access your data in open tabs
Download files and read and modify the browser’s download history
Open files downloaded to your computer
Read the text of all open tabs
Access your location
Access browsing history
Monitor extension usage and manage themes
Exchange messages with programs other than Firefox
Display notifications to you
Provide cryptographic authentication services
Read and modify privacy settings
Control browser proxy settings
Access recently closed tabs
Access browser tabs
Store unlimited amount of client-side data
Access browser activity during navigation

[SinergyX]

Ze gaan nog overstappen op hun eigen versie 'ergens' dit jaar ipv Google speech-to-text.

We can send the audio to any speech recognition service we choose. Mozilla is currently developing our own service called Deep Speech which we hope to validate in 2020 as a replacement for Google, at least in English. We may eventually use a variety of recognition engines for different languages.

Al zoek ik nog even het nut van zoiets, beetje niveau cortana van Windows, leuk dat je je playlist kan opstarten of een programma, maar zoiets kan ik in 2 klikken ook prima zelf (plus mediaknoppen op je keyboard). Goed, pluspuntje dat hij met een knop werkt ipv hotword.

[MarCreative]

Totdat je blind of slechtziend bent. Het heeft dus zeker meerwaarde

[JanW]

Voor mensen met een beperking is spraakbesturing wel echt een uitkomst. Het gros van de mensen heeft gewoon 10 vingers en geen moeite om zijn of haar armen te bewegen, maar er zijn helaas ook genoeg mensen die hierin wel beperkt zijn. Spraakbesturing is dan echt een uitkomst, en geen gimmick.

Of wanneer je blind/slechtziend bent inderdaad, zoals @MarCreative aangeeft.

[Reactie gewijzigd door JanW op 23 juli 2024 18:02]

[Alex3]

Ja, mijn telefoon reageert wel eens op omgevingsgeluid.

[Loy]

Ik ben al blij dat het iets anders is dan Google.
Het fijnste zou zijn om later DeepSpeech offline te kunnen draaien, iets wat Google je nooit gaat laten doen verwacht ik.

[Kamiklase1]

Scherm je zoveel mogelijk je internet verkeer af van Google, dan komt Firefox met een optie om via spraak weer alle informatie naar de Google server te sturen. Echt belachelijk van notabene Mozilla!

@AW_Bos Dan ken je Google nog niet. Ze vinden snel een methode om de data te koppelen aan een profiel door slimme interpretatie van het berichtenverkeer.

[Reactie gewijzigd door Kamiklase1 op 23 juli 2024 18:02]

[spoonman]

Gebruik het dan gewoon niet?

[blorf]

Het probleem is machts-centralisering. Naar mijn mening is de afhankelijkheid van Google onnodig maar wordt er uit financieel belang toch voor gekozen. Dit is hoe vrije software niet samen kan met systematisch beperkte commerciele software. Hoe dan ook gaat een dergelijke constructie op een zeker moment de eindgebruiker verraden voor markt-belangen.

[MsG]

Als men niet massaal geld over heeft voor hobbybob-spraakoplossingen lijkt me dat een vrij logisch gevolg. Het merendeel van de mensheid gebruikt vrije oplossingen omdat ze (veelal) gratis zijn, niet zozeer uit ideologische motieven.

[blorf]

Het suggereren dat het beter is is onderdeel van het probleem...

[MsG]

Het feit dat Mozilla (die zelf overeind wordt gehouden door commerciële advertentieboeren, middels de standaardzoekmachine) nu nog teruggrijpt op commerciële alternatieven lijkt me een gedegen vaststelling dat de community-oplossing blijkbaar nog niet levensvatbaar genoeg is.

Mijnsinziens is het veelal vooral een geldkwestie. Vrijwel alle grote opensource-projecten blijven financieel in leven door commerciële bedrijven. Het ideologische doneeraandeel is vaak te klein om echt ergens een deuk in te kunnen slaan.

[blorf]

Dat is een mening. Die van mij luidt min of meer dat dat een self-fulfilling prophecy is. Als iedereen er zo over denkt heeft vrije software inderdaad geen schijn van kans. Maar zou het echt zo zijn dat alleen Google in staat is te voorzien in de eisen? Of zou Google dit waarschijnlijk zelfs nog doen als ze er verlies door lijden, want een potentiele concurrent minder?

[MsG]

Ook al zou het Google niks opleveren, dan heeft Mozilla toch nog steeds de keuze om naar haar eigen, of andere, community-initiatieven toe te stappen. Blijkbaar zijn die er niet in levensvatbare vorm, want de developer uit de comments blijkt ook niet helemaal blij met de keuze.

[blorf]

Financiele belangen, zei je toch? Naar mijn idee hebben ze Google zeker niet nodig voor hun kennis...

[Reactie gewijzigd door blorf op 23 juli 2024 18:02]

[MsG]

Jij begon over de financiële belangen. Ik stel juist dat de community-initiatieven niet levensvatbaar zijn gebleken, en dat vaak ook niet worden zonder serieuze sommen geld. Dit terwijl de consument ze vaak enkel kiest vanwege gratiesj. Met die mentaliteit, maar zonder geld gaan dit soort initiatieven ook niet ontstaan. Mycroft bijvoorbeeld suddert ook maar een beetje door.

[Reactie gewijzigd door MsG op 23 juli 2024 18:02]

[blorf]

Mijnsinziens is het veelal vooral een geldkwestie

[MsG]

Ik bedoel dat in de context van het technisch achterblijven van veel 'community'/opensource oplossingen. Men schreeuwt het een, maar als de poeplap getrokken moet worden huppelt men naar het andere gratis alternatief. Dan moet je niet gek opkijken dat er enkel commerciële opties overblijven. En juist die commerciële bedrijven houden ook nog eens de open source-opties in leven.

[AW_Bos]

Had je al gelezen dat gebruikersinformatie wordt verwijderd?

Mozilla stuurt data eerst via zijn eigen proxy voordat de gegevens naar Google gaan, deels om gebruikersinformatie te verwijderen, aldus de organisatie.

[blaatenator]

Voor nu (en misschien, want weten kun je het niet). Mozilla heeft al vaker laten blijken niet betrouwbaar te zijn.

[Ramon]

Het is een extensie.

[JoeyPrr]

Lees dit even... JanW in 'nieuws: Mozilla start test met spraakbediening Firefox'

[Tortelli]

Wat ik me wel eens afvraag; waar verdient Firefox zijn geld eigenlijk mee?

[MsG]

Ze krijgen altijd een behoorlijke zak geld van de default zoekmachine. In 2013 kwam bijvoorbeeld 97% van hun inkomsten uit royalties doormiddel van de standaardzoekmachine (bron: https://www.investopedia....gle-chrome-make-money.asp).

[bitpixl]

Voor diegenen die niet zo zitten te wachten op al die nieuwe extra dingen in firefox en het liever afwachten, zou je eens kunnen kijken naar Firefox ESR (Extended Support Release). Dat is momenteel versie 68.x.

Firefox ESR krijgt wel evengoed de laatste security patches als updates

Firefox ESR Download
Firefox ESR Info

[Reactie gewijzigd door bitpixl op 23 juli 2024 18:02]

[Ramon]

Het is een extensie dus daar heb je alleen jezelf mee.

[blaatenator]

Het is een extensie dus daar heb je alleen jezelf mee.

Voor nu. Tot Mozilla merkt dat maar weinig het installeren. Dan duwen ze het door de strot (van de paar overgebleven gebruikers) door het standaard te maken. Zelfde tactiek als ze gebruiken voor instellingen die Mozilla liever niet heeft dat je aanpast: Eerst verplaatsen naar config, vervolgens ook die optie verwijderen.

[Sharkoon]

Mijn ervaring met spraak is dat het vaak niet in 1 keer lukt. Of hij snapt het niet, of heeft je niet goed verstaan, of komt met resultaten waar je niet naar zoekt.

[Mative]

Het lijkt me op zich geen probleem om gebruik te maken van Google
diensten, zolang de persoonlijke gegevens inderdaad eerst gefilterd worden.
Het maakt je op dat moment wel afhankelijk van een externe dienst.

Niet alle data kan echter gefilterd worden. De stem zelf kan via 'voice recognition'
gekoppeld worden aan andere audio/video bestanden. Je krijgt ook inhoudelijke informatie
zoals locatie, interesses of persoonlijke omstandigheden door die het profiel kunnen verrijken.

[Reactie gewijzigd door Mative op 23 juli 2024 18:02]

[uip]

Jammer inderdaad dat Mozilla hun eigen https://voice.mozilla.org/nl niet kan gebruiken

Krijgt Firefox toegang tot alle spraakcommando's die verzameld worden? Zo zouden ze hun eigen spraakprogramma kunnen verbeteren ...

[boner]

en ik maar mijn uiterste best doen om tijdens het browsen cameras en microfoons uit te zetten. Hoe kun je er zeker van zijn dat alleen FF luistert en niet een of andere louche site?