Smartspeaker van Nabu Casa verschijnt bij FCC

Er zijn onlangs foto's en patenten van een nieuwe Home Assistant-smartspeaker verschenen bij de Amerikaanse Federal Communications Commission. Wanneer het kastje precies op de markt moet verschijnen, is nog niet bekend.

De foto's van de speaker, die nu nog bekendstaat onder de naam Home Assistant Voice Preview Edition, zijn gedeeld via de Home Assistant-subreddit. Deze laten zien dat de speaker een audiojack, een schuifknop en USB-C-poort heeft. Volgens de gegevens van de FCC beschikt het kastje over een bluetooth- en wifiverbinding.

Het was al bekend dat Nabu Casa werkt aan ‘satelliethardware’ voor stembediening. In mei publiceerde Tweakers een interview met Home Assistant-oprichter Paulus Schoutsen, die een paar details deelt over de slimme speaker. Het kastje bevat een microfoon en een speaker en stuurt stemcommando's door naar Home Assistant. Daarnaast wordt het opgebouwd rondom een ESP32-microcontroller en zal draaien op ESPHome.

Home Assistent Voice Preview EditionHome Assistent Voice Preview EditionHome Assistent Voice Preview EditionHome Assistent Voice Preview EditionHome Assistent Voice Preview Edition

Door Loïs Franx

Redacteur

22-10-2024 • 19:39

49

Reacties (49)

49
49
33
1
0
15
Wijzig sortering
Op Reddit is vorige week ook een draadje gestart waar een van de developers veel heeft gereageerd en meer info in staat: https://www.reddit.com/r/...bu_voice_kit_be_revealed/
Credits @TheFes die dit vandaag linkte in het Home Assistant topic hier op GoT

V.w.b. "ESP32" zoals in het artikel staat is een beetje "vaagjes", gezien er intussen misschien wel 10 verschillende ESP32 modellen zijn. Specifiek gaat het hierbij om een ESP32-S3, met 16MB flash opslag, alhoewel de eerste versie waar ze zelf mee werken blijkbaar maar 8MB flash heeft. Deze ESP32-S3 bevat daarbij ook geen support voor Zigbee of Thread, zoals sommige modellen wel ondersteunen.

@Skit3000: v.w.b. audio / muziek afspelen is die schijnbaar niet geweldig (afgaande op de comments van de developer)

Edit:
Overigens v.w.b. de software, ESPHome. De YAML hiervoor, om een firmware te builden (en deployen) staat ook al online en wordt al al die tijd "open" ontwikkeld: https://github.com/esphome/home-assistant-voice-pe Ook daar is dus al veel info uitgehaald.

[Reactie gewijzigd door RobertMe op 22 oktober 2024 20:08]

Ik moet zeggen: lokale stembediening kan ik alleen maar enthousiast van worden.
Geen Google, Alexa, etc. in mijn huis!

Afspelen doe je dan gewoon op je andere devices :)

Zou wel leuk zijn als het dingetje als sirene/deurbel kan fungeren ook...
Het ding zit de media player component "in". Dus vanuit Home Assistant kun je hem gewoon een mp3tje laten afspelen dat via een URL bereikbaar is, bv. Dus een deurbel / sirene / ... is daarmee gewoon mogelijk.

En lokale stembediening kon natuurlijk al met HA (+ de door hun ontwikkelde? Whisper, Piper, etc etc, incl tegenwoordig meen ik ook een koppeling met een self hosted LLM voor de complexere zaken mocht je dat willen (waarmee IIRC ook een "het is donker" zin gesnapt wordt en lichten aan gaan, bv)). Alleen had je voorheen dus een "3th party" microfoon/speaker nodig als je een slimme speaker wilde (zelfde gebeuren kun je meen ik ook aanspreken in de HA app bv, dus een slimme speaker is niet perse nodig). En die slimme speaker is dan een ruime term. Een Atom Echo van een paar euro is ook al voldoende.
Het is wel erg lastig om een Atom Echo "Voldoende" te noemen, de microfoon is namelijk verre van gevoelig genoeg om door een hele ruimte bruikbaar te zijn en de speaker is zwakker dan zo'n beetje iedere smartphonespeaker.
eens maar het is een goede om je POC mee te voltooien en zo afdoende te beargumenteren dat je de aankoop van iets beters mag doen van de baas thuis... ;)
Dat is zeker waar ;)

Ik hoop in ieder geval dat hier een degelijke mic array in zit, dan koop ik hem namelijk meteen!
Er zit ook een 3.5mm aux out op, dus je kunt er ook een setje PC speakers op aansluiten voor beter geluid
Ik hoop dat deze je stem van net zo ver op kan pikken als de Nest Home Mini en ook redelijk goed muziek af kan spelen. Dan ben ik de eerste die 'm koopt! Stembesturing is het laatste in mijn HA-setup dat nog niet lokaal draait.

Edit: Muziek afspelen is eigenlijk niet zo belangrijk, dat kan altijd nog via de Google speakers.

[Reactie gewijzigd door Skit3000 op 22 oktober 2024 20:10]

Van een kastje die volgens de foto's pakweg 8 op 8 cm is en misschien 2 à 3cm dik, verwacht ik niet zo veel op het vlak van muziek. Maar ik ben benieuwd.
Ik denk ook niet dat het als hifi speaker voor muziek moet worden gezien.
Zal inderdaad wel vooral voor spraak zijn.
Hier komt nooit muziek van enig kwaliteit uit.
Daar zal niet veel geluid uitkomen volgens mij. Ik vermoed dat het enkel moet dienen om te luisteren voor commando's en dat het geluid zal moeten komen via een verbonden speaker (via mini-jack, bluetooth of wifi).

Misschien niet helemaal juist gezegd. Er zal waarschijnlijk wel iets van geluid uitkomen ter bevestiging dat een commando ontvangen is maar zal niet geschikt zijn voor internet radio of zo
Precies, hier zit ik echt wel op te wachten. De huidige DIY zijn en niet zo mooi om te zien, en niet zo goed qua bereik. Mijn eigen "Her" home is toch wel wat ik ambieer.
Had het niet logisch geweest als er ook een versie was waarop ook HA draait met een zigbee antenne?
Waarom? Wil je een HA server in iedere kamer?
Een starterskit, een soort green/yellow versie.
Die is er toch al, dat kan ongeveer ieder systeem zijn. Een green, een Yellow, een reeks Rpi's, Synology severs met docker of VM, en nog 20 andere dingen.

Juist lokale smartspeakers zijn iets waar mensen op wachten
Ik snap de vraag maar dat is eigenlijk niet logisch.

Home Assistant draait op een arm of x86 computer.
De voice assistants draaien op een esp32 chip.

Esp32 is de gouden standaard om door je huis te strooien en allerlei sensors en actoren aan te hangen. Die kan je centraal managen via ESPHome.
Home Assistant stop je ergens achteraf in de meterkast. Er zijn 2 hardware versies te krijgen van Nabu Casa maar veel mensen gebruiken een Raspberry Pi of NAS.

Afgezien van de verschillende chips zou het voor Nabu Casa (en ons) ook duurder zijn om een extra hardware variant te hebben. Dat maakt het lastiger om de oplages van de verschillende versies te voorspellen.

Er zal vast iemand zijn die een 3d print case maakt met een HA Yellow en HA Voice in 1, gepowered via de USB poort van de Yellow ;)
Lokaal voice herkenning. Tot hiertoe traag, herkent woorden slecht, vele malen herhalen is nodig.
Via cloud gaat het beter, maar ja, kan je ook met Google.... Die ook meer kan dan smarthome alleen.
Afwachten wat het deze keer wordt...
Google Alexa Microsoft, mijn data allemaal niet binnen mijn woning voor zover ik weet. Dat is voor mij nu net de reden om voor een systeem als home assistant te kiezen.
Ja alleen met Siri wel. Die draait on device. Dat is de reden dat ik nu homepods heb. Maar siri werkt vrij erbarmelijk vergeleken met de andere opties, dat wel.
Als je het op een server draait gaat het wel hoor. Whisper van OpenAI is een goed en licht herkenningsmodel wat niet eens op een gpu hoeft.

Voor het omgekeerde, text to speech is piper al behoorlijk goed en dat draait al op een Raspberry.
Ik hoop dat dit een succesvol product gaat worden! Sympathiek bedrijf, dat Nabu Casa.
Veel hardware van Nabu Casa is een combinatie van een nuttig product en sponsoring van de ontwikkeling van Home Assistant. Het zal dus geen competitieve prijs hebben zoals Amazon en Google die de hardware praktische weg geven om klanten aan hun eco systeem te binden. Voor mij is dat een extra rede om het uit te proberen.
Lijkt een heel leuk apparaat te gaan worden, jammer dat er geen POE is.
Mijn Alexa lagen beide naast een netwerk aansluiting en dat is toch een stuk prettiger dan alles wifi.
POE kwa stroom kan ook bijvoorbeeld via deze adapter.
De vraag is uiteindelijk hoe goed de microfoon en speaker is. De Nest Mini blinkt uit omdat het gewoon een degleijke speaker is (qua vermogen, heeft natuurlijk niet het schoonste geluid) voor een hele lage prijs en ook gesprekken via Duo e.d. prima gaan.
Als deze dezelfde microfoon/speaker gaat hebben als de gemiddelde zelfbouwoptie dan zou dat heel jammer zijn
Ik maak in mijn slaap kamer veel gebruik van de atom echo met nederlandse spraak.
voor whisper maak ik gebruik van het small-int8 model. Ik heb lokaal een dynamiche dns aangemaakt de switched tussen mijn laptop een oude laptop en mijn celleron server om de snelste whisper te pakken.

verder maak ik bijna geen gebruik meer van de standaard spaak functies maar heb mijn eigen automations.
Waar ik veel komende stt fouten in af vang.

ventilator aan/uit (is de ven in de kamer waar de voice device staat)
zelfde voor muziek (aan/uit/next/artiest/album/radio station/podcast)
waar ik de artiesten, albums, radio stations en podcast in een sql db heb staan.
waar door een sql functie ook weer vertaal fouten kunnen worden afgevangen.

werkt als een malle.

YouTube: 5 oktober 2024

[Reactie gewijzigd door daft_dutch op 23 oktober 2024 12:19]

Ik zie dat ie goed reageert op jouw stem. Bij mij werkt het ok nabu wake word niet echt lekker. Heb je iets verbetert of ligt het aan mijn stem?
heb je wel de echo geflashed naar de laatste versie dat het wakeup word lokaal op de echo wordt afgehandeld?
Hmmz paulus zei dat een bestaande esp32-S3-box niet goed werkt omdat de microfoons niet ver genoeg uit elkaar zitten voor het far field effect. Stond ergens in een van de interviews hier met hem. Maar bij deze lijkt dat niet veel verder het geval te zijn dan bij de S3 box.

Ik ben wel benieuwd maar sinds de lokale LLM modellen er zijn zoek ik eigenlijk naar een omgekeerd idee. Praten met de lokale LLM die can home assistant kan aanspreken maar ook andere dingen. In plaats van home assistant de leiding te geven.

Vreemd genoeg heb ik nog niet zulke projecten gezien. Ik heb zelf een paar respeaker hats gekocht voor raspberry pi Zero 2, dan heb ik wat meer paardenkracht dan een esp32 biedt.

[Reactie gewijzigd door Llopigat op 22 oktober 2024 21:20]

Mooi dat er voortgang is, ik volg het project al een tijdje.

Ik heb hier lokaal stemherkenning draaien binnen HomeAssistant (met oa Whisper) maar ben nog niet heel enthousiast over de kwaliteit. Als ik direct tegen mijn telefoon praat gaat het nog wel maar de microfoon die ik in de woonkamer had hangen was vrij nutteloos en al helemaal als er ander geluid in de kamer was (zoals de TV). Van anderen begreep ik dat je eigenlijk meerdere microfoons moet combineren zodat je verschillende geluidsbronnen kan isoleren. Dat was mij wat te veel gevraagd en helemaal als je het in meerdere kamers wil kunnen gebruiken. Een bescheiden kastje ergens in kamer zetten gaat nog wel, 4 richtmicroofoons per kamer ophangen en bekabelen is zelf voor mij wat te veel gevraagd.
wat voor hardware gebruik je. ik kan mijn atom echo op 1.5 meter afstand bedienen.
ook als de muziek aanstaat.

Op dit item kan niet meer gereageerd worden.