Op vrije middag naar #iXspace Nijmegen. Ontdekt dat sneeuwvlokken maken de @silhouetteam Cameo best uitdaging is. De raamstickers bleven overal aan plakken (behalve het raam), de versie op papier plakte aan snijmat. Uiteindelijk gewone #vinyl stickers gemaakt. @iXperium #maken pic.twitter.com/md5XsKODL0
— Pierre Gorissen (@PeterMcAllister) December 14, 2018
12 maanden verschil
Bij Wilfred Rubens kwam ik mezelf gisterenavond tegen als onderdeel van de introductie van een blogpost getiteld “Stemgestuurde digitale assistenten en leren“. In het bericht (dat je natuurlijk het beste ook zelf eerst even kunt lezen) reageert Wilfred op zijn beurt op twee online berichten, eentje getiteld “Hey, Google, Alexa, Siri and Higher Ed” van Ray Schroeder en de ander heet “Using Amazon Alexa for the Math Classroom” van Matthew Lynch.
Centrale vraag daarbij is eigenlijk hoe / of we als onderwijsinstellingen zouden moeten omgaan met de toegenomen belangstelling (ook in Nederland) voor spraakgestuurde assistenten zoals die Google, Siri van Apple en Alexa van Amazon.
Zoals Wilfred altijd doet, maakt hij een tamelijk zakelijke en objectieve samenvatting van de berichten. Dat is fijn, want zelf zou ik ze waarschijnlijk anders nooit gelezen hebben. Ray Schroeder bijvoorbeeld begint zijn verhaal met een vergelijking van hoe zijn 7 jaar oude kleinzoon het altijd van hem wint als er vragen beantwoord moeten worden. Waarom? Tja, je kunt het wel raden: die kleinzoon begint met “Hey Google….”. Halverwege het bericht komt hij dan uit bij:
How far away are we from a full synthesis of emerging capabilities to do original research and writing — all triggered by a voice command? Not far. And, one has to ask, how does the advent of this technology impact the way in which we teach? Do we need to re-examine our pedagogies in light of very smart assistants?
Daarna introduceert hij een nieuw fancy begrip: voice engine optimization (VEO) als tegenhanger van search engine optimization. Kortom, het bericht heeft echt alles in zich dat er voor zorgt dat sommige mensen het een super bericht zullen vinden (en een waarschuwing / signaal voor de te volgen weg) en anderen op hun achterste benen zullen staan als het gaat om weer zo’n technoloog die de toekomst van onze kinderen wil verpesten met een stuk niet onderzochte technologie.
Het artikel van Matthew Lynch steekt daar heel veilig tegenover af met een aantal voorbeelden van hoe je Alexa in de klas kunt inzetten.
OK, zoals gezegd: goed dat Wilfred het samenvat, want dat maakt het mogelijk om te kijken naar de punten die hij er uit haalt, dat maakt het voor mij een stuk gemakkelijker om inhoudelijk te reageren.
Toen ik besloot om de uitleg over mijn tweet van zondagavond op te knippen in drie in plaats van twee delen, was dat omdat ik vond dat na de uitleg over de terminologie in deel 1, het verstandiger was om eerst een eenvoudig voorbeeld uit te werken in deel 2. Maar dat heeft ook tot gevolg dat dit deel 3 een stuk eenvoudiger moet zijn om te volgen ondanks dat het resultaat dat zeker niet is.
De app van gisteren deed niet veel zinvols en had één intent (+ 2 ingebouwde) in totaal. Deze app combineert twee groepen vragen (in totaal 7 intents) in één app. Wat kun je doen?
Voor dit deel 3 ga ik er vanuit dat je deel 2, gelezen én nagebouwd hebt. Dat betekent dat je de Handmatige setup – deel 2 voor het configureren van Dialogflow uitgevoerd hebt, dat je een intent.yaml op je Home Assistant server hebt staan, dat je een webhook geconfigureerd hebt en die ook al eens succesvol gebruikt hebt (in je persoonlijke routeplanner). En ik ga er ook vanuit dat je al eens een app gemaakt hebt (als onderdeel van deel 2).
OK? Goed, dan aan de slag.
Gisteren heb ik de TTGO T-Beam meegenomen toen ik met de trein op en neer van Deurne naar Apeldoorn gereisd ben. Gewoon in mijn tas, mijn jaszak, naast de laptop op het tafeltje terwijl ik zat te werken. Echt een wereld van verschil ten opzichte van de eerste keer. Dit maakt het veel haalbaarder om van tijd tot tijd een dagje de status van het netwerk te testen. En omdat de tracker redelijk netjes is voor wat betreft het aantal berichten dat verstuurd wordt (als de trein/auto/ik niet beweegt worden er veel minder berichten verstuurd dan bij beweging) kan dat ook prima.
Gisteren had ik, zoals inmiddels gebruikelijk een reserve LiPo batterij bij me, maar ik heb hem niet nodig gehad. De T-Beam wist het vol te houden gedurende de heenreis (ongeveer 2 uur en 15 minuten van deur tot deur) en de terugreis (idem). Toen ik in Apeldoorn op mijn bestemming aankwam heb ik de T-Beam uitgezet (handig dat fysieke schakelaartje dat al op het board zit!) want voor de tijd die ik ín het gebouw doorbracht had tracken niet echt veel zin.
Op het kaartje hierboven zie je dat ook nu er best veel plekken zijn waar je vanuit de trein geen ontvangst hebt, landelijke dekking is er dus nu nog lang niet (ik ben benieuwd wanneer de dag komt dat ik kan zeggen “en nu wel!”). Maar in de steden gaat het al heel goed. Als we inzoomen (klik op een afbeelding voor grotere versie).
Tijd voor deel 2 van de serie berichten over het praten met je Home Assistant installatie via Google Home. Als je deel 1 van gisteren nog niet gelezen hebt, doe dat dan eerst even. Anders wordt het heel moeilijk om te volgen.
Als je deel 1 gelezen hebt, dan weet je inmiddels dat er een aantal manieren zijn waarom je een koppeling kunt hebben tussen je Google Home (Mini).
Home Assistant Cloud
Laat ik beginnen met Home Assistant Cloud, een dienst waar ik zelf (nog) geen ervaring mee heb. Dat maakt het wat ongemakkelijker voor me om er uitspraken over te doen, maar ik lees vooral dat het gewoon werkt en als ik de info lees dan lijkt het ook een stuk gemakkelijker qua setup dan de handmatige manier. Je kunt het gratis een maand testen, daarna €5,- per maand, dus als je denkt “ik zie al dat zelf installeren niet zitten” is het zeker iets om uit te proberen. In onderstaande video kun je zien hoe je Home Assistant Cloud kunt installeren en configureren:
Met de setup kun je standaard zaken doen: lampen of schakelaars aan/uit zetten en alle apparaten aansturen die standaard door het home automation deel van Google Assistant worden ondersteund.
Ik ben voor de handmatige setup gegaan en zoals gezegd die is wat ingewikkelder. In de rest van het bericht ga ik uit van die setup.
Het begint er op te lijken. Context van het gesprek wordt onthouden in gesprek met Google Assistent via Google Home Mini met behulp van @Dialogflow en #HomeAssistant Blogpost volgt. (vorige tweet mistte start van het gesprek) pic.twitter.com/qcSHoWKY1p
— Pierre Gorissen (@PeterMcAllister) December 10, 2018
Het tweede weekend met de Google Home Mini in huis betekende dat ik verder gewerkt heb aan de integratie ervan met Home Assistant. Maar voordat ik daar over ga schrijven, eerst even wat begrippen op een rij om te voorkomen dat je al bij de start van dit bericht de draad helemaal kwijt bent. Het doel / resultaat zie je in de tweet hierboven. Hoe ik dat gerealiseerd heb lees je uiteindelijk in deel 3, maar dit eerste deel is wel even handig om te lezen. Goed, de spelers dan eerst even op een rij.
Home Assistant – is een open source software omgeving die niet van Google is. Ik gebruik Home Assistant en meer in het bijzonder Hass.io als vervanger voor OpenHAB (een ander open source systeem voor home automation / domotica). Omdat ik vooral ‘domme’ sensoren en schakelaars gebruik zou Google niet veel kunnen in mijn huis. Straks zal ik ook de “app” Home Assistant introduceren. dat is wat anders. Als ik alleen Home Assistant als begrip gebruik dan heb ik het over deze omgeving, geïnstalleerd op een Raspberry Pi 3B+ thuis bij mij in de meterkast.
Google Home Mini – het kleinere zusje van de Google Home. Een speaker / microfoon combinatie die luistert naar opdrachten en die doorgeeft aan Google Assistant. Vergelijkbaar met wat de Amazon Echo is voor Alexa.
Google Assistant – zorgt voor het omzetten van mijn gesproken opdrachten naar tekst en probeert daar dan iets mee te doen. Dat iets kan van alles zijn: opzoeken van een definitie van een woord op internet, het toevoegen van een item aan een boodschappenlijst, het starten van een liedje op Spotify. Google Assistant heeft ook ondersteuning voor domotica. Bijvoorbeeld voor het aanzetten van lampen of schakelaar. Google Assistant kan communiceren met Home Assistant waarbij Home Assistant er dan voor zorgt dat de actie daadwerkelijk uitgevoerd wordt. Dat is handig want hoewel Google Assistant geen ondersteuning heeft voor mijn goedkope (3 voor 10 euro) schakelaars van de Action, vindt ze het geen enkel probleem om een commando als “Zet Kerstboom Aan” door te geven aan Home Assistant. Home Assistant zorgt er dan wel voor dat via de RFXcom module die er aan hangt de juiste codes via 433Mhz naar de schakelaar gestuurd wordt.
Onhandiger wordt het als ik wil weten hoe warm het ergens in huis is. Of hoe vochtig. Home Assistant weet daar het antwoord op omdat ik daar er voor zorg dat de waardes van die sensoren via 433Mhz en wederom de RFXcom module ontvangen wordt. Maar Home Assistant heeft nog geen ondersteuning voor sensoren die luchtvochtigheid terug geven. Wel voor thermometers. Dus rechtstreeks vragen kan nog niet.
Hé, de @Google Home Mini weet nu wél te herkennen dat ik @detechnoloog podcast van @BNR wilde opstarten. Bij "Hey Google, speel podcast de technoloog" vraagt ze of ik de app erbij wil halen en bij "Ja" wordt de podcast gestart en afgespeeld. #nice https://t.co/HwcHtWNqDx pic.twitter.com/6qeYGhlSLe
— Pierre Gorissen (@PeterMcAllister) December 8, 2018
(klik even door voor de rest van de bijbehorende tweets, het werkt namelijk lang niet altijd!)
Gisteren schreef ik over een lesactiviteit waarbij je in Tinkercad met blokken een sneeuwvlok kon laten genereren. Ik weet niet precies waarom ik het in de titel van het bericht “kerstster” genoemd heb, waarschijnlijk omdat ze daar op lijken en gezien de tijd van het jaar.
Het idee van het ontwerpen van een sneeuwvlok in code is natuurlijk dat je eenvoudig meer verschillende ontwerpen kunt maken. Dat kon ook met de code in Tinkercad, maar toen ik daar gisterenavond mee aan de slag ging, liep ik al snel tegen een beperking van de huidige versie aan. Ik kon (nog) geen IF-statements toevoegen en daardoor was het niet mogelijk om in één ontwerp de code voor meerdere, verschillende sneeuwvlokken op te nemen.
De programmeerfunctie in Tinkercad is nog nieuw en zal ongetwijfeld nog verder uitgewerkt worden, maar voor nu kan het nog even niet.
Dus ging ik nadenken over andere manieren waarop ik dat zou kunnen vormgeven. Omdat het soms helpt om daar een nachtje over te slapen, deed ik dat. En vanochtend, toen ik wakker werd was (voor mij) duidelijk dat ik daarvoor OpenSCAD wilde gaan gebruiken. Het was al weer lang geleden dat ik daar voor het laatst mee gewerkt had (ruim 5 jaar!). Gelukkig was ik niet de enige die daar aan gedacht had en JanPieter wees me via Twitter op het bestaan van The Snowflake Machine. Dat is een stuk code in OpenSCAD waarmee je sneeuwvlokken kunt genereren.
(dit bericht verscheen eerder vandaag ook op iXperium.nl
Sinterklaas is weer naar huis, kerst komt er nu razendsnel aan. Hoog tijd dus ook om het huis en de school te versieren. Omdat het deze week Computer Science Education Week is vinden er wereldwijd heel veel evenementen plaats waarbij leerlingen kennis maken met ict en programmeren. Daarnaast worden er natuurlijk ook online ideeën voor lessen en activiteiten gedeeld.
Zo staat er op instructables.com een uitgebreide uitleg voor een les van ongeveer een uur waarbij leerlingen leren hoe ze door het programmeren van een algoritme binnen Tinkercad zelf een kerstster kunnen (laten) ontwerpen. De uitleg bevat het nodige achtergrondmateriaal voor de leerlingen en de leraar, bijvoorbeeld over co-creatie met behulp van computer of over de opbouw van een sneeuwvlok.
Lees verder….
Using @Google Home Mini + @home_assistant + @Dialogflow to get temperature from cheap 433mhz outdoor temperature/humidity sensor using Dutch voice commands. pic.twitter.com/MGpFxdUDQy
— Pierre Gorissen (@PeterMcAllister) December 1, 2018
Het was eigenlijk gewoon heel logisch. In 2015 sloot ik mijn kerstboom aan op mijn home automation systeem, toen was dat OpenHab. In 2017 (vorig jaar) gebruikte ik een Google AIY Voice Kit om de kerstboom in het Engels aan en uit te schakelen. Het kartonnen doosje had afgelopen jaar niet zo heel veel gedaan, maar toen als onderdeel van de Black Friday aanbiedingen (tja, sorry hoor) ook de Google Home Mini voorbij kwam, inmiddels ook met ondersteuning voor Nederlandse spraak, kon ik het niet laten en heb ik er eentje besteld.
Het was meteen ook een moment om OpenHab te vervangen door Home Assistant. Ik had afgelopen jaar nog wel de upgrade uitgevoerd naar de nieuwe versie van OpenHab, maar het was tijd voor wat nieuws. Betekende dus weer een nieuw systeem en architectuur leren kennen. Nou ja, zeg maar gerust “betekent” want het systeem heeft zó veel verschillende opties, dat ik nog wel even aan het leren ben.
Een paar dingen gingen in ieder geval heel erg prettig. Ik sloot de RFXcom ontvanger/zender aan op de Raspberry Pi waarop is Home Assistant via Hass.io geïnstalleerd had en in no time werden de verschillende vochtigheid/thermometers door het huis heen (die gebruiken 433Mhz om hun data te versturen) herkend. De goedkope 433Mhz KlikAanKlikUit klonen van de Action waren eveneens geen probleem. En zo had ik redelijk snel een basic werkend systeem. De integratie met de Google Home Mini (en daarmee ook de Google Home app op mijn iPad en Android telefoon) was niet heel veel meer werk. De plugin voor Duckdns maakte het heel gemakkelijk om de benodigde veilige verbinding naar buiten te maken en de setup was redelijk duidelijk. Ik heb geen gebruik gemaakt van de (betaalde) Cloud app/setup, maandelijkse bedragen betalen om lampen in mijn huis aan/uit te kunnen schakelen vind ik nou eenmaal niet zo handig.
In het Nederlands heel eenvoudig niet alleen je Kerstboom (wees gerust hij staat nog niet op!) maar ook alle andere schakelaars kunnen bedienen is iets dat ook de rest van het gezin kon bevallen. Zeker omdat de spraakherkenning, helemaal als je hem traint, prima is.
De integratie met de componenten in huis is nog niet helemaal optimaal. Zo kan de Google Home Mini niet “zomaar” antwoord geven op een vraag naar de waarde van de sensoren die aan Home Assistant gekoppeld zijn. Daarvoor moest ik met Dialogflow aan de slag en Intent regels per sensor, dat werkt nog wat omslachtig zoals je ook in het filmpje hierboven kunt horen. Maar het werkt.
Ondertussen heb ik ook de data van de zonnepanelen in Home Assistent ontsluiten, een stukje Automation toegevoegd en kan ik notificaties ontvangen via Pushbullet, kortom het begint al heel aardig vorm te krijgen. Wordt vervolgd!
