Comment créer un assistant domestique Google avec DIY Raspberry Pi

Les assistants à commande vocale sont rapidement devenus monnaie courante. Alexa ou Google Home sont souvent contrôlés par de nombreux foyers, de l'éclairage aux supports en passant par le chronométrage.

La technologie utilisée par ces appareils est disponible, du moins en partie, pour tout le monde. L'assistant SDK de Google vous permet d'utiliser le service sur vos propres appareils. Ce tutoriel explique comment configurer l'Assistant Google sur votre Raspberry Pi et comment activer vocalement une LED via des broches GPIO..

Matériel requis pour un assistant domestique Raspberry Pi

Tu auras besoin de:

1. Raspberry Pi avec une nouvelle installation de Raspbian sur la carte SD Comment installer un système d’exploitation sur un Raspberry Pi Comment installer un système d’exploitation sur un Raspberry Pi Voici comment installer un système d’exploitation sur votre Raspberry Pi et comment cloner rapidement votre configuration reprise après sinistre. .
2. Webcam ou microphone USB.
3. Haut-parleur externe.
4. Didacticiel sur les circuits à partir des DEL Comment programmer votre Raspberry Pi pour commander des éclairages DEL Comment programmer votre Raspberry Pi pour contrôler des éclairages LED Essayez de connecter des voyants et de les coder pour les allumer et les éteindre! (optionnel)
5. Un navigateur connecté à votre compte Google.

Remarque: L'équipement pour ce tutoriel peut varier quelque peu. J'ai utilisé une webcam USB de rechange uniquement pour son microphone. Toute webcam ou microphone compatible devrait bien fonctionner, et il existe une liste exhaustive de périphériques compatibles avec Pi pour vous aider..

En outre, j'utilise la sortie 3,5 mm pour l'audio. HDMI et d’autres sources de sortie fonctionneront également, même s’il faudra modifier le réglage du son ci-dessous..

Branchez la webcam USB et le haut-parleur, et configurez le circuit de voyants si vous l'utilisez.

Mise en place du son

Ce tutoriel peut être suivi directement sur le Pi ou via une connexion SSH dans le Pi.

Les deux manières commencent dans le terminal, pour vérifier les réglages du son. Utilisez les commandes un enregistrement -l et aplay -l pour lister les appareils disponibles.

L'image ci-dessus montre la webcam USB en tant que carte 1 et périphérique 0. Prenez note des numéros de carte et de périphérique pour la sortie microphone et haut-parleur.

Maintenant, assurez-vous que vous êtes dans le / home / pi répertoire, créez un nouveau fichier et ouvrez-le dans nano:

sudo nano .asoundrc

Le contenu de ce répertoire sera différent selon les numéros de carte et de périphérique que vous utilisez. C’est là que vous pouvez choisir de privilégier la sortie HDMI plutôt que 3,5 mm si vous le souhaitez..

Lorsque vous avez entré votre version du code ci-dessus, appuyez sur Ctrl + X pour sauvegarder et quitter.

Testez votre configuration en enregistrant et en lisant un court extrait:

Étape facultative: Si vous souhaitez modifier le volume d'entrée de votre microphone, ouvrez alsamixer et appuyez sur F6 passer d'un appareil à l'autre.

C'est tout! Le son est mis en place.

Création du projet Google

Ouvrez alternativement le navigateur du Pi, si vous êtes connecté via SSH, ouvrez un navigateur localement. Accédez à la console d’action Google et cliquez sur Nouveau projet.

Ceci peut prendre un certain temps. Lorsque vous avez terminé, laissez la fenêtre active et ouvrez un nouvel onglet; nous y arriverons dans un instant..

Activation de l'API Google Assistant

Vous devez effectuer quelques ajustements en ligne pour continuer. Accédez au site Web de l'API Google Assistant et cliquez sur Activer.

Le projet nécessite également des autorisations d'activité. Accédez au panneau de contrôle d'activité et assurez-vous que les activités suivantes sont activées:

• Activité Web et d'application (avec case à cocher Historique Chrome)
• Informations sur le périphérique
• Activité vocale et audio

Maintenant, vous pouvez passer à l'enregistrement de l'appareil.

Enregistrement de votre Raspberry Pi

De retour dans la console d’action, sélectionnez Enregistrement de l'appareil du panneau de gauche. Sous Produit créez un nom facile à retenir pour votre appareil. Le nom du fabricant n’est pas important (mais doit être présent), puis sélectionnez Auto pour le type d'appareil.

Cliquez sur Enregistrer le modèle, et sur l'écran suivant, cliquez sur Télécharger les informations d'identification OAuth 2.0. Cela télécharge un fichier JSON sur votre ordinateur. Si vous n'êtes pas familier avec les fichiers JSON, ne vous inquiétez pas, mais apprenez à utiliser JSON Analyse JSON JSON Python: Un guide simple Analyse JSON Python: Un guide simple Des bibliothèques et des kits d'outils sont disponibles pour analyser et générer du JSON à partir de n'importe quelle langue et environnement. Cet article se concentre sur les méthodes et les problèmes liés à l'analyse syntaxique JSON python. vaut la peine d'être fait pour l'avenir!

Le guide officiel de Google recommande de déplacer le fichier vers / home / pi, alors ouvrez le gestionnaire de fichiers et faites-le maintenant.

Étape supplémentaire pour les utilisateurs SSH:

Si vous utilisez SSH, vous aurez téléchargé le fichier JSON sur votre ordinateur local au lieu du Pi. Pour le transférer, ouvrez une fenêtre de terminal séparée sans connexion SSH. Depuis cette fenêtre, copiez le fichier JSON secret du client à l’aide de cette commande:

scp ~ / Téléchargements / client_secret_client-id.json pi @ raspberry-pi-ip-address: / home / pi /

Remplacer “raspberry-pi-ip-address” avec l'adresse IP de votre Pi, et n'oubliez pas les deux points avant le chemin. Si vous avez téléchargé le fichier JSON à un autre emplacement, modifiez votre chemin local pour en tenir compte. Entrez votre mot de passe lorsque vous y êtes invité, et le fichier sera copié dans le répertoire de base du Pi..

Revenez au terminal SSH et accédez à / home / pi. Entrer ls -l pour lister les fichiers dans le répertoire. Vous devriez voir le fichier JSON secret du client transféré..

Installer le SDK

Google recommande de travailler dans un environnement virtuel Python. Créez un nouvel environnement virtuel appelé env.

Si vous ne l'avez jamais fait auparavant, ce tutoriel vous aidera à apprendre à utiliser les environnements virtuels Python..

Installez les dernières versions de Pip, Setuptools et Wheel et activez votre environnement virtuel:

env / bin / python -m pip install --upgrade pip setuptools wheel source env / bin / activate

Google Assistant comporte certaines dépendances que vous devez installer dans l'environnement virtuel maintenant..

sudo apt-get install portaudio19-dev libffi-dev libssl-dev libmpg123-dev 

Enfin, installez le SDK Google Assistant, les exemples et l’outil OAuth..

python -m pip installer --upgrade google-assistant-library python -m installer pip --upgrade google-assistant-sdk [exemples] python -m pip installer --upgrade google-auth-oauthlib [outil] 

C'est tout ce qu'il faut pour être opérationnel. Si l’une des installations échoue, vérifiez l’orthographe et l’espacement..

Authentification du Raspberry Pi

Utilisez le google-auth-oauthlib [outil] avec le fichier JSON d'identification téléchargé précédemment pour authentifier votre Raspberry Pi.

google-oauthlib-tool --scope https://www.googleapis.com/auth/assistant-sdk-prototype \ --scope https://www.googleapis.com/auth/gcm \ --save --headless - -client-secrets /home/pi/YOUR_CLIENT_SECRET_ID.json 

Vous devrez remplacer YOUR_CLIENT_SECRET_ID par le fichier téléchargé. Il est donc intéressant de copier le nom de fichier en premier. Cet ID client doit être correct. Ne changez pas le nom du fichier!

Vous devriez recevoir un message avec un lien vous demandant de coller un code d'autorisation.

En cliquant sur le lien ouvre le navigateur. Vous serez invité à activer l'appareil sur votre compte Google. Copiez le code d'autorisation qui suit et collez-le dans la fenêtre de votre terminal..

Vous devriez recevoir une confirmation de lecture Références sauvegardées: / home / pi… , ce qui signifie que le Pi a été autorisé avec succès avec votre compte Google.

Le tester

Maintenant que tout est en place, il est temps de tester votre assistant Google Pi. Exécutez l'assistant avec cette commande:

googlesamples-assistant-hotword - id-projet my-dev-project - id-modèle-appareil my-model 

Vous devrez remplacer mon-dev-projet avec votre ID de projet (situé sous la roue dentée Settings de la console d’action). Votre device-model-id est répertorié dans la section Enregistrement de périphérique de la console d'actions.

Essaye le! Dire “OK Google” et poser une question. Vous pouvez voir la sortie du programme dans le terminal lorsque vous entendez la réponse:

C'est tout! Google Assistant est maintenant exécuté sur votre Raspberry Pi. Notez que si le volume de sortie est un peu faible, vous pouvez le modifier en disant “Hé Google, réglez votre volume jusqu'à 80%.”

Bonus: GPIO à commande vocale

Il est possible de contrôler les lumières avec un Arduino et Siri, mais il existe une méthode plus simple. Si vous configurez une LED, vous pouvez utiliser Google Assistant pour la contrôler avec votre voix..

La configuration de Google Assistant pour utiliser les broches GPIO est relativement simple, mais nécessite quelques étapes supplémentaires. Rendez-vous sur la console d’action Google et trouvez votre appareil sous Enregistrement de l’appareil. Cliquez dessus et ouvrez le menu des traits:

Tourne le Allumé éteint trait sur, et cliquez sauvegarder.

Maintenant, assurez-vous que vous êtes à l'intérieur du env environnement virtuel, clonez une version du SDK sur votre Pi à l’aide de git:

git clone https://github.com/googlesamples/assistant-sdk-python 

S'agissant d'un environnement virtuel, vous devez installer RPi.GPIO avant de poursuivre..

pip installer rpi.gpio 

Maintenant, naviguez jusqu'au dossier contenant le hotword.py scénario.

cd assistant-sdk-python / google-assistant-sdk / googlesamples / assistant / library 

Modifier le script

Vous devrez ajouter quelques lignes au script hotword.py, ouvrez-le donc dans l'éditeur nano:

nano hotword.py 

Sous les instructions d'importation, ajoutez les vôtres pour RPi.GPIO..

importer RPi.GPIO en tant que GPIO 

Cherchez le process_event méthode. À la ligne 66, supprimez ou commentez l'instruction print et ajoutez une instruction if pour contrôler le voyant..

#print ('Do commande', commande, 'avec params', str (params)) si command == "action.devices.commands.OnOff": if params ['on']: print ('----- ---------- ') print (' Led allumé ') print (' --------------- ') GPIO.output (18, GPIO.HIGH) else: print ('---------------') print ('Led éteint') print ('---------------') GPIO.output (18, GPIO.LOW) 

Cette logique contrôle la LED, mais jusqu'ici, elle n'est pas configurée pour la sortie. Installez-le dans le principale() fonction avant que la méthode process_event soit appelée.

GPIO.setmode (GPIO.BCM) GPIO.setup (18, GPIO.OUT, initial = GPIO.LOW) 

Maintenant, la broche GPIO est définie sur sortie et s'initialise à l'état bas. Sauvegarder et quitter. Vous pouvez exécuter votre script modifié en transmettant votre numéro d’identifiant de modèle (trouvé dans la console d’action) en tant qu’argument..

python hotword.py --device-model-id YOUR-MODEL-ID-HERE 

La sortie du terminal est la même que précédemment et l'assistant fonctionnera en standard. Maintenant cependant, quand vous dites “OK Google, allume” vous verrez une nouvelle sortie:

Remarque: L'image ci-dessus a été recadrée, montrant uniquement l'assistant entendant la demande et la déclaration d'impression ajoutée au script..

Vous devriez voir votre LED s'allumer aussi!

Votre propre assistant personnel Google Raspberry Pi DIY

Ce projet est une bonne introduction à l'utilisation des services Google API. Maintenant que vous avez un appareil Google Assistant, essayez quelques-unes des meilleures commandes de Google Home. Fiche de triche pour les commandes de Google Home La page de triche des commandes de Google Home Notre aide-mémoire contient des tonnes d'actions utiles, notamment de divertissement, d'informations et d'automatisation. -Nous avons jeté un œil à quelques super jeux Google Home. 15 Commandes Google Home pour les mini-jeux et plus encore. 15 Commandes Google Home pour les mini-jeux et plus. Vous pouvez faire beaucoup de choses avec les commandes de Google Home. Voici quelques commandes amusantes de Google Home qui valent la peine d'être essayées.. .