Projets:Au taf

Au taf 400pxLa propriété « A image principale » (comme le type de page) avec la valeur d’entrée « File: » contient des caractères non valides ou est incomplète, et donc peut provoquer des résultats inattendus lors d’une requête ou d’un processus d’annotation.
Informations
Description	Système de reconnaissance vocale permettant de contrôler l'environnement
Catégorie	Motricité
Etat d'avancement	En cours
Techniques
Durée de fabrication
Coût matériel
Niveau	Difficile
Licence	by-sa
Date de création	2019-12-19
Équipe
Porteur de projet	Christian B.
Contributeurs	Gigi35, Stevan
Fabmanager	Delphine
Référent documentation	Stevan
Nom humanlab	Humanlab_MHK
Documentation
Statut de la documentation	Partielle
Relecture de la documentation	Non vérifiée

Description du projet

Projet visant à proposer un système de reconnaissance vocale permettant de contrôler l'environnement :

• Émettre des codes infra-rouge vers des équipements existants (TV, radio, ...)
• Communiquer avec des modules d'entrées-sorties via, par exemple, du Bluetooth
• Piloter un téléphone pour recevoir ou émettre des appels

Cahier des charges

• Une contrainte initiale est de ne pas compter sur la disponibilité d'une liaison Internet pour ce projet : la reconnaissance vocale doit être réalisée de manière locale.

• Une seconde contrainte s'est imposée lors d'une première version : la reconnaissance doit être adaptée au locuteur. Ceci impose d'avoir un apprentissage (ou au moins un paramètrage) spécifique à l'utilisateur.

Analyse de l'existant

Projet K Line : Maison connectée et contrôlable via l'assistant Google ou Alexia (Amazon) et requiert une connexion internet.

Equipe (Porteur de projet et contributeurs)

• Porteur de projet
• Contributeurs
• Animateur (coordinateur du projet)
• Fabmanager référent
• Responsable de documentation

Matériel nécessaire

• Une carte STM32F429 intégrant un écran couleur tactile (240x320 pixels) et dont le processeur gère de nombreux timers, lignes séries
• Un microphone USB Adafruit 4346 car, il n'existe pas d'entrée audio sur la carte STM32
• Un récepteur et un émetteur (MX-05V / MX-FS-03V) pour pouvoir communiquer avec des appareils utilisant les ondes radios (porte de garage, volet, ...)
• Un cordon Qwiic afin de connecter le microphone à la carte

Outils nécessaires

• Ordinateur pour la configuration de la carte STM32
• Internet (configuration uniquement)
• Appareil à soudure

Coût

• Carte STM32F429 : 28€ (29/03/2023)
• Microphone Adafruit 4346 : 5€ (15/05/2023)
• Récepteur/Émetteur : 2€ (15/05/2023)
• Cordon microphone : 2€ (15/05/2023)

Total : 37€

Fichiers source

Github en constuction

https://github.com/myhumankit/au-taf

Etapes de fabrication pas à pas

En cours de construction

Allumage de la carte STM32

Dans un premier temps, on peut s'assurer que la carte STM32 fonctionne bien. Pour cela, il suffit de la brancher à un ordinateur à l'aide du câble qui est fourni avec. Le câble fourni est assez court mais un autre câble du même type (USB Mini B) peut être utilisé à la place. Lors du premier démarrage, l'écran devrait ressembler à ça :

Ecran de la carte STM32 lors du premier démarrage

Picovoice

Pour la reconnaissance vocale, le projet sur base sur la librairie Picovoice qui permet de reconnaître des mots définis au préalable. Pour cela on commence par la création d'un compte sur le Site Officiel. Une fois le compte créer, on récupère l'UID de la carte STM32, pour cela on peut la connecter à un ordinateur et grâce à OpenOCD, on effectue la commande suivante dans un terminal :

 openocd -f /usr/share/openocd/scripts/board/stm32f429disc1.cfg -c "init" -c "$target_name mdb 0x1FFF7A10 12" -c "exit" 

L'UID correspond à la suite d'octets suivant 0x1fff7a10. Une fois récupéré, on peut générer les mots nécessaire pour la navigation. On ne peut générer que 3 mots par mois, on choisit donc de prendre les 3 mots suivants :

• Confirmer
• Retour
• Suivant

Les mots peuvent être changés mais leur fonction doit rester la même. On récupère alors 3 fichier zip qui contiennent un fichier .h et .ppn. Les fichiers sont identiques, le .h est encodé en ASCI tandis que le .ppn est un fichier binaire. On peut alors choisir d'utiliser que les fichier .ppn.

La dernière étape à faire sur le site de Picovoice est de récupérer la clé d'accès (Access Key) trouvable sur l'accueil du compte au lien suivant