Projets:Aptradio

From wikilab
Jump to: navigation, search

Description du projet

Adapter un poste radio pour une personne malvoyante et à mobilité réduite (fauteuil roulant et très peu de mobilité dans les mains). Le but est de pouvoir contrôler le poste de radio idéalement avec une commande vocale.

Cahier des charges

  • Allumer et éteindre le poste
  • Ajuster le volume
  • Changer les stations radio
  • Passer en mode radio fm ou en mode lecteur MP3

Analyse de l'existant

Equipe

  • Delphine
  • Danke
  • Hugues
  • Michael
  • Killian

Matériel nécessaire

Outils nécessaires

La référence du téléphone est "Samsung Galaxy Ace(s5830i)".

Coût

Première piste

  • Possibilité d'avoir une application radio sans connexion internet sur un téléphone Android.
  • Test de lancement de l'application radio par commande vocale intégrée(Google): échec

Prochaine étape :tester sur un autre téléphone la commande vocale avec cette application ou d'autres et voir si cela fonctionne. Sinon tester avec Appinventor

La progression du projet

On a travaillé sur la reconnaissance vocale avec Appinventor2. Ce premier test permet de reconnaitre le mot prononcé par l'utilisateur et écrit le mot dans un texte. Si le mot prononcé est radio, cela déclenche l'ouverture d'une page Youtube sur l'url choisi dans le code (activityStarter Uri.)

Voici le code:


Aptradio.jpg

  • On a continué à utiliser l'activityStarter pour déclencher l'application radio FM sans utiliser l'internet.
  • On a utilisé l'ADB pour réperer le Name Package(ActivityPackage);l'ActivityClass et l'Action.


ADbb.png


La personne concernée par le projet a pu avoir accès à internet ce qui nous a permis de changer le projet pour faire une application radio utilisant internet toujours par la reconnaissance vocale.


StreamRun.png


StreamRdeux.jpg


StreamRtrois.jpg


StreamRquatre.jpg


StreamRcinq.jpg


StreamRsix.jpg


StreamRseptu.jpg


StreamRhuit.jpg

L'ai File:Apt copy.zip


Le dossier APK

File:Apt copy (2).zip

les deux dossiers permettent de naviguer dans le projet à l'aide d'app inventor 2.

A Faire

A demander à la personne concernée

  • Vidéo sur la mobilité des doigts avec le téléphone en main
  • Vidéo sur la mobilité des mains sur les fauteuils (pour voir les limites du mouvement)
  • Photos des fauteuils
  • Demander le budget possible (téléphone+micro bluetooth)
  • Vérifier que le mot que la personne prononce est bien reconnu sinon la faire parler et regarder comment il est écrit dans l'appli, changer ensuite le code
  • Tester le casque micro sur la personne et noter le résultat des tests de distance quand le téléphone est posé à 1 m, 2m, 3m, 5m, 10m...

Documentation à faire

  • ADB et fonctionnement(lien vers programme)+description de l'utilisation totale
  • Présentation finale à prévoir
  • Installation D'Android Debug Bridge(ADB)

Documentation ADB

Windows
Linux

Pour l'utilisateur sous Linux les choses sont nettement plus faciles ici. Sous Linux, il vous suffit de télécharger les pilotes depuis les dépôts, ils devraient normalement y être. Si vous utilisez Debian ou un de ses forks vous trouverez ce dont vous avez besoin avec 'apt-get install android-tools', ou encore 'apt-get install android-platform-tools' qui est plus complet et nécessaire pour l'installation de SDK.

(Source:http://

Mac

Avec un ordinateur sous Mac OS, il vous suffit d'installer Homebrew puis d'entrer 'brew install android-platform-tools'.

  • Cette opération peut être nécessaire pour permettre la communication entre votre smartphone et votre ordinateur. Rendez-vous dans les paramètres de votre smartphone, vous trouverez "A propos du téléphone" tout en bas. Appuyez 7 fois sur la case "Numéro de build". Une fois ceci fait, vous recevrez une confirmation vous indiquant que les options pour développeurs sont désormais activées. Vous les trouverez dans le menu des paramètres, vous n'aurez plus qu'à activer le débogage USB.
  • Faire les activités sur l'application que vous souhaitez comprendre par ses Log ;par example:
  • Application radio
  • Augmenter le volume
  • Diminuer le volume
  • Changer les stations radio
  • Allumer et éteindre le radio FM.
  • Une fois ADB installé sur l'ordinateur aller sur le terminal (CMD) taper la ligne de commande "adb logcat -d > logcat.txt"
  • Vous aurez un message suivant "Waiting devices connected." et un message sur le téléphone pour accepter la communication entre le PC et le téléphone.
  • Il y a des multitudes de log qui apparaissent sur le fichier.
  • Ouvrir le fichier et faire Control+F et taper le mot clé pour trouver l'information souhaitée.

A faire

  • Casque/micro bluetooth avec appinventor
  • Combiner OkGoogle ou jasper avec appinventor2
  • Tester l'activation OkGoogle avec l'écran deverouillé automatiquement
  • Initialiser la reconnaissance vocale au démarrage de l'application Aptradio
  • Tester OkGoogle pour savoir s'il peut contrôler les paramètres de l'application Apt Radio (ex: augmenter le volume, changer de station)
  • Créer un support pour permettre à l'utilisateur d'appuyer sur le bouton.