Un objet connecté qui contrôle la télé (et autres appareils) par des commandes par voix.

• MESSIHA, Bichoy, bichoy.messiha@gmail.com, IAM
• ELTAHER, Randa, r.nasreldin11@gmail.com ,IAM

L'objet a la forme d'un support des verres.

Notre objet connecté doit avoir des fonctionnalités que l’utilisateur a besoin, autre que ses fonctionnalités techniques qu’on souhaite développer. Ca justifie notre choix des support des verres.

Bob est l’utilisateur du système. Il est chez lui dans sa salle de séjour ou il y en a plusieurs dispositifs et machines, parmi lesquels, il ya le TV. Au lieu de chercher la télécommande à chaque fois qu’il regarde la TV, il préfère de le commander par des paroles. De même, ça sert à faciliter le contrôle du TV.

Bob utilise notre objet qui est un support des verres qui fait une sorte de liaison entre l'utilisateur et un appareil (i.e. un TV). Il envoie des commandes à l'objet par des paroles. Ensuite l'objet transforme ces commandes en des signaux infrarouges au TV, pour le contrôler. Par exemple, si Bob dit “chaîne suivante”, l’objet applique cette commande au TV.

L’objet a une place pour différents taille de verre/vase. Alors Bob peut l’utiliser comme un support des verres.

L’idée des maisons intelligents est notre motivation dans ce projet. Le faite de connecter tous les dispositifs de la maison et les contrôler à distance facilite la vie. Nous avons choisit ce POC (proof of concept) pour faire une démonstration de la faisabilité de l’idée et comment elle sera utile.

Considérons ce système comme un point de départ vers un espace connecté, on pense toujours à ajouter des fonctionnalités permettant à faciliter la vie des utilisateurs.

Raspberry Pi 2 Model B,GrovePi+,Carte SD 8Go, Carte son USB

• Utilisateur : il parle à l’objet connecté (le support des verres connecté), en lui donnant des commandes , pour qu’il assure certaines fonctionnalités.
• L’objet : C’est le coeur du système. Le support des verres, contenant le Raspberry Pi, est responsable à la comprehension des commandes dites par l’utilisateur, à l’aide de Google STT services. Il transforme ces commandes sous forme des rayons infrarouges et le transmet au TV. De plus, l’utilisateur peut commander en utilisant les boutons.
• Google STT services (Speech to Text) : API responsable de la transformation des paroles de l’utilisateur sous forme des textes et vis versa.
• TV : C’est le récepteur final, sur lequel les commandes de l’utilisateur vont être appliquées .

Les données:

• Les commandes vocales de l'utilisateur.
• Les commandes par les boutons.

Service rendus par l'objet:

• L’objet applique les commandes vocales de l’utilisateur pour gérer l'émetteur infrarouge et contrôler le TV.

Service utilisé par l'objet:

• Google STT – Speech to Text.

Il s'agit d'un support, ayant la forme d’une boite, pour uniquement 2 verres ou le Raspberry Pi est situé au milieu des deux places consacrées pour les verres.

• Les matériels sont généralement placés au milieu des 2 supports des verres.
• L'émetteur IR est placé à la façade de l’objet.
• Le microphone et la carte son USB sont branchés au raspberry de l’autre côté (la face de l’utilisateur).
• Une ouverture sur la façade de la boite est responsables au passage des rayons infrarouge émis vers le TV.
• Les quatre boutons, dont les rôles sont de commander directement le TV et ainsi commencer la recognition du son, sont mis dans des autres ouvertures qu’on a déjà crées.
• Le support de verres est organisé sous des formes différentes pour être capable de contenir de tailles différentes des verres.De plus, il a les cotes ouverts pour s’adapter a tous les formes des verres.

Notre projet est complet et fonctionnel pour la commande du TV par des commandes vocales depuis l’utilisateur, et aussi par des boutons. Ce qui reste à faire est de contrôler autre appareil UPNP, (exemple: Network Light) par le même type des commandes. L'intérêt de ça est que nous voulons créer un objet qui sera la moyenne de communication avec les autres périphériques de la maison. Alors c’est important que notre objet contrôle, avec la commande vocale, la lumière, la music, la machine à laver…etc.

Comment appliquer ça:

• Ajouter la possibilité de changer la télécommande (IR remote) dynamiquement avec une action en donnant en paramètre la télécommande exigée (exemple: TV Samsung). Cet action peut être exécuté avec la commande vocal du l’utilisateur.
• Modifier l’architecture en encapsulant en plus les services: Faire une service pour la reconnaissance vocale + une autre service pour l’analyse de la phrase reconnue, au lieu de les faire dans une seule service. Ce qui va nous donner une flexibilité pour utiliser seulement la reconnaissance vocale et aussi pour ajouter plus de fonctionnalité au niveau d’analyse (exemple: analyser la phrase pour savoir si l’utilisateur veut changer la télécommande).
• La service d’analyse qui sera implémentée dans la raspberry pi, va changer l'événement de la commande qui correspond au périphérique UPNP mentionné dans la phrase de l'utilisateur. Exemple: L’utilisateur dit “ Turn on the light”. Le périphérique choisit sera les lampes connectées, et la commande sera “turn on”..
• Pour contrôler un autre appareil (qui exige par exemple HTTP request), profitant de notre architecture modifié, il va falloir ajouter un bean qui utilise comme événement depuis la raspberry pi la commande vocale analysée, et exécute une action pour contrôler l’appareil (exemple: si on veut communiquer avec un smart TV avec votre objet).

• Embarqué (UPnP): https://github.com/bichoymessiha/PyUPnP-VoiceControl
• Wcomp Source : wcomp.zip

On a configuré la rasp de sorte qu'elle connecte automatiquement au réseau privé (mobile hotspot). Il faut d'abord choisir le réseau sur lequel vous allez connecter et suivre les étapes du lien suivant pour la rendre la connection par default: http://weworkweplay.com/play/automatically-connect-a-raspberry-pi-to-a-wifi-network/

Installer PuTTY pour la connection ssh Utilisateur: pi Mot de passe: root

• Brancher l'émetteur IR dans le port RPISER (serial du raspberry pi)
• Brancher la carte son usb avec le micro.
• Brancher les boutons sur les port D2,D3,D4,D7
  • D2 : Commencer la reconnaissance vocale
  • D3 : Bouton Power
  • D4 : Bouton Mute
  • D5 : Bouton Volume up

1- Démarrage UPNP depuis la carte originale:

• Lancer “main.py” (sudo python main.py) depuis l'espace ~/PyUPnP-master/examples/mediaserver/

2- Installation from scratch et configurations logiciels et matériels: Tout d'abord, il faut installer la version raspbian jessie lite version 4.4.21-v7 sur la raspberry Il faut ensuite installer les composantes suivantes:

• Sudo apt-get install Python 2.7 Python-pip
• sudo pip install soappy
• sudo pip install twisted
• Telecharger et installer GrovePi via le lien suivant https://www.dexterindustries.com/GrovePi/get-started-with-the-grovepi/setting-software/ puis executer la commande d’installation.
• Téléchargez le repository 1 : suivant: https://github.com/fuzeman/PyUPnP, il contient les fichiers sources python UPNP de base. Ça sera le dossier principale de notre projet.
• Téléchargez le repository 2 : suivant: https://github.com/bichoymessiha/PyUPnP-VoiceControl, il contient notre fichiers sources pour ce projet. Puis copiez les fichiers du dossier “service” dans le dossier “pupnp/services”. Puis copiez le contenu du dossier “examples” dans le dossier “examples/mediaserver”
• Executez la commande “python setup.py install” depuis l'espace “PyUPnP/” créer par le repository 1.
• Enfin Lancer “main.py” (sudo python main.py) depuis l'espace ~/PyUPnP-master/examples/mediaserver/

• Il faut ajouter le fichier binaire Raspberry_Pi_Voice_Commander.UPnP2Bean.dll sous la directoire Beans sous la directoire d'installation de SharpDevelop. Ce fichier contient le UPnP device.
• Sous SharpDevelop : Fichier → Nouveau → Fichier… → Sélectionner la catégorie WComp.Net et choisissez C#Container → Créer.

• Importer directement les containers : WComp.NET → Import … et sélectionner le fichier .wcc précédemment téléchargé.

Copie d'écran de la composition

Copie d'écran de Device Spy

Photo de l'objet démonté