RICM5 2017-2018 - SmartMove

Smart Move

Smartmove est un ambitieux projet imaginé par quatre étudiants de Polytech Grenoble. Smartmove est une approche nouvelle du sport avec l'IoT et l'apprentissage machine.

Équipe du projet

Membre	Rôles
Anthony Geourjon	Chef de projet
Timothée Lemaire	Responsable hardware (black belt thinkpad)
Clément Rouquier	Responsable Dofus
Vincent Turrin	Batteur

• Supervisé par : Bernard Tourancheau, Didier Donsez

Abstract

In 2017, two highly innovative domains emerge  : the Internet of Things and the Artificial Intelligence and especially the machine learning. These technological advances open new possibilities to imagine new ways to help people. In this project, we present our proposal for the Open IoT challenge 4.0 organized by the Eclipse Foundation. This project is also part of the course of Wireless Sensor Networks given by Prof. Bernard Tourancheau at Polytech Grenoble (Engineering school)

Mots clés

• IoT
• Machine learning,
• Sports

Présentation

Présentation du projet dans le cadre de l'Eclipse IoT challenge : Smartmove

SCRUM

Sprint 1 - Du 29/01/18 au 04/02/18

• Définition des rôles
• Mise en place du projet pour tous les membres du groupe(Trello, Github)
• Création de la page AIR pour la tenue de journal
• Prise de contact avec les enseignants concernés
• Début de la phase de conception

• Séance de management de projets innovants
  • Rédaction d'une fiche synthetique de présentation du projet

Sprint 3 - Du 12/02/18 au 18/02/18

• Soutenance le mercredi 14/02 de 10h30-11h

Sprint 4 - Du 19/02/18 au 25/02/18

Vacances

Sprint 7 - Du 12/03/18 au 18/03/18

• Soutenance le jeudi 15/03 de 9h-10h

Journal

Sprint1

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 1
Lundi 29/01/18	Tâches	Récupération du matériel au fablab (Arduino 101) Tentative d'un flash d'un exemple sur la carte
	Remarques	Impossible de faire marcher quelque chose sur la carte pourtant elle est détecté
Mardi 30/01/18	Tâches	Tentative d'un flash d'un exemple sur la carte
	Remarques	Le bootloader de la carte est broken et ne fonctionne depuis Linux, Avec Windows Timothée y arrive facilement
Mercredi 31/01/18	Tâches	Cours de management de projets innovants - 4h	Cours de management de projets innovants - 4h	Cours de management de projets innovants - 4h	Cours de management de projets innovants - 4h Etude problématique projet Formation tensorflow : tuto simple, structure du code et concepts de base
	Remarques
Vendredi 02/02/18	Tâches		Tentative de flash sur l’Arduino récupéré par Anthony au fablab, finalement réussi sur Windows. Essai de l'exemple "HearthRate Monitor" avec connexion Bluetooth.		Continuation de la formation TF Visionnage vidéos, notamment conférence sur deep learning adapté à Tensorflow
	Remarques		Travail avec Clément pour faire fonctionner l'exemple en BLE sur son début d'appli. finalement fonctionnel en demandant l'utilisation du GPS sur android (Comme le requière la spécification BLE)

Sprint 2

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 2
Lundi 05/02/18	Tâches	Travail sur le AIR Export des taches backlog sur Trello	Début du code Arduino en partant de l'exemple "HeartRate Monitor"
	Remarques		Pas mal de difficultés lors du test, en raison de difficultés de debugging sur l'Arduino.		Étude des problématiques propres à notre projet : Stream de data, Dynamic Time
Mardi 06/02/18	Tâches	Étude avec Vincent d'une application utilisant de la détection de mouvement Tensor Flow sur Android. https://blog.lemberg.co.uk/motion-gesture-detection-using-tensorflow-android	Avancement du code Arduino.		Etude d’un code de reconnaissance de mouvement tensorflow Android, + test, comprendre pour pouvoir modifier en conséquence
	Remarques		Résolution des problèmes rencontrés la veille (Mauvais initialisation du module gérant les capteurs), puis travail sur l'envoie des données par blutooth.
Mercredi 07/02/18	Tâches	Cours de management de projets innovants - 4h	Cours de management de projets innovants - 4h Finalisation du code arduino pour le moment.	Cours de management de projets innovants - 4h	Cours de management de projets innovants - 4h Étude approfondie des modèles : il faut sûrement utiliser un LSTM
	Remarques		Recherches sur les UUID (pour l'arduino). Envoie des valeurs depuis l'arduino sous forme binaire (nécessite de séparer les octets des ints) Mise sur Git du code arduino.
Jeudi 08/02/18	Tâches	Réunion 1 Diverses expérimentations avec le MotionGesture. Installation de Gesture Manager sur mon téléphone et record de quelques mouvemnts sur un seul capteur (ceux du téléphone).	Réunion 1	Réunion 1	Réunion 1
	Remarques
Vendredi 09/02/18	Tâches	Etude de l'appli MotionGestureDemo https://github.com/ryanchyshyn/motion_gestures_detection/tree/master/MotionGesturesDemo L’intérêt de cette appli est qu'elle exécute un modèle Tensorflow. Le code nécessaire a cela est externalisé dans une librairie que nous pourrions éventuellement réutiliser	Hackathlon		Abandon du code trouvé précédemment car le modèle ne nous correspond pas. Reprise d’un code utilisant un modèle LSTM en Tensorflow, qui reconnait l’activité d’une personne (assis, debout, en train de marcher, montant des marches…)
	Remarques

Sprint 3

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 3
Lundi 12/02/18	Tâches	Recherche de modèle avec Vincent. Expérimentation avec un modèle LSTM : https://medium.com/@curiousily/human-activity-recognition-using-lstms-on-android-tensorflow-for-hackers-part-vi-492da5adef64 Prise en main de ce code			Déchiffrage de codes utilisant un modèle LSTM : cela semble être un bon modèle pour notre cas, à voir les résultats pour des moves assez court.
	Remarques
Mardi 13/02/18	Tâches	Fork du modèle LSTM : https://github.com/SmartMove-PolytechGrenoble/TensorFlow-on-Android-for-Human-Activity-Recognition-with-LSTMs			Modifications du code pour correspondre à notre formattage de donner + modification du prétraitement des données
	Remarques
Mercredi 14/02/18	Tâches	Conception de la gestion des entraînements. Entraînements au sens "suite d'activités" que l'utilisateur peut faire et vouloir détecter			Résolution problèmes inconnus Tensorflow
	Remarques
Jeudi 15/02/18	Tâches				Test d'entraîner le modèle avec des jeux de données : impossible à faire tourner hardware trop faible.
	Remarques
Vendredi 16/02/18	Tâches				Faire tourner Tensorflow sur GPU : fonctionne mieux.
	Remarques

Sprint 4

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 4
/!\Vacances/!\
Semaine du 19 au 25 février	Tâches	[...]	[...]	[...]	Quelques tests sur SensorTag
	Remarques

Sprint 5

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 5
Lundi 26/02/18	Tâches				Début modification du code Android d'évalutation : comptabilisation, du nombre de mouvement, chronométrage.
	Remarques
Mardi 27/02/18	Tâches				Début modification code enregistrement data. Objectif : labéliser, choisir librement les limites.
	Remarques
Mercredi 28/02/18	Tâches				Ajout du support du gyroscope
	Remarques
Jeudi 01/03/18	Tâches				Entraînement avec nos propres données : il faut beaucoup de données, avec peu de données la précision est vraiment mauvaise.
	Remarques
Vendredi 02/03/18	Tâches				Récolte de plus de données.
	Remarques	Réunion 2	Réunion 2	Réunion 2	Réunion 2

Sprint 6

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 6
Lundi 05/03/18	Tâches
	Remarques
Mardi 06/03/18	Tâches
	Remarques
Mercredi 07/03/18	Tâches
	Remarques
Jeudi 08/03/18	Tâches
	Remarques
Vendredi 09/03/18	Tâches
	Remarques

Sprint 7

	Date	GEOURJON Anthony	LEMAIRE Timothée	ROUQUIER Clément	TURRIN Vincent
SPRINT 7
Lundi 12/03/18	Tâches
	Remarques
Mardi 13/03/18	Tâches
	Remarques
Mercredi 14/03/18	Tâches
	Remarques
Jeudi 15/03/18	Tâches
	Remarques