Développement d’une application Android sur le suivi oculaire

Présentation au sujet: "Développement d’une application Android sur le suivi oculaire"— Transcription de la présentation:

1 Développement d’une application Android sur le suivi oculaire
Charles Annic/ François Meunier

2 Sommaire Mise en situation Enjeux du projet Réalisation des tâches
Conclusion

3 Mise en situation Les réflexes oculaires
Le nystagmus Les réflexes pupillaires

4 Mise en situation Intérêt de développer un outil détectant ces troubles
Standardisation Qualité des résultats obtenus

5 Enjeux du projet Problématique Objectif Tâches Avancement

6 Réalisation des tâches
Création du projet et début avec OpenCV Interaction avec la tablette Réalisation du test de suivi d’objet (nystagmus horizontal) Réalisation du test de contraction de la pupille

7 Réalisation des tâches 1. Création du projet et début avec OpenCV

8 Réalisation des tâches 1. Création du projet et début avec OpenCV

9 Réalisation des tâches 1. Création du projet et début avec OpenCV

10 Réalisation des tâches 1. Création du projet et début avec OpenCV

11 Réalisation des tâches 1. Création du projet et début avec OpenCV

12 Réalisation des tâches 1. Création du projet et début avec OpenCV

13 Réalisation des tâches 2. Interaction avec la tablette
Affichage de la caméra frontale Utilisation des capteurs Variation de la luminosité

14 Réalisation des tâches 2. Interaction avec la tablette
Affichage de la caméra frontale

15 Réalisation des tâches 2. Interaction avec la tablette
Utilisation des capteurs (accéléromètre et bousolle)

16 Réalisation des tâches 2. Interaction avec la tablette
Utilisation des capteurs (accéléromètre et bousolle)

17 Réalisation des tâches 2. Interaction avec la tablette
Utilisation des capteurs (accéléromètre et bousolle)

18 Réalisation des tâches 2. Interaction avec la tablette
Utilisation des capteurs (accéléromètre et bousolle)

19 Réalisation des tâches 2. Interaction avec la tablette
Utilisation des capteurs (écran: changement d’illumination)

20 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Détection des yeux Etapes de vérification Déplacement de l’objet (Stimulus visuel) Sauvegarde des images Calcul de l’angle du regard Sauvegardes des angles obtenus Affichage des résultats

21 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Détection des yeux (caractéristiques pseudo-Haar, cascade de Haar)

22 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Détection des yeux (caractéristiques pseudo-Haar, cascade de Haar)

23 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Étapes de vérification

24 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Étapes de vérification

25 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Étapes de vérification

26 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Étapes de vérification (Étape 3 suite …)

27 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Déplacement de l’objet (stimulus visuel)

28 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Sauvegarde des images

29 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Sauvegarde des images

30 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Calcul de la (l’angle) direction du regard

31 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Calcul de la (l’angle) direction du regard (segmentation d’image par seuillage, détection de contour, approximation elliptique)

32 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Calcul de la (l’angle) direction du regard (segmentation d’image par seuillage, détection de contour, détection des bordures de l’oeil)

33 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Calcul de la (l’angle) direction du regard

34 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Calcul de la (l’angle) direction du regard (Résultats œil gauche)

35 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Sauvegarde des angles

36 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Sauvegarde des angles

37 Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN)
Affichage des résultats

38 Réalisation des tâches 4
Réalisation des tâches 4. Réalisation du test de contraction de la pupille Détection des yeux Etapes de vérification Calcul de la taille de la pupille Stockage des données Affichage des résultats

39 Réalisation des tâches 4
Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille (changement d’illumination)

40 Réalisation des tâches 4
Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille (changement d’illumination)

41 Réalisation des tâches 4
Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille realPupilSize

42 Réalisation des tâches 4
Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille

43 CONCLUSION (DIFFICULTÉS)
Manque de documentation Calcul de la distance de l’œil par rapport à la tablette Précision des résultats