Suivi d’individus et interprétation vidéo Projet ORION INRIA Sophia Antipolis, France http://www-sop.inria.fr/orion Contact: Monique THONNAT monique.thonnat@inria.sophia.fr 05/06/2003 ESSI - Journée Déficients Visuels

Suivi et Interprétation vidéo Axe de recherches Orion: Interprétation automatique d’une scène à partir de séquences d’images.  suivi de personnes Domaines d’application: Surveillance de métro, parking Espace médiatisé: bureau, salle à café Surveillance d’agences bancaires 05/06/2003 Journee Deficients Visuels

Interprétation vidéo Méthode: Techniques de Vision cognitive: Vision par ordinateur: analyse du mouvement (détection, suivi d ’objets mobiles) description 3D des objets mobiles Représentation explicite de connaissances a priori: modèles de comportements modèles 3D de scènes vides modèles d ’objets mobiles à reconnaître Raisonnements probabiliste, spatio-temporel, temps-réel : interprétation des données 3D (classification des objets, reconnaissance d événements et de comportements) 05/06/2003 Journee Deficients Visuels

Modèle 3D de la scène vide Métro de Barcelone Station Sagrada Famiglia mezzanine (caméras C10, C11 et C12) 05/06/2003 Journee Deficients Visuels

Détection de personnes Détection d’objets mobiles avec une caméra fixe calibrée Différence entre 1 image courante et 1 image virtuelle (calculée) de la scène vide Classification en 8 classes (Personne,Groupe,Métro...) basée sur des descripteurs 2D et 3D (position, largeur, hauteur) Exemple de 4 classes: Personne, Groupe, Bruit, Inconnu 05/06/2003 Journee Deficients Visuels

Suivi de personnes - 1 Limitations : Perte de l’identité des individus suivis en cas de mauvaise détection, occultation ou croisements 05/06/2003 Journee Deficients Visuels

Suivi de deux personnes en train de se croiser Suivi de personnes - 2 Suivi de deux personnes en train de se croiser 05/06/2003 Journee Deficients Visuels

Suivi de personnes - 3 Suivi multi-cameras 05/06/2003 Journee Deficients Visuels

Conclusion Résultats : Application déficients visuels : une plate-forme temps-réel (de 5 a 25 frames/s) permettant de suivre des personnes sur des flux vidéos Application déficients visuels : Suivi multi cameras de personnes déficientes visuelles à travers un réseau de cameras connectées à un réseau BleuTooth (navigation à l'intérieur d’un espace inconnu) Environnement intelligent au service de la personne déficiente visuelle (ouvrir la porte d’un ascenseur, ...) Protection de la personne déficiente visuelle (avertissement risque de collision, …) 05/06/2003 Journee Deficients Visuels