Entrée gestuelle et reconnaissance de gestes. Quelques exemples de systèmes à entrée gestuelle, et densembles de gestes …

Présentation au sujet: "Entrée gestuelle et reconnaissance de gestes. Quelques exemples de systèmes à entrée gestuelle, et densembles de gestes …"— Transcription de la présentation:

1 Entrée gestuelle et reconnaissance de gestes

2 Quelques exemples de systèmes à entrée gestuelle, et densembles de gestes …

3 a) rectangle b) ellipse c) ligne d) groupe e) copie f) rotation g) supprimer (x)

4

5 Le Graffiti

6 EdgeWrite ( http://depts.washington.edu/ewrite/ ) Une façon méchanique de simplifier la reconnaissance de gestes, avec des contraintes physiques

7 Tivoli

8

9

10 Menu radial hiéarchique

11 Combinaison de sélection rectangle et lasso Question: comment lordinateur peut-il distinguer entre le geste à gauche et celui à droite?

12 Reconnaissance de gestes

13 Comment distinguer les gestes dans un Marking Menu hiéarchique?

14 Comment trouver un coin dans un geste? Lorsque le geste est bruité ? (voir notes écrites)

15

16 Comment permettre à un utilisateur (ou un concepteur) de définir des nouveaux gestes sans écrire du code ? Spécifier les nouveaux gestes avec des exemplaires ! –Nécessite de faire du pattern matching entre les exemplaires de gestes pré-fournis, et chaque geste entré pendant linteraction

17

18

19 La reconnaissance de gestes avec lalgorithme de Rubine (1991) Chaque geste entré (ou exemple de geste) est réduit à un vecteur de caractéristiques (feature vector); il sagit alors de classer un vecteur entré dans un espace de gestes possibles Taux de reconnaissance > 95% (voir notes écrites)

20 Rubine (1991) http://doi.acm.org/10.1145/122718.122753

21 Pourquoi utiliser des hyperplans et pas juste la moyenne?

22

23 Le reconnaissance de gestes avec lalgorithme à $1 (Wobbrock et al., 2007) Utilise seulement des opérations mathématiques de base Simple à implémenter en peu de code, sans libraries Rapide Bon pour prototyper des interfaces gestuelles, même dans des plateformes moins performants (comme Flash ou JavaScript) Taux de reconnaissance supérieur à Rubine Une des étapes clés: rééchantillonage du geste (voir notes écrites)

24

25

26

27 Wobbrock et al. (2007) http://doi.acm.org/10.1145/1294211.1294238

28