Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM) Laboratoire dInformatique de Grenoble (LIG)

1 Introduction : systèmes mixtes fusion des mondes physique et numérique beaucoup dapplications

2 Introduction : Modèle dInteraction Pouvoir descriptif Pouvoir génératif Pouvoir comparatif/taxinomique –Ensemble de caractéristiques

3 Introduction : systèmes mixtes

4 Plan Introduction Objet mixte –Définition –Caractérisation intrinsèque Interagir avec un objet mixte –Définition –Caractérisation extrinsèque Conclusion

5 Objet mixte : définition objet physique propriétés physiques objet numérique propriétés numériques objet mixte propriétés physiques propriétés numériques ? Modalités dInteraction m = (d, l) parole = (microphone, langage pseudo-naturel)

6 Objet mixte : définition Modalités de liaison propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée

7 Objet mixte : exemple caméra vision par ordinateur [x, y] projecteurcarré jaune table aimantée activation

8 Plan Introduction Objet mixte –Définition –Caractérisation intrinsèque Interagir avec un objet mixte –Définition –Caractérisation extrinsèque Conclusion

9 Caractérisation intrinsèque propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée

10 Objet mixte : propriétés physiques non captées générées captées non générées captées générées non captées non générées

11 Objet mixte : propriétés physiques position

12 Objet mixte : propriétés physiques couleur

13 Caractérisation intrinsèque propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée

14 Objet mixte : propriétés numériques acquises perceptibles non acquises non perceptibles acquises non perceptibles non acquises perceptibles

15 Objet mixte : propriétés numériques [x, y]

16 Objet mixte : Autres caractérisations Capitalisation de caractéristiques existantes propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée

17 Plan Introduction Objet mixte –Définition –Caractérisation intrinsèque Interagir avec un objet mixte –Définition –Caractérisation extrinsèque Conclusion

18 Interagir avec un objet mixte : définition outil objet de la tâche action réaction tâche élémentaire réponse retour dinformation

19 Interagir avec un objet mixte : définition outil mixte objet mixte de la tâche langage dinteraction en entrée langage dinteraction en sortie dispositif dinteraction

20 Interagir avec un objet mixte : exemple langage dinteraction en entrée [x, y] caméravision proj. [x-dome, y-dome] déplacer le dôme en [x,y] transf.

21 Plan Introduction Objet mixte –Définition –Caractérisation intrinsèque Interagir avec un objet mixte –Définition –Caractérisation extrinsèque Conclusion

22 Caractérisation extrinsèque Rôles Métaphores –Nom –Verbe –Affinement du nom Ports dentrée

23 Interagir avec un objet mixte : Rôles

24 Caractérisation extrinsèque Rôle Métaphores –Nom –Verbe –Affinement du nom Ports dentrée

25 Interagir avec un objet mixte : Métaphores Métaphore de nom –Un dans le système est comme un dans le monde réel

26 Interagir avec un objet mixte : Métaphore de nom langage dinteraction en entrée [x, y] caméravision proj. déplacer le dôme en [x,y] transf. [x-dome, y-dome]

27 Interagir avec un objet mixte : Métaphore de nom déplacer la base dARN en [x,y] langage dinteraction en entrée [x, y] caméravision proj. transf. [x-base, y-base]

28 Caractérisation extrinsèque Rôle Métaphores –Nom –Verbe –Affinement du nom Ports dentrée

29 Interagir avec un objet mixte : Métaphores Métaphore de verbe – -er dans le système est comme -er dans le monde réel.

30 Interagir avec un objet mixte : Métaphore de verbe gommer langage dinteraction en entrée Mouvements reconnus caméravision proj. transf.

31 Interagir avec un objet mixte : Métaphore de verbe gommer langage dinteraction en entrée [x,y] caméravision proj. transf. forme s

32 Caractérisation extrinsèque Rôle Métaphores –Nom –Verbe –Affinement du nom Ports dentrée

33 Interagir avec un objet mixte : Métaphores de nom gommer langage dinteraction en entrée Mouvements reconnus caméravision proj. transf. forme s

34 Interagir avec un objet mixte : Métaphores de nom langage dinteraction en entrée [x, y] caméravision proj. déplacer le dome en [x,y] transf. [x-dome, y-dome]

35 Caractérisation extrinsèque Rôle Métaphores –Nom –Verbe –Affinement du nom Ports dentrée

36 Interagir avec un objet mixte : Ports dentrée physiques propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée

37 Interagir avec un objet mixte : Ports dentrée physiques caméra vision par ordinateur [x, y] projecteurcarré jaune table aimantée position activation

38 Interagir avec un objet mixte : Ports dentrée physiques caméra vision par ordinateur [x, y] table aimantée position activation

39 propriétés physiques propriétés numériques dispositif dentrée dispositif de sortie langage de sortie langage dentrée Interagir avec un objet mixte : Ports dentrée numériques langage dinteraction

40 Interagir avec un objet mixte : Ports dentrée numériques caméra vision par ordinateur [x, y] projecteurcarré jaune table aimantée activation

41 Interagir avec un objet mixte : Ports dentrée numériques [x, y] caméra vision

42 Plan Introduction Objet mixte –Définition –Caractérisation intrinsèque Interagir avec un objet mixte –Définition –Caractérisation extrinsèque Conclusion et Perspectives

43 Conclusion Caractérisation intrinsèque –Propriétés physiques/numériques Caractérisation extrinsèque –Roles –Métaphores de nom/verbe –Ports dentrées physiques/numériques

44 Conclusion Taxonomie –Repose sur le modèle dinteraction mixte –Capitalise des taxonomies existantes –Sépare les caractéristiques intrinsèques des caractéristiques extrinsèques

45 Perspectives Conception Outil de prototypage

Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM) Laboratoire dInformatique de Grenoble (LIG) Questions?