2m un espace de conception pour l interaction bi manuelle
This presentation is the property of its rightful owner.
Sponsored Links
1 / 42

2M : un Espace de Conception pour l’Interaction Bi-Manuelle PowerPoint PPT Presentation


  • 65 Views
  • Uploaded on
  • Presentation posted in: General

2M : un Espace de Conception pour l’Interaction Bi-Manuelle. Gilles BAILLY, Laurence NIGAY, David AUBER. Introduction. L’informatique ubiquitaire Fusion des mondes physique et numérique Définition d’un espace mixte L’interaction bi-manuelle au sein d’un environnement mixte. Introduction.

Download Presentation

2M : un Espace de Conception pour l’Interaction Bi-Manuelle

An Image/Link below is provided (as is) to download presentation

Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author.While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server.


- - - - - - - - - - - - - - - - - - - - - - - - - - E N D - - - - - - - - - - - - - - - - - - - - - - - - - -

Presentation Transcript


2m un espace de conception pour l interaction bi manuelle

2M : un Espace de Conception pour l’Interaction Bi-Manuelle

Gilles BAILLY, Laurence NIGAY, David AUBER


Introduction

Introduction

  • L’informatique ubiquitaire

    • Fusion des mondes physique et numérique

    • Définition d’un espace mixte

  • L’interaction bi-manuelle au sein d’un environnement mixte


Introduction1

Introduction

  • Domaine d’application : Biologie

    • Environnement informationnel mixte pour les biologistes

    • Manipulation bi-manuelle de grands graphes avec des jetons

      • Graphe : Acide ribonucléique


Interaction bi manuelle au sein d un environnement mixte pourquoi

Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?

  • Naturelle

  • Performante

    • Parallélisme

    • Augmentation du Langage d’Interaction (pouvoir d’expression)


Interaction bi manuelle au sein d un environnement mixte pourquoi1

Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?

  • Naturelle

  • Performante

    • Parallélisme

    • Augmentation du Langage d’Interaction (pouvoir d’expression)

Manipulation d’un rectangle : rotation/ translation/ homothétie


Interaction bi manuelle attention

Interaction bi-manuelle : attention !

  • Pas toujours pertinente selon la tâche

  • Exemple

    • Kabbash P., Buxton W., Sellen A., "Two-Handed Input in a Compound Task", Proceedings of CHI’94, 417-423.


2m un espace de conception pour l interaction bi manuelle

Plan

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Objectifs

Objectifs

  • Apporter les avantages du monde physique dans le monde numérique

  • Etude de l’interaction bi-manuelle au sein d’une environnement mixte

  • Espace de conception 2M


Constat pourquoi un espace de conception

Constat : pourquoi un espace de conception

  • Aujourd’hui : systèmes conçus et développés de façon ad hoc (faible capitalisation des expériences)

  • Absence d’éléments de conception de développement d’évaluation


Objectifs espace de conception

Objectifs : espace de conception

  • Organisation des éléments de conception dans un canevas cohérent

  • Pouvoir taxinomique des systèmes interactifs bi-manuels existants

  • Pouvoir génératif de nouvelles techniques

  • Pouvoir comparatif : guide à la conception


2m un espace de conception pour l interaction bi manuelle

Plan

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Diff rentes approches

Différentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [Guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

    • Multimodalité


Psychologie mod le de la cha ne cin matique

Psychologie : Modèle de la chaîne cinématique

  • Coopération à deux mains

  • La main non dominante fixe le contexte

  • La main non dominante précède

  • Macro versus Micro

  • La main dominante est la main préférée


Diff rentes approches1

Différentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

      • Langage de l’action

      • Relation temporelle

    • Multimodalité


Langage de l action

Langage de l’action

  • Actions discrètes : les actions discrètes sont des actions qui impliquent le déclenchement discret des événements (saisir au clavier, utiliser les touches spéciales, appuyer sur un bouton d’une souris)

  • Actions continues : les actions continues sont des actions qui impliquent le contrôle continu de un ou plusieurs degrés de liberté (déplacer un élément graphique avec la souris)

  • Actions composées : les actions composées sont des actions qui entrelacent des actions continues et des actions discrètes (déplacer le curseur sur un objet graphique puis le sélectionner avec la souris)


Langage de l action1

Langage de l’action


Relation temporelle

Relation temporelle

2

1

4

3


Diff rentes approches2

Différentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [Guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

    • Multimodalité

      • Définitions [Nigay 94]

      • Typologie [Nigay 93]

      • Extension [Vernier 01]


Multimodalit d finitions nigay 94

Canal gestuel

Main dominante

ou

Main non dominante

Multimodalité : Définitions [Nigay 94]

Dispositif

Langage

Tâche

Modalité

Niveau d’abstraction


Multimodalit typologie nigay 93

Multimodalité : Typologie [Nigay 93]

Dépendance

Combiné

  • Lexicale

  • Syntaxique

  • Sémantique

Indépendant

séquentiel

parallèle

Temps


Multimodalit typologie vernier 01

Multimodalité : Typologie [Vernier 01]

  • Extension par affinement de l’axe temporel

Dépendance

Temps


2m un espace de conception pour l interaction bi manuelle

Plan

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Combiner trois approches

Notre espace de conception

Combiner trois approches

Mutimodalité

Relation temporelle

Langage d’action


Notre espace de conception 2m

Notre espace de conception : 2M

Nature de l’action

Trois axes

  • Temps :

    usage séquentiel / parallèle

  • Nature de l’action :

    (MND,MD)

  • Fusion :

    lexicale, syntaxique, sémantique

Temps

Fusion


2m axe temps

2M : Axe Temps

Considérés par Buxton

Regroupés sous le terme parallélisme


2m axe temps1

2M : Axe Temps

Coïncidente

Concomitante

Parallèle


2m axe temps2

2M : Axe Temps

Séquentiel

Coïncident

Anachronique

parallèle

Concomitant

Temps


2m axe nature de l action

Dis : discrèteCont : continueComp : composée

2M : Axe Nature de l’action

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Coïncident

Séquentiel

parallèle

Anachronique

Concomitant

Temps

Fusion


2m axe fusion

2M : Axe Fusion

Fusion Lexicale

Fusion Syntaxique

Fusion

Sémantique

Fusion de bas niveau

Shift -click

Fusion des paramètres

«mets ça la»

Fusion des tâches

Char

Modalité

Niveau d’abstraction


Notre espace de conception 2m1

Notre espace de conception : 2M

Nature de l’action

(Comp,Comp)

(Cont,Comp)

Dis : discrèteCont : continueComp : composée

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

parallèle

Anachronique

Concomitant

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


2m un espace de conception pour l interaction bi manuelle

Plan

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Notre espace de conception 2m2

Notre espace de conception : 2M

Nature de l’action

  • EXEMPLES

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples

Exemples

  • Two-Handed Interaction on a Tablet DisplayUniversity of California, Berkeley


Notre espace de conception 2m3

Notre espace de conception : 2M

Nature de l’action

  • Déplacement puis dessin

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Notre espace de conception 2m4

Notre espace de conception : 2M

Nature de l’action

  • Déplacement puis dessin

  • Dessin et changement de couleur

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples1

Exemples

  • Démonstrateur NavGrapheCLIPS-IMAG et LABRI


Notre espace de conception 2m5

Notre espace de conception : 2M

Nature de l’action

  • Rotation-Zoom

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples2

Exemples

  • Déformation de graphes / reconstruction de d’arêtes


Notre espace de conception 2m6

Notre espace de conception : 2M

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


2m un espace de conception pour l interaction bi manuelle

Plan

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Conclusion

Conclusion

  • Interaction bi-manuelle au sein d’un environnement mixte

  • Espace de conception 2M

    • Pouvoir taxinomique des systèmes interactifs bi-manuels existants

      • 20 systèmes classés

    • Pouvoir génératif de nouvelles techniquesPouvoir comparatif : guide à la conception

      • Conception de notre environnement mixte pour les biologistes basée sur l’espace 2M

      • Evaluation expérimentale à mener et à lier à l’espace


Questions

Questions ?


  • Login