2m un espace de conception pour l interaction bi manuelle
Download
Skip this Video
Download Presentation
2M : un Espace de Conception pour l’Interaction Bi-Manuelle

Loading in 2 Seconds...

play fullscreen
1 / 42

2M : un Espace de Conception pour l’Interaction Bi-Manuelle - PowerPoint PPT Presentation


  • 108 Views
  • Uploaded on

2M : un Espace de Conception pour l’Interaction Bi-Manuelle. Gilles BAILLY, Laurence NIGAY, David AUBER. Introduction. L’informatique ubiquitaire Fusion des mondes physique et numérique Définition d’un espace mixte L’interaction bi-manuelle au sein d’un environnement mixte. Introduction.

loader
I am the owner, or an agent authorized to act on behalf of the owner, of the copyrighted work described.
capcha
Download Presentation

PowerPoint Slideshow about ' 2M : un Espace de Conception pour l’Interaction Bi-Manuelle' - carlo


An Image/Link below is provided (as is) to download presentation

Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author.While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server.


- - - - - - - - - - - - - - - - - - - - - - - - - - E N D - - - - - - - - - - - - - - - - - - - - - - - - - -
Presentation Transcript
2m un espace de conception pour l interaction bi manuelle

2M : un Espace de Conception pour l’Interaction Bi-Manuelle

Gilles BAILLY, Laurence NIGAY, David AUBER

introduction
Introduction
  • L’informatique ubiquitaire
    • Fusion des mondes physique et numérique
    • Définition d’un espace mixte
  • L’interaction bi-manuelle au sein d’un environnement mixte
introduction1
Introduction
  • Domaine d’application : Biologie
    • Environnement informationnel mixte pour les biologistes
    • Manipulation bi-manuelle de grands graphes avec des jetons
      • Graphe : Acide ribonucléique
interaction bi manuelle au sein d un environnement mixte pourquoi
Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?
  • Naturelle
  • Performante
    • Parallélisme
    • Augmentation du Langage d’Interaction (pouvoir d’expression)
interaction bi manuelle au sein d un environnement mixte pourquoi1
Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?
  • Naturelle
  • Performante
    • Parallélisme
    • Augmentation du Langage d’Interaction (pouvoir d’expression)

Manipulation d’un rectangle : rotation/ translation/ homothétie

interaction bi manuelle attention
Interaction bi-manuelle : attention !
  • Pas toujours pertinente selon la tâche
  • Exemple
    • Kabbash P., Buxton W., Sellen A., "Two-Handed Input in a Compound Task", Proceedings of CHI’94, 417-423.
slide7
Plan
  • Objectifs
  • Différentes approches
  • Notre espace de conception
  • Exemples
  • Conclusion et perspectives
objectifs
Objectifs
  • Apporter les avantages du monde physique dans le monde numérique
  • Etude de l’interaction bi-manuelle au sein d’une environnement mixte
  • Espace de conception 2M
constat pourquoi un espace de conception
Constat : pourquoi un espace de conception
  • Aujourd’hui : systèmes conçus et développés de façon ad hoc (faible capitalisation des expériences)
  • Absence d’éléments de conception de développement d’évaluation
objectifs espace de conception
Objectifs : espace de conception
  • Organisation des éléments de conception dans un canevas cohérent
  • Pouvoir taxinomique des systèmes interactifs bi-manuels existants
  • Pouvoir génératif de nouvelles techniques
  • Pouvoir comparatif : guide à la conception
slide11
Plan
  • Objectifs
  • Différentes approches
  • Notre espace de conception
  • Exemples
  • Conclusion et perspectives
diff rentes approches
Différentes approches
  • Exploitation de plusieurs domaines et axes
  • Psychologie [Guiard 87]
  • IHM
    • Interaction à deux mains [Buxton 05]
    • Multimodalité
psychologie mod le de la cha ne cin matique
Psychologie : Modèle de la chaîne cinématique
  • Coopération à deux mains
  • La main non dominante fixe le contexte
  • La main non dominante précède
  • Macro versus Micro
  • La main dominante est la main préférée
diff rentes approches1
Différentes approches
  • Exploitation de plusieurs domaines et axes
  • Psychologie [guiard 87]
  • IHM
    • Interaction à deux mains [Buxton 05]
      • Langage de l’action
      • Relation temporelle
    • Multimodalité
langage de l action
Langage de l’action
  • Actions discrètes : les actions discrètes sont des actions qui impliquent le déclenchement discret des événements (saisir au clavier, utiliser les touches spéciales, appuyer sur un bouton d’une souris)
  • Actions continues : les actions continues sont des actions qui impliquent le contrôle continu de un ou plusieurs degrés de liberté (déplacer un élément graphique avec la souris)
  • Actions composées : les actions composées sont des actions qui entrelacent des actions continues et des actions discrètes (déplacer le curseur sur un objet graphique puis le sélectionner avec la souris)
diff rentes approches2
Différentes approches
  • Exploitation de plusieurs domaines et axes
  • Psychologie [Guiard 87]
  • IHM
    • Interaction à deux mains [Buxton 05]
    • Multimodalité
      • Définitions [Nigay 94]
      • Typologie [Nigay 93]
      • Extension [Vernier 01]
multimodalit d finitions nigay 94

Canal gestuel

Main dominante

ou

Main non dominante

Multimodalité : Définitions [Nigay 94]

Dispositif

Langage

Tâche

Modalité

Niveau d’abstraction

multimodalit typologie nigay 93
Multimodalité : Typologie [Nigay 93]

Dépendance

Combiné

  • Lexicale
  • Syntaxique
  • Sémantique

Indépendant

séquentiel

parallèle

Temps

multimodalit typologie vernier 01
Multimodalité : Typologie [Vernier 01]
  • Extension par affinement de l’axe temporel

Dépendance

Temps

slide22
Plan
  • Objectifs
  • Différentes approches
  • Notre espace de conception
  • Exemples
  • Conclusion et perspectives
combiner trois approches

Notre espace de conception

Combiner trois approches

Mutimodalité

Relation temporelle

Langage d’action

notre espace de conception 2m
Notre espace de conception : 2M

Nature de l’action

Trois axes

  • Temps :

usage séquentiel / parallèle

  • Nature de l’action :

(MND,MD)

  • Fusion :

lexicale, syntaxique, sémantique

Temps

Fusion

2m axe temps
2M : Axe Temps

Considérés par Buxton

Regroupés sous le terme parallélisme

2m axe temps1
2M : Axe Temps

Coïncidente

Concomitante

Parallèle

2m axe temps2
2M : Axe Temps

Séquentiel

Coïncident

Anachronique

parallèle

Concomitant

Temps

2m axe nature de l action

Dis : discrèteCont : continueComp : composée

2M : Axe Nature de l’action

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Coïncident

Séquentiel

parallèle

Anachronique

Concomitant

Temps

Fusion

2m axe fusion
2M : Axe Fusion

Fusion Lexicale

Fusion Syntaxique

Fusion

Sémantique

Fusion de bas niveau

Shift -click

Fusion des paramètres

«mets ça la»

Fusion des tâches

Char

Modalité

Niveau d’abstraction

notre espace de conception 2m1
Notre espace de conception : 2M

Nature de l’action

(Comp,Comp)

(Cont,Comp)

Dis : discrèteCont : continueComp : composée

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

parallèle

Anachronique

Concomitant

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

slide31
Plan
  • Objectifs
  • Différentes approches
  • Notre espace de conception
  • Exemples
  • Conclusion et perspectives
notre espace de conception 2m2
Notre espace de conception : 2M

Nature de l’action

  • EXEMPLES

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

exemples
Exemples
  • Two-Handed Interaction on a Tablet DisplayUniversity of California, Berkeley
notre espace de conception 2m3
Notre espace de conception : 2M

Nature de l’action

  • Déplacement puis dessin

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

notre espace de conception 2m4
Notre espace de conception : 2M

Nature de l’action

  • Déplacement puis dessin
  • Dessin et changement de couleur

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

exemples1
Exemples
  • Démonstrateur NavGrapheCLIPS-IMAG et LABRI
notre espace de conception 2m5
Notre espace de conception : 2M

Nature de l’action

  • Rotation-Zoom

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

exemples2
Exemples
  • Déformation de graphes / reconstruction de d’arêtes
notre espace de conception 2m6
Notre espace de conception : 2M

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion

slide40
Plan
  • Objectifs
  • Différentes approches
  • Notre espace de conception
  • Exemples
  • Conclusion et perspectives
conclusion
Conclusion
  • Interaction bi-manuelle au sein d’un environnement mixte
  • Espace de conception 2M
    • Pouvoir taxinomique des systèmes interactifs bi-manuels existants
      • 20 systèmes classés
    • Pouvoir génératif de nouvelles techniquesPouvoir comparatif : guide à la conception
      • Conception de notre environnement mixte pour les biologistes basée sur l’espace 2M
      • Evaluation expérimentale à mener et à lier à l’espace
ad