2m un espace de conception pour l interaction bi manuelle
Download
1 / 42

2M : un Espace de Conception pour l’Interaction Bi-Manuelle - PowerPoint PPT Presentation


  • 107 Views
  • Uploaded on

2M : un Espace de Conception pour l’Interaction Bi-Manuelle. Gilles BAILLY, Laurence NIGAY, David AUBER. Introduction. L’informatique ubiquitaire Fusion des mondes physique et numérique Définition d’un espace mixte L’interaction bi-manuelle au sein d’un environnement mixte. Introduction.

loader
I am the owner, or an agent authorized to act on behalf of the owner, of the copyrighted work described.
capcha
Download Presentation

PowerPoint Slideshow about ' 2M : un Espace de Conception pour l’Interaction Bi-Manuelle' - carlo


An Image/Link below is provided (as is) to download presentation

Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author.While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server.


- - - - - - - - - - - - - - - - - - - - - - - - - - E N D - - - - - - - - - - - - - - - - - - - - - - - - - -
Presentation Transcript
2m un espace de conception pour l interaction bi manuelle

2M : un Espace de Conception pour l’Interaction Bi-Manuelle

Gilles BAILLY, Laurence NIGAY, David AUBER


Introduction
Introduction

  • L’informatique ubiquitaire

    • Fusion des mondes physique et numérique

    • Définition d’un espace mixte

  • L’interaction bi-manuelle au sein d’un environnement mixte


Introduction1
Introduction

  • Domaine d’application : Biologie

    • Environnement informationnel mixte pour les biologistes

    • Manipulation bi-manuelle de grands graphes avec des jetons

      • Graphe : Acide ribonucléique


Interaction bi manuelle au sein d un environnement mixte pourquoi
Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?

  • Naturelle

  • Performante

    • Parallélisme

    • Augmentation du Langage d’Interaction (pouvoir d’expression)


Interaction bi manuelle au sein d un environnement mixte pourquoi1
Interaction bi-manuelle au sein d’un environnement mixte : pourquoi ?

  • Naturelle

  • Performante

    • Parallélisme

    • Augmentation du Langage d’Interaction (pouvoir d’expression)

Manipulation d’un rectangle : rotation/ translation/ homothétie


Interaction bi manuelle attention
Interaction bi-manuelle : attention ! pourquoi ?

  • Pas toujours pertinente selon la tâche

  • Exemple

    • Kabbash P., Buxton W., Sellen A., "Two-Handed Input in a Compound Task", Proceedings of CHI’94, 417-423.


Plan pourquoi ?

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Objectifs
Objectifs pourquoi ?

  • Apporter les avantages du monde physique dans le monde numérique

  • Etude de l’interaction bi-manuelle au sein d’une environnement mixte

  • Espace de conception 2M


Constat pourquoi un espace de conception
Constat : pourquoi ?pourquoi un espace de conception

  • Aujourd’hui : systèmes conçus et développés de façon ad hoc (faible capitalisation des expériences)

  • Absence d’éléments de conception de développement d’évaluation


Objectifs espace de conception
Objectifs : espace de conception pourquoi ?

  • Organisation des éléments de conception dans un canevas cohérent

  • Pouvoir taxinomique des systèmes interactifs bi-manuels existants

  • Pouvoir génératif de nouvelles techniques

  • Pouvoir comparatif : guide à la conception


Plan pourquoi ?

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Diff rentes approches
Diff pourquoi ?érentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [Guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

    • Multimodalité


Psychologie mod le de la cha ne cin matique
Psychologie : Modèle de la cha pourquoi ?îne cinématique

  • Coopération à deux mains

  • La main non dominante fixe le contexte

  • La main non dominante précède

  • Macro versus Micro

  • La main dominante est la main préférée


Diff rentes approches1
Diff pourquoi ?érentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

      • Langage de l’action

      • Relation temporelle

    • Multimodalité


Langage de l action
Langage de l’action pourquoi ?

  • Actions discrètes : les actions discrètes sont des actions qui impliquent le déclenchement discret des événements (saisir au clavier, utiliser les touches spéciales, appuyer sur un bouton d’une souris)

  • Actions continues : les actions continues sont des actions qui impliquent le contrôle continu de un ou plusieurs degrés de liberté (déplacer un élément graphique avec la souris)

  • Actions composées : les actions composées sont des actions qui entrelacent des actions continues et des actions discrètes (déplacer le curseur sur un objet graphique puis le sélectionner avec la souris)



Relation temporelle
Relation temporelle pourquoi ?

2

1

4

3


Diff rentes approches2
Diff pourquoi ?érentes approches

  • Exploitation de plusieurs domaines et axes

  • Psychologie [Guiard 87]

  • IHM

    • Interaction à deux mains [Buxton 05]

    • Multimodalité

      • Définitions [Nigay 94]

      • Typologie [Nigay 93]

      • Extension [Vernier 01]


Multimodalit d finitions nigay 94

Canal gestuel pourquoi ?

Main dominante

ou

Main non dominante

Multimodalité : Définitions [Nigay 94]

Dispositif

Langage

Tâche

Modalité

Niveau d’abstraction


Multimodalit typologie nigay 93
Multimodalité : Typologie [Nigay 93] pourquoi ?

Dépendance

Combiné

  • Lexicale

  • Syntaxique

  • Sémantique

Indépendant

séquentiel

parallèle

Temps


Multimodalit typologie vernier 01
Multimodalité : Typologie [Vernier 01] pourquoi ?

  • Extension par affinement de l’axe temporel

Dépendance

Temps


Plan pourquoi ?

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Combiner trois approches

Notre espace de conception pourquoi ?

Combiner trois approches

Mutimodalité

Relation temporelle

Langage d’action


Notre espace de conception 2m
Notre espace de conception : 2M pourquoi ?

Nature de l’action

Trois axes

  • Temps :

    usage séquentiel / parallèle

  • Nature de l’action :

    (MND,MD)

  • Fusion :

    lexicale, syntaxique, sémantique

Temps

Fusion


2m axe temps
2M : Axe Temps pourquoi ?

Considérés par Buxton

Regroupés sous le terme parallélisme


2m axe temps1
2M : Axe Temps pourquoi ?

Coïncidente

Concomitante

Parallèle


2m axe temps2
2M : Axe Temps pourquoi ?

Séquentiel

Coïncident

Anachronique

parallèle

Concomitant

Temps


2m axe nature de l action

Dis : discr pourquoi ?èteCont : continueComp : composée

2M : Axe Nature de l’action

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Coïncident

Séquentiel

parallèle

Anachronique

Concomitant

Temps

Fusion


2m axe fusion
2M : Axe Fusion pourquoi ?

Fusion Lexicale

Fusion Syntaxique

Fusion

Sémantique

Fusion de bas niveau

Shift -click

Fusion des paramètres

«mets ça la»

Fusion des tâches

Char

Modalité

Niveau d’abstraction


Notre espace de conception 2m1
Notre espace de conception : 2M pourquoi ?

Nature de l’action

(Comp,Comp)

(Cont,Comp)

Dis : discrèteCont : continueComp : composée

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

parallèle

Anachronique

Concomitant

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Plan pourquoi ?

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Notre espace de conception 2m2
Notre espace de conception : 2M pourquoi ?

Nature de l’action

  • EXEMPLES

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples
Exemples pourquoi ?

  • Two-Handed Interaction on a Tablet DisplayUniversity of California, Berkeley


Notre espace de conception 2m3
Notre espace de conception : 2M pourquoi ?

Nature de l’action

  • Déplacement puis dessin

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Notre espace de conception 2m4
Notre espace de conception : 2M pourquoi ?

Nature de l’action

  • Déplacement puis dessin

  • Dessin et changement de couleur

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples1
Exemples pourquoi ?

  • Démonstrateur NavGrapheCLIPS-IMAG et LABRI


Notre espace de conception 2m5
Notre espace de conception : 2M pourquoi ?

Nature de l’action

  • Rotation-Zoom

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Exemples2
Exemples pourquoi ?

  • Déformation de graphes / reconstruction de d’arêtes


Notre espace de conception 2m6
Notre espace de conception : 2M pourquoi ?

Nature de l’action

(Comp,Comp)

(Cont,Comp)

(Cont,Cont)

(Dis,Comp)

(Dis,Cont)

(Dis,Dis)

Séquentiel

Coïncident

Anachronique

Concomitant

parallèle

Indépendant

Temps

Lexicale

Syntaxique

Sémantique

Fusion


Plan pourquoi ?

  • Objectifs

  • Différentes approches

  • Notre espace de conception

  • Exemples

  • Conclusion et perspectives


Conclusion
Conclusion pourquoi ?

  • Interaction bi-manuelle au sein d’un environnement mixte

  • Espace de conception 2M

    • Pouvoir taxinomique des systèmes interactifs bi-manuels existants

      • 20 systèmes classés

    • Pouvoir génératif de nouvelles techniquesPouvoir comparatif : guide à la conception

      • Conception de notre environnement mixte pour les biologistes basée sur l’espace 2M

      • Evaluation expérimentale à mener et à lier à l’espace


Questions

Questions ? pourquoi ?


ad