Clarté Cognitive Test Informatique du Langage Technique

1. 12 mars 2004 Clarté CognitiveTest Informatique du Langage Technique Marion Pomel Isabelle Lades Sébastien Maubert Maître d’ouvrage : Serge Ragano Tuteur : Rémi Bastide

2. Projet Clarté Cognitive • EURED • Domaine de la lecture-écriture • But : élaborer une méthode d’apprentissage • Evaluation d’enfants de 4 à 6 ans Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

3. Évaluation Le jour de piscine Malika est malade, et ne peut aller à la piscine avec les autres. Il faut qu’elle reste à l’école. Elle regarde partir tristement ses copines. Les élèves montent dans le bus mais voilà qu’une fille sort du bus en criant : « J’ai oublié mon maillot dans le cartable ! » Alors le bus s’en va et elle reste avec Malika. Lana Mire Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

4. Base de données Application d’évaluation Application des chercheurs Chef d’oeuvre • But : informatiser le processus d’évaluation • Utilisateurs : • Enfants de CP et GS • Enseignants • Chercheurs Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

5. Méthodologie • Application d’évaluation : • Développement itératif • Application des chercheurs : • Développement participatif Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

6. Application d’évaluation Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan

7. Travail réalisé • Les enquêtes • L’analyse de l’existant • Les maquettes enfants • Elaboration d’un protocole de test • Les tests utilisateurs enfants Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

8. Les enquêtes • But : connaître les utilisateurs et leur environnement • Populations ciblées : • Des enfants de GS et CP (4 à 6 ans) • Des enseignants de GS et CP • Des directeurs d’écoles Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

9. Les enquêtesMise en place • 4 circonscriptions ciblées : • Castres : milieu rural • Pau : milieu rural • Brive : milieux rural et urbain • Toulouse : milieu urbain • Pas de ZEP Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

10. Les enquêtesRetour • Retours des enquêtes hors délai • Difficulté à comptabiliser certains résultats • Problème de formulation des questions Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

11. Les enquêtesRésultats • Notre échantillon de population : • 47 directeurs d’école • 21 enseignants (GS et CP) • 296 enfants (GS et CP) Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

12. Les enquêtesRésultats Observations générales : • Matériel très disparate dans les écoles • Pas d’intervenant informatique • (2 exceptions) • Utilisation très inégale des ordinateurs par les enfants dans le cadre scolaire Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

13. Les enquêtesRésultats 0rdinateurs dans les écoles • Au moins 1 ordinateur par école • Petites écoles : 3 ordinateurs par école • Grandes écoles : 7 ordinateurs par école • Possibilité d’utilisation d’un logiciel • 80% de PC et 20% de MAC • Application multi-plateforme Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

14. Les enquêtesRésultats Connexion Internet dans les écoles • 90% des écoles sont connectées • Possibilité d’accéder à une base de données distante par Internet Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

15. Les enquêtesRésultats Familiarité informatique des enseignants • 80% des enseignants utilisent un ordinateur dans le cadre de leur travail • Principaux logiciels : Word et Excel • Utilisateurs relativement familiers avec l’informatique Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

16. 76% 54% 8% à la maison à l’école ailleurs Les enquêtesRésultats Familiarité informatique des enfants • 80% des enfants ont déjà utilisé un ordinateur Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

17. Les enquêtesRésultats Activités des enfants sur l’ordinateur • Jeux divers • Ecriture • Dessin • Calcul Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

18. Analyse de l’existant • But : avoir des pistes pour la construction des maquettes • Logiciels ludoéducatifs • Dans 80% des cas l’enfant doit utiliser la souris • Deux modes de sélection souris observés : • 1) Presser déplacer relâcher • 2) Cliquer déplacer re-cliquer Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Isabelle Lades

19. Maquettes Démonstration Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

20. Tests utilisateursMise en place • Date : jeudi 4 mars 2004 • Lieu : école publique de Cuq-Toulza • Participants : 10 enfants de CP Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

21. Tests utilisateursProtocole • Variation du mode de sélection • Presser déplacer relâcher • Cliquer déplacer re-cliquer • Variation de l’outil • Souris, TrackBall • Variation de l’ordre des items Lettre, mot, phrase Chaque enfant passe deux évaluations Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

22. Tests utilisateursProtocole Pour chaque maquette • Phase initiale • Phase d’entraînement • Phase sur 3 items Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

23. Tests utilisateursProtocole • Feuilles de route • Souhait de filmer (écran, outil, mains) • Pas d’autorisation parentale • Trace audio simplement Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

24. Tests utilisateursUtilisateurs Caractéristiques : • Tous ont déjà utilisé un ordinateur • 8 sur 10 l’ont utilisé en autonomie • Aucun n’a utilisé de TrackBall • Répartition des niveaux scolaires Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

25. Tests utilisateursObservations • Sélection : analogie avec « papier-crayon » • Position initiale du crayon Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

26. Tests utilisateursObservations • Désir de redimensionner un rectangle déjà tracé • L’item phrase • Longueur de l’item • Sélection multi ligne • Invariants : • Gomme  apprentissage très rapide • Flèche  problème d’affordance Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

27. Tests utilisateursAnalyse • «  Presser déplacer relâcher  » paraît plus naturel que «  Cliquer déplacer re- cliquer  » • Analogie avec le crayon • Affordance du bouton de validation à revoir Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

28. Tests utilisateursAnalyse • Nécessité d’une phase d’apprentissage avant l’évaluation • A priori, pas de lien entre niveau scolaire et aptitude à utiliser l’outil informatique Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

29. Suite du projet • Réaliser et tester d’autres maquettes • Elargir les enquêtes (ZEP) • Prototype : • Identification • Paramétrage de l’évaluation • Phase d’apprentissage • Transfert des données Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Sébastien Maubert

30. Base de données Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan

31. Base de données • Implémentation pour les tests • MySQL • Déclaration à la CNIL Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

32. Application des chercheurs Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan

33. Application des chercheurs Démonstration Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

34. Bilan Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan

35. Bilan • Effet de la double charge cognitive • Démarche centrée utilisateurs • Elaboration et analyse d’enquêtes • Contact avec des utilisateurs différents Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

36. Bilan • Documents à livrer au maître d’ouvrage : • Dossier d’analyse • Dossiers techniques • Continuité du projet sur un futur chef d’œuvre… Présentation Organisation Application d’évaluation Base de données Application chercheurs Bilan Marion Pomel

37. Clarté CognitiveTest Informatique du Langage Technique