EMaEval, un système pédagogique intégré ?

1. EMaEval, un système pédagogique intégré ? jean-michel.jullien@univ-lyon1.fr CRIS EA647 – IUFM Université Lyon1 Colloque 508 : Les systèmes pédagogiques intégrés : enjeux, freins, leviers, retours d’expérience et perspectives

2. : contexte européen • Compétences clés pour l'éducation et la formation tout au long de la vie(1) • la communication dans la langue maternelle • la communication en langues étrangères • la compétence mathématique et les compétences de base en sciences et technologies. • la compétence numérique qui implique l'usage sûr et critique des technologies de la société de l'information (TSI) et, donc, la maîtrise des technologies de l'information et de communication (TIC) • apprendre à apprendre liée à l'apprentissage, à la capacité à entreprendre et organiser soi-même un apprentissage à titre individuel ou en groupe, selon ses propres besoins, à avoir conscience des méthodes et des offres ; • les compétences sociales et civiques • l'esprit d'initiative et d'entreprise • la sensibilité et l'expression culturelles • (1) Journal officiel L 394 du 30.12.2006 jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

3. Brevets et certificats informatique et internet dans le système éducatif français Figure reproduite avec l’aimable autorisation de Claude Bertrand (MINES) jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

4. : Référentiel de compétences • 7 domaines / 28 compétences professionnelles • A : Compétences générales liées à l’exercice du métier • A1 : Maîtrise de l’environnement numérique professionnel • A2 : Développement des compétences pour la formation tout au long de la vie • A3 : Responsabilité professionnelles dans le cadre du système éducatif • B : Compétences nécessaires à l’intégration des Tice dans sa pratique d’enseignement • B1 : Travail en réseau avec l’utilisation des outils de travail collaboratif • B2 : Conception et préparation de contenus d’enseignement et de situations d’apprentissages • B3 : Mise en œuvre pédagogique • B4 : Mise en œuvre de démarches d’évaluation jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

5. la certification : un processus global en 3 phases • évaluation : l’évaluation est confiée aux enseignants des UE qui émettent des jugements de valeur sur le {niveau de maîtrise} des compétences. • validation : Après contrôle de la conformité des résultats obtenus par le service de scolarité, pour être validée par le jury, une compétence doit {vérifier une règle de validation} • certification : le jury délivre une attestation de compétences validées ou le certificat au vu {d’une règle de certification} jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

6. : un dossier numérique à présenter au jury • un système de gestion de portfolio d’évaluation dimension certificative un ensemble de portfolio d’évaluation qui contient des preuves de la compétence des candidats mettre à disposition des acteurs concernés les moyens de leurs interactions dans chaque étape du processus global (évaluation, validation, certification): jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

7. construction de la compétence professionnelle ? jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

8. ergonomie et formation professionnelle :les apports de l’analyse du travail Tiger 1993, Samurcay & Pastré 1998 évolution des compétences l’analyse du travail, un outil pour la formation professionnelle jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

9. ergonomie et formation professionnelle :les apports de l’analyse du travail • décrire l’activité • expliciter l’activité • analyser l’activité • évaluer les compétences • mettre en perspective Potentiel Effectuation orientation évaluation discours évaluatif demande de précision résultat d’évaluation explicitation et analyse de l’activité édition publication jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

10. processus d’évaluation dans le portfolio • un « scénario d’évaluation » décrit et formalise les interactions entre les acteurs concernés en leur donnant accès aux services et ressources numériques jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

11. services numériques du portfolio d’évaluation • tâches • dossier d’évaluation • création, édition, publication, fil de discussion, service d’évaluation • communication interne • notifications • étapes du workflow • résultats détaillés jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

12. dossier d’évaluation accès aux tâches résultats détaillés communication jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

13. dossier d’évaluation voilà mes apprentissages et mon expérience en sciences voilà mon expérience et mon expérience en économie voilà mes apprentissages et mon expérience en SVT jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

14. dossier d’évaluation accès aux tâches résultats détaillés communication jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

15. dossier d’évaluation • description • explicitation • ressources • analyse • évaluation • fil de discussion jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

16. accès aux tâches • arborescence • par dates • par type de tâche • à partir des fils de discussion jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

17. résultats détaillés • avancement global • dossiers en cours • résultats provisoires jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

18. communication • alertes • communication interne • notifications par mail jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

19. système de gestion du portfolio d’évaluation • intégration au SI • plan(s) de formation • campagne(s) d’évaluation • stockage, persistance, bases de données, workflow,… jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

20. 3 niveaux de responsabilité dans le processus: une responsabilité partagée Résultats d’évaluation 3 Campagne d’évaluation 2 Résultats d’évaluation 1 Résultats d’évaluation 2 Plan de formation Campagne d’évaluation 1 Politique Organisation Activité Gestionnaire Institutionnel : GI = 2 Gestionnaire Pédagogique : GP = 20 Participants : Candidats, Evaluateurs C = 4128 E > 300 jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

21. Gestionnaire Institutionnel Plan de formation La certification et le dossier numérique de compétences doivent être réalisés dans telles et telles conditions jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

22. Plan de formation Gestionnaire Institutionnel • conditions des évaluations • distribution des rôles • référentiels • dossier numérique • validation • certification • jury jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

23. Plan de formation Gestionnaire Institutionnel • conditions des évaluations • distribution des rôles • référentiels • dossier numérique • validation • certification • jury jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

24. Plan de formation • conditions des évaluations • distribution des rôles • référentiels • dossier numérique • validation • certification • jury jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

25. campagne d’évaluation Gestionnaire Pédagogique Je m’y prend comment ? Il se passe quoi ? jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

26. campagne d’évaluation Gestionnaire Pédagogique • organisation des évaluations • compétences visées, ressources et dates limites • observation et régulation jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

27. campagne d’évaluation Gestionnaire Pédagogique • conditions d’évaluation et participants • compétences visées, ressources et dates limites • observation et régulation jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

28. campagne d’évaluation Gestionnaire Pédagogique • conditions d’évaluation et participants • compétences visées, ressources et dates limites • observation et régulation jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

29. jury Membre du jury Gestionnaire de Scolarité Candidat Président du jury notification lancer une session de certification choisir une date de jury notification de date notification de date notification de date validation des résultats démarrer le jury notification d’ouverture de jury activité de certification consulter les dossiers demander des modifications notification de modifs demandées modifications des résultats signer le PV notification résultat notification résultat notification résultat csv pdf pdf csv fac similé

30. Résultats

31. un dispositif technique et humain pour un ensemble de dispositifs pédagogiques • une organisation humaine • un Groupe d’Appui Inter-universitaire (4 universités) • un collectif de travail (une vingtaine de référents) • des décisions politiques • un candidat acteur de sa certification • une approche collégiale de la formation et de l’évaluation • des actions de formation de formateurs jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

32. EMonStage • objectif : gérer des offres et des demandes http://iufm.univ-lyon1.fr/bds/ jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

33. EMonStage • desscénarios pédagogiques … des workflow jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

34. EMonStage • avantages • vision globale des offres, des affectations • réactivité du processus • intégration au SI • inconvénients • intégration au SI • des partenaires ? jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

35. Consortium EvalComp • Perspectives • s’élargir à d’autres domaines de connaissances et de compétences que les C2i (LMD) • animer la réflexion sur les évolutions de l’évaluation des compétences dans l’enseignement supérieur ? • un environnement basé sur des scénarios formalisant les interactions d’échanges entre des acteurs : la base d’un ERP ? jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

36. Consortium EvalComp • Des modules et extension pour EMaEval ? • faciliter l’inscription à une certification • Interfaçage avec les outils de scolarité et les plateformes d’enseignement • interfaçage avec portfolios / réseaux sociaux professionnels • éditeur de scénario d’interaction • aide à la recherche d’emploi/stage • lien avec offres de formation LMD • VAE des établissements, • …. jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

37. http://iufm.univ-lyon1.fr/EmaEval/ jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

38. Gestion de scolarité EnvironnementNumérique de Travail et briques du Systèmed’Information une vision archaïque d’un ENT ? Briques du SI Interface applicative Présentation Web mail Back Office Personnalisation LMS Moteur de recherche PDA Gestion documentaire Navigateur Web Bureau Virtuel Cœur ENT Téléphone mobile EMaEval Bureau des stages SSOAutorisation Authentification Annuaire LDAP Ressources externes d’après SDET V1 jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

39. appui méthodologique à l’explicitation des situations et de la prise de conscience de la compétence services numériques, évaluation et modèle de développement des compétences professionnelles jean-michel.jullien@univ-lyon1.fr

40. quel résultat doit fournir l’évaluation? • méthode d’évaluation • discours évaluatif

41. méthode d’évaluation explorée services numériques, évaluation et modèle de développement des compétences professionnelles jean-michel.jullien@univ-lyon1.fr

42. processus d’évaluation dans le portfolio • un « scénario d’évaluation » décrit et formalise les interactions entre les acteurs concernés en leur donnant accès aux services et ressources numériques services numériques, évaluation et modèle de développement des compétences professionnelles jean-michel.jullien@univ-lyon1.fr

43. N = 1192 formation initiale master 3 modèles en interaction, articulant formation et évaluations : espace de développement • évaluation diffuse • évaluation orientée • évaluation privilégiée toutes UE du master Potentiel dossier numérique de compétences Effectuation évaluation UE TIC/TICE du master UE professionnelles du master explicitation et analyse de l’activité accompagnement jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

44. N = 1192 formation initiale master espace de développement Face à face Dépôt de médias Potentiel blog Wiki dossier numérique de compétences Effectuation orientation transmission discours évaluatif évaluation demande de précision résultat dévaluation explicitation et analyse de l’activité édition publication RV avec référent accompagnement jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?

45. N = 90, 12 accompagnateurs candidats libres à distance espace de développement Classe virtuelle Dépôt de médias Potentiel blog Wiki dossier numérique de compétences Effectuation orientation transmission discours évaluatif évaluation demande de précision résultat dévaluation explicitation et analyse de l’activité édition publication RV avec référent module accompagnement accompagnement jean-michel.jullien@univ-lyon1.fr EMaEval, un système pédagogique intégré ?