Alimentation de l’annuaire ENT Cellule d’animation nationale ENT second degré

1. Alimentation de l’annuaire ENT Cellule d’animation nationale ENT second degré le 26 Mars 2007 (extraits)

2. Les grandes lignes du projet Annuaire ENT Zoom sur l’annuaire fédérateur Le corpus documentaire et Outils Les principales étapes de la mise en œuvre de l’alimentation de l’ENT via l’annuaire fédérateur Précisions sur les grandes étapes du projet Précision sur certains attributs Utilisation du jeu d essai

3. Le Contexte et les enjeux De l’annuaire ENT • Après le socle une demande des porteurs de projets • Permettre une gestion facilitée des profils d’utilisateurs, des droits • Une gestion partagée du projet entre l état et les collectivités De l’alimentation automatique de l’annuaire ENT à partir de l’annuaire fédérateur • Sécuriser techniquement et juridiquement les chefs d établissement • Offrir une qualité de données • Ouvrir rapidement la majorité des comptes ENT à la rentrée • En limitant les saisies manuelles et multiples • En permettant une actualisation régulière des données • En simplifiant le passage d’une année à l’autre

4. Caractéristiques de l’annuaire ENT • L’Annuaire ENT • « Annuaire » contenant les informations partagées nécessaires à la gestion des identités, à l’administration des droits d’accès et à la qualification des personnes et des structures en relation avec l’ENT • L’Annuaire fédérateur • Propose un service de référence pour l’ensemble des données de l’Éducation Nationale dont l’ENT a besoin • Intègre l’ensemble des attributs utiles pour l’ENT et présents dans les différentes bases du MENESR (Sconet, EPP, STSWeb…) • Pour les autres populations et attributs, l’Annuaire ENT sera complété • Par des procédures locales (conformément à l’arrêté CNIL ENT) • Par d’autres dispositifs d’alimentation depuis les SI des partenaires • Par des procédures d’alimentation manuelle

5. Fichieralimentation XML Établissement Élèves Enseignants Parents… Chefd’établissement Schéma global du flux des données Académie ENT EPP … SI-RH AnnuaireFédérateur RAMSESE SCONET Annuaire ENT Administrateur Ou autre source Demande de modifications

6. Zoom sur l’Annuaire fédérateur

7. Architecture globale Base de données DB2 académique Agora Agape Annuaire fédérateur AAA EPP StsWeb Sconet Ramses Nomen XML LDIF Etablissements ENT 2nd degré

8. Agora Agape EPP StsWeb Sconet Ramses Nomen Extractions • Enseignants (1er et 2nd + privé) • Personnels non enseignant • Élèves 2nd degré • Parents d’élève ou tuteurs 2nd degré • Classes et structures • Établissements scolaires • Nomenclatures • ETL Sunopsis • Mise à jour quotidienne Annuaire fédérateur

9. Fourniture d’un fichier XML par établissement, conformément au cahier des charges générique du Ministère et de la Caisse des Dépôts Les informations fournies permettent à l’ENT de reconstituer les classes avec leurs élèves, leurs disciplines et leur professeurs, en s’appuyant sur les nomenclatures du ministère (MEF). Fourniture d’un fichier global et de fichiers de delta Un UID technique reconduit tous les ans, est fourni pour les enseignants, les élèves et les parents (UID indépendant du NUMEN ou de l’INE) Interfaces avec annuaire ENT 2nd degré Annuaire fédérateur XML A intégrer par projet ENT ENT 2nd degré

10. Mise à jour des nouvelles entrées de l’annuaire messagerie via l’interface actuelle (MAJDS) Récupération de l’adresse messagerie Récupération des personnels présents dans les établissements mais absents des SIRH (emplois aidés) Interfaces avec AAA Saisie via SCONETdes emplois aidés dans les ETB CSV AAA Annuaire fédérateur FormatMAJDS MAJDS

11. Académie ENT EPP LDAP ….. ….. Fichieralimentation XML SI-RH Administrateur ou autres sourcesd’alimentation RAMSESE SCONET Établissement Élèves Enseignants Parents… Administrateur Ou autre source Chefd’établissement Demande de modifications De l’importance d’une bonne saisie des données à la source Service Service Service ….. … AAA Instance Académique AnnuaireFédérateur Annuaire ENT Bases académiques

12. Le corpus Annuaire ENTDocumentsJeu d’essai

13. Corpus Annuaire ENTLe corpus de référence Annuaire ENT • Documents de référence • inclus dans le SDET (Schéma Directeur des ENT) • Cahier des charges Annuaire ENT du secondaire (document principal) • Annexe 1 : Glossaire • Annexe 2 : Caractérisation des personnes et des structures • Annexe 3 : Schéma LDAP et nomenclatures • Annexe 4 : Alimentation depuis le SI du MENESR • Annexe 5 : Codes des projets ENT • FAQsur les documents de référence • Document des évolutions entre les versions du cahier des charges • Jeu d’essai anonymisé à partir d’une extraction du SI MENESR • (1 extraction « complet » + 3 extractions « delta ») • http://www2.educnet.education.fr/sections/services/ent/scolaire/

14. Corpus Annuaire ENTLe cahier des charges Annuaire ENT du secondaire (document principal) • Présentation générale de l’annuaire ENT • Principes directeurs • Vue d’ensemble • Contenu • Périmètre des données • Modèle de sécurité • Caractérisation des personnes • Schéma et DIT • Description des classes d’objet • DIT • Attributs particuliers • Architecture technique • Principes d’architecture • Options d’architecture • Annuaire et accès inter-ENT • Services • Services de gestion • Services d’accès • Services techniques • Exigences • Volumétrie, performance, disponibilité • Organisation et processus types de gestion • Organisation type de la gestion des droits d’accès • Processus type de gestion

15. Corpus Annuaire ENTLes annexes du cahier des charges • Annexe 1 : Glossaire • Vocabulaire projet • Lexique MENESR • Généralités sur les nomenclatures • Lexique • Nomenclatures des MEF • Enseignements et disciplines • Informations de scolarité transmises par le SI du MENESR • Annexe 2 : Caractérisation des personnes et des structures • Définition des attributs pour chacune des catégories de personnes et de structures • Annexe 3 : Schéma LDAP et nomenclatures • Annexe 4 : Alimentation depuis le SI du MENESR • Principes généraux • Modalités de mise à disposition des données • Format, syntaxe, DTD, exemples • Données échangées et règles de gestion • Tableau Excel en pièce-jointe • Catégories de personnes et de structures • Contraintes d’intégrité • Clés de jointure avec l’annuaire ENT • Règles de gestion • Annexe 5 : Codes des projets ENT

16. Corpus Annuaire ENTFAQ et autres documents de référence • FAQ sur les documents de référence • Réponses aux questions des intégrateurs et des porteurs de projet • Modèle de données : comment prendre en compte certains besoins particuliers ? • Identifiants : NUMEN et INE, format, pérennité… • Alimentation MENESR : fonctionnement des deltas, attributs mal renseignés… • Attention à la version des documents de référence concernée • Autres documents • Erreurs de saisies les plus fréquentes • Fiche de remontée d’anomalies • Fiche de commande des plateformes matérielles Annuaire Fédérateur • Périmètre des données transmises

17. Annuaire ENT environnement réel Fichier d’alimentation XMLdonnées Réelles Fichier d’alimentation XMLdonnées Anonymisées Annuaire ENT Plateformes de testde tout intégrateur Corpus Annuaire ENTJeu de test anonymisé (1/3) Annuaire fédérateur(académie) Anonymisation champ par champ Les fichiers anonymisés sont disponibles en téléchargement à l’adresse http://www2.educnet.education.fr/sections/services/ent/scolaire

18. Jeu de test anonymisé Extraction Complète Extraction Delta Vide Extraction Delta Petites modifications Extraction Delta Grosses modifications Extraction Delta Extraction Complète Delta_Eleve.xml Eleve.xml Delta_PersRelEleve.xml PersRelEleve.xml Delta_PersEducNat.xml PersEducNat.xml Delta_EtabEducNat.xml EtabEducNat.xml Corpus Annuaire ENTJeu de test anonymisé (2/3) • 2 types d’extractions • Extraction complète • Extraction Delta • 3 types de Deltas • Delta vide • Delta petit • Delta gros • 4 fichiers dans chaque extraction • Les données Elèves • Les données Parents • Les données Personnels de l’Education Nationale • Les données des établissements

19. Corpus Annuaire ENTCopie d’écran de la page educnet

20. Eleves.xml Corpus Annuaire ENTJeu de test anonymisé (3/3) Remarque sur cet exemple : le nom des classes doit être renseigné de manière explicite dans SCONET car il se retrouve dans l’ENT.

21. Corpus Annuaire ENTGestion des deltas – postulats initiaux Principe des fichiers de delta : transmettre un fichier contenant les écarts dans la base de donnée de l’annuaire fédérateur entre deux dates (moins volumineux) plutôt que des fichiers complets. Un fichier de delta est généré tous les jours. Le Rectorat (les responsables de l’administration de l’annuaire fédérateur) et l’équipe Projet ENT déterminent ensemble • la fréquence des extractions complètes (exemple Fcomplet = 1 extraction tous les 30 jours) • La valeur de n (période de répétition des modifications/créations/suppressions dans les fichiers de delta)

22. Corpus Annuaire ENTGestion des deltas – génération d’extractions delta

23. Les principales étapes de la mise en œuvre de l’alimentation de l’ENT via l’annuaire fédérateur

24. Démarche Conseillée Nommer un chef de projet Annuaire Vérifierles données ( Base scolarité, Bases SIRH..) Se préparer à l’arrivée de l’annuaire fédérateur • Prendre connaissance du cahier des charges annuaire ENT et de ses annexes • Mettre en conformité son annuaire ENT (ou planifier la mise en conformité) • Acheter les plateformes de l’annuaire fédérateur • Intégrer le jeu de tests anonymisé sur une plateforme de tests Installer l’annuaire fédérateur Produire les fichiers XML complets et des fichiers de Deltas Établir les modalités d’échange des données personnelles avec l’ENT Pré-Production • Charger des fichiers XML (données réelles) sur plateforme ENT de pré-production • Tester la Migration des données pour les projets possédant un existant en matière d’ENT sur un nombre limité d’établissements (Mise en place la clef de jointure, bascule des identifiants/mots de passe) Mise en production

25. T0 T0+1Mois T0+2Mois T0+3Mois T0+4Mois Pré requis Installation Pré production Production SUIVI , pilotage par la Maitrise d’ouvrage Collectivité locale SUIVI , pilotage par la Maitrise d’ouvrage Rectorat Planning type de mise en œuvre de projetEstimation à adapter en fonction de chaque projet Sensibilisation des Chefs d’établissements

26. Pré requis Installation Pré production Production Les acteurs Chefs d’établissement Rectorat intégrateur Planning type de mise en œuvre de projet Pré-requis Infrastructure de l’annuaire fédérateur (AAF) La base de donnée DB2 de l’AAF doit être installée sur un serveur : Serveur Bi-pro 64 bits 8 Go (licence DB2) Les scripts java de AAF sont implantés sur un nouveau serveur Bi-pro 32 bits ayant une capacité de stockage de 2 x 143 Go L’agent SUNOPSIS devra également être installé sur ce nouveau serveur Les extractions ENT et EPLE sont stockées sur ce même serveur. La mise à disposition des extractions ENT se fera à l’initiative du CATI vers l’infrastructure ENT par transferts SFTP (clés de cryptage à prévoir) Un guichet est en cours d’étude Nommer un chef de projet Annuaire ENT Fiabiliser les données achat des plateformes Mise en conformité de l Annuaire ENT tests sur les données anonymisées

27. Les acteurs Chefs d’établissement Rectorat intégrateur Planning type de mise en œuvre du projetProduction Production Effectuer migration comptes existants d’1 EPLE (15j) ou créer ex-nihilo les comptes Prise en compte des modifications par delta (XML) Suivi académique A partir de mai les chefs d’établissement travaillent sur deux bases SCONET (année 2007 et année 2008) Par configuration l’annuaire peut prendre les données 2007 ou bien directement les données 2008. Il appartient à chaque projet d’évaluer sur quelle base SCONET les essais de pré-production doivent être faits. Lors d’une bascule de rentrée, il faut configurer l’annuaire fédérateur pour qu’il pointent sur la nouvelle base SCONET Les évolutions peuvent être traîtées par le mécanisme des deltas. L’annuaire fédérateur garantit la continuité de l’identifiant d’une année scolaire à l’autre En liaison avec les chefs d’établissements Initialisation avec données rentrée 2007/2008 (par delta ou complet) Fin mise en production

28. Annuaire ENTRejets Annuaire Fédérateur Aucun dispositif de correction des données Fichieralimentation XML Sensibiliser les chefs d’établissements à l’importance de la bonne saisie des données Établissement Élèves Enseignants Parents… Chefd’établissement De l’importance d’une bonne saisie des données à la source Académie ENT EPP Service Service Service LDAP ….. … ….. AAA ….. SI-RH Administrateur ou autres sourcesd’alimentation RAMSESE Instance Académique AnnuaireFédérateur SCONET Annuaire ENT Bases académiques Administrateur Ou autre source Demande de modifications

29. Planning type de mise en œuvre de projet Installation Pré production Installation Production • Projet annuaire fédérateur en téléchargement sur le site de diffusion « Identité » de Toulouse : • http://diff.ac-toulouse.fr • Versions >> Annuaire >> Annuaire federateur >> Primo-installation • Toute communication sur ce projet sera envoyée à l’adresse • aafdiff@ac-academie.fr • Adresse de la diffusion : • diffusion-identite@ac-toulouse.fr Installer l’annuaire fédérateur Extraire les fichiers XML (3 semaines Livraison de l’Annuaire Fédérateur Les acteurs Chefs d’établissement Rectorat intégrateur

30. Planning type de mise en œuvre de projetInstallation Pré production Installation Production Installer l’annuaire fédérateur Extraire les fichiers XML (3 semaines Livraison de l’Annuaire Fédérateur Les acteurs Chefs d’établissement Rectorat intégrateur

31. Planning type de mise en œuvre de projet Installation Pré production Installation Production Fichiers XML produits : [idENT]_[Complet|Delta]_[Date]_[typeFichier]_[numéro].xml exemple: ENT_Complet_20070326_PersEducNat_0000.xml ENT_Complet_20070326_EtabEducNat_0000.xml ENT_Complet_20070326_Eleve_0000.xml ENT_Complet_20070326_PersRelEleve_0000.xml Installer l’annuaire fédérateur Extraire les fichiers XML (3 semaines Livraison de l’Annuaire Fédérateur Les acteurs Chefs d’établissement Rectorat intégrateur

32. Planning type de mise en œuvre du projetPré-production Production Pré-production • Migration des comptes existants • Reprise des données • Réconciliation des comptes existants avec ceux alimentés par l’Annuaire Fédérateur • Mise à jour des relations personnes–structures et personnes–personne • Prise en compte des modifications par delta • Validation du fonctionnement • Mise en situation avec des données réelles • Détection et gestion des anomalies • Délai de traitement, montée en charge • Paramétrage de la période glissante des deltas (n) • Chaque fichier delta contient tous les objets qui ont été modifiés durant les n jours précédents Charger le XML dans l’ENT Traiter les rejets (1 mois) Effectuer migration comptes existants d’1 EPLE (15j) ou créer ex-nihilo les comptes Prise en compte des modifications par delta (XML) Suivi académique En liaison avec les chefs d’établissements Les acteurs Chefs d’établissement Rectorat Intégrateur

33. Les acteurs Chefs d’établissement Rectorat intégrateur Planning type de mise en œuvre du projetProduction Production Effectuer migration comptes existants d’1 EPLE (15j) ou créer ex-nihilo les comptes Prise en compte des modifications par delta (XML) Suivi académique A partir de mai les chefs d’établissement travaillent sur deux bases SCONET (année 2007 et année 2008) Par configuration l’annuaire peut prendre les données 2007 ou bien directement les données 2008. Il appartient à chaque projet d’évaluer sur quelle base SCONET les essais de pré-production doivent être faits. Lors d’une bascule de rentrée, il faut configurer l’annuaire fédérateur pour qu’il pointent sur la nouvelle base SCONET Les évolutions peuvent être traîtées par le mécanisme des deltas. L’annuaire fédérateur garantit la continuité de l’identifiant d’une année scolaire à l’autre En liaison avec les chefs d’établissements Initialisation avec données rentrée 2007/2008 (par delta ou complet) Fin mise en production

34. Mai Juin Juillet Septembre Octobre Pré requis Installation Pré production Production Livraison de l’Annuaire Fédérateur Fin Mise en production SUIVI , pilotage par la Maitrise d’ouvrage Collectivité locale SUIVI , pilotage par la Maitrise d’ouvrage Rectorat Planning type de mise en œuvre de projetEstimation à adapter en fonction de chaque projet 3,5 mois de travail effectif entre livraison et mise en prod  date butoir Sensibilisation des Chefs d’établissements

35. 1 Nommer un chef de projet Annuaire 2 Se préparer à l’arrivée de l’annuaire fédérateur Achat des plateformes 3 Fiabiliser les données SCONET 4 Installer l’annuaire fédérateur 5 Produire les fichiers XML complets et des fichiers de Deltas 6 Établir modalités d’échange données personnelles avec l’ENT 7Pré-Production 8 Mise en production SUPPORT 2 ème Niveau Prévu en relation avec l’équipe nationale TALENT STSI A1 Rectorat CTICE SIGAT Equipe de diffusion SIGAT Equipe de diffusion STSI A1 Préconisations, Validation SIGAT Equipe de diffusion

36. Précisions sur les grandes étapes du projet

37. Pré requis • Analyse détaillée des documents de référence et des outils disponibles • L’analyse détaillée de certains attributs • Classes / groupes • ENT à cheval sur 2 académies • Cas limites° • Périmètre détaillé (couvert/non couvert) • Catégories de personnes et de structures • Cas d’usages • Saisie des données • Erreurs de saisie  sensibilisation des établissements • Fiche remontée anomalie • Bases interrogées • Achat du matériel ° • Utilisation du jeu d’essai anonymisé • Précisions sur les types d’ « erreurs » incluses, de rejets à prendre en compte° • Données hors périmètre à ignorer (rattachement à des établissements hors expérimentation) • Fonctionnement du mode delta °

38. Installation • Installation de l’AF • Extraction XML • Temps de traitement et de propagation • Paramétrage de l outil annuaire fédérateur • Bases interrogées, • Configuration des batches…

39. Pré production • Mise en qualité des données • Traitement en masse de certaines anomalies (ex: supprimer les « - » à la place du prénom) • Bascules d’une année sur l’autre • Pérennité de la clé • Problème de volumétrie : delta énorme (mais pas plus l’initialisation) • Bascule sur l’autre base (dates associées, impératifs de gestion SCONET, immatriculation des nouveaux entrants, des enfants inscrits à 2 endroits) • Pour les nouveaux, branchez-vous directement sur la nouvelle base (?) • Temps de traitement –analyse des performances • Analyse de la chaine de bout en bout • Modalités d’échange avec l’intégrateur (en attendant le guichet unique) • Traitement des deltas • Evoquer cas particuliers (requête en modification à traiter par l’ENT en création…) • Configuration des batches côté ENT

40. Production • Bascules d’une année sur l’autre • Pérennité de la clé • Problème de volumétrie : delta énorme (mais pas plus qu’à l’initialisation) • Bascule sur l’autre base (dates associées, impératifs de gestion SCONET, immatriculation des nouveaux entrants, des enfants inscrits à 2 endroits) • Pour les nouveaux, branchez-vous directement sur la nouvelle base (? • Indicateurs • Retour d’expérience

41. Installation

42. Installation en plusieurs étapes : • Installation des scénarii sunopsis (cf PIAD) • Installation de l’agent sunopsis • Installation de DB2 • Création et paramètrage de la base AAF • Installation des scripts ( paramètrage …) • Installation du fichier des nomenclatures • Paramètrage ASPETL

43. Planning type de mise en œuvre de projet Installation Pré production Installation Production Première exploitation : • Paramétrage des établissements expérimentaux • Initialisation de la base AAF • Traitement des erreurs • Extraction des fichiers XML pour test d’alimentation de l’annuaire ENT • Extraction des fichiers XML pour alimentation de l’annuaire ENT en pré-production Installer l’annuaire fédérateur Extraire les fichiers XML (3 semaines Livraison de l’Annuaire Fédérateur Les acteurs Chefs d’établissement Rectorat intégrateur

44. Atelier techniqueInstallation • Installation de l’agent sunopsis • Installation de db2 • Création de la base AAF - création des utilisateurs - création de la base : lancement du script createBDAAFvx.x.sql - paramètrage de la base : logs….

45. Atelier techniqueInstallation • Installation des scripts /appli/aaf /export /conf /fichiers /lib /log /scripts /import /conf /fichiers /lib /log /scripts

46. Atelier techniqueInstallation • Paramètrage des scripts • fichier env.conf • fichier log.conf • fichier ENT_list.conf : si vous avez : Vous obtiendrez un fichier ENT_Filtre_Complet_YYYYMMAA_000.xml si vous avez : Vous obtiendrez 2 fichiers ETB0090025D_Complet_YYYYMMAA_000.xml ETB0090018W_Complet_YYYYMMAA_000.xml

47. Atelier techniqueInstallation • Installation des nomenclatures • Paramétrage par ASPETL Différentes variables à inititialiser : - la durée du delta - une adresse email pour recevoir les compte-rendus d ’exécution - durée de conservation des données sur les enseignants - durée de conservation des données sur les éléves et leurs parents.

48. Atelier techniqueInstallation Complément sur le périmètre de test : Précepte : Sconet ne connaît que des UAJ - Toutes les UAA rattachées à un UAJ seront automatiquement incluses dans les extractions : ne pas indiquer les UAA dans le fichier ENT_list.conf - pour une cité scolaire contenant plusieurs UAJ, préciser toutes les UAJ dans le fichier ENT_list.conf

49. Atelier techniqueInstallation Complément sur lancement des scénarii : Une fois en mode de production : - Utiliser le mode « scheduler » pour automatiser le lancement des traitements

50. Précisionssur certains attributs