Présentation de Windows HPC Server 2008 : fonctionnalités, cas d'emploi et beta de la version R2

2. Présentation de Windows HPC Server 2008 : fonctionnalités, cas d'emploi et beta de la version R2 Mardi 9 Février 2010Thomas VARLETAvant Vente HPCMicrosoft France

5. Environment HPC Infrastructure d’entreprise Clusters/supercomputers Réseaux rapides Stockage Equipes Informatiques Scientifiques Ingénieurs Analystes financiers Technologies Mainstream Compilateurs Languages spécialisées Debuggers

6. High Productivity Computing Infrastructure combinées Fusion des Datacenters HPC et IT, administration du cluster simplifiée Environnement PC et HPC unifiée Utilisateurs avec un accès a de multiples cœurs et serveurs Développement parallèle simplifié Environnement de développement unifié

7. Vision de Microsoft pour le HPC “Fournir une plateforme, des outils et un large écosystème pour réduire la complexité du HPC en rendant le parallélisme plus accessible pour trouver de futurs solutions/produits. Réduire la complexitée Mainstream HPC Large écosystème • Faciliter le déploiement de gros cluster • Adresser les besoins traditionnels du HPC • Augmenter le nombre d’applications parallèle • Simplifier l’administration de cluster • Adresser les besoins émergeant du calculs • Offrir un choix d’outils/ langages / bibliothèques parallèle • Intégration avec l’infrastructure existante • Permettre aux utilisateurs non techniques d’utiliser la puissance d’une solution de calcul • Augmenter le nombre d’utilisateurs/développeurs/ administrateurs

8. Windows HPC Server 2008 • Plateforme complète et intégrée de cluster HPC • Basée sur la plateforme Windows Server 2008 • Environnement intégré de développement • Version d’évaluation disponible sur http://www.microsoft.com/hpc

9. HPC Pack 2008 • Interface fenêtrée (MMC) • Interface PowerShell • Haute disponibilité des frontales • Windows Deployment Services • Diagnostiques/Reporting • Agent pour SCOM • Support pour SOA et WCF • Sélection de la granularité des ressources • Scalabilité pour de gros clusters, • Gestion de politique de scheduling • Interopérabilité via HPC Profile Administration du système Job Scheduling Réseau & MPI Stockage • Support de système de fichiers parallèle dans Win2008 • Server Message Block ( SMB v2) • Support de système de mémoire cache • NetworkDirect (RDMA) pour MPI • Wizzard de configuration du cluster • Mémoire partagée pour MPI sur multi-cœur • MS-MPI est intégré avec Windows Event Tracing

10. Topologie typique Infrastructure IT SystemsManagement Windows Update Monitoring AD DNS DHCP Réseau d’entreprise Nœud Maitre Nœud de calcul Nœud de calcul Admin / User Cons Node Manager Node Manager WDS MPI MPI Job Scheduler Management MPI Management Management NAT Réseau Privé Réseau MPI Cluster

11. Faciliter l’administration • Simple à installer et à gérer dans un environnement familier • Solution clef en main avec nos OEM • Simplifie le déploiement de systèmes et d’applications • Images de base, patches, drivers, applications • Administration : • Diagnostics, dépannage et monitoring • Interface de gestion familière et flexible • Ligne de commandes • Extensible : • Déploiement, administration, infrastructure • Haute disponibilité du nœud maitre • Rapport d’utilisation du cluster • Intégration dans l’infrastructure d’entreprise • Gestion des Patchs • System Center Operations Management • PowerShell • « Windows 2008 highAvailability Services »

12. Faciliter l’utilisation : Ordonnanceur • Support toutes les tailles de cluster : • Cluster “hétérogènes” • Interface du type Linux/Unix • Gestion des ressources • Mémoire, cœur, socket, applicatif • Gestion des utilisateurs • Groupe, priorités • Gestion des jobs • « Grow/shrink », SOA • Interopérabilité : • Ordonnanceur du marché • File système parallèle • Large support d’application : • Travail avec les ISV

14. Centre de Jouys-en-Josas : • Laboratoire de Génétique Microbienne • "Rapidité de développement, performance, ergonomie, nous disposons d’une architecture matérielle et logicielle qui va nous aider dans le traitement des données", • développer des applications clés en main pour les biologistes. • Cluster DELL de 8 serveurs sous HPCS cluster • Centre de Nancy : • Simulations du comportement du bois optimisées • « Cet environnement de simulation complet et intégré permet d’exploiter pleinement le calcul parallèle et distribué, nous donne une totale autonomie pour la gestion de la plate-forme et facilite la démarche d’optimisation du code de simulation »  • Premier cluster DELL de 5 serveurs sous CCS • Etendu a 13 serveurs avec IB sous Windows HPC Serveur

15. EURO/CFD : • Entreprise spécialisée dans la simulation numérique des phénomènes physiques à Belfort, • 11 Ingénieurs, ANSYS Fluent • Premier cluster de 24 serveurs (144 cœurs) sous CCS • Maintenant, cluster de 35 serveurs (220 cœurs) sous HPCS

16. L'Institut Automobile du Mans (IAM) a pour objectif le développement socio-économique de la filière automobile des Pays de la Loire. • Met a la disposition de ses membres de la puissance de calcul sous Windows • 4 clusters reconfigurables : • 4 frontales • Total de 8 serveurs • Conseil/Intégration/réalisation : • Serviware • Solution de calcul • ANSYS, Simulia, Altair, …

17. Cluster HP sous Windows HPC Serveurs 2008 • 8 serveurs dans 4U • 54 cœurs Intel Xéon 5560 • Réseau Infiniband • Pour nos clients : • Démo, • Tests, • Séminaires HPC

19. Entrée de Microsoft dans le HPC 2006 Personal Super Computing • Windows Server 2003 • Entrée de Microsoft dans le HPC • Besoin « personnel » ou départemental • Application HPC disponible sous Windows • Outils de développement parallèle et HPC • Facilité d’administration et de déploiement • Intégration dans l’infrastructure Microsoft

20. Microsoft HPC Server 2006 2008 Broad Reaching HPC • Windows Server 2008 • Support du HPC traditionnel et émergeant • Support de grand cluster (Top500) • Meilleurs support des outils de développement et SOA • Amélioration d’administration et de déploiement • Intégration dans l’infrastructure Microsoft

21. Prochain Windows HPC 2010 Parallel Extensions 2006 2008 2010 Highly Scalable, Efficient HPC • Windows Server 2008 R2 • Infrastructure extensible jusqu’a 1000+ serveurs • Elément d’administration « customisable » pour un meilleur contrôle • Evolution du modèle SOA pour une meilleur extensibilité et programmation • Modèle de programmation parallèle dans les Extensions .NET • Intégration dans l’infrastructure Microsoft

22. Quels nouvelles fonctionalités • ATTENTION : ces fonctionnalités peuvent encore changer (ajout/suppression) • Version Béta 2 sera complète ! Performance Utilisation Efficassité - Amélioration pour déploiement de grand clusters, - Support de base de donnée distante pour le cluster • Nœuds virtuels • Wizzard de gestion des patchs • Group de serveurs • Customisation de la Heatmap • - Nœuds de calculs sans disque via boot réseau basé sur iSCSI • Filtres et vue multiples • Diagnostiques/Rapports extensibles Admin. Système • Vue de la progression des jobs • Taches de préparation/nettoyage • Information sur les jobs en erreurs • Amélioration de la sécurité • Envoie d’email • Utilisation de PC sous Windows 7 dans le cluster • Optimisations pour gestion de grand clusters • Extension du modèle de « parametersweep » • Gestion des priorité des services • Amélioration de la gestion des licences applicatives Job Scheduler • Vérification/Diagnostiques • Diagnostiques extensible • Corrélation des traces • Tracing • Plus de compteur de perf sur les Broker • CLI pour voir les sessions • Modèle d’échange de messages en duplex, • Persistance des Messages • Redémarrage automatique des WCF broker ou haute disponibilité • JOB SOA : lance et collecte • - Installation Out-of-the-box des WCF broker • Point de configuration unifié via IU • Barre de progression intégré Modèle SOA • Placement des processus MPI - Options de tunning MS MPI Support MPI

23. Deploiement Flexible

24. Extensibilité

25. Heat Map Flexible

26. Utilisation de stations de travail Augmenter la puissance du cluster HPC en utilisant la puissance libre sur les stations de travails. • Principe : • HPC Server 2008 R2 introduit la possibilité d’ajouter des PC sous Windows 7 comme des nœuds de calculs dans un cluster HPCS • Vois et surveille les PC comme des nœuds de calculs dédiés. • Utilisation pendant des créneaux de disponibilité (nuit, week-end, … ) • Les Jobs soumis sur un PC : • niveau de priorités bas • éviter une interruption de service sur la console. • Prérequis • Windows 7 Professional ou Enterprise • besoin du support Active Directory • Ne supporte que la topologie 5 : • PC, la frontale et les nœuds de calculs doivent-être sur le même réseau public • Même domaines pour PC et serveurs

27. Diagnostiques avancé

28. Business Critical SOA

29. code VSTO dans un classeur appel un service SOA • Entrées et sorties gérés par le développeur Excel Excel 2010 sur Windows HPC • Excel fonctionne sur le cluster et calculs des classeurs • Lancé depuis un client (Excel/application) • Excel 2010 sur un serveur lancé par un services SOA, • Nécessite HPC Server 2008 R2 et Excel 2010 Windows HPC Server 2008 R2 fournis 2 nouveaux mécanisme pour distribuer des calculs Excel sur un cluster HPC • Excel client SOA • Depuis Excel, envoie les UDF (XLL) existantes sur un cluster • Simple add-in Excel pour lancer les UDF sur le cluster • Nécessite HPC Server 2008 R2 et Excel 2010 • Remote Excel Nouveau • Remote UDF Nouveau

30. Windows HPC Server 2008 R2 Release Schedule Q2 2009 Q3 2009 Q4 2009 Q1 2010 Q3 2010 Mai Juin Juil. Aout Sept Oct Nov Dec Jan Fevr Mar RTM H2 2010 Community Technical Preview May 2009 CTP 2 Sept 2009 Beta Nov 2009 Beta2 Mar2010 Windows HPC Server 2008 SP1 RTM Eté 2010 English, Chinese, Japanese

31. Pour plus d’informations • http://www.microsoft.com/hpc • Liens pour télécharger Beta 1 sur MS Connect • Liens pour télécharger des docs sur R2 • http://technet.microsoft.com/hpc • Liens vers des documentations techniques, Blog équipe HPC et forums HPC • Mis à jour régulièrement avec des nouvelles documentations, SDKs, exemples, vidéos, et autres infos utiles

32. Autres sessions HPC • Mardi 9 Février de 17h30 à 18h30 • Microsoft Office Excel 2010 et Windows HPC Server 2008 R2 : puissance d'un cluster de calcul Excel • Des calculs de plus en plus énormes se font dans des feuilles Excel. Il n'est pas rare que ceux-ci durent des heures voire des jours. Il était logique qu'Excel comme les autres applications de calcul puisse tirer parti de la puissance des clusters HPC. Avec la beta de Windows HPC Server 2008 R2 et Excel 2010 un premier pas important est fait dans cette direction. Venez comprendre et voir les mécanismes mis en oeuvre avec des démos « live ».