1 / 28

Введение в проект EGEE

Введение в проект EGEE. Олешко С.Б. Петербургский институт ядерной физики г.Гатчина. Название проекта. EGEE- Enabling Grigs for E-sciencE Развертывание инфраструктуры Грид для науки. Содержание. Основные цели и задачи проекта Функциональность проекта EGEE

barry-weaver
Download Presentation

Введение в проект EGEE

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Введение в проект EGEE Олешко С.Б. Петербургский институт ядерной физики г.Гатчина

  2. Название проекта EGEE- Enabling Grigs for E-sciencE Развертываниеинфраструктуры Грид для науки Saint-Petersburg, EGEE tutorial, 6.12.2007

  3. Содержание • Основные цели и задачи проекта • Функциональность проекта EGEE • Основные направления работ в проекте • Ресурсы EGEE-II • Проект БАК (LHC) • LCG : LHC computing GRID • Роль ЦЕРНа в EGEE • Россия в проекте EGEE Saint-Petersburg, EGEE tutorial, 6.12.2007

  4. Основные цели и задачи проекта • Обеспечить создание высокопроизводительной продукционной GRID инфраструктуры,ее поддержку и развитие • Предоставлять круглосуточный доступ к вычислительным ресурсам независимо от их географического положения • Объединить национальные, региональные и тематические грид-разработки в единую цельную грид-инфраструктуру для поддержки научных исследований • Привлекать пользователей из различных сфер деятельности (медицина, экономика, культура,… ) и обеспечить им высокий уровень обучения и поддержки Saint-Petersburg, EGEE tutorial, 6.12.2007

  5. Функциональность проекта EGEE • Упрощённый доступ.EGEE уменьшает издержки, связанные с разнообразием не связанных между собой систем учёта пользователей. Пользователи могут объединяться в виртуальные организации с доступом к grid – инфраструктуре, содержащей нужные каждому пользователю рабочие ресурсы. • Выполнение вычислений по требованию. Эффективно распределяя ресурсы, grid-технологии значительно сокращают время ожидания доступа к ним. • Географически распределённый доступ. Инфраструктура доступна отовсюду, где обеспечен хороший доступ к сети. Ресурсы становятся широко доступными. • Исключительно большой объём ресурсов. Благодаря согласованности ресурсов и пользовательских групп, в прикладной работе в рамках EGEE будут доступны ресурсы таких объёмов, какие не может предоставить ни один компьютерный центр. • Совместное использование программного обеспечения и данных. Благодаря единой структуре вычислительных средств, в EGEE пользователям легко совместно использовать программное обеспечение и базы данных и разрабатывать программное обеспечение. • Высокий уровень поддержки приложений. Компетентность всех участников EGEE обеспечивает тщательную, всестороннюю поддержку всех основных приложений. Saint-Petersburg, EGEE tutorial, 6.12.2007

  6. Временныерамкипроекта Апрель 2004: проект стартовал Saint-Petersburg, EGEE tutorial, 6.12.2007

  7. EGEE-II: Участникиипартнёры • Более 90 партнёров • 36 стран • 12 федераций • Ведущие международные и национальные Грид проекты в Европе, США, Азии • Всего ~80 потенциальныхстран-партнёров, участвующих в партнёрских идругих проектах: • BalticGrid, SEE-GRID, EUMedGrid, EUChinaGrid, EUIndiaGrid, EELA, Naregi, OSG, TeraGrid Saint-Petersburg, EGEE tutorial, 6.12.2007

  8. 98k зад./день Ресурсы EGEE-II сейчас • 237 центров в 45 странах • ~36 000 CPU • ~ 5 PB дисковой памяти, + tape MSS • распределённое управление • >200 ВО из различных областей науки Saint-Petersburg, EGEE tutorial, 6.12.2007

  9. Мониторинг узлов EGEE Saint-Petersburg, EGEE tutorial, 6.12.2007

  10. Мониторинг узлов EGEE Saint-Petersburg, EGEE tutorial, 6.12.2007

  11. Активности в EGEE • NA2 – Распространение информации WEB сайты, e-почта, презентации, визиты, конференции ,публикации,... • NA3 – Обучение Подготовка обучающих материалов. Проведение курсов • NA4 – Применение и поддержка Grid-структуры в приложениях Поддержка приложений использующихся в EGEE. Привлечение пользователей. Определение общих интерфейсов и инструментария.. • SA1 – Поддержка функционирования Европейского Grid Мониторинг и управление Grid структурой. Распространение Grid ПО и включение новых вычислительных ресурсов.Поддержка пользователей. • SA2 – Обеспечение сетевыми ресурсами Взаимодействие с сетевыми провайдерами. Решение сетевых проблем. • SA3 – Интеграция, тестирование и сертификация Grid ПО • JRA1–Ре-инжиниринг ППО gLite. Стандартизация созданного ППО. Адаптация и оптимизация под другие платформы и требования. Saint-Petersburg, EGEE tutorial, 6.12.2007

  12. Управление ГРИД EGEE • Операционный центр управления (OMС) • ЦЕРН - общая координация • Центры базовой инфраструктуры (CIC) -5 центров (Великобритания, Франция, ЦЕРН, Италия, Россия) • обеспечение постоянной (24x7) работы базовых грид-служб, мониторинг системы; • реализация и контроль за выполнением правил, выработанных OMS • обеспечение поддержки узлов 2-го уровня • Региональные операционные центры (ROC)~ 11 центров • поддержка пользователей и администраторов ресурсов • координация региональных ресурсов Saint-Petersburg, EGEE tutorial, 6.12.2007

  13. RC RC RC RC ROC RC RC RC RC RC ROC RC RC RC CIC CIC RC ROC RC CIC OMC CIC CIC CIC RC RC RC ROC RC RC RC Ресурсные центры RC = Resource Centre Saint-Petersburg, EGEE tutorial, 6.12.2007

  14. О ЦЕРНе (CERN) • Расположен на границе Щвейцарии-Франции. Крупнейший в мире исследовательский центр по ФВЭ • Работают представители ~500 университетов и институтов (штат~2500чел., 6500 визитеров из ~40 стран) • Сделано много открытий и разработано много новых технологии, включаяWWW. • Большинство Нобелевских лауреатов по физике последних лет так или иначе связаны с ЦЕРН. Saint-Petersburg, EGEE tutorial, 6.12.2007

  15. Большой адронный коллайдер (LHC) • Длина окружности ускорителя – 27 км. • Запуск – в 2008 году Saint-Petersburg, EGEE tutorial, 6.12.2007

  16. Эксперименты на БАК Saint-Petersburg, EGEE tutorial, 6.12.2007

  17. Место для детектора ATLAS Saint-Petersburg, EGEE tutorial, 6.12.2007

  18. Детектор ATLAS Saint-Petersburg, EGEE tutorial, 6.12.2007

  19. Данные БАК 1 Мегабайт (1MB) Цифровая фотография 1 Гигабайт (1GB) = 1000MB DVD фильм 1 Терабайт (1TB)= 1000GB Объём всех книг, изданных за год в мире 1 Петабайт (1PB)= 1000TB Производит за год один эксперимент БАК 1 Экзобайт (1EB)= 1000 PB Объём информации, которую производит за год всё человечество • 40000000 столкновений в секунду • После фильтрации, остаётся только 100 событий в секунду • Объём оцифрованных данных для одного события ~ 1Мб • За год необходимо записать 1010 событий = 10 Петабайт данных в год CMS LHCb ATLAS ALICE Saint-Petersburg, EGEE tutorial, 6.12.2007

  20. Воздушный шар (30 Км) Стопка CD дисков с данными БАК за 1 год (~ 20 Км) Конкорд (15 Км) Монблан (4.8 Км) Необходимость ГРИД для БАК • Объём получаемых данных БАК соответствует 20 миллионам записанных CD дисков в год. Где их хранить? • Анализ данных LHC потребует вычислительных мощностей, эквивалентных мощности 100000 самых современных процессоров.Где их взять? • РесурсыЦЕРН уже сейчас составляют более 1000 2-х процессорных ПК и 1 Пб памяти на дисках и на лентах. Но этого мало!!! Выход – объединение вычислительных ресурсов физиков всего мира Saint-Petersburg, EGEE tutorial, 6.12.2007

  21. Роль ЦЕРНа в проекте EGEE • Эксперименты на LHC предполагают беспрецедентное использование компьютеров для хранения и обработки данных. • LHC Computing GRID (LCG проект) и GRID технологии являются ответственностью CERN. ППО LCG-2 было выбрано как стартовая версия для EGEE (EGEE-0). По этим принципам CERN является головным партнером в EGEE проекте. Saint-Petersburg, EGEE tutorial, 6.12.2007

  22. Распределение время/ВО Saint-Petersburg, EGEE tutorial, 6.12.2007

  23. Распределение время/регион Saint-Petersburg, EGEE tutorial, 6.12.2007

  24. Участие России в проекте EGEE В целях обеспечения полномасштабного участия России в этом проекте был образован консорциум РДИГ (Российский ГРИД для интенсивных операций с данными – Russian Data Intensive GRID, RDIG) для эффективного выполнения работ по проекту и развитию в России инфраструктуры EGEE, с вовлечением на следующих этапах проекта других организаций из различных областей науки, образования и промышленности. Консорциум РДИГ, согласно принятой в проекте EGEE структуре, входит в проект в качестве региональной федерации “Россия” (“Russia). Сейчас в РДИГ (http://www.egee-rdig.ru) входят 15 институтов (в 2003 году - 8) Saint-Petersburg, EGEE tutorial, 6.12.2007

  25. РДИГ (кол-во заданий) Saint-Petersburg, EGEE tutorial, 6.12.2007

  26. РДИГ (% кол-ва заданий/сайт) Saint-Petersburg, EGEE tutorial, 6.12.2007

  27. Заключение • EGEE – самая большая в мире грид-инфраструктура, используемая в интересах многих областей науки • Постоянно растёт число виртуальных организаций и приложений • Россия участвует в деятельности EGEE • РДИГ – первая реальная ГРИД-инфраструктура в России • Первый ГРИД-проект всероссийского уровня , поддержанный Правительством России • Для участников – опыт работы в большом общеевропейском проекте по эгидой ЕС Saint-Petersburg, EGEE tutorial, 6.12.2007

  28. Европейская Грид инициатива (EGI) • Необходимость подготовки постоянной, общей Грид инфраструктуры • Поддержка долговременной Европейской e-инфраструктуры, независимо от выполняемых краткосрочных (1-2 года) проектов • Координация интеграции и взаимодействия между Национальными Грид Инфраструктурами (NGI) • Управление Европейским уровнем производственной Грид инфраструктуры для широкого круга научных дисциплин совместно с NGIs. Saint-Petersburg, EGEE tutorial, 6.12.2007

More Related