R e визуализация Рабочие станции Мобильный доступ Суперкомпьютеры,pc-кластеры Хранилища данных, эксперименты, …



Скачать 170.24 Kb.
Pdf просмотр
Дата30.12.2016
Размер170.24 Kb.
Просмотров345
Скачиваний0

25.03.2011 1
Grid Computing
Overview
Margarita M. Stepanova mstep@mms.nw.ru
Saint-Petersburg State University,
Faculty of Physics
19.03.11
G
R
I
D
M
I
D
D
L
E
W
A
R
E
Визуализация
Рабочие
станции
Мобильный
доступ
Суперкомпьютеры,PC-кластеры
Хранилища данных, эксперименты, …
Internet, сети
Что такое Грид ?

25.03.2011 2
Грид-компьютинг - это скоординированное разделение ресурсов и
решение задач в динамически меняющихся виртуальных
организациях со многими участниками.
I. Foster, C. Kesselmann, S. Tuecke, “The Anatomy of the Grid”, (2000)
Виртуальная организация (VO)

это объединение (коллаборация)
специалистов из некоторой прикладной области, которые объединяются для достижения общей цели
+ совокупность принадлежащих им ресурсов
+ набор отношений между пользователями и ресурсами (кто, когда и как может использовать ресурсы)
Грид - это система, которая:

координирует использование ресурсов при отсутствии
централизованного управления этими ресурсами;

использует стандартные, открытые, универсальные протоколы и
интерфейсы;

обеспечивает высококачественное обслуживание.
I. Foster, “What is the grid?”(2002)
Что такое Грид ?
GRID
Распределенность на множестве административных доменов
Гетерогенность
Масштабируемость
Безопасность
Динамичность(адаптивность), устойчивость к отказам
Виртуальность (доступ к сервисам, а не к серверам)
Механизм обнаружения ресурсов
Принципы Grid-инфраструктуры

25.03.2011 3
Grid: сервисы и общая схема работы
Slide from Erwin Laure, CERN
Grid – не Internet
Internet:
глобальная система сетей, объединяющая множество хостов и позволяющая им взаимодействовать друг с другом
Grid:
способ совместного скоординированного использования распределенных ресурсов
Grid – не WEB
WWW:
глобальный доступ к текстовой, графической и др. информации
Grid:
глобальный доступ к
вычислительным ресурсам и ресурсам хранения данных
Grid – не большой кластер
Параллельный кластер:
интенсивный межпроцессный обмен
Grid: удаленный запуск задач на территориально распределенных ресурсах
При этом Grid:
- использует транспорт TCP/IP;
- реализован как WEB-сервисы, взаимодействующие между собой
по стандартизованным протоколам;
- позволяет решать сложнейшие задачи требующие больших
вычислительных ресурсов
Grid ?

25.03.2011 4
Resources компьютеры, кластеры, научные инструменты, хранилища данных, данные, сети, специальное программное обеспечение...
Grid Middleware специальное ПО (middleware), позволяющее поставщикам предоставлять ресурсы, а потребителям использовать их, и гарантирующее надежную связь в распределенной среде
Infrastructure высокоскоростные сети; VO; качество обслуживания; аппаратные средства; стандартные сервисы: авторизация, информационный сервис, мониторинг…
Standards формат и протоколы обмена сообщениями и общие правила работы грида
Grid =
ресурсы + технология + инфраструктура + стандарты
Тест на Grid-принадлежность

Три критерия:

Осуществляется координация ресурсов, не управляемых централизованно

С использованием стандартных, открытых и универсальных протоколов и интерфейсов

Для предоставления нетривиального качества обслуживания

Что не является Grid?
Кластер, сетевое хранилище данных, научный, прибор, сеть, … - это важные компоненты Grid, но сами по себе им не являются

25.03.2011 5

1980г
Metacomputing
– инициатива объединения суперкомпьютерных центров

Первая реализация:
Wide Area Year (I-WAY)
1995г.
-
Проект объединил 17 Supercomputig Centers US

Первые публикации:
Ian Foster
(University of Southern California)
и
Carl Kesselman
(University of Chicago)

1996г
Globus
- первое ППО

Другие концепции:
Condor, Legion, UNICORE

2003г Первые стандарты и спецификации:
- разработка модели
OGSA (Open Grid Service Architecture)
- спецификации
WSRF (Web Service Resource Frame Work)

2004г фирменные спецификации веб-сервисов:
-
WS-Eventing
( BEA Systems,Microsoft, Tiblo)
- WS-Notification
(HP, IBM, GlobusAlliance)

2006г согласование двух подходов –
WSRF/WS-N
History
The I-WAY Experiment (1995)
Source: Linda Winkler and Richard Foster

25.03.2011 6
Ian Foster,
University of Southern California
Carl Kesselman,
University of Chicago
History
“The Grid -Blueprint for a new
Computing Infrastructure”,
1998
“Classic” of GRID:
1. I. Foster, C. Kesselmann, S. Tuecke,
“The Anatomy of the Grid”, (2000)
2. I. Foster, C. Kesselmann, S. Tuecke, J.M.Nick
“The Physiology of the Grid”, (2002)

Metacomputing или Internet computing

Анализ данных с радиотелескопа на предмет наличия сигналов от внеземного разума
http://setiathome.ssl.berkeley.edu , http://boinc.berkeley.edu
Подробнее:
http://distributed.ru
http://parallel.ru/meta/internet.html
выбирайте и присоединяйтесь!
Проект
grid.org Cancer Research
ищет лекарство от рака
Проект
Folding@home
моделирует различные виды сворачивания белков
Цель проекта
RC5
-доказательство ненадежности алгоритма шифрования RC5 путем "взлома" зашифрованного с помощью него сообщения.
Сlimate Prediction
- выяснение точности современных климатических моделей и установка необходимых поправок.
Проект
MoneyBee
с помощью технологии нейронных сетей занимается анализом и предсказанием биржевых котировок и индексов.
Clean Energy
: разработка принципиально нового материал для солнечных батарей.

25.03.2011 7
X-Com
разработка MГУ(2001) - система организации распределенных вычислений на разнородных ресурсах по модели “ведущий”/ “ведомый” на базе HTTP.
Основные принципы:

клиент-серверная архитектура

возможность построения иерархических распределенных сред
Уникальность системы X-Com состоит в том, что для ее работы не требуется ни специализированных компьютеров, ни высокоскоростных сетей, ни сложной специальной настройки задействованных вычислительных ресурсов, ни жесткой ориентации на какой-либо конкретный язык программирования.

Metacomputing

Peer-to-Peer Computing (одноранговый)
Napster/ OurGrid / MyGrid / emule
- все участники равноправны, каждый может выступать как сервер или рабочий узел
Desktop Cycle
Aggregation

Desktop only

United Devices,
Entropia, Data Synapse
Cluster &
Departmental
“Grids”

Single owner, platform,
domain, file system and
location

SUN SGE, Platform LSF,
PBS
Enterprise “Grids”

Single enterprise; multiple
owners, platforms, domains, file
systems, locations, and security
policies

SUN SGE EE, Platform
Multicluster
Global
Grids

Multiple enterprises, owners,
platforms, domains, file systems,
locations, and security policies

Legion, Avaki,
Globus
Graph borrowed from A.Grimshaw
Grid paradigm is overloaded

25.03.2011 8
Общие архитектурные принципы
Обязательное требование к Грид ПО -
интероперабельность

Работа по общим открытым протоколам
, обеспечивающая взаимодействие элементов распределенной системы и структуру информации. Поддержка стандартов и широкая совместимость

Многоуровневая архитектура

Функциональная базовая компонента
сервис
(служба)
Идеальная Грид-инфраструктура должна
обеспечивать доступ к ресурсам так, чтобы различия между
платформами
сетевыми протоколами
административными границами
стали совершенно прозрачными
Layered Grid Architecture
(By Analogy to Internet Architecture)
Fabric Layer (аппаратный уровень)
протоколы,
по которым службы работают с ресурсами;
Connectivity Layer (связывающий уровень)
протоколы, которые обеспечивают обмен
данными между компонентами базового уровня
(транспорт и маршрутизация сообщений)
и протоколы аутентификации;
Resource Layer (ресурсный уровень)
– это ядро
многоуровневой системы, которое
взаимодействует с ресурсами, используя
унифицированный интерфейс и не различая
архитектурные особенности конкретного
ресурса;
Collective Layer (коллективный уровень)
отвечает за координацию использования
имеющихся ресурсов;
Application Layer (прикладной уровень)
описывает пользовательские приложения,
работающие в среде виртуальной организации
Application
Fabric
Connectivity
Resource
Collective
Internet
Transport
Application
Link
TCP/IP
Grid

25.03.2011 9
Service-oriented architecture (SOA)
Picture from: Введение в грид-технологии, Препринт НИИЯФ МГУ - 2007
Web-сервисы

Технология построения распределенных систем, использующая

сервис-ориентированный подход

общепризнанные Web-технологии и стандарты

HTTP – стандартный транспорт

XML - независимость от платформ и языков программирования

Web-сервис – программный компонент,

Доступ к которому осуществляется путем передачи XML- сообщений по протоколу SOAP (Simple Object Access Protocol) –
поверх HTTP

Интерфейс которого описывается на XML-языке WSDL (Web
Service Description Language)

25.03.2011 10
Web-сервисы
Принцип слабой связи
взаимодействующие компоненты
имеют минимальное знание друг о
друге: они находят необходимую
информацию непосредственно
перед взаимодействием
Open Grid Services Architecture(OGSA)

определяет стандартные механизмы для создания, именования и обнаружения постоянных и временных экземпляров сервисов;

обеспечивает прозрачность местонахождения и взаимодействия по различным протоколам для экземпляров сервисов;

описывает общую модель ресурсов, которая представляет собой абстрактное представление как физических ресурсов (таких как процессоры, процессы, диски и файловые системы), так и логических (экземпляров сервисов)

25.03.2011 11
Middleware: Globus ToolKit
http://www.globus.org
Является базисом для построения грид и приложений
Включает средства разработки служб в соответствии с группой стандартов WS, среду их функционирования, а также базовый набор служб:

управления заданиями(Execution Management),

управления распределенными данными (Data Management),

информационного обслуживания (Information Services),

безопасности (Grid Security Infrastructure (GSI).
Globus Toolkit: v. 4.2.1 - последний full-WSRF релиз v. 5.0.3 - текущий релиз (Pre-WS)
Концепция безопасности
A
c
c
o
u
n
ti
n
g
User
Resource
Authentication
Authorization
Grid Security Infrastructure (GSI)
- набор программ и библиотек, обеспечивающих аутентификацию, авторизацию, конфиденциальность и целостность данных

сертификаты X.509

механизм PKI (public key infrastructure)

протокол SSL

Proxy-сертификаты и механизм делегирования полномочий
(для обеспечения
однократной авторизации single sign-on в рамках
виртуальной организации)

25.03.2011 12
Пояснение терминов

Конфиденциальность:
Только отправитель и получатель могут прочитать сообщение
=> шифрование

Целостность:
Получатель сообщения может однозначно определить, совпадает ли полученное им сообщение с отправленным
=> цифровая сигнатура

Аутентификация:
Получатель и отправитель сообщения должны быть уверены в том, что в действительности взаимодействуют с требуемой стороной
=> сертификаты
, подписанные третьей стороной --CA

Авторизация:
Процесс принятия решения о том, имеет ли право субъект на выполнение определенного действия с объектом
=> локальные политики доступа
Запуск задания
User Interface
Logging and Bookkeeping
Replica Catalogue (RC)
Resource Broker
submitted
waiting
ready
scheduled
running
done
outputready
cleared
Information Service (IS)
Computing
Element
(CE)
Job Submission
Service (JSS)
Storage
Element
(SE)

25.03.2011 13
Workload Management
Data Management
Security
Information & Monitoring
Access
API
Computing
Element
Workload
Management
Metadata
Catalog
Storage
Element
Data
Movement
File & Replica
Catalog
Authorization
Authentication
Information &
Monitoring
Application
Monitoring
Auditing
Job
Provenance
Package
Manager
CLI
Accounting
Site Proxy
Overview paper http://doc.cern.ch//archive/electronic/egee/tr/egee-tr-2006-001.pdf
Grid Middleware Services
Collaborating e-Infrastructures
Potential for linking
80 countries by 2008


25.03.2011 14
Global
Community
EGEE (Enable Grid for E-sciencE)
237 центров в 45 странах

160 000 CPU


20 PB дисковой памяти, + tape

распределённое управление
>200 ВО из различных областей
науки

25.03.2011 15
The Large Hadron Collider (LHC)
Located at CERN, Geneva Switzerland
Particle accelerator and collider with a circumference of 16.8 miles
Scheduled to go into production in 2009
Will generate 10 Petabytes (107 Gigabytes) of information per year
This information must be processed and stored somewhere
CMS
LHCb
ATLAS
ALICE
CMS
ATLAS
LHCb
ALICE
При ожидаемой скорости записи сырых данных
потребуются ресурсы для хранения данных
порядка
десятков и сотен ПБ.
Для обработки данных потребуются
сотни тысяч
персональных компьютеров
Эксперименты на LHC

25.03.2011 16
ALICE (A Large Ion Collider Experiment – "Эксперимент на большом ионном коллайдере")
– эксперимент по изучению физики сильных взаимодействий при сверхвысоких плотностях, где ожидается образование нового состояния вещества: кварк-глюонной плазмы.

В эксперименте
ATLAS (A Toroidal LHC ApparatuS – "Тороидальная установка на
LHC")
будут изучаться глубинные основы строения вещества и фундаментальные силы, сформировавшие Вселенную.
CMS (Compact Muon Solenoid)
– детектор для новых исследований, в ходе которых будет предпринята попытка обнаружить бозон Хиггса и доказательства суперсимметрии.
LHCb (The Large Hadron Collider Beauty Experiment)
– эксперимент по изучению нарушения симметрии заряда и чётности. Этот эффект может являться причиной неравновесия между веществом и антивеществом при рождении Вселенной.
У каждого эксперимента – свои физические цели, но во всех надо вести
крупномасштабное моделирование событий, которые будут регистрироваться
при реальном столкновении высокоэнергетичных пучков протонов или тяжёлых
ионов.
Эксперименты на LHC
Slide from Harvey Newman, Caltech
Data Grids for High Energy Physics
Tier2 Centre
1 TIPS
Online System
Offline Processor Farm
20 TIPS
CERN Computer Centre
FermiLab
4 TIPS
France Regional
Centre
Italy Regional
Centre
Germany Regional
Centre
Institute
Institute
Institute
Institute
0.25TIPS
Physicist workstations
100 MBytes/sec
100 MBytes/sec
622 Mbits/sec
1 MBytes/sec
There is a “bunch crossing” every 25 nsecs.
There are 100 “triggers” per second
Each triggered event is
1 MByte in size

Physics data cache
PBytes/sec
622 Mbits/sec or Air Freight (deprecated)
Tier2 Centre
1 TIPS
Tier2 Centre
1 TIPS
Tier2 Centre
1 TIPS
Caltech
1 TIPS
622 Mbits/sec
Tier 0
Tier 1
Tier 2
Tier 4
1 TIPS is approximately 25,000
SpecInt95 equivalents

25.03.2011 17
EGEE в других областях
Биомедицина и биоинформатика
клиническая система поддержки принятия решений
CDSS
моделирование взаимодействия потенциальных лекарств с белками-мишенями
(проект
WISDOM
)
медицинская томография и планирование процедур радиотерапии
GATE
создание всеевропейской базы данных маммограмм
Mammogrid
Науки о Земле:
наблюдения за поверхностью Земли со спутников,
гидрология – проникновение морской воды в прибрежный водоносный слой,
климатология – прогнозирование наводнений,
физика Земли - численное моделирование землетрясений.
Геофизика (промышленное приложение
Geocluster
)
Астрофизика (проекты
MAGIC
,
Planck
,
ANTARES
,
NEMO
)
Термоядерный синтез (проект
ITER
)
Вычислительная химия (проекты
CHARON
,
CompChem
)
Археология
Финансовые приложения (проект
EGRID
)
……………………………………………………………………………..
(Всего свыше 200 виртуальных организаций)
TeraGrid Bioportal
Mercury, the first TeraGrid cluster,
deployed at the National Center
for Supercomputing Applications (NCSA),
TeraGrid Visualization
Gateway

25.03.2011 18
www.opensciencegrid.org
Jobs (2004)
Open Science Grid

50 sites (15,000 CPUs) & growing

400 to >1000 concurrent jobs

8 substantial applications + CS experiments; includes long-
running production operations

Up since October 2003; few FTEs central ops
UNICORE
Example: DEISA Grid Infrastructure

25.03.2011 19
Europe

Australia

Korea
Japan
China
Thailand
Malaysia
Singapore
Indonesia
STAR TAP
(USA)
Philippines
Vietnam


Hong Kong







Sri Lanka
622Mbps x 2
APAN Network Topology
Field Equipment
Laboratory
Equipment
Remote Users
Remote Users:
(K-12 Faculty and
Students)
Instrumented
Structures
and Sites
Leading Edge
Computation
Curated Data
Repository
Laboratory Equipment
Global
Connections
(
Faculty,
Students,
Practitioners)
Simulation
Tools
Repository
Network for Earthquake Eng. Simulation
www.neesgrid.org

25.03.2011 20
Access Grid & Collaboration Technologies
Connecting People and Applications via the Grid
Облачные вычисления (Сloud Сomputing
)
«Облачные вычисления — технология обработки данных, в которой программное обеспечение предоставляется пользователю как Интернет- сервис. Пользователь имеет доступ к собственным данным, но не может управлять и не должен заботиться об инфраструктуре, операционной системе и собственно программном обеспечении, с которым он работает.
Согласно документу IEEE опубликованному в 2008 году «Облачная обработка данных — это парадигма, в рамках которой информация постоянно хранится на серверах в сети Интернет и временно кэшируется на клиентской стороне, например на ПК, смартфонах , ноутбуках, и т. д.»

25.03.2011 21
Основные понятия

Software as a Service (SaaS)
– Предоставление доступа к приложению на сервере провайдера через веб-браузер. Наиболее распространенная модель.
– – Google (Mail, Docs, Wave, etc.), Zoho Office Suite и многие другие веб-службы
Platform as a Service (PaaS)
– Предоставление средств разработки приложений, которые будут выполняться на серверах провайдера. Виртуальная машина с необходимой
OC, БД, еtc..
– – Интегрированные среды разработки и выполнения программ Google App
Engine, Force.com, Amazon Web Services (AWS)

Infrastructure as a Service (IaaS)
– Предоставление масштабируемых вычислительных ресурсов и устройств хранения данных (на основе технологии виртуализации).
– – Amazon EC2, GoGrid.com, Microsoft Azure, OpenNebula, Eucalyptus..

Иногда в отдельные группы выделяют
Storage as a Service (STaaS), Communications as a Service (CaaS), Monitoring as a Service (MaaS
)
и некоторые другие службы и приложения
Обзор современных решений
*
Список далеко не полон

Решения для построения облаков
– VMware vSphere и vCloud
– Citrix Cloud Center (XenServer, NetScaler и др. )
– Sun Open Cloud Platform (на основе VirtualBox)
– Enomaly Elastic Computing Platform
– IBM Smart Business cloud (CloudBurst, CoD и др.)

Открытые решения и проекты
– Eucaliptus (www.eucaliptus.com), Ubuntu Enterprise Cloud
– Nimbus (www.nimbusproject,org)
> Основа проекта www.scienceclouds.org
– AltLinux Пятая платформа
– OpenNebula (www.opennebula.org)
> Основа европейского проект www.reservoir-fp7.eu

25.03.2011 22
Example: Amazon
Компания Amazon 26 августа
2009 года анонсировала свой сервис виртуальных частных облаков
Виртуальное частное облако – это персональное рабочее место сотрудника, размещённое в облаке.
Введя логин с паролем в окно веб-браузера для входа в облако, пользователь получает доступ и возможность работать со всеми своими рабочими файлами и приложениями.
P. S. Кстати,
у боссов есть мечта,
что такие технологии постепенно уничтожат
должность системного администратора. Действительно, зачем нужен специальный человек,
если вся IT расположена на
чужих
серверах?
Amazon Elastic Compute Cloud (Amazon EC2)
Cтоимость услуг:
– Отдельно тарифицируется время работы ВМ, время хранения
ВМ, объем хранимых данных, сетевой трафик (не только внешний), выделение IP адресов и мониторинг http://aws.amazon.com/ec2/

25.03.2011 23
NEBULA Cloud Computing Platform
Nebula(туманность)–разрабатывается в Исследовательском центре Эймса (NASA).
Цель проекта - интеграция компонент свободного ПО в единую инфраструктуру обеспечивающую высококачественный вычислительные сервисы.
В настоящее используется в открытых образовательных и исследовательских проектах.
В основе проекта лежат открытое ПО, предлагаются сервисы:
• Infrastructure as a Service
• Platform as a Service
• Software as a Service
http://nebula.nasa.gov/
RDIG ( РДИГ - Российский ГРИД для интенсивных операций с данными)
Консорциум РДИГ, согласно принятой в проекте EGEE структуре, входит в проект в качестве региональной федерации “Россия” (“Russia).
http://www.egee-rdig.ru

25.03.2011 24
Кафедра вычислительной физики экспериментальное тестирование грид-систем и разработка новых технологических решений;
поддержка и развитие вычислительных грид-сегментов, функционирующих в production-режиме;
использование вычислительных ресурсов для научных задач;
обучение и разработка учебных курсов в области сетевых, вычислительных и грид-технологий
Работа по направлению
“Грид-технологии” ведется на базе
распределенного учебно-научного
комплекса грид-технологий СПбГУ
Цели и основные направления деятельности:
gLite сайт RU-Phys-SPbSU
( production, кластер: 48 CPU);
сегмент Nordugrid
( production, кластер: 32 CPU );
сегмент ГридННС ( production+development );
экспериментальный сегмент
GlobusToolKit 4;
экспериментальный сегмент UNICORE;
Local CA - сервер локальных сертификатов;
MyProxy – репозиторий хранения и продления временных прокси-сертификатов;
PGrade портал для работы с gLite; локальный сервер мониторинга оборудования и сервисов (Nagios );
WEB-сервер (Trac, Wiki, WebDAV) и репозиторий с дистрибутивами для сетевой инсталляции
Комплекс содержит

25.03.2011 25
Hardware
Lan GigEthernet CiscoCatalyst 4506
CiscoCatalyst 2969G
Инфраструктурные узлы
Серверная платформа Supermicro 5015M-MT/ 1U
Intel Pentium 4 Dual Core 3.2Ghz
2048/ 2 x 1024MB DDR2 ECC
2xSATA Raid 0,1 / 2х200GB /LAN 1G
Вычислительные узлы
Серверная платформа Supermicro X7DVL-E/ 1U”
2 x Intel Xeon 3.0GHz/1333/4MB (Dual Core) EM64T
2 x 2048MB DDR ECC REG
2xSATA Raid 0,1/2х160G / LAN 1G
OS:
ScientificLinux, CentOS
Структура комплекса
(production status only, 2008)
Ru-Phys-SPbSU,
Department of Physics,
Peterhoff
Ru-Phys-SPbSU,
Cyclotron Lab, VO
Ru-Phys-SPbSU
Department of Philology and Arts

25.03.2011 26
Площадка в Циклотронной лоборатории
Cайт имеет распределенную структуру.
Поддерживаемые VO:
dteam,ops
ПО: gLite 3.1 2 CE (witch clusters 48 и 4 CPU);
2 SE: 1,5 Tb и 200Mb;
LFC;
Top_BDII ( Russia region only );
RB;
WMS и LB;
PX;
MON;
UI gLite cайт RU-Phys-SPbSU

25.03.2011 27

25.03.2011 28
P-Grade портал:
WEB-интерфейс к gLite-сайту
Создавать задачи в редакторе задач, в т. ч. с использованием
MPI и PVM
Запускать задачи
Следить за ходом выполнения и получать выходные данные
Получать информацию от информационной системы выбранного ресурса (грида)
Выгружать и загружать данные для хранения на удаленных ресурсах
Графический интерфейс, который позволяет:
Создание задачи, редактор задач
Workflow Editor:
позволяет создавать комплексные задачи, которые состоят из отдельных подзадач;
отдельные подзадачи могут выполняться на различных ресурсах;
выходные данные одних задач, используются как входные данные для других

25.03.2011 29
Сегмент NorduGrid: реализация
Cluster
16 CPU
Cluster
32 CPU
ap8.gridzone.ru
nordic.nw.ru
ap6.gridzone.ru
pank.nw.ru
grid-manager
gridftp
SSE
RLS
GIIS
Gridmonitor
grid-manager
Gridftp
LocalCA
MyProxy
User
Interface
RunTimeEnvironment:
gcc-4.2, f77, f90, HPF
MPI, OpenMP
Cегмент NorduGrid: мониторинг

25.03.2011 30
Монитор состояния систем и сервисов с мобильным оповещением (Nagios)
Участие в национальном проекте ГридННС
Цель: создать масштабируемую систему нового поколения, интегрирующую гетерогенные компьютерные ресурсы и обладающую эффективными механизмами выполнения пользовательских заданий в распределенной среде.
НИИЯФ МГУ, РНЦ «КИ», ОИЯИ, ПИЯФ
2008-2009 гг.- разработка архитектуры;
базовые инфраструктурные элементы
2010-2011 гг. разработка и развертывание полноценной инфраструктуры ГридННС.
Базовое Middleware: GlobusToolKit
ННС -
Национальная нанотехнологическая сеть
Сайт проекта:
http://www.ngrid.ru

25.03.2011 31
Структурная схема взаимодействия грид-сервисов ГридННС
Базовые сервисы:
● WebUI server
● Resource Brocker
+ Workflow manager
● Information Service
● Monitoring & Accounting
● Registration service
● GSI services
● CA, MyProxy, VOMS
● GridFTP servers
● SINP
● PNPI
● JINR
● RRC KI
● SpbSU
● IPCP RAS
● KNC
● CC DVO RAS
● IMCC
● IMCC UrO RAS
● Chebyshev (MSU
)
8 VO; 11 production sites; In total: about 6000 cores
Current status:
ГридННС: текущее состояние проекта
Создана функционирующая инфраструктура, которая в настоящее время включает
11 production-сайтов, в том числе, крупных крупных российских вычислительных центров;
поддерживается 8 виртуальных организаций

25.03.2011 32
Grid-2010
(Dubna, June28 - July3, 2010)
Distributed Computing and Grid-Technologies
in Science and Education: Proceedings of the
4rd Intern.Conf.
M.M. Stepanova, O.L. Stesik, D.S. Kasterin,
S.L. Yakovlev.
-- Information System GridNNN.
D.S. Kasterin, M.M. Stepanova, K.S. Shefov.
-- Using Grid for Quantum Chemistry and
Molecular Dynamic Applications.
Выполняемые научные работы на вычислительных ресурсах комплекса
Задачи молекулярной динамики
- вычислительные пакеты
NAMD и lammps
;
- визуализация траектории движения (
VMD
)
(физфак, кафедра вычислительной физики)
Квантово-химические расчеты твердых тел и моделирование свойств материалов -
CRISTAL
(химфак);
GAMESS,
Abinit, Gaussian
(физфак,
кафедра вычислительной физики)
Квантово-механические расчеты атомных столкновений
(физфак, кафедра квантовой механики)
Статистическое моделирование белковых структур
(биолого-почвенный факультет)
Статистический анализ структуры и динамики информационного пространства Рунет
(филфак)
Управление, анализ и обработка больших коллекций цифровых аудио и видео данных ( ПО TRANSANA, использование Data Grid Management
System Storage Resource Broker (SRB))
(филфак)

25.03.2011 33
Какая работа возможна для студента?
Системное администрирование/программирование (Linux)

установка/настройка/поддержка специализированного ПО;

виртуализация на многоядерных серверах (XEN, etc);

расширение системы мониторинга;

системы очередей, прикладное ПО для кластеров;

etc…
Настройка и поддержка грид-комплекса
Участие в проекте разработки ГридННС
Адаптация существующих и разработка новых приложений для грид-среды
Прикладные научные вычислительные задачи
Задачи обработки и визуализации данных
……
Спасибо за внимание!
Вопросы?
Uhm…..

25.03.2011 34
ГридННС - ресурсы
Суперкомпьютер МГУ “Ломоносов”
Суперкомпьютер СКИФ МГУ “Чебышев”
420 Tфлопс
35 776 ядер

Каталог: documents -> First
documents -> Публичный доклад. 2013 год Общая характеристика образовательного учреждения. Место расположения
documents -> «Значение использования икт в процессе развития дошкольников.»
documents -> Информации и коммуникации на подрастающее поколение. Научно исследовательская
documents -> 1 общая информация наименование дошкольного образовательного учреждения: мадоу «Детский сад комбинированного вида №49»
documents -> Образовательная программа «Гражданское население в противодействии распространению идеологии терроризма»
First -> Алгоритмы машинной графики часть 3 А. В. Цыганов 2010
First -> Правовые аспекты использования программного обеспечения (ПО)


Поделитесь с Вашими друзьями:


База данных защищена авторским правом ©nethash.ru 2019
обратиться к администрации

войти | регистрация
    Главная страница


загрузить материал