Światowy Grid komputerowy LHC Michał Turała IFJ PAN/ ACK Cyfronet AGH, Kraków

Podobne dokumenty
W Stanach Zjednoczonych jest to popularne określenie sieci elektrycznej

elektronicznych fizyki

Polityka wspierania prac naukowych i wdrożeniowych w obszarze informatyki jako element budowy społeczeństwa informacyjnego w Polsce

Jak znaleźć igłę w stogu siana

Infrastruktura PLGrid

PLGrid: informatyczne usługi i narzędzia wsparcia w nauce

Usługi HEP w PLGrid. Andrzej Olszewski

Infrastruktura PLGrid dla młodych polskich naukowców

i IFJ PAN w Krakowie S. Gadomski, "CERN i komputery",

Infrastruktura PLGrid (nie tylko) dla młodych naukowców

Infrastruktura PLGrid Nowa jakość usług informatycznych dla Polskiej Nauki

Infrastruktura PLGrid Nowa jakość usług informatycznych w służbie nauki

Infrastruktura PLGrid Nowa jakość usług informatycznych w służbie nauki

Jak znaleźć igłę w stogu siana

Wrocławskie Centrum Sieciowo-Superkomputerowe

Infrastruktura PLGrid dla młodych naukowców

Sieć PIONIER i sieci miejskie Warsztaty

Infrastruktura PLGrid Nowa jakość usług informatycznych dla Polskiej Nauki

Zasoby i usługi Wrocławskiego Centrum Sieciowo-Superkomputerowego

dr hab. Szymon Gadomski Uniwersytet Genewski i Instytut Fizyki Jądrowej PAN w Krakowie S. Gadomski, "CERN i komputery",

Cyfronet w CTA. Andrzej Oziębło DKDM

Infrastruktura PLGrid Nowa jakość usług informatycznych dla Polskiej Nauki

High Performance Computers in Cyfronet. Andrzej Oziębło Zakopane, marzec 2009

Usługi przechowywania danych KMD/PLATON-U4 dla bibliotek cyfrowych. Maciej Brzeźniak, Norbert Meyer, Rafał Mikołajczak, Maciej Stroiński

Skalowalna Platforma dla eksperymentów dużej skali typu Data Farming z wykorzystaniem środowisk organizacyjnie rozproszonych

Czwarte warsztaty Biblioteki cyfrowe dzień 1. Poznań 12 listopada 2007 r.

GRID - globalny system przetwarzania danych

Laboratorium Wirtualne

Zamawianie usługi. Bartłomiej Balcerek, WCSS Maciej Brzeźniak, PCSS. Warsztaty. Usługa powszechnej archiwizacji

Nauka i społeczeństwo informacyjne a nauczanie Jana Pawła II

Równoległe aplikacje duŝej skali w środowisku PL-Grid. Kick-off PL-GRID Kraków, kwietnia 2009

Stanisław Rejowski Dyrektor Działu Produkcji Serwerów ACTION S.A. Polskie serwery w służbie nauki

IMP PAN. Zaplecze obliczeniowe Centrum Zaawansowanych Technologii AERONET. Dolina Lotnicza

th- Zakład Zastosowań Metod Obliczeniowych (ZZMO)

Technologie taśmowe wprowadzenie i zastosowania. Jacek Herold, WCSS

Polscy nauczyciele fizyki w CERN. Polska w CERN. Jan Paweł Nassalski Instytut Problemów Jądrowych im. A. Sołtana. J.P.Nassalski NTP@CERN, 21.XI.

Zakład Eksperymentu ATLAS (NZ14)

Rozwój bibliotek cyfrowych w Polsce. Cezary Mazurek Tomasz Parkoła Marcin Werla

Witamy w CERN Marek Kowalski

Uslugi chmurowe dla nauki na podstawie BonFIRE

Wyznaczanie efektywności mionowego układu wyzwalania w CMS metodą Tag & Probe

Nowe aplikacje i usługi w środowisku Grid

Wydział Fizyki AGH" Kraków, 11 grudnia 2009"

GRIDY OBLICZENIOWE. Piotr Majkowski

Infrastruktura informatyczna dla nauki w Polsce

Program Obliczeń Wielkich Wyzwań Nauki i Techniki (POWIEW)

Jacek Kitowski i Łukasz Dutka ACK CYFRONET AGH, Kraków, Polska

Budowa uniwersalnej architektury dla Laboratorium Wirtualnego

Laboratorium Wirtualne w środowisku gridowym

Działanie 2.3: Inwestycje związane z rozwojem infrastruktury informatycznej nauki


Polacy i Polska w technologiach detektorów w CERN-ie. L. Zwalinski CERN EP/DT December 16 th 2016

Infrastruktura PLGrid: narzędzia wsparcia w nauce i dydaktyce. Mariola Czuchry, Klemens Noga, Katarzyna Zaczek. ACK Cyfronet AGH

Eksperyment ALICE i plazma kwarkowo-gluonowa

Dostęp do europejskich systemów obliczeniowych Tier-0/Tier-1 w ramach PRACE

Wprowadzenie do użytkowania infrastruktury PL Grid. Bartosz Bosak Piotr Kopta Tomasz Piontek

Prezentacja wstępna. Warsztaty Usługa powszechnej archiwizacji. Norbert Meyer, PCSS

Piotr Dziubecki Piotr Grabowski, Tomasz Kuczyński Tomasz Piontek, Dawid Szejnfeld, PCSS

LIDERZY DATA SCIENCE CENTRUM TECHNOLOGII ICM CENTRUM TECHNOLOGII ICM ICM UW TO NAJNOWOCZEŚNIEJSZY OŚRODEK DATA SCIENCE W EUROPIE ŚRODKOWEJ.

Składowanie, archiwizacja i obliczenia modelowe dla monitorowania środowiska Morza Bałtyckiego

Fizyka do przodu: AFP, ALFA Janusz Chwastowski

Warszawa, dnia 19 lipca 2013 r. Pozycja 49

Architektury i protokoły dla budowania systemów wiedzy - zadania PCSS w projekcie SYNAT

Warszawa, dnia 31 sierpnia 2012 r. Pozycja 59

Programowanie dla Wielkiego Zderzacza Hadronów

Tarnów i nowoczesne technologie. Tarnów - 13 czerwca 2006 r.

Technologia GRID w badaniach naukowych na Wielkim Zderzaczu Hadronów w CERN

Jak Big Data rewolucjonizuje naukę oraz współpracę centrów badawczych z biznesem?

Tarnów i nowoczesne technologie. Tarnów - 13 czerwca 2006 r.

Trzecie warsztaty Biblioteki cyfrowe. Poznań grudnia 2006 r.

Projekt PLATON zaawansowane usługi bazowe dla platform wiedzy

USŁUGI HIGH PERFORMANCE COMPUTING (HPC) DLA FIRM. Juliusz Pukacki,PCSS

Oszczędności w gospodarstwie przy użyciu nowoczesnych rozwiązań w rolnictwie.

Epiphany Wykład II: wprowadzenie

się także urządzenia do odzyskiwania ciepła, które przy tak dużych maszynach obliczeniowych, zajmują dużo miejsca wyjaśnił Krawentek.

Zarządzanie informacją i wiedzą w usługach o podwyŝszonym poziomie bezpieczeństwa. Poznań,

Prace informatyczne dla projektu CTA

"System CC1 jak zbudować prywatną chmurę obliczeniową w jedno popołudnie. M. Witek, M. Zdybał w imieniu CC1

Laboratorium Chmur obliczeniowych. Paweł Świątek, Łukasz Falas, Patryk Schauer, Radosław Adamkiewicz

PL-Grid i PLGrid Plus fundusze unijne wspierają przyspieszenie procesów innowacyjnych w obszarze e-science w Polsce

Lista rankingowa/suplement/korekta* Dla projektów o wartości wydatków kwalifikowanych co najmniej 15 mln PLN

WYKAZ PRZEDMIOTÓW I PLAN REALIZACJI

Rola polskich bibliotek cyfrowych w zapewnianiu otwartego dostępu

WYKŁAD 8. Wszechświat cząstek elementarnych dla przyrodników

WYKŁAD 8. Wszechświat cząstek elementarnych dla przyrodników. Maria Krawczyk, Wydział Fizyki UW

Na podstawie 6 ust. 1 oraz 10 ust. 1 Regulaminu Organizacyjnego ACK Cyfronet AGH z dnia 28 kwietnia 2005 roku zarządzam co następuje:

Infrastruktura bibliotek cyfrowych

Architektura komputerów

Efektywne wykorzystanie zasobów PLGrid w chemii obliczeniowej

LHC i po co nam On. Piotr Traczyk CERN

Infrastruktura PL-Grid wsparciem dla naukowców

Zadania PCSS w Polskiej Platformie Bezpieczeństwa Wewnętrznego

Akademia Tarnowska Państwowa Wyższa Szkoła Zawodowa Tarnów 11 październik 2007 Wizyta premiera Jarosława Kaczyńskiego

System wyzwalania i filtracji w eksperymencie ATLAS na LHC

Witamy w CERNie. Bolesław Pietrzyk LAPP Annecy (F) Wykład przygotowany przez polskich fizyków w CERNie.

Zakłady Naukowe Oddziału Fizyki i Astrofizyki Cząstek w Instytucie Fizyki Jądrowej

WYKAZ PRZEDMIOTÓW I PLAN REALIZACJI

biblioteka taśmowa O Centrum Równanie Schroedingera

Jak działają detektory. Julia Hoffman

Dostęp do europejskich systemów obliczeniowych Tier-0 w ramach PRACE

Transkrypt:

Światowy Grid komputerowy LHC Michał Turała IFJ PAN/ ACK Cyfronet AGH, Kraków 2009-01-13 1

CERN - eksperymenty LHC ATLAS Uczestnik projektu (dla ustalenia skali ) CMS LHCb ALICE

Eksperyment ATLAS Ludzie! Stan we wrześniu 2005 W listopadzie 2006 prąd w magnesach osiągnął nominalną wartość 20.5 ka za pierwsza próbą.. 2009-01-13 Michał Turała 3

Zderzające się protony LHC wytworzą temperaturę 100,000 razy większą niż ma słońce (ale w bardzo małej objętości). Taką, jaka miała miejsce w jednej bilionowej części sekundy po Wielkim Wybuchu (Big Bang) W przypadku zderzających się ciężkich jonów (np. ołowiu) temperatury (gęstość energii) będą jeszcze większe - powstanie mieszanina tysięcy kwarków i gluonów, a w konsekwencji dziesiątki tysięcy cząstek Zderzenia cząstek 2009-01-13

Eksperymenty LHC w CERN Problem doświadczalny Poszukiwanie bardzo rzadkich a złożonych zjawisk prawdopodobieństwo ich pojawienia się jest na poziomie 10-4 10-11 wszystkich oddziaływań (jeden ciekawy przypadek na 10 miliardów trywialnych zdarzeń!) -> poszukiwanie igły na ogromnym polu siana oddziaływania protonów, które są obiektami złożonymi, dają przy wysokich energiach skomplikowane obrazy oddziaływań -> analiza jest trudna Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 5

Preselekcja danych w czasie rzeczywistym Wiele różnych procesów fizycznych - kilka poziomów filtracji 40 MHz 40 MHz (1000 TB/sec (1000 TB/sec - równowa wnoważne ne) Level 1 Specialna elektronika -wysoka wydajność dla ciekawych przypadków 75 KHz 75 KHz (75 GB/sec) (75 GB/sec) w postaci postaci cyfrowej cyfrowej 5 KHz 5 KHz (5 GB/sec Level 2 Zintegrowane procesory -całkowity współczynnik redukcji około 3x10 5 (10 6 ) 150 Hz (5 GB/sec) 0 Hz (200 MB/sec) MB/sec) Zapis danych danych i Level 3 Farmy zwyczajnych PC tów analiza analiza offline ffline Ograniczenie ze względu na koszt dysków i taśm -rocznie PB yinformacji Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 6

The read-out electronics, trigger, DAQ and detector control systems have been brought into operation gradually over the past years, along with the detector commissioning with cosmics Example of LAr calorimeter read-out electronics Michal Turala Example of Level-1 Trigger electronics Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. In total about 300 racks with electronics in the underground 7 counting rooms

Komputing LHC Natężenie danych dla oddziaływań p-p Typowe parametry Nominalna częstość Częstość rejestracji Rozmiar przypadku Czas naświetlania Dane Monte Carlo - 10 9 przyp./s (25 przyp. x 40.10 6 zderzeń p-p) ~100 przypadków/s (270 przypadków/s) ~1 M Byte ów/przypadek (2 M Byte ów/przypadek) ~ 10 7 s/ rok Dla Objętość rejestracji surowych danych potrzeba na rok ok. 20 Peta Bytów pamięci, czyli ok. 100 tys. dysków po 200 GB! ~ 2 Peta Byte y/rok/eksperyment ~ 1-2 Peta Byte/rok/eksperyment Dla obliczeń LHC potrzeba ok. 100M SpecInt2000 co oznacza ok. 100 tys. procesorów 3GHz Pentium 4! Już obecnie eksperymenty BaBar, Belle, CDF, DO dostarczają po 1 TB/dzień 8

Komputing LHC organizacja Gridu komputerowego LCG W tym polski rozproszony Tier2 (ACK Cyfronet AGH Kraków - PCSS Poznań - ICM Warszawa) 2009-01-13 9

Komputing LHC podział funkcji pomiędzy poszczególne ośrodki Tier Michal Turala Seminarium IFJ PAN, maj 2007 10

Projekt Enabling Grid for E-SciencE ACK Cyfronet uczestniczy w tym projekcie poczynając od r. 2004 i pełni role Regionalnego Centrum Koordynującego na kraje Europy Środkowo-Wschodniej Michal Turala z prezentacji I. Birda 11

Transmisja danych w sieci WLCG 2009-01-13 Michał Turała 12

Obliczenia w sieci WLCG w ostatnich miesiącach 2009-01-13 Michał Turała 13

Worldwide LHC Computing Grid produkcja 2009-01-13 Michał Turała 14

Polski udział w projektach sieciowych i gridowych PIONIER, CrossGrid (koordynowany przez ACK Cyfronet AGH) i EGEE odegrały bardzo istotną rolę w rozwoju polskiej infrastruktury dla gridu komputerowego LHC Michal Turala

Ośrodki uczestniczące w światowej prototypowej sieci LCG (2003-05) We wrześniu 2003 ACK Cyfronet był pomiędzy pierwszymi 14 ośrodkami, z trzech kontynentów, które stworzyły prototyp wspólnej światowej sieci komputerowej dla fizyki around the world around the clock Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 16

ACK Cyfronet koordynatorem Regionalnego Centrum Operacyjnego (ROC) EGEE Coordinated by Poland Polska jest również członkiem projektu BalticGrid II, w którym uczestniczą kraje Europy Północno-Wschodniej, Białoruś, Estonia, Litwa, Łotwa i Szwecja Michal Turala 17

Połączenie polskiego Tier2 ze Światowym Gridem LHC (WLCG) Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 18

Polski udział w światowym Gridzie LHC ACK Cyfronet AGH Tier2 PCSS Poznań - Tier2 ICM Warszawa Tier2 IFJ PAN Kraków Tier3 Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 19

Komputing LHC dostępność i wydajność polskiego Tier2 LCG Polska podpisała porozumienie (Memorandum of Understanding) o udziale w projekcie WLCG jako rozproszony Tier2, w skład którego wchodzą centra komputerowe Krakowa (ACK Cyfronet AGH), Poznania (PSNC) i Warszawy (ICM), Zgodnie z tym porozumieniem Polska winna udostępnić eksperymentom LHC w r. 2008 około 1300 procesorów i około 120 TB przestrzeni dyskowej; w roku 2009 te ilości winny zostać znacznie zwiększone. Praca poszczególnych ośrodków jest monitorowana; zestawienie dostępności i wydajności za wrzesień 2008: Reliability Availability Oct.07 Nov.07 Dec.07 Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 20

LCG Monitorowanie pracy centrów komputerowych w czasie rzeczywistym ICM Warsaw PCSS Poznan ACK Cyfronet AGH i IFJ PAN Krakow RTM stan z 26 paźdz. 08. Michal Turala Dzień Otwarty ACK Cyfronet AGH, 27.X.2008. 21

Początkowa działalność PL-Grid Utworzenie Konsorcjum Polskiego Gridu (PL-Grid) Porozumienie podpisane w styczniu 2007 Akademickie Centrum Komputerowe CYFRONET AGH w Krakowie (ACK CYFRONET AGH) koordynator Programu PL-Grid Poznańskie Centrum Superkomputerowo-Sieciowe w Poznaniu (PCSS) Wrocławskie Centrum Sieciowo - Superkomputerowe we Wrocławiu (WCSS) Centrum Informatyczne Trójmiejskiej Akademickiej Sieci Komputerowej w Gdańsku (TASK) Interdyscyplinarne Centrum Modelowania Matematycznego i Komputerowego w Warszawie (ICM) Konsorcjum utworzone z pięciu największych polskich centrów superkomputerowo-sieciowych (założyciele) Przygotowanie projektu PL-Grid (2008-2010, 2011-2013) GEANT2

Infrastruktura PL-Grid Dziedzinowe systemy gridowe mogą być rozwijane i utrzymywane w ramach odrębnych projektów. Takie podejście powinno umożliwić efektywne wykorzystanie dostępnych środków finansowych. Zaawansowane Platformy Usługowe Aplikacja Aplikacja Aplikacja Aplikacja Grid Dziedzi nowy Grid Dziedzi nowy Grid Dziedzi nowy Grid Dziedzi nowy Infrastruktura gridowa (usługi gridowe) PL-Grid Klastry Komputery dużej mocy Repozytoria danych Krajowa sieć komputerowa PIONIER

Dziękuję za uwagę 2009-01-13 Michał Turała 24

Do rozwoju polskiego Gridu dla nauki przyczynili się w zasadniczym stopniu:.. z CERN: I.Bird, F.Gagliardi, R.Jones, L.Robertson, W.von Rueden. z Europy: D.Kranzlmueller (GUP Linz), J.Marco (CSIC Santander), P.Sloot (UvA Amsterdam), W.Gentzsch (D-Grid), H.Martin i K-P.Mickel (FZK Karlsruhe), J.Gomez (LIP Lisbon). z Polski: R.Gokieli (IPJ), M. Niezgódka (ICM), N.Meyer (PCSS), J. Nabrzyski (PCSS), K.Nawrocki (ICM), J. Węglarz (PCSS), W.Wiślicki (ICM). z Krakowa: M.Bubak (ACK), J.Kitowski (ACK), K.Korcyl (IFJ), A.Kusznir (ACK), P.Lasoń (ACK), P.Malecki (IFJ), Z.Mosurska (ACK), J.Niwicki (ACK), M.Noga (ACK), P.Nyczyk (ACK), A.Olszewski (IFJ), A.Oziebło (ACK), H.Pałka (IFJ), M.Radecki (ACK), T.Szepieniec ACK), T.Szymocha (IFJ), M.T. (IFJ), K.Wiatr (ACK), M.Witek (IFJ), K.Zieliński (ACK). i wielu innych. 2009-01-13 Michał Turała 25