15
International Particle Physics Masterclass Belgrade 2012 University of Belgrade, Faculty of Physics, 9 March 2012 A c a d e m i c a n d E d u c a t i o n a l G r i d I n i t i a t i v e o f S e r b i a A E G I S 9. mart 2012. Grid Computing – Računarski resursi za LHC Antun Balaž Laboratorija za primenu računara u nauci (SCL) Institut za fiziku Beograd http://www.scl.rs/

MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

  • Upload
    others

  • View
    0

  • Download
    0

Embed Size (px)

Citation preview

Page 1: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

International Particle Physics Masterclass Belgrade 2012 University of Belgrade, Faculty of Physics, 9 March 2012

Aca

dem

ic  and  E d

u cat i

o n a l   G r id   I n it ia t iv e   of   S

erbia

A   E   G   I   S9. mart 2012.

Grid Computing – Računarski resursi za LHC

Antun Balaž Laboratorija za primenu računara u nauci (SCL) Institut za fiziku Beograd http://www.scl.rs/

Page 2: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Odakle numeričke simulacije u nauci?

  Da bismo numerički rešavali teorije koje drugačije ne mogu da budu rešene (tj. da bismo dobili brojeve/rezultate iz teorija, slično kao što se u eksperimentima dobijaju pravi, fizički rezultati)

  Da bismo izvršavali virtuelne eksperimente kada pravi eksperimenti nisu mogući, ili kada ih je potrebno izvesti pod uslovima koje je teško kontrolisati u laboratoriji

  Da bi procenili smislenost i opravdanost ideja i novih teorija

International Particle Physics Masterclass Belgrade 2012

Page 3: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Primer problema gde su neophodne visoke performanse

Slika sa: http://www.f1nutter.co.uk/tech/pitstop.php

International Particle Physics Masterclass Belgrade 2012

Page 4: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

  Dekompozicija domena   Različiti ljudi

izvršavaju iste poslove, ali na lokalnom nivou

Analiza paralelnog rešenja   Funkcionalna dekompozicija

  različiti ljudi izvršavaju različite poslove

International Particle Physics Masterclass Belgrade 2012

Page 5: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Motivacija   Zašto Grid?   Nauka postaje sve više digitalna i

zahteva obradu džinovskih količina podataka

  Fizika elementarnih čestica je jedna od važnih naučnih disciplina koja koristi velike količine računarskih resursa   Velike količine podataka iz

eksperimenata   Velike međunarodne kolaboracije   Large Hadron Collider (LHC) u CERN-u

  40 miliona sudara u sekundi   ~10 PB/god

Concorde (15 Km)

Balloon (30 Km)

CD stack with 1 year LHC data! (~ 20 Km)

Mt. Blanc (4.8 Km)

International Particle Physics Masterclass Belgrade 2012

Page 6: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Rešenje: Grid … zajednička upotreba distribuiranih

računarskih resursa (CPU, podaci, itd.) na siguran način, tako da korisnici mogu da sarađuju u okviru virtuelnih organizacija (VO)

International Particle Physics Masterclass Belgrade 2012

Page 7: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Osnove Grid tehnologije   http://globus.org

Želeo bih da

koristim Grid

resurse

Gde mogu da ih

nađem?

Želeo bih da

skladištim podatke

Sve mora da bude sigurno International Particle Physics Masterclass Belgrade 2012

Page 8: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

gLite – Grid middleware   Grid počiva na naprednom softveru, koji

zovemo middleware I koji povezuje resurse i aplikacije

  Grid middleware " Nalazi odgovarajuće klastere na kojima aplikacije

mogu da budu izvršene " Optimizuje upotrebu resursa " Organizuje efikasan pristup podacima " Vodi računa o autentifikaciji korisnika na različitim

klasterima " Obezbeđuje izvršavanje simulacija i nadgledanje

njihovog statusa " Isporučuje rezultate simulacija naučnicima

International Particle Physics Masterclass Belgrade 2012

Page 9: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

gLite – pregled   Prva verzija 2005

  Trenutno: gLite 3.1 3.2 EMI-1

  Razvijen na osnovu postojećih komponenti (globus, condor,..)

  Interoperabilnost i koegzistencija sa drugim Grid infrastrukturama (ARC, UNICORE, …)

  Open Source licenca

International Particle Physics Masterclass Belgrade 2012

Page 10: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Delegiranja prava i uspostavljanje distribuiranog sistema

Računarski centar

VO

Prava

Računarski centar

Servis

International Particle Physics Masterclass Belgrade 2012

Page 11: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Korisnički pogled na Grid

Korisnički Interfejs

Grid servisi

Korisnički Interfejs

International Particle Physics Masterclass Belgrade 2012

Page 12: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

Šta se zaista događa? File catalogue

Logging & Book-keeping

WMS

Storage Element

Computing Element

Information Service

Job Status

DataSets info

Auth. &Auth.

Job Submit Event

Job Query

Input “sandbox”

Output “sandbox”

Publish User interface

International Particle Physics Masterclass Belgrade 2012

Page 13: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

AEGIS i Evropska Grid inicijativa   Akademska i obrazovna Grid

inicijativa Srbije (AEGIS), formirana 2005. godine

  EGI.eu kreiran u februaru 2010   Međunarodni konzorcijum sa

sedištem u Amsterdamu   Institut za fiziku Beograd predstavlja

Srbiju u EGI Savetu   Koordinacija EGI-InSPIRE projekta,

maj 2010 – april 2014 International Particle Physics Masterclass Belgrade 2012

Page 14: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

AEGIS infrastruktura U produkciji:   AEGIS01-IPB-SCL (704 CPUs, 40 TB)   AEGIS02-RCUB (48 CPUs, 113 GB)   AEGIS03-ELEF-LEDA (64 CPUs, 1.5 TB)   AEGIS04-KG (48 CPUs, 480 GB)   AEGIS07-IPB-ATLAS (128 CPUs)   AEGIS11-MISANU (64 CPUs)

International Particle Physics Masterclass Belgrade 2012

Page 15: MasterClass2012-Grid-Computing€¦ · Title: MasterClass2012-Grid-Computing Author: Antun Balaz Created Date: 3/9/2012 6:54:53 AM

9. mart 2012.

SCL, Institut za fiziku Beograd

International Particle Physics Masterclass Belgrade 2012