cro ngi i egi - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova...

26
CRO NGI i EGI Dobriša Dobrenić Sveučilišni Računski Centar (Srce)

Upload: others

Post on 05-Feb-2020

2 views

Category:

Documents


0 download

TRANSCRIPT

Page 2: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Sadržaj

• CRO NGI• Korištenje

• Infrastruktura

• Servisi

• EGI• Korištenje

• Infrastruktura

• Servisi

• Međunarodna suradnja

• Podrška korisnicima

CRO NGI i EGI

Page 3: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

CRO NGI

CRO NGI i EGI

Page 4: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Korištenje u brojkama

• 8 partnera

• 34 ustanove korisnice

• 173 korisnika

• 56.514 izvršenih poslova

• prosječno 77 poslova u redu čekanja

CRO NGI i EGI

Page 5: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Znanstvena područja

• Zastupljena• biologija

• fizika

• kemija

• kvantno računalstvo

• matematika

• Nisu zastupljena• agrikultura i šumarstvo

• društvene znanosti

• inženjerstvo i tehnologija

• medicina

• znanost o Zemlji i svemiru

Page 6: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Raspodjela korištenja po ustanovama

Procesorsko vrijeme Broj pokrenutih poslova

CRO NGI i EGI

Page 7: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Raspodjela korištenja po sjedištima

Procesorsko vrijeme Broj pokrenutih poslova

CRO NGI i EGI

Page 8: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Opterećenje infrastrukture

CRO NGI i EGI

Page 9: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Infrastruktura

• CRO NGI• 5 grid sjedišta

• 1.400 procesorskih jezgri

• 36 grafičkih procesora

• 55 TB podatkovnog prostora

• 90 TB privremenog dijeljenog podatkovnog prostora (/shared)

• EGI• 3 grid sjedišta

• 456 procesorskih jezgri

• 55 TB podatkovnog prostora

CRO NGI i EGI

Page 10: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Infrastruktura

CRO NGI i EGI

Page 11: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Infrastruktura

• Proširenja kapaciteta CRO NGI• 240 procesorskih jezgri (12 čvorova) na IRB-u

• sredstva s projekta Time resolved photoelectron spectroscopy as a probe for ultrafast excited state dynamics, voditelji dr.sc. Nađa Došlić i dr. sc. Robert Vianello

• članovi projekta imaju prioritet u izvođenju poslova

• proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB

• Isključeni čvorovi• ukupno 168 procesorskih jezgri (9 radnih čvorova)

• Sklopovski problemi• problemi s hlađenjem (FESB - 175 dana ugašen)

• ispadi električne energije (ukupno 50-tak sati, 9 ispada)

CRO NGI i EGI

Page 12: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Servisi

• Softverska distribucija UMD (engl. Unified Middleware Distribution)• kompatibilnost s EGI infrastrukturom

• Servisi na sjedištima• klasterski servis Son of Grid Engine

• grid servisi Globus Toolkit (GRAM i GridFTP)

• SRCE CA• korisnički i servisni certifikati za CRO NGI i EGI korisnike

• Raspodijeljeni datotečni sustav GlusterFS• dugotrajna pohrana rezultata ili međurezultata poslova

• dostupan putem GridFTP i izravno s pristupnog čvora

• Raspodijeljeni datotečni sustav CVMFS• jednostavna distribucija programa na radnim čvorovima

CRO NGI i EGI

Page 13: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Servisi

• Sustavi za nadzor učinkovitosti• CRO NGI poslovi: http://www.cro-ngi.hr/crongi_stats/

• CRO NGI sjedišta: http://www.cro-ngi.hr/crongi_site_stats/

• CRO NGI: http://mon.cro-ngi.hr/ganglia

• EGI: http://mon.egi.cro-ngi.hr/ganglia

• Integrirani sustav za nadzor CRO NGI i EGI resursa SAM-Nagios• https://mon.egi.cro-ngi.hr/nagios

• Pristupni čvor• UMD UI

• upravljanje korisničkim certifikatima

• sustav za podnošenje poslova Condor-G

• alati za rad s EGI infrastrukturom

CRO NGI i EGI

Page 14: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Servisi

• Aplikacije• Abinit

• Amber

• GAP

• Gaussian

• Gromacs

• MVAPICH2 i MPICH2

• Octave

• OpenFoam

• Turbomole

CRO NGI i EGI

Page 15: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

EGI

CRO NGI i EGI

Page 16: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Korištenje

• Hrvatski korisnici su članovi virtualnih organizacija• alice

• biomed

• cms

• compchem

• enmr.eu

• env.see-grid-sci.eu

• meteo.see-grid-sci.eu

• see

CRO NGI i EGI

Page 17: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Korištenje

CRO NGI i EGI

Page 18: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Korištenje sjedišta u Hrvatskoj

CRO NGI i EGI

Page 19: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Korištenje sjedišta u Hrvatskoj

CRO NGI i EGI

Page 20: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Infrastruktura

• 355 grid sjedišta

• 594.000 procesorskih jezgri

• 286 PB podatkovnog prostora na tvrdim diskovima

• 117 PB podatkovnog prostora na trakama

• 1,52 M poslova dnevno

• 216 virtualnih organizacija

CRO NGI i EGI

Page 21: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Servisi za korisnike

• Popis virtualnih organizacija• pripadnost znanstvenim disciplinama

• web stranice s dodatnim uputama

• http://operations-portal.egi.eu/vo/search

• Baza aplikacija• https://appdb.egi.eu/

• Upute za prijavu u virtualnu organizaciju• http://www.egi.eu/how-to/join_a_community.html

• Servisi EGI-ja za korisnike• http://www.egi.eu/services/researchers/

• Servisni katalog EGI-ja• http://www.egi.eu/services/catalogue/index.html

CRO NGI i EGI

Page 22: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Međunarodna suradnja

• EGI InSPIRE• 2010 - 2014, FP7 projekt

• nacionalne operacijske aktivnosti SA1 – održavanje središnjih servisa i podrška sjedištima

• globalne operacijske aktivnosti u suradnji s CERN-om, GRNetom i CNRS-om

• razvojne aktivnosti JRA1 – sudjelovanje u razvoju sustava za nadzor grid servisa

• dodatni resursi (5 PM) za mini-projekt A new approach to Computing Availability and Reliability Reports

• dodatni resursi (8 PM) za razvojne aktivnosti u produžetku projekta

• EUGridPMA• definiranje minimalnih uvjeta i procedura za PKI infrastrukture

• SRCE CA kontinuirano surađuje u radu tijeka

CRO NGI i EGI

Page 23: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Međunarodna suradnja

• EGI Core Services• 2014 - 2016, 36 PM-ova

• održavanje i razvoj središnjih servisa Central monitoring services, Message Broker Network i SAM central services

• razvoj središnjih servisa za nadzor ARGO/SAM

• pružanje podrške korisnicima središnjih servisa

• EGI Engage• 2015 - 2018, H2020 projekt

• sudjeluju ustanove IRB i Srce

• suradnja s projektom DARIAH-ERIC

• daljnji razvoj sustava za nadzor grid i cloud servisa

CRO NGI i EGI

Page 24: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Podrška korisnicima

• Web stranice• novosti, tehničke informacije i dokumenti

• http://www.cro-ngi.hr

• Korisnička dokumentacija• http://wiki.cro-ngi.hr

• http://wiki.cro-ngi.hr/index.php/Za_korisnike_EGI

• Mjesečni izvještaji• http://www.cro-ngi.hr/izvjestaji

• Služba pomoći• problemi s posredničkim sustavom i aplikacijama

• pomoć pri gridificiranju korisničkih aplikacija

[email protected]

CRO NGI i EGI

Page 25: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Podrška korisnicima

• Radionice• klasterske tehnologije

• grid tehnologije

• EGI infrastruktura

• programiranje za grafičke procesore (GPU)

• veljača 2015.

• Prijava znanstvenih radova• radovi za koje je korištena CRO NGI i EGI infrastruktura

• slati na adresu [email protected]

CRO NGI i EGI

Page 26: CRO NGI i EGI - unizg.hr · •članovi projekta imaju prioritet u izvođenju poslova •proširenje datotečnog sustava FhGFS za spremanje privremenih podataka na 90 TB •Isključeni

Srce politikom otvorenog pristupa široj javnosti

osigurava dostupnost i korištenje svih rezultata rada

Srca, a prvenstveno obrazovnih i stručnih informacija

i sadržaja nastalih djelovanjem i radom Srca.

Ovo djelo je dano na korištenje pod licencom

Creative Commons Imenovanje-Nekomercijalno

4.0 međunarodna.

www.srce.unizg.hr creativecommons.org/licenses/by-nc/4.0/deed.hr www.srce.unizg.hr/otvoreni-pristup

Hvala na pažnji!

Pitanja?