pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160...

22
Pregled stanja infrastruktura za napredno računanje Emir Imamagić Sveučilišni računski centar

Upload: others

Post on 28-Dec-2019

3 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Pregled stanja infrastruktura za napredno računanje

Emir Imamagić

Sveučilišni računski centar

Page 2: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Sadržaj

• Isabella

• CRO NGI

• FedCloud

• Cloud usluge Srca

Page 3: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

• Računalni klaster u Srcu• dostupan svim istraživačima u HR

• 40 računalnih čvorova

• 704 procesorskih jezgri

• 5 TB radne memorije

• 110 TB trajnog podatkovnog prostora (/home)

• 90 TB privremenog dijeljenog podatkovnog prostora (/shared)

• Infiniband QDR (40 Gb/s) i FDR (56 Gb/s)

• ScaleMP vSMP• aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije

Page 4: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

Page 5: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

• 81 projekt

• 247 korisnika

• 96.931 izvršenih poslova u 2015.

• prosječno 456 poslova u redu čekanja

Page 6: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

• Raspodjela procesorskog vremena po projektima

Page 7: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

• Novi resurs u 2016. godini• suradnja s Ministarstvom zaštite okoliša i prirode (MZOIP)

• projekt izrade Strategije prilagodbe klimatskim promjenama u Republici Hrvatskoj

• dostupan korisnicima kada se ne koristi za potrebe projekta

• 64 računalna čvora

• 1792 procesorskih jezgri

• 44,4 TFLOPS

• 220 TB trajnog podatkovnog prostora

• 12 TB brzog podatkovnog prostora (SSD)

Page 8: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Isabella

• Nabava Intel prevodioca i knjižnica• ovisno o dodjeli dodatnih resursa od MZOS-a

• Izrada aplikacije za prijavu znanstvenih radova• prijava radova će donositi viši prioritet

• do tada slati na adresu [email protected]

• Radionice• klasterske tehnologije

• ScaleMP

• lipanj 2016.

Page 9: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Grid infrastruktura u HR• dostupna svim istraživačima u HR

• povezana sa svjetskom infrastrukturom EGI

• 7 grid sjedišta (4 CRO NGI i 3 EGI)

• 1.868 procesorskih jezgri (1.412 CRO NGI i 456 EGI)• 260 procesorskih jezgri (13 čvorova) na IRB-u

• sredstva s projekata voditelja dr.sc. Nađa Došlić, dr. sc. Robert Vianello i dr. sc. David Smith

• 205 TB podatkovnog prostora (dijeljeno s Isabellom)

• 36 grafičkih procesora (CRO NGI)

Page 10: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

Page 11: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• 8 ustanova partnera

• 34 ustanova korisnica

• 193 korisnika

• 97.805 izvršenih poslova u 2015.

• prosječno 188 poslova u redu čekanja

Page 12: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Raspodjela procesorskog vremena po ustanovama

Page 13: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Raspodjela procesorskog vremena po sjedištima

Page 14: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

Page 15: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Iskorištenje BeeGFS /home

Page 16: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Iskorištenje BeeGFS /shared

Page 17: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

CRO NGI

• Nije planirano proširenje u 2016. godini

• Problem zastarjelosti opreme• 712 procesorskih jezgri iz 2008. godine (256 CRO NGI i 456 EGI)

• 352 procesorskih jezgri iz 2009. godine

• u pravilu se isključuje oprema starija od 7 godina

• gašenje 5 sjedišta

• Sustav GridSAFE za praćenje korištenja resursa• https://mon.cro-ngi.hr/webacct/

• Radionice• korištenje CRO NGI, EGI i FedCloud

• lipanj 2016.

Page 18: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

FedCloud

• Pristup računalnim i spremišnim resursima putem cloud sučelja

• OCCI (engl. Open Cloud Computing Interface) - upravljanje virtualnim poslužiteljima na sjedištima

• CDMI (engl. Cloud Data Management Interface) - upravljanje podacima pohranjenim na sjedištima

• Srce vodi aktivnost nadzora FedCloud sjedišta• sustav za nadzor ARGO (http://argoeu.github.io)

• razvoj nadzornih senzora za različite servise FedClouda

• Središnji sustav za nadzor smješten u Srcu• https://cloudmon.egi.eu/nagios

Page 19: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

FedCloud

• Cloud posrednički sustav OpenStack• instalacija i konfiguracija pomoću sustava Cobbler i Puppet

• Raspodijeljeni datotečni sustav BeeGFS• pohrana slika i virtualnih poslužitelja

• računalna mreža Infiniband

• U tijeku je nadogradnja• CentOS 7

• OpenStack Liberty

• 128 procesorskih jezgri

• 768 GB radne memorije

• U tijeku je pružanje podrške projektu DARIAH

Page 20: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Cloud usluge Srca

• Virtual Private Server (VPS)• virtualni poslužitelji (VM) za trajne potrebe ustanova

• Korištenje• 205 aktivnih VM-ova

• infrastruktura podržava do 400 VM-ova

• Karakteristike VM-ova• 2 vCPU

• 8 GB radne memorije

• 100 GB diskovnog prostora

• javna IPv4 adresa

Page 21: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Cloud usluge Srca

• Virtual Computing Lab (VCL)• virtualni poslužitelji (VM) za dinamičke potrebe ustanova

• Korištenje• 969 korisnika

• 217 slika VM-ova

• 1.597 pokrenutih VM-ova u 2015. godini

• Karakteristike VM-ova• 1 vCPU

• 2 GB radne memorije

• 20 - 50 GB diskovnog prostora

• javna IPv4 adresa

• trajanje od 30 minuta do 8 sati

• U planu dulje trajanje VM-ova s različitim karakteristikama

Page 22: Pregled stanja infrastruktura za napredno računanje...•aplikacije vide jedan poslužitelj s 160 jezgri i 2 TB radne memorije Isabella Isabella •81 projekt •247 korisnika •96.931

Srce politikom otvorenog pristupa široj javnosti

osigurava dostupnost i korištenje svih rezultata rada

Srca, a prvenstveno obrazovnih i stručnih informacija

i sadržaja nastalih djelovanjem i radom Srca.

Ovo djelo je dano na korištenje pod licencom Creative

Commons Imenovanje-Nekomercijalno-Bez prerada

4.0 međunarodna.

www.srce.unizg.hr creativecommons.org/licenses/by-nc-nd/4.0/deed.hr www.srce.unizg.hr/otvoreni-pristup

Hvala na pažnji!

Pitanja?