cdf grid at kisti 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1,...

15
CDF Grid at KISTI 정정정 , 정정정 * , 정정정 , 정정정 1 , 정정정 1 , 정정정 1 , 정정정 1 , 정정정 1 , 정정정 1 , 정 정정 1 , 정정정 2 , 정정정 2 , 정정정 2 , 정정정 2 , 정정정 2 , 정정정 3 , 정 정정 3 , 정정정 4 , 정정정 5 , 정정정 6 , 정정정 7 KISTI 응응응응응응응 . 1 응응응 응응 응 응응응응응 . 2 응응응 응응응응 . 3 응응응응 응응응응 . 4 응응응 응응응응 . 5 응응응 응응응응 . 6 응응응응 응응응응 . 7 응응응 응응응응 . October 24, 2008 KISTI * Corresponding author 정정정정정정 2008.1023~24 정정 정정정 정정정 정정

Upload: dwayne-knight

Post on 01-Jan-2016

224 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

CDF Grid at KISTI

정민호 , 조기현 *, 김현우 , 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장 2, 문창성 2, 정지은 2, 유인태 3, 임 규빈 3, 주경광 4, 김현수 5, 오영도

6, 전은주 7

KISTI 응용연구개발팀 . 1 경북대 물리 및 에너지학부 . 2 서울대 물리학부 . 3 성균관대 물리학과 . 4 전남대 물리학과 . 5 전북대 물리학과 . 6 포항공대 물리학과 . 7 세종대 물리학과 .

October 24, 2008KISTI

*Corresponding author

한국물리학회 2008.1023~24광주 김대중 컨벤션 센터

Page 2: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

Contents

1. e-Science for High-Energy Physics2. CDF Farms around world3. Progress of CDF Farms4. Grid CAF 5. The Comparison of Grid CAF6. Pacific CAF at KISTI7. Monitoring of Pacific CAF8. The Reason of exploiting GRID on CDF9. CDF Grid Computing Center (CGCC)10. Summary

Page 3: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

3

Three components of e-HEP

1. e-Science for High-Energy Physics1. e-Science for High-Energy Physics

Data productionData productionData publicationData publication Data processingData processing

EVOEVO(Enabling Virtual Organization)

EVOEVO(Enabling Virtual Organization) CDF FarmCDF FarmCDF FarmCDF Farm Remote Control RoomRemote Control RoomRemote Control RoomRemote Control Room

Page 4: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

4

2. CDF Farms around world

European

CAF Pacific

CAFNorth American

CAF Tsukuba U

ASGC, Taiwan

KISTI

KNU

CAFCAF(2001)(2001)

DCAFDCAF(2003)(2003)

Grid CAFGrid CAF(2006)(2006)

CGCCCGCC(2008)(2008)

UCSD CAF

Toronto CAF

Rut CAF

Lyon CAF

Taiwan AS

BCN CAF

CNAF CAF

Korean CAF : KISTI, KNU

Japan CAF

Page 5: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

5

3. Progress of CDF Farms

NameName Starting Starting DateDate

Grid Grid

middlewaremiddlewareJob Job

schedulingscheduling ContentContent SiteSite

CAFCAF 20012001 -- CondorCondor Cluster farm insiCluster farm inside Fermilabde Fermilab USA (Fermilab)USA (Fermilab)

DCAFDCAF 20032003 -- CondorCondor Cluster farm outCluster farm outside Fermilabside Fermilab

Korea, Japan, Taiwan, SKorea, Japan, Taiwan, Spain (Varcelona, Cantabrpain (Varcelona, Cantabria), USA (Rutgers, San Diia), USA (Rutgers, San Di

ego), Canada, Franceego), Canada, France

Grid CAFGrid CAF 20062006 LCG/OSGLCG/OSGResource Resource Broker,Broker,

CondorCondorGrid farmGrid farm

North America CAFNorth America CAF

European CAFEuropean CAF

Pacific CAFPacific CAF

CGCC CGCC (CDF Grid (CDF Grid Computing Computing

Center)Center)

20082008 LCGLCGResource Resource Broker,Broker,

CondorCondorBig Grid farmBig Grid farm

Korea (KISTI)Korea (KISTI)

France (IN2p3)France (IN2p3)

Italy (CNAF)Italy (CNAF)

Page 6: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

6

4. Grid CAFContext Diagram of Grid CAF

CAF GUI

Grid Farm (European CAF)

Grid Farm (North America CAF)

Grid Farm (Pacific CAF)

Grid Site (IPAS_CS)

Grid Site(IPAS_OSG)

Grid Site(Taiwan-LCG2 )

Grid Site (JP-TSUKUBA)

Grid Site(KR-KISTI-HEP)

Legend

Service ComponentGrid CAF Boundary Grid Site Boundary Job Transport Grid Pool

User Interface

Page 7: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

7

5. The comparison of Grid CAF

Grid CAFGrid CAF Head nodeHead node Work nodeWork node GridGridMiddlewareMiddleware MethodMethod

VO VO (Virtual (Virtual

Organization)Organization)

North North America CAFAmerica CAF

Fermilab (USFermilab (USA)A)

USSDUSSD(USA)(USA)

etcetcOSGOSG Condor over GlobuCondor over Globu

ss CDF VOCDF VO

European European CAFCAF

CNAF CNAF (Italia)(Italia)

IN2P3IN2P3(France)(France)

EtcEtcLCGLCG

WMS WMS (Workload (Workload

Management Management System)System)

CDF VOCDF VO

Pacific CAFPacific CAF AS AS (Taiwan)(Taiwan)

KISTIKISTI(Korea)(Korea)

etcetcLCG, OSGLCG, OSG Condor over GlobuCondor over Globu

ss CDF VOCDF VO

Page 8: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

8

6. Pacific CAF at KISTI (1)

Service Component

Legend

Repository

Grid CAF Boundary Grid Site BoundaryGrid PoolJob Data

TransportationControl Data

Transportation

Grid Site (KR-KISTI-HEP)

Worker Node(hep015)

………

(hep004)

Work Node(hep003)

dCache Pool(se-hep)

Grid Farm (Pacific CAF)

VOMS

Authentication

Glideins

dCache

User Interface

CafGui

CafSubmit

CafMon

CAF Head Node

Submitter

Monitor

Collector

Negotiator

Schedd

Globus.... ....

JobSubmission

Web monitoring

Job Output

CondorCE

(hep001)

....

Page 9: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

9

6. Pacific CAF at KISTI (2)

Current hardware allocation status of KR-KISTI-HEP

Head node paccaf.phys.sinica.edu.tw at Academia Sinica (Taiwan)

VOMS server voms.cnaf.infn.it at CNAF (Italy)

Work nodes 25 core processes

Storage at KISTI 30 T byte

Page 10: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

10

7. Monitoring of Pacific CAF (1)

Page 11: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

11

7. Monitoring of Pacific CAF (2)

Page 12: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

12

8. The reason of exploiting GRID on CDF

Donatella Lucchesi (December 11, 2007) e-Science 07

Page 13: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

13

9. CDF Grid Computing Center (CGCC)

Pacific CAF at KISTI CGCC at KISTI

Head node paccaf.phys.sinica.edu.tw New Head node

VOMS server

voms.cnaf.infn.it New VOMS server

Work nodes25 core processes 400 core processes

Storage 30 T byte 300 T byte

A hardware allocation plan for CGCC

Page 14: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

14

10. Summary

High-energy physics is a good application of e-Science.

The e-Science for high-energy physics has three components:data production, data processing and data analysis

The system for data processing for CDF experiments is embedded at KISTI.

CGCC (CDF Grid Computing Center) is being built at KISTI.

Page 15: CDF Grid at KISTI 정민호, 조기현 *, 김현우, 김동희 1, 양유철 1, 서준석 1, 공대정 1, 김지은 1, 장성현 1, 칸 아딜 1, 김수봉 2, 이재승 2, 이영장

15

References

Kihyeon Cho (KISTI), e-Science for High-Energy Physics in Korea, JKPS, Vol. 53, N0. 2, August 2008, pp. 1187~1191

Igor Sfiligoi, CDF computing, Computer Physics Communications 177 (2007) 235~238

Gabriele Compostella, Donatella Lucchesi, Simone Pagan Griso, Igor Sfiligoi, CDF Monte Carlo Production on LCG GRID via LcgCAF, 3rd IEEE International Conference on e-Science and Grid Computing, December 10~13, 2007

Kihyeon Cho (KISTI), CDF 그리드 현재 및 발전방향 , KISTI HEP Seminar, January 30, 2008

Kihyeon Cho (KISTI), CDF Grid - DCAF (Decentralized CDF Analysis Farm) , KISTI HEP Seminar, March 8, 2007