최적의 컨버전스를 통한 관리download.microsoft.com/download/5/f/0/5f032628-81a... · •...

28
최적의 컨버전스를 통한 데이터 관리 방안 HP-MS 데이터매니지먼트 솔루션

Upload: others

Post on 02-Feb-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

최적의 컨버전스를 통한 데이터 관리 방안

HP-MS 데이터매니지먼트 솔루션

Page 2: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

“New Normal” 시대 기업의 목표달성을 위한 비지니스 개선 노력

“2/3 of global industries are now in fundamental flux; finding profitable growth will challenge even the best

Companies in the unstable recovery ahead.”

Profit from the Core: A Return to Growth in Turbulent Times, Bain & Company, March 2010

Page 3: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

혁신을 위한 다양한 장애요인 극복 노력

복잡한 시스템과

비효율적 운영

높은 솔루션 비용과

오랜 구축 기간

다양한 종류의 많은 데이터가 빠르게 증가

정보의 접금 및

사용의 어려움

Page 4: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

데이터웨어하우스 전망과 도전 과제

> 10TB 17% 34%

57% Appliances

78%

92%

82 %

Growing Market

Massive Parallel Processing

Nine Key Data Warehousing Trends for the CIO in 2011 and 2012)

1

2

3

4

5

1

2

3

4

5

Page 5: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

데이터관리 정보생명주기의 중요한 역할 제공

데이터분석이 비지니스 프로세스의 최적화와 성과 향상을 주도

트랙잭션 처리는 단순화되고 비지니스 의사결정을 위한 데이터

취합의 가속화

데이터웨어하우스는 실시간 모

든 고객 데이터를 하나의 버전

으로 관리 가능

Page 6: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

솔루션 유형 모든 고객의 요구사항을 충족하기 위한 완전한 HP-MS 공동 솔루션

Most Customizable

Least Customizable

High Low

Low

High

Low High

Page 7: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

HP SQL Server Fast Track Data Warehouse

Page 8: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Processors

Networking

Servers

Storage

• (SMP) SQL Server 2008 데이터웨어

하우스를 위한 밸런스드 모델

• 성능 예측이 가능한 독창적인 솔루션

• 어플라이언스와 같은 쉽고 빠른 구축

• 순차 워크로드를 위한 전문적 디자인

• 데이터 배치, 적재 및 관리를 위한

레퍼런스 아키텍처

• 비용, 위험 및 구축기간 절감

Fast Track essentials HP and Microsoft reference architectures + best practices

Page 9: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

참조아키텍처 – 성능 향상과 위험 감소

1TB 에서 80TB 까지 다양한 구성

• 모범적 구성 가이드 및 최적화된 구축 방법론

– 대용량 순차 데이터 읽기를 위한 쿼리 워크로드 타입

• 데이터웨어하우스를 위한 밸런스드 HW 아키텍처

– Fast Track Reference Architectures: 1– 80TB

• 뛰어난 가격 대비 성능

• 다양한 구성, 검증된 성능 가이드 및 Best Practices

– HP Sizer for Microsoft SQL Server Fast Track Data Warehouse

Entry ProLiant DL370 (2P) Internal disks (5.5/7.5 TB) Expansion (14/20 TB)

Basic ProLiant DL38x (2P) MSA P2000 (Rec./Max. capacity: 20/32 TB)

Mainstream ProLiant DL58x (4P) MSA P2000 (Rec/Max capacity: 40/62 TB)

Premium ProLiant DL980 (8P) MSA P2000 (Rec/Max capacity: 80/123TB)

Page 10: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Tested and performance-validated

Fast Track 컴포넌트 아키텍처

SERVER

Windows Server OS

SQL Server

STORAGE ENCLOSURE

Disk Array

Host Bus Storage Adaptor (HBA)

Storage Processor

CPU

밸런스드 데이터웨어하우스 아키텍처

Page 11: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Case Study: Stein Mart

예전 14시간이 소요되던 주간 매출 리포트를 3시간 안에 처리 가능해짐

프로모션과 매출간의 연관 관계에 대한 분석 능력 향상

매월 약 5만 달러의 유지보수 비용 절감 효과

HP ProLiant SQL Server Fast Track Data Warehouse

SQL Server 2008 Reporting Services

SharePoint Server 2007

Excel Services

최신의 데이터에 대한 분석 및 리포팅이 필요

비즈니스 분석 역량 향상 필요

비용 절감 이슈

“SQL Server 2008 과 SQL Server Fast Track Data Warehouse 을 통해 데이터에 대한 쿼리 속도가 이전보다 매우 향상 되었습니다. 이제 우리 회사의 경영진들은 최신의

비즈니스 데이터를 제 시간에 맞춰 볼 수 있게 되었습니다.” Ilan Wajsman, Data Systems Manager, Stein Mart

유명 유통 체인인 Stein Mart는 SQL Server Fast Track Data Warehouse를 통해 리포팅 속도를 향상 시켰으며, 연간 약 60만 달러의 기술 비용을 절감할 수 있었습니다.

Page 12: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Case Study: TelMore

데이터 웨어하우스 구축 효율성 50% 이상 향상

대고객 서비스 향상

주 단위의 리포트가 아닌 일 단위의 리포트 생성 가능

HP ProLiant SQL Server Fast Track Data Warehouse

SQL Server 2008 Integration Services

SQL Server 2008 Analysis Services

SharePoint Server 2010

Office Professional 2007

고객의 니즈를 이해하고 이를 위한 솔루션을 제공할 필요 존재

5TB 이상의 이질적인 데이터를 분석할 수 있는 쉬운 방법 필요

“SQL Server Fast Track Data Warehouse를 기반으로 구성된 우리 회사의 새로운 데이터 웨어하우스는 고객에 대한 전방위적 뷰를 제공합니다. 이를 통해 우리는 최고의 제품을 디자

인하고 최고 품질의 고객 서비스를 제공할 수 있게 되었습니다..” Claus Nielsen, Chief Financial Officer, TELMORE

통신회사인 Telmore는 엔터프라이즈 데이터 플랫폼을 통해 서비스 품질 향상 및 새로운 수익 창출을 기대합니다.

Page 13: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Fast Track Data Warehouse 가치 어플라이언스와 유사한 모델

DBA의 공수 절감, 적은 인덱스, 매우 뛰어난 Sequential I/O 성능

다양한 모델 선택 가능 Entry ~ Premium Model

TCO 절감 산업 표준 하드웨어 기반, 스토리지 비용 절감 효과

뛰어난 확장성 제공 80TB까지 확장 가능한 새로운 참조 아키텍처

제공 (3.0x 데이터 압축 가정 시)

프로젝트 리스크 최소화 Microsoft가 검증한 아키텍처, 유연한 하드웨어

선택, Best Practice 기반

Page 14: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

HP Enterprise Data Warehouse Appliance

Page 15: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

HP Enterprise Data Warehouse Appliance

FOR ANY SCALE • 10배의 확장성 – 최대 509TB

• 40 ~ 200배 빠른 쿼리 응답

COMPLETE • 미션크리티컬 환경을 위한 올인원 데이터 웨어하우스 어플라이언스

• HP EDW를 위한 컨설팅 서비스

SIMPLIFIED • 기업 전반에 걸친 정보의 단일뷰 제공

• 원스텝 솔루션 업데이트

Microsoft Parallel Data Warehouse에 최적화된 시스템

Page 16: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

1TB에서 수 백TB 까지의 다양한 구성

• 장기적인 투자 보호를 위한 포트폴리오 호환성 제공

– 허브 & 스포크 아키텍처 옵션

• 데이터웨어하우스를 위한 안정적인 HW 아키텍처

– Fast Track Reference Architectures (SMP): 1– 80TB

– EDW (Parallel Data Warehouse) (MPP): 37 TB+

• 뛰어난 가격 대비 성능

• HW, SW 패키지 서비스

Entry ProLiant DL370 (2P) Internal disks (5.5/7.5 TB) Expansion (14/20 TB)

Basic ProLiant DL38x (2P) MSA P2000 (Rec./Max. capacity: 20/32

Mainstream ProLiant DL58x (4P)

MSA P2000 (Rec./Max capacity:

TB)

Premium ProLiant DL980 (8P) MSA P2000 (Rec/Max capacity: 0/123TB)

HP Enterprise Data Warehouse Appliance (Parallel Data Warehouse) Per data rack: 11 x ProLiant DL360 (2P) 10 x MSA P2000 (56 – 125TB) Up to 4 data racks (up to 500TB)

New step in the continuum

HP Enterprise Data Warehouse Appliance

Page 17: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Control Rack Data Rack

Compute Nodes

DL360 G7

Storage Nodes

P2000 G3

Spare Compute Node D

ual Fib

er

Channel

SQL

SQL

SQL

SQL

SQL

SQL

SQL

SQL Dual In

finib

and

Control Nodes Active / Passive

DL380 G7

Landing Zone DL370 G6

Backup Node DL380 G7

SQL

Management Servers DL360 G7

Private Network

SQL

SQL

Control Nodes

Landing Zone

Built-in Backup

HP Enterprise Data Warehouse Appliance

Page 18: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

HP Enterprise Data Warehouse Appliance Hardware Architecture

SQL

SQL

SQL

SQL

SQL

SQL

SQL

SQL

SQL

SQL

Compute Nodes

Du

al In

fin

iban

d

Control Nodes

Active/Passive

Landing Zone

Backup Node

Storage Nodes

Spare Database Server

Du

al Fib

er

Ch

an

nel

SQL

Management Servers

Client Drivers

ETL Load Interface

Corporate Backup Solution

Data Center Monitoring

Corporate Network Private Network

Control node

• 클라이언트 App과의 연결이 이루어지는 곳

• MPP 엔진이 위치하고 있음

• 모든 노드의 DMS (Data Movement Services)를 컨트롤 함

• 시스템 메타 데이터 저장

• Active/Passive Cluster 형태로 구성

Compute nodes

• 사용자 데이터 저장

• 로컬 쿼리 처리를 수행함

• DMS (Data Movement Service) 구동

• 외부 네트워크에서 접속 불가

• N Active / 1 Passive Cluster 형태로 구성 (Spare node : Passive)

Landing Zone

• 데이터 적재를 위한 스테이징 공간

• 외부 네트워크에서 접속 가능

• 3rd Party H/W 및 S/W와 확장 가능함

Backup node

• 백업 파일 저장

• 외부 네트워크에서 접속 가능

• 3rd Party H/W 및 S/W와 확장 가능함

Management node

• Windows 도메인 컨트롤러가 위치 (Active Directory)

• S/W 업그레이드와 패치 적용에 대한 스테이징 공간

• 특정 노드에 대한 reimage 작업이 필요할 경우를 위한 S/W image를 저장함

Page 19: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

• 수백 TB의 엔터프라이즈급 확장성 • 높은 성능 제공 • 선도적 BI 제품과의 호환성 • 최고 수준의 지원과 유지보수 • 높은 보안성과 강력한 엔지니어링 프로세스의 최고의 SQL Server 플랫폼 • 업계 선도 기술을 포함하는 강력한 데이터웨어하우스 비젼과 로드맵

고객을 위한 가치

지원 기능들

• 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리 최적화 • 데이터웨어하우스에 최적화된 어플라이언스로 미리 테스트/튜닝을 거친 안정적인 하드웨어 • Microstrategy, Business Objects, Informatica 제품들과의 통합 • 가장 광범위한 도구 제공 (ETL, BI, MDM, StreamInsight)

HP Enterprise Data Warehouse Appliance

Page 20: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Premier Support *

− 24x7 Reactive Support with on-site response

− Proactive Services

− Technical Account Management

Premier Mission Critical

All features of underlying Premier Plan above plus

− Faster reactive support response time with on-site solution engineering support

− Prioritized access to Microsoft product groups

− Solution supportability review and architectural guidance for maximum performance

Hardware / Software Support

− Reactive 24x7 hardware and software support for HP appliance components with a 4 hr onsite hardware response

Proactive 24 Service

− Integrated hardware and software support including proactive and reactive services to improve stability and availability across your IT environment

Critical Service

− Comprehensive support solution designed to help minimize the business impact of downtime for mission critical applications

* Premier support plan (Standard level or above) is a prerequisite for PDW customers

Microsoft and HP Joint Solution Support for HP Enterprise Data Warehouse Appliance

Page 21: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Case Study: First Premier Bankcard

하드웨어

16 CPU HP 8620 Itanium

Hitachi Storage 27TB Raw SAT

A 21 LUNS

소프트웨어

Windows 2003 SP2

SQL Server 2008

SSIS/SSRS

데이터 웨어하우스

18 Terabytes

Star Schema

80 Fact Tables

500 + Dimensions

데이터 로딩 속도

확장성

분석 성능

혼합 워크로드 처리

높은 TCO

•300% 향상

•30TB/160 코어

•쿼리 속도 70X 향상

•혼합 워크로드 동시

처리

•50% TCO 절감

Page 22: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

Case Study: Microsoft

기존에는 하루 1TB의 데이터 로딩만 가능하였으나, 4TB 이상의 데이터 적재 및 분석이 가능해 짐

복잡한 분석 쿼리에 대해 평균 20배, 최대 64배의 성능 향상 효과

워크로드 분리를 통해 데이터 적재와 분석을 동시에 처리할 수 있음

빠른 쿼리 성능 및 향상된 BI를 통해 능동적인 대처가 가능해짐

SQL Server 2008 R2 Parallel Data Warehouse

90일 동안의 데이터 저장을 위해 90TB 이상의 확장성이 필요

복잡한 분석 쿼리에 대한 성능 개선이 필요 (특정 쿼리의 경우 1일 이상이 소요됨)

향상된 BI 기능을 통해 네트워크 공격 추세 등에 대한 빠른 분석 및 능동적 대처가 가능해야 함

“마이크로소프트의 네트워크 보안 팀은 90TB까지의 데이터 확장이 필요하고, 또한 매일 1TB이상의 데이터 로딩을 처리하면서도 쿼리 성능을 향상시키기 위해 PDW를 도입하였습

니다. 이를 통해 매일 4TB 이상의 새로운 정보를 처리할 수 있었으며, 또한 쿼리 성능이 20배 이상 향상되었습니다.”

글로벌 IT 기업인 마이크로소프트는 100대 이상의 프록시/메일 서버 등을 비롯한 사내 여러 네트워크 소스로부터 이벤트를 수집/분석하기 위해 Parallel Data Warehouse (PDW)를 사용합니다.

Page 23: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

셀프서비스 BI를 위한 HP Business Decision Appliance

Page 24: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

최종 사용자 요구와 IT 사이의 균형

• 데이터 일관성 및 품질

• 통찰과 관리

• 보안 및 규정 준수

IT 공급자

• 필요한 데이터에 대한 접근

• 친밀하고 민첩한 리포트 작성

• 공유와 협업

최종 사용자

Page 25: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

PowerPivot을 이용한 셀프서비스 비지니스 인텔리전스

PowerPivot for Excel PowerPivot for SharePoint

• 친숙한 Excel 작성 환경

• 다양한 소스로 부터 대용량 데이터에 접근

• 가장 친숙한 BI 도구를 이용한 깊이 있는 비

지니스 통찰력

• 전체 조직의 생산성 강화

• PowerPivot 워크북과 SharePoint 리포트에 의

한 협업

• BI와 기업 데이터 관리의 중앙집중 및 모니터링

Page 26: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

HP Business Decision Appliance Self service BI: optimized for SQL Server 2008 and SharePoint 2010

Agile • 1시간 안에 구축

• 중소기업, 대기업 부서 및 원격

사무실

• 관리 능력 향상: 관리포탈,

System Center Pack, 서비스

및 지원 통합

Complete • 모든 HW, SW의 사전 설

치 및 테스트와 지원 포함

• 단일 스텝 솔루션 갱신

• Windows Server + SQL S

erver + SharePoint Server

+ PowerPivot for SharePo

int

Optimized • 손쉬운 PowerPivot 워크

북 공유 (여러가지 데이터

소스로 부터 수백만 라인

의 데이터 처리)

• 동시사용자 80명에 적합,

최대 150면 지원

Page 27: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리

요약

어플라이언스와 유사한 개발 및 배포

SMP를 위한 확장성 및 성능 제공 Fast Track Data Warehouse

높은 병렬 확장 및 성능 제공

유연한 H/W 선택이 가능한 어플라이언스 모델 Enterprise Data Warehouse

Microsoft와 HP는 낮은 비용으로 높은 확장성을 가능케 하는 DW 솔루션을 제공합니다.

수 시간내 구축 가능

셀프 서비스 BI를 위한 최적의 어플라이언스 Business Decision Appliance

Page 28: 최적의 컨버전스를 통한 관리download.microsoft.com/download/5/F/0/5F032628-81A... · • 무공유 대용량 병렬처리 아키텍처 (Shared Nothing MPP) • 분산쿼리