진한 it인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이...

29
진보한 IT인프라 구현, 플래시와 소프트웨어로부터! 조용노 [email protected] EMC Korea

Upload: others

Post on 24-Aug-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

진보한 IT인프라 구현, 플래시와 소프트웨어로부터!

조용노 [email protected]

EMC Korea

Page 2: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

AGENDA

1.데이터센터의 현재와 미래

2.New IT를 구현하는 기술

• 소프트웨어 정의 스토리지

• All-Flash Storage

3.소프트웨어 정의 엔터프라이즈

2

Page 3: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Dedicated

2004

Physical & Virtual

Consolidated

2008

• SAN 통합

• SPARC 기반

• 프로젝트 기반 제공 및 설계

• 단절된 조직

• 계층화된 공유 가상화 서버와 SAN

• X86 표준화

• 프로젝트 중심

• 단절된 조직

Virtual First

Shared

2010

• 멀티 테넌트 가상 호스팅 플랫폼 • 멀티코어 애플리케이션 전환 • 도입비용과 운영비용 절감 • 통합 조직

Dynamic Capacity Converged Infrastructure

이점

• 빠른 구축

• 에러 감소 추세

• 더 작은 상면

• 적은 구성 요소

• 75% 낮은 케이블링

• 10G 통합 네트워크

• 블레이드 서버

데이터센터의 진화

Page 4: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Shared

2010

Cloud

2012

• 멀티 테넌트 가상 호스팅 플랫폼

• 멀티코어 애플리케이션 전환

• 도입비용과 운영비용 절감

• 통합 조직

• 서비스 카탈로그

‐ 셀프 & 자동화 IT

• 서비스와 사용량 중심의 조직

• 비용 가시화

Automation

이점

•서비스 기반

- 표준화 오퍼링 - 사용량 기반 과금

•같은 수준의 딜리버리

•더 높은 고객 만족

•더 높은 활용율

Dynamic Capacity Converged Infrastructure

2004-08 2009-11 2012-13

Consolidated Shared Cloud

Provisioning time

Headcount

Utilization rates

데이터센터의 진화

Page 5: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Shared

2010

Cloud

2012

• 멀티 테넌트 가상 호스팅 플랫폼

• 멀티코어 애플리케이션 전환

• 도입비용과 운영비용 절감

• 통합 조직

• 서비스 카탈로그

‐ 셀프 & 자동화 IT

• 서비스와 사용량 중심의 조직

• 비용 가시화

Automation

SDDC

2014+

• 소프트웨어 정의 스토리지

• 가상화된 네트워크와 보안

• Charge Back

• 네트워크팀 통합

• 자동화팀 편제

ITaaS

SDDC:

모든 인프라스트럭처가 가상화되

고 서비스 형태로 제공된다.

API에 의해 구성, 설치, 사용하

게 되는 정책기반의 자동화가 구

현될 것이다.

Dynamic Capacity Converged Infrastructure

데이터센터의 진화

Page 6: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Flash Tech New Levels of Performance

COTS Trend New Levels of Efficiency

Software-Defined Data Center Solution

Open Source Trend

Next Generation Applications PaaS, Mobile, Hadoop

Converged Infrastructure Trend

New IT 를 구현하는 기술 트렌드

Page 7: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

EMC SRM

vCenter Operations

Manager

Log Insight

FILE BLOCK

2 PLATFORM

VM

OS

VM

OS

VM

OS

VM

OS AP

PS

vCHS

Integrated Provisioning, Backup, DR, HA, and Security

VMware NSX vSphere

Admin Portal

End-User Portal ITSM

vCloud Automation Center ITBM Enhanced Chargeback

OBJECT/ HDFS

Infrastructure as a Service

Database as a Service

Enterprise Platform as a Service

Object Storage as a Service 3 PLATFORM

AP

PS

EMC의 SDDC 전략: 아키텍처

Page 8: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

• Build storage adaptors to easily integrate additional storage

• Use & extend unique physical array features

ViPR Controller

Commodity Hardware Storage Arrays & Data Protection Appliances

VNX Isilon XIO VMAX VPLEX Data Domain

Avamar Recover

Point

Software-Defined Storage

Page 9: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

현재의 가상 서버-스토리지 구성 VMware VCENTER

Isilon Bronze Storage Profile

Test & Dev

VM

NTAP Bronze Storage Profile

Test & Dev

VM

NTAP Silver

Storage Profile

VNX Silver Storage Profile

Reporting

VM

OLTP

VM

VMAX Platinum Storage Profile

XIO Platinum Storage Profile

VMAX Gold

Storage Profile

Exchange

VM

VNX Gold Storage Profile

OLTP

VM

VMAX VOLS VNX VOLS ISILON VOLS

NTAP VOLS XIO VOLS

Traditional Infrastructure

Reporting

VM Exchange

VM

Page 10: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

VMware VCENTER

Serv

ice

Cata

log

PLATINUM GOLD SILVER BRONZE ViPR Controller

VM

Reporting

VM Test & Dev

VM

Exchange

VM

OLTP

VM

Analytics

VMAX VOLS VNX VOLS ISILON VOLS NTAP VOLS XIO VOLS

SCALEIO VOLS

COMMODITY VOLS

ECS VOLS

ViPR Abstracts and Pools Storage Profiles from traditional and hyperscale infrastructures

Traditional Infrastructure HyperScale Infrastructure

VM

서비스 중심의 프로비저닝

Page 11: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Integrates With OpenStack & MS

ViPR Data Services

VIPR Controller

Commodity Hardware Storage Arrays

VNX Isilon XIO 3rd Party

VMAX

Page 12: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

전통적인 방식

수동적 튜닝

가상화 환경

1000X

자동화

단순한 워크로드

복잡한 워크로드

가상화가 가져다 주는 변화 ▶워크로드의 증가는 자동화를 필요로 하고 동적으로 최적화 될 수 있는 방법이 필요

스토리지는 가장 높은 효율성을

제공하기 위해서 self-Tuning이 이루어져야 함

낮은 응답시간과 낮은 비용으로 스토리지 서비스

1000’s of Workloads

Page 13: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶어떠한 워크로드에도 최대 성능과 일정한 응답시간 제공

플래시에 최적화하여 성능과 용량에 대한 비용 최적화

Dynamic Tiering

FLASH OPTIMIZED All FLASH Array

플래시의 물성을 극대화하기 위한 전용의 컨트롤러 Scale-out Controller, 중복제거,압축,가상화 환경에 최적

Storage Controller

SSDs

Active Controller 1

Active Controller 2

Infiniband RDMA

32 CPU

CORES

512 GB

RAM

25 eMLC SSDs

SAS 2.0 SAS 2.0

2 x FC 2 x iSCSI

4 HOST PORTS

2 x FC 2 x iSCSI

256GB RAM

256GB RAM

최고의 IO 성능 Flash(SSD)

Page 14: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶노드를 블럭 형태로 증설해 클러스터 구성

Active Controller 1

Active Controller 2

Infiniband RDMA

32 CPU

CORES

512 GB

RAM

25 eMLC SSDs

SAS 2.0 SAS 2.0

2 x FC 2 x iSCSI 4

HOST PORTS

2 x FC 2 x iSCSI

256GB RAM

256GB RAM

XtremIO X-Bric 아키텍처

Page 15: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

X-Brick 3

X-Brick 1

X-Brick 2

X-Brick 4

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

SHARED MEMORY METADATA

RDMA FABRIC

Unique User Data

Unique User Data

Unique User Data

Unique User Data

선형적인 단계별 성능/용량 동시 확장

Page 16: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

5, 10, 20 TB X-Bricks

튜닝 불필요. 스케일 아웃 다양한 데이터 서비스. <1ms 응답속도.

900K MIXED IOPS 1.5M READ IOPS <1MS Latency

150K MIXED IOPS 250K READ IOPS

<1MS Latency

선형적인 성능 향상을 보장하는 스케일아웃

Page 17: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

0 1 2 3 4 5 6 7 8 9 A B C D E F G H I J K L M N O

Core Engine

EA38C90

8K

134F871

8K

7325F7A

8K

I3AFBA3

8K

AB45CB7

8K

20147A8

8K

963FE7B

8K

963FE7B

8K

Deduplicate Incoming Data Stream

64K

8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K P1 P2 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K 8K P1 P2 8K

실시간 중복 제거

Page 18: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Latency

IOPS

실 고객 데이터 사용 및 8KB OLTP 워크로드에서 테스트 10TB 1 X-Brick vs. 35TB 경쟁사

경쟁사

중복제거 기능이 Post-Process 방식인 경우

Page 19: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

MORE VDI

VIRTUAL DESKTOPS

MORE ORACLE & SQL Server

DATABASES

MORE VMs

VIRTUAL SERVERS

UP TO 4X MORE

CAPACITY

ALWAYS-ON, INLINE COMPRESSION

Page 20: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

1 Tile (24”)

4 Floor Tiles (96”)

XtremIO 디스크 스토리지

가용량 (TB) 303 303 -

디스크 수량 100(400GB) 714(600GB) 86%

성능 - OLTP IOPS 310,000 75,000 313%

랙수 1 4 75%

상면 개수 1 4 75%

년간 상면/전력 비용 $36,000 $144,000 75%

발열량 (BTU/Hr) 17,900 29,300 39%

전력 (kVA) 5.5 9.86 44%

3년 TCO $1.6M $2.3M 30%

▶XtremIO vs. 기존 스토리지

TCO 비교

Page 21: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶컨트롤러 메모리에서 Parity 계산 후 SSD로 모아 쓰기 (Write Gathering)

• HDD 기반의 전통적인 RAID 단점 제거

• SSD 최적화된 새로운 기술

• 고효율 : 단 8%의 오버헤드

• 최소의 쓰기 작업으로 SSD 내구성 향상

• 별도의 구성 불필요

• Hot Spare 디스크 불필요

데이터 보호(XDP)

Page 22: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶One Screen – Zero Planning, Zero Tuning

3 MAP VOLUMES 2

CREATE INITIATOR

GROUPS 1 CREATE VOLUMES

간편한 관리

Page 23: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

성능 영향 없고, 별도 비용이 요구되지 않음

Flash 최적화된 보호 기법 실시간 중복제거 실시간 압축 실시간

암호화 쓰기 가능한 스냅샷

용량 효율적인 씬프로비저닝

데이터 서비스 기능 혁신

Page 24: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

• OS영역에 대해 90%이상 중복 제거 효과

• 엔터프라이즈 급 스케일 (>500

User)

• 다양한 사용자 및 설치 유형 적합

VDI (데스크탑 가상화)

• 애플리케이션 성능 향상

• 데이터베이스 및 복제본 통합

• 서버, 스토리지 등 IT 자원 통합

데이터베이스 & 비즈니스 어플리케이션

• 미션크리티컬 가상화 업무 환경

• Private Cloud 환경 통합

• 소프트웨어 개발/운용 환경

서버 가상화 & 통합

어플리케이션 서비스의 일대 혁신

Page 25: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶XtremIO 기반 VDI 혁신

가상 데스크톱

Per X-Brick *Linked Clones 3500

데스크톱당 비용 절감 50%

중복 제거율 *Full Clones 10:1

동일 IO 성능 최소 RAM 소요 25%

서버 자원 절약 40%

최대

25

VDI를 위한 #1 Flash 스토리지

Page 26: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

▶다양한 데이터베이스 I/O • 지속적인 Random/Sequential I/O

• 많은 병렬처리 Random

▶높은 데이터 증가율과 불확실성 • 디스크/RAID 타입, caching, tiering 등의 구성 변경으로 문제 해결 불가능

• 지속적인 데이터 Hot-spots 이슈

“Underperforming” Production

2TB DB, 10TB Storage, Many DB cores, 30% CPU utilization, 10-20ms App response time

데이터베이스 운영 이슈

Page 27: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

100

60

85

0

20

40

60

80

100

120

Time (seconds)

Previous Array XtremIO Best XtremIO Worst

80

40

0

10

20

30

40

50

60

70

80

90

Time (minutes)

Previous Array XtremIO

“THE CRUNCH” (BUSINESS PROCESS TIME)

USER QUERY TIMES (RELATIVE)

XtremIO 기반 Oracle 성능 향상

Page 28: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

“ Better Together “, EMC Federation Solutions

INFORMATION STORAGE & PROTECTION

INFORMATION INTELLIGENCE

SOFTWARE-DEFINED DATA CENTER HYBRID CLOUD

END USER COMPUTING

BIG DATA SOLUTIONS

PLATFORM AS A SERVICE AGILE APPLICATION DEVELOPMENT

IDENTITY, SECURITY

ANALYTICS, GRC

ENTERPRISE DATA CENTER

SERVICE PROVIDER

PARTNERS

VCLOUD AIR

CONVERGED INFRASTRUCTURE

PLATFORM AS A SERVICE

VIRTUAL WORKSPACE

BUSINESS DATA LAKE

SECURITY ANALYTICS

SOFTWARE DEFINED

DATA CENTER

Software Defined Enterprise 구현

Page 29: 진한 IT인프라 구현 소프트웨어로부터 · 성능 영향 없고, 별도 비용이 요구되지 않음 Flash 최적화된 실시간중복제거 실시간 압축 보호 기법

Thank You