기업비즈니스를위한정보통합실무방법론및성공요소 · 2005. 7. 25. · database/...

®

IBM Software Group

© 2005 IBM Corporation

기업 비즈니스를 위한 정보 통합 실무 방법론 및 성공 요소

- EII (Enterprise Information Integration)

IBM SWG Information Management 사업부

장윤정 차장 ([email protected])

IBM Software Group

2

Agenda § 기업의 정보 변화

§ 전사적 정보 통합이란- Enterprise Information Integration

§ 정보 통합의 방법론

4 Consolidation

4 Federation

§ 정보 통합 서비스

4 Data Source Connect

4 Data Enhancement

4 Data Delivery

§ 정보 통합의 성공 요소

§ 정보 통합 사례 발표

IBM Software Group

3




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

4

온 디맨드 환경의 정보란…비즈니스 관점의 가치 창출

InsightInsight

InformationInformation

결정적

활용

결정적

활용

DataData

능동적

활용

능동적

활용

수동적

활용

수동적

활용

비즈

니스

의유

연성

및즉

각적

인대

응성

비즈니스적 가치

수 많은, 다양한 형태의 데이터의 통합을 통해 단순한“데이터”를 연관된 “데이터집합”으로 …

통합된 데이터에 대한 변형을통해 단순한 “데이터”를자료로서의 “정보”로 . . .

실시간의 정보 분석을 통해빠른 의사 결정의 최종 해답을제공 …

IBM Software Group

5

Sources: IBM & Industry Studies, Customer Interviews, Forrester

IT 예산의 40%정도가통합을 위해 사용됨

사용자의 작업 중30%는 원하는 정보를

찾는데 소요됨

대규모 기업환경일 수록 복잡한회계관리 및 자산관리 시스템을

갖고 있음

작업의 42%정도가시스템 화 되지 않고

문서에 기반함

정보의 85%는비정형화된형식을 가짐

Trx.Trx.

DocumentsDocumentsReportsReports

e-Mailse-Mails

MediaMedia

CustomersCustomersEmployeesEmployees

PartnersPartners

DatabasesDatabases

Orgs.Orgs.FinancialsFinancialsProductsProducts

WebContent

WebContent

두 개이상의 데이터저장소를 갖고있는기업들이 전체의 79%이며 ,

기업들의 25%는 15개 이상의데이터저장소를 갖고 있음

최고 경영자들의 60% 이상은 빠른의사결정을 위한 즉각적이고 정확한

정보를 필요로 함

최고 경영자들의 1/3 만이 정보를쉽게 얻을 수 있으며, 효과적으로정보가 제공되고 있다고 생각함

응용 프로그램의 설계단계 중에서 30-50%가중복되는 정보에 대한전달 및 복제 관리에

할애됨

기업의 정보 변화..

IBM Software Group

6




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

7

…

원형 데이터 소스

DW – 물리적으로 통합되고, 집계되고, 정제된 데이터

DM – ㅇDW의부분 집합, 특정분석을 복적으로한 시스템

Data WarehouseData Mart

데이터 복제 ETL

Data Mart

Data Mart

응용 프로그램

인터페이스를 이용한 응용프로그램 간의 호출 방식

EAI

App2App1

MQIn Formatting & Mapping

MQOutRouteToLabel

비정형 데이터

EII

“뷰”를 통한 단일한 가상의 데이터저장소 구성

App3

전사적 정보 통합Enterprise Information Integration - EII

IBM Software Group

8

EII 모델의 이점§ 정보의 효율적 통합

4단일한 데이터 뷰 제공4실시간 정보 통합4정보 질의 및 검색 단계 제공4이기종의 컨텐츠 통합4표준 인터페이스를 통한 사용

§ 자원에 대한 가상화4가상의 데이터 저장소 제공4분산 또는 복제, 물리적 통합 제공4통합 정보의 메타 데이터 관리4새로운 데이터 소스에 대한 유연한

확장성 제공4Data Grid

§ 서비스 레벨 자동화4관리 비용을 최소화 하는 자동화

기능 제공4자동 복제 기능 등으로 저장

관리의 효율성을 높임4메모리 캐쉬 기능으로 성능 향상

§ BPM4BPM 솔루션에 적용 가능4실시간 데이터 연동 및 로드4실시간 데이터 분석4Business Intelligence

CUSTOMERSERVICE

MARKETING CUSTOMERS& PARTNERS LEGAL HR R&DFINANCE

SALES & SUPPORT

Imaging/Document

Mgmt

ReportMgmt

Web Content/

Media AssetMgmt

Database/CustomSystems

NetworkFile

Systems

Workflow/BusinessProcess

Mgmt

SELF-SERVICE COMPLIANCECALL CENTER CRM / ERP WEBSITES

CUSTOMERSERVICE

MARKETING

CUSTOMERS& PARTNERS

LEGAL HR R&DFINANCESALES & SUPPORT

Imaging/Document

Mgmt

ReportMgmt

Web Content/Media Asset

Mgmt

Database/CustomSystems

NetworkFile

Systems

Workflow/Business

Process Mgmt

SELF-SERVICE COMPLIANCE WEBSITESCALL CENTER CRM / ERP

Information Integration Solution

Enterprise Information integration Model

IBM Software Group

9

Enterprise Information Integration 비전

Integrated Information- Virtual Data Store

비즈니스 응용 프로그램

Marketing e-Commerce Fulfillment

Data Grid Technology

언제 어느 때라도 원하는 정보를 정확하게, 원하는 형식으로 제공합니다. 복잡한 데이터 저장

구조로부터 응용 프로그램 분리 시킴으로써 단순하고 융통성 있는 데이터 미들웨어의 역할을

담당합니다 .

비즈니스를 위해 정확하고, 일관된, 가치 있는 정보를 원하는 즉시 제공합니다.

가상화(Virtualized): 분산되어 있는다양한 형태의 데이터를 소스를 단일한데이터 소스인 것처럼 접근하도록 함 –서비스의 질적 향상을 높여줌

자동화(Autonomic): IT의 기반 기술을손쉽고 효과적으로 관리하도록 하는자동화 기능 – 정보 관리를 위한 자가진단 및 자동 튜닝, 자동 백업, 자동모니터링 등을 제공함으로 ROI를 높여줌

개방성(Open): 표준화된 접근인터페이스를 지원함으로써 어떤 환경의데이터 소스도 투명하게 접근 가능하도록함

IBM Software Group

10




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

11

정보 통합의 방법 : 데이터 저장소 관점

Consolidation Federation

로컬 데이터 소스로의 통합:

§ 구조화된 형태의 데이터 집중적인 저장소

§ 데이터 연산 및 분석 작업의 높은 성능 보장

§ 온라인 운영 데이터를 위한 저장소(ODS)

및 제품 관리 등을 위한 응용프로그램(ERP,

PLM, PDM, SCM 등)의 데이터 저장소

§ 데이터 이관 방법

4 Extract/Transform/Load(ETL) : 대용량의데이터 이관, 사용자의 metadata 이용 시적합

4 Replication : 소규모의 변경 데이터 이관, 실시간의 변경 분 반영 시 적합

분산 데이터 소스에 대한 연합:

§ 실시간의 데이터 연동

§ 각기 다른 위치에 저장된 복합적인 형태의

데이터 활용 : 동적인 데이터 조인

§ 정형화된 데이터 및 비 정형 데이터 동시처리

§ 관계형 데이터 및 비 관계형 데이터 처리

§ 처리되는 데이터의 양이 상대적으로 적은경우

§ 물리적인 데이터의 이동이 용이하지 않은경우

IBM Software Group

12

정보 통합의 방법 : 트랜잭션 관점

Data Integration Application Integration

데이터 중심적인 통합:

§ 데이터 요청의 주체가 필요로 할때데이터를 제공할 수 있는 구조

§ 연동할 데이터 소스가 가변적으로 증가또는 감소 하는 경우

§ 데이터 소스 간의 SQL문을 통한 연산 및

조인 등을 수행하는 경우

§ 실시간으로 분산된 데이터를 Select 하는

경우 : DW의 데이터와 운영 시스템의

데이터를 Portal 에서 실시간으로 질의 하는

경우

응용 프로그램 기반의 통합:

§ 데이터의 전달 주체가 트랜잭션을 발생하는응용 프로그램인 경우

§ 트랜잭션 기반으로 데이터가 전달되어야하는 경우 : 특정 응용프로그램에서데이터가 변경되면 다른 응용 프로그램으로데이터를 전송해야 하는 경우

§ 응용프로그램 간의 긴밀한 로직 처리가필요한 경우

§ 데이터 소스의 변경이 거의 없는 경우

§ 데이터 소스를 직접 적으로 접근할 수 없는경우 : 패키지 내의 데이터 소스 등

IBM Software Group

13

Federation을 위한 핵심 아키텍쳐

§ 데이터 투명성

4단일한 데이터베이스처럼 사용 가능

§ 이기종 데이터 소스 호환성

4다양한 형태의 데이터 소스 지원

4관계형 데이터베이스, 정형화된 데이터소스, XML, 메시지, 웹 데이터 등..

§ 확장성

4어떤 형태의 데이터 소스도 연동 가능

4개발 툴 제공

§ 최상의 기능

4모든 데이터 소스에 대한 질의를 위한 모든기능 제공

4각 데이터 소스의 특성에 따른 기능 지원

§ 자율성 보장

4기존 데이터 소스 및 응용 프로그램, 시스템등의 변경 필요 없음

§ 성능 향상을 위한 기능

4분산 쿼리를 위한 최적의 성능 제공

Functions

IBM Software Group

14

Federation의 이점

Control IT costs

§ 기존 데이터를 이용한 정보의 질을 높임으로써 정확한 의사 결정 가능

§전사적인 기존 자원의 최대한 활용

기존 투자 자산에 대한 높은 활용도 보장

§ 복잡한 시스템 환경에 대한 관리 비용을 최소화 함으로써 ROI를 높여줌

§ 신규 시스템 등에 적용할 수 있는 유연성과 확장성을 통해 기업의 지속적인 비용 절감 효과제공

관리 비용 절감 효과

§ 개발 비용 및 기간을 최소화 시킴(30% ~ 40%)

§ 비즈니스 요건에 즉각적인 대응 가능

빠른 시장 진입을 위한 기반 마련

IBM Software Group

15




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

16

오픈 시스템 환경에 대한 유연한 통합 인프라를 바탕으로 사용자의 요구를충족시켜주는 정확한 정보의 제공

정보 통합 서비스란..

… 어떤 형태의 데이터 소스라도 통합Connect

Deliver

… 정확하고 일관된 정보 관리

… 원하는 시점에, 가장 정확한 정보 제공

Enhance

IBM Software Group

17

Connect to Data and Content

Find Federate Place Publish

Analyze Model Cleanse Transform

Connect

Deliver

데이터 및 컨텐츠 모델

Enhance

Integrated Metadata

정보 통합 서비스란..

오픈 시스템 환경에 대한 유연한 통합 인프라를 바탕으로 사용자의 요구를충족시켜주는 정확한 정보의 제공

IBM Software Group

18

정보 통합 플랫폼의 핵심 구성 요소

사용자에 의한 설계, 계발, 관리 작업 단일화

메타 데이터 통합 관리

StandardAPIs

Service-oriented Scheduled Event-driven사용 모델

플랫폼서비스

병렬 처리를 통한 효율성 증대

개방적이고 유연성이 뛰어난 아키텍쳐



Analyze Model Cleanse Transform정보 통합서비스

IBM Software Group

19

Unified User Experience

Integrated Metadata

StandardAPIs

Service-oriented Scheduled Event-driven사용모델

플랫폼서비스

Parallel Execution




§데이터 프로파일링 및 산업 표준 형식에적용하기 위한 메타 데이터 관리§양질의 데이터를 위한 데이터 품질 관리를 위한메타 데이터 분석

§높은 성능과 자원 활용도 및 확장성 지원을 위한병렬 처리 아키텍쳐 지원

§ 이벤트 기반으로 짧은 동기화 주기를 필요로 하는대용량의 데이터 이관 작업§단일한 솔루션 내에서 다양한 데이터 이관 형태제공

§데이터 정제 및 표준화, 매핑 등의 변형 작업을통해 데이터 품질을 보장함으로써 응용 프로그램내의 코딩을 간소화 시키고 단순한 SQL, XML 및Web services 사용 가능

정보 통합 플랫폼의 핵심 구성 요소 : Enhancement

IBM Software Group

20

Unified User Experience

Integrated Metadata

StandardAPIs

Service-oriented Scheduled Event-driven사용 모델

플랫폼서비스

Parallel Execution




§ 분산된 데이터 소스에 대한 강력한 검색 엔진기능 제공§인터넷 검색과 유사한 기능 및 인터페이스 지원

§표준 SQL 인터페이스를 통한 서로 다른 형태의데이터 연동§이기종 데이터 간의 조인 및 단일 엑세스 지원

§ 데이터 복제 기능§이기종 데이터베이스 간의 복제 지원

§이벤트 기반의 데이터 전달

§ Queue를 이용한 데이터 퍼블리슁 지원

정보 통합 플랫폼의 핵심 구성 요소 : Delivery

IBM Software Group

21




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

22

사전 테스트 및 통합 환경 구축을 위한 다양한 기술을 보유한 파트너업체들과의 협력 관계

여러 파트너 업체와의 협력

실제 업무를 반영한 PoC를 통해 검증Pilot 프로젝트 수행

통합 시점 이후의 유연한 확장성을 제공할 수 있는 아키텍쳐 선정향후 기업 정보의 확장성 보장

Federation, replication, event publishing, ETL, data profiling, data quality, content integration, enterprise search데이터 변형을 위한 기준 및 관련 메타 데이터 공유정보 처리 및 사용의 전 단계에 대한 지원

성능 향상을 위한 기능

사용 인터페이스 및 지원 모델

표준 인터페이스 및 서비스 기반의 인터페이스, 스케줄 기반 모델, 이벤트 기반 모델 등 다양한 형태 지원

데이터 모델 및 구체적인방법론 결정

다양한 데이터 및 컨텐츠 지원

정형/비정형, 메인 프레임 데이터 소스, Embedded 데이터 소스 및생명공학 데이터 소스 등, 실 환경에 사용되는 거의 모든 형태의 데이터지원

통합 대상 범위 선정

정보 통합의 성공을 위해..

IBM Software Group

23




4 Consolidation

4 Federation



4 Data Enhancement

4 Data Delivery



IBM Software Group

24

XMLExcel

flat files

Data Mart(DB2 UDB)

AIX

WINDOWSZ/OS

IncrementalUpdate

Initial Population

ETL/APP

ETL

Federation

Portal

Federation

Data Warehouse(DB2 UDB)

ETL

Federation

Credit Card Rewards

ETL

OperationalDataStore

고객 정보 통합

InitialPopulation

IncrementalUpdate API

Change Capture

ETL/APP

RelationalDB2 UDB

RelationalDB2 UDB

RelationalORACLE

Loans Checking/Savings BrokerageNon Relational

VSAM

RelationalDB2 Z/OS

Federation

기간계 운영 시스템

InitialPopulation

Federation

Federation

IncrementalUpdate

Consolidation

ConsolidationConsolidation

기업의 정보 통합 패턴

IBM Software Group

25

분산된 다양한 형태의데이터 소스에 대한 실시간

통합

SQL, SQL/XML

Federation Engine

ODBC

Text

Sybase

Informix

SQL Server

Oracle

Teradata

WebSphereMQ ODBC

IBM Extended Search

ExcelWWW, email,…

XML

DB2 FamilySingle DB View

DB2 UDB

SW AGAdabas

VSAM

CA-IDMS

CA-Datacom

IMS

II Classic Federation

Verity

Open Text

FileNet

Documentum

DB2 ContentManager

Others

Content Data

RDB Data

Excel, Web,XML Data

Mainframe Data

Information Integrator

WBI

Federation to Application

II Content EditionII Content Edition

Wrappers and functions

Integration Solution : WebSphere Information Integration

IBM Software Group

26

Manufacturing/Retail

Insurance & Healthcare Finance & Banking Oil, Gas & Utility Telecommunications

Life Sciences Technology & Media Transport & Hospitality

5000개 이상의 고객 사례(국내/국외)

IBM Software Group

27

비즈니스 인텔리젼스

소매 관련 비즈니스 유형의 예

§ 계획된 주기에 따라 각 지역별, 제품별 판매추이/영업 실적 등에 대한 정보 필요

§ 제고 관리를 위해 과거의 제고 건에 대한데이터를 기반으로 제고 처리 기준 치를산정하려는 요청

Region 1 Region 2 Region 3

솔루션

§ 분석을 위한 제품 관련 정보를 데이터웨어하우스로 구축(데이터 로드 및 집계)

§ 기존의 데이터 변형 규칙이나 라이브러리모듈 활용

§ 메타 데이터 공유

§ 현재 제고에 대한 정보와 데이터웨어하우스의 누적 데이터 및 향후 예상된제고 데이터를 단일 뷰로 질의

§ 기존의 분석 및 보고서를 위한 툴 사용

비즈니스적 가치§ 추가 요구 사항을 위한 빠른 인프라 구축

§ 기존 데이터베이스 및 툴 활용

§ 새로운 비즈니스 요구에 즉각적 대응

DW 분석/보고서 툴

IBM Software Group

28

WebSphere Information Integrator Classic Federation consolidated critical sales data from the host e-commerce site with distributed data to provide up-to-the-minute sales information to a supply chain warehouse.

The solution saved one full year of development time by providing rapid integration of mainframe data with SQL Server data in a single query.

The Chinese Ministry of Railways gives business managers access to summarized historical data in a DB2-based warehouse with federated access to real-time DB2 and Oracle freight transportation operational data and passenger data in Sybase and SQL Server.

Improve the quality of railway transportation management improving freight forecasting and optimizing carrying resource assignmentChinese Ministry of Railways

As the Japanese telecommunications market embraced telephone number compatibility, a premium was placed on customer retention. KDDI deployed a new enterprise-scale data warehouse using WebSphere DataStage to gain better customer insight in the rapidly growing cellular telephone market in Japan.

The solution provided better visibility into customer activities and improved customer loyalty and service diversification. The solution was able to scale the meet the massive growth in subscribers.

WebSphere DataStage used to combine inventory information in sources across 3 continents of enterprise SCM systems along with global sales data in order to reduce global logistics costs. The solution dealt with huge volumes of data across SAP and several SCM systems.

The solution allowed Samsung to cut their global inventory and logistics costs and gain a competitive advantage over others in the electronics business. Reduced costs of building and maintaining the solution, versus prior solutions

Business Intelligence

IBM Software Group

29

비즈니스 데이터 변형

물류 관련 비즈니스 유형의 예

§ 각 지역의 운송 시스템 및 외주 업체의시스템을 이용한 통합적인 운송 정보 관리필요

§ 여러 시스템에 산재되어 있는 고객 정보에대한 관리의 부담 및 분산된 시스템에 대해단일한 보고서 작성을 위해 많은 비용이소요됨

§ 한 시스템의 변경 사항을 다른 시스템에적용하기 어려움

솔루션

§ 전 지역에 대한 물류 관리 시스템 통합을위해 필요한 정보 수집 후 분류

§ 외주 업체의 시스템과 운송 시스템 통합 -Federation

§ 각 데이터 소스에 대한 단일 질의 및 변경을위해 가상의 데이터 저장소 생성

비즈니스적 가치§ 운송 상태 파악이 빨라지므로 서비스 향상

§ 기존 응용 프로그램 보존

§ 고객에게 단일한 서비스 인터페이스지원(외주 업체에 대해 별도 엑세스 필요없음)

§ 실시간 운송 상태 확인 가능, 정보의활용도가 높아짐

Regional Warehouse & Asset Systems

WarehouseApplications

Customer Requests

IBM Software Group

30

Business Transformation

Uses WebSphere Information Integrator to manage data consistency among its Microsoft SQL Server portal database and its DB2 UDB headquarters database delivering up to the minute inventory information to match buyers to cars and quota and bonus detail to incent dealerships

Improved access response times 93%; Implemented system in under 2 months without change to infrastructure.

Implemented WebSphere Information Integrator Classic Federation to leverage their IDMS inventory system and mainframe business logic supporting catalog telesales for its new e-commerce site using in house SQL skills and no mainframe coding

Develop and support new channel without disrupting existing infrastructure. The new Web-based application has grown 60 times in just a few years.

Used WebSphere DataStage and WebSphere QualityStage to develop quality controls to validate and cleanse monthly operational reports from AIG Japan to ensure compliance with U.S. regulatory requirements

Successfully complied with regulations while eliminating 71 legacy applications. Allowed the redirection of 50% of the AIG Japan IT budget to new projects and savings of $1M per year.

Needed to consolidate back-end payment processing and to provide flexible customer integration capabilities across a global infrastructure, including EDI, SWIFT and WIRE systems.

Implemented WebSphere DataStage TX, streamlining payment processing, routing and reporting and connecting corporate clients with payment processing services.

IBM Software Group

31

LG Siltron반도체 생산 관리 시스템

Challenge

Solution

Business benefits

§ LG was able to save the thousands of dollars that would have been required to install and manage an in-house data replication solution.§ The system also provides standardized,

flexible data replication and synchronization processes that supports LG's business operations

Technology benefits

§ Seamless fit with existing infrastructure was key driver for customer acceptance.

LG had an enterprise resource planning (ERP) system based on Oracle with a new manufacturing system based on DB2 ESE.

LG needed integrate its disparate systems with a standardized and flexible data synchronization solution instead of building and maintaining an in-house integration system

LG integrated its heterogeneous databases by implementing WebSphere Information Integrator to replicate the company's mission-critical data from DB2 UDB to their Oracle ERP system in near real-time.

LG Siltron

IBM Software Group

32

데이터 통합

Data

Warehouse

and

Business Intelligence

제품 관리

Analyze Model Transform Cleanse


Integration HUB

프로세스

통합

StandardInterfaces

II Drivers/Connectors

Enterprise

Applications

Enterprise

Applications

Product

Location

Org

Trading Partner

Product

Item

Category

Integrative Metadata

Global Master Code를 위한 제품 정보관리

•제품 정보 관리

•-데이터 모델링-컨텐츠 작성자-제품 분류-세부 항목-위치 관리

-구성 및 거래 정보-가격 및 거래 주기 관리-비즈니스 로직

•데이터 모델에 따른 메타 데이터

•브라우저 기반의 UI

•Workflow and collaboration

Global Master Code를 위한 데이터이관 및 품질 관리

- Analyze : Discover Data

소스 데이터를 통한 구조 분석

- Cleanse : Prepare Data

표준화, 매핑, 정제

- Transform : Change &Transmit Data

데이터 추출 및 변형

- Integrative Metadata management

Standard Interfaces

Data Dictionary

산업 모델

DWDB

전사적 정보 통합 서비스

전사적 정보 관리

WebSphere Information Integration 제안 사례 - 1

IBM Software Group

33

PortalServer

LegacyApplication

InformationIntegrator

WebSphere BI

CrewBoarding

Flt OpsPub / Sub

Personalization&

Channel Mgt.

RampOperations Control Center

Security

Flt OpsPub / Sub

DCSCheck in

Flt OpsXML Hub

Baggage

Flight Close

Personalization&

Channel Mgt.

DCSPAX Board

ODS

Dispatch

ODS


IBM Software Group

34

LegacyApplication

ProcessIntegration

Data/ApplicationIntegration

BusinessProcess

UserOPUS OPR Control FltPlanDCS/CRS

Aircrew DCS/CRS

5.1 Develop & Refine A/C Assignment & Routing 5.2 Estimate & Refine Aircraft Load

5.3 Develop & Refine Crew Assignment & Routing 5.4 Develop, Operate & Monitor

Flight Plan

5.7 Weather Forecasting & Monitoring

5.5 Manage Irregular Operations

5.6 Manage Regulatory Reporting5.8 Manage Flight Ops Quality Assurance

5.9 Manage Flight/ Cabin Crew

FltPlan

FIDS/FISCabinCrew MGMT

Aircrew Crew MGMT

OPUS FLTPLAN RACEAirCrew DCSHub Opera DB

탑승자명단잔여시간

항공기 SKD별 Spot정보항공기 출.도착정보Gate/Spot정보급유량

승무원 Duty별 명단In/out 별 승무원 구분편별승무원 Meal수연결 Flight 및 승객정보


IBM Software Group

35

The w3.ibm.com web site runs IBM search today!