˚a>15==>ab8?>ab@>5=8o0=0;8b8g5a:8e a8ab515==>ab8?>ab@>5=8o0=0;8b8g5a:8e...

20
Особенности построения аналитических систем. Сбалансированная архитектура Гаяне Арутюнян [email protected] 7 985 226 78 64

Upload: others

Post on 03-Aug-2020

10 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Особенности построения аналитическихсистем. Сбалансированная архитектура

Гаяне Арутюнян[email protected] 985 226 78 64

Page 2: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Содержание

Введение

Архитектура решений

Сбалансированныесистемы

Примеры внедрения

Заключение

Page 3: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Предприятия нацелены на улучшениесвоих результатов

3

Увеличение прибыли

Сокращение рисков

Прогнозирование будущих результатов с

высокой степенью вероятности

Снижение затрат

Page 4: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Что происходит?Что происходит? Где мывыигрываем?Где мы

выигрываем?Что можетпроизойти?Что можетпроизойти?

Что делатьдальше?Что делатьдальше?

Сложность восприятия информации вмасштабах организации возрастает

4

Page 5: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

5

Академический взгляд на аналитику

ОтчётностьЧто случилось?

АнализПочему этослучилось?

МониторингЧто происходит ?

ПредсказанияЧто может быть?

Значение для бизнеса

Сло

жно

сть

испо

лнен

ия

Предиктивная аналитика

Отчёты, запросы,поиск данных

OLAP иинструментывизуализации

Панели и системы показателей

Wayne Erickson – Predictive AnalyticsExtending the Value of Your DW Investment

Cognos

SPSS

ОтчётностьЧто случилось?

АнализПочему этослучилось?

МониторингЧто происходит ?

ОтчётностьЧто случилось?

АнализПочему этослучилось?

Page 6: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Information Management

Трудности на пути выбора и принятия решения

Как я могу быть уверенным, что пользователи использовалидостоверную информацию для управления бизнесом?

Задачи бизнеса Задачи ИТ

Доставка достовернойинформации из

фрагментированных,разнородных систем в нужномобъёме и заданной скоростью.

Доставить требуемуюинформацию тогда и в том

виде как это будет необходимо

Page 7: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

В контекстеReal-time delivery of relevant

information when and where it’sneeded

ПолнаяRelated information reconciled into a

single and holistic view

ТочнаяComplex and disparate data transformed,

cleansed and delivered

ПроницательнаяDerive meaning from

information challenges

Какая информация достоверная?

Page 8: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

8

IBM Business Analytics

Успешное ведение бизнеса

IBM Data Warehouse Solutions

Основа для анализа бизнеса

8

IBM Smart Analytics System

Page 9: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Extr

act–

Tran

sfor

m–

Load

(ETL

)Ex

trac

t–Tr

ansf

orm

–Lo

ad (E

TL)

Text & Data MiningText & Data Mining

Web

Mobile

Office

Аналитическийуровень

Уровеньпредставления

Уровеньдоставки

УровеньДанных

•В

ыбо

рка

•Ре

стру

ктур

изац

ия•

Пре

дост

авле

ние

ИсточникиДанных

• Центральное хранилище данных• Оперативный склад данных• Зоны временного хранения

InfoCubes

Dashboards

Scorecarding

Reporting

Analysis

Чт

опр

оисх

одит

очем

уэт

опр

оисх

одит

?

СтатистическийАнализ

СтатистическийАнализ

Разработкамоделей

Разработкамоделей

IBM Industry Models• Logical data models• Process models• Business solutions templates

ПрогнозныйАнализ

ПрогнозныйАнализ

Что такое Бизнес Аналитика для ИТ?

СценарныйАнализ

СценарныйАнализ

DataWarehouse

МногомерныйАнализ

МногомерныйАнализ

•И

звле

чени

е•

Пре

обра

зова

ние

•За

груз

ка

Sele

ct–

Re-

stru

ctur

e–

Del

iver

(SR

D)

Sele

ct–

Re-

stru

ctur

e–

Del

iver

(SR

D)

ПланированиеПланированиеMetadata

НСИ

Data IntegrationBusiness Analytics

Business Intelegence

Документы

Файлы

ЭлектронныеАрхивы

OLTP

Data Quality

Page 10: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

10

Ключевые элементы надёжности хранилища

• Управление загрузкой• Резервное копирование и восстановление• Высокая производительность выгрузки• Дизайн базы данных под хранилище• Расширение и рост аналитических задач• Производительность хранилища

Page 11: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

11

Это новое решение состоящее из аналитического ПО, серверов, систем храненияи сервиса устраняющего сложности связанные с продолжительностью истоимостью внедрения. И обеспечивает гибкость и оптимизацию решения подбизнес нужды компаний.

Smart Analytics System

IBM Smart Analytics System включает в себявсё необходимое для обслуживания задачбизнес анализа.

• Программное обеспечение Robust Cognos /InfoSphere Warehouse

• Серверы - IBM System X и IBM Power 7• Системы хранения - IBM Disk System• Консалтинг и сервисную поддержку

решения

Что такое IBM Smart Analytics System?

11

Page 12: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

12

Возможность выбора путей развития. Наращивание мощностей и инструментованализа в зависимости от роста требований бизнеса.

IBM SMART ANALYTICS SYSTEM

IBM Smart Analytics SystemГибкие и масштабируемые решения

Start with a SystemStart with a Systemthat fits your needsthat fits your needs

Add capacity forAdd capacity forgrowing data & usersgrowing data & users

Add analytic capabilityAdd analytic capabilityto meet new business needsto meet new business needs

12

Page 13: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

13

IBM Smart Analytics System 5710

Компактное решение в пределах одного сервера– неограниченное кол-во пользователей базы– Включает лицензии на 5 пользователей

Cognos 10 BI

Доступность аналитики– Единая точка входа

3 Варианта– Малый -1.5 TB пользовательских данных– Средний - 3.0 TB– Большой - 13.2 TB

13

Аналитическое ПО

Autonomics

OLAP

Native XML Support

Производительность

Mixed Workload Mgmt

Flexibility

Massively ParallelProcessing

High-Speed QueryPerformance

Extreme Compression

Cognos 10 BI

In-Database Mining

SecurityHigh Availability External Data Access

Tools

ELT SQL WarehousingTool

ValueValue

Page 14: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

14

IBM Smart Analytics System 5710

Аппаратные компоненты•2 Socket Intel Server (x3630 M3)•Up to 96 GB of Memory•3 Configurations : Small, Medium and Large– Large having 13.2 TB of User Capacity.•DS3500 based storage on the Largesystem.•2U rack optimized configuration

Программные компоненты•InfoSphere Warehouse Departmental v9.7.3•Tuned for Cognos 10•SUSE 11 Linux based

308.44.8Total raw disk

$180,000USD

$120,000USD

$60,000USD

Approximate ListPrice

24 – 600GBNoneNoneExternal Storage

4 – 300GB24 – 600GB

28 – 300GB

16 –300GB

Internal Disk

13.2/243/5.41.5/2.7Total User / TotalCapacity (TB)

964824Memory (GB)

121212Cores

222Sockets

LargeMediumSmallSystem ConfigurationSize

IBM System x Linux based offering

Аппаратные компоненты•2 Socket Intel Server (x3630 M3)•Up to 96 GB of Memory•3 Configurations : Small, Medium and Large– Large having 13.2 TB of User Capacity.•DS3500 based storage on the Largesystem.•2U rack optimized configuration

Программные компоненты•InfoSphere Warehouse Departmental v9.7.3•Tuned for Cognos 10•SUSE 11 Linux based

Page 15: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Business Analytics

15

5710 Large System Architecture IBM System x3630 M3

CPU– 2 processors / 6 cores = 12 cores total

Memory– 12 8GB memory modules = 96 GB total– Even distribution across 3 channels for

max bandwidth

Internal Disk– Logical drive 1 (4x300GB) for OS and apps, RAID-10– Logical drives 2-7 for data (4x600GB), RAID-5

IBM System Storage DS3524– Logical drives 8-13 for data (4x600GB), RAID-5

InfoSphere Warehouse Data Server– InfoSphere Warehouse Departmental Edition limited to 64GB memory

Database Partitions– System is pre-configured with 12 logical partitions

Page 16: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Information Management

IBM Smart Analytics System 7710Интегрировано и оптимизировано для аналитики

Аналитическое ПО Conos BI– InfoSphere Warehouse OLAP, Text Analytics &

Data Mining

ПО хранилища– InfoSphere Warehouse– InfoSphere Warehouse Advanced

Workload Management– Tivoli System Automation

Система– IBM Power 740 Servers (16 cores)– IBM System Storage DS3500– AIX 6.1

Page 17: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Information Management

Архитектура ISAS 7700

17

Page 18: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

© 2012 IBM Corporation

Information Management

Компоненты бизнес аналитики и их распределение

SPSS C&DSSPSS C&DS

SPSS ModelerServerSPSS ModelerServer

SPSS StatisticsServerSPSS StatisticsServer

SPSS DecisionManagementSPSS DecisionManagement

Cognos WebGatewayCognos WebGateway

Cognos ReportServerCognos ReportServer

Cognos ContentManagerCognos ContentManager

Cognos TM1Cognos TM1

Cognos MetricsStudioCognos MetricsStudio

SPSS C&DSSPSS C&DS

SPSS ModelerServerSPSS ModelerServer

SPSS StatisticsServerSPSS StatisticsServer

Cognos ReportServerCognos ReportServerCognos ReportServerCognos ReportServer

Cognos WebGatewayCognos WebGateway

Cognos BusinessViewpointCognos BusinessViewpoint

Cognos TM1Cognos TM1

PowerVM4 cores

2 cores

2 cores

4 cores

4 cores

4 cores

4 cores

2 cores

2 cores

16 cores

8 cores

8 cores

8 cores

16 cores

16 cores

2 cores

Более 100 ядер

Page 19: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

Заключение

• Преобразовать данные в весомую информацию• Использовать и преобразовывать существующие

модели бизнеса• Контролировать и управлять процессом

преобразования данных• Использовать проверенные решения или

коробочные решения

Page 20: ˚A>15==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB515==>AB8?>AB@>5=8O0=0;8B8G5A:8E A8AB520==0O0@E8B5:BC@0 0O=5 @CBN=O= 82190210@ru.ibm.com

20

Полезные ссылки

• SPSS - http://www-01.ibm.com/software/analytics/spss/• https://www.ibm.com/developerworks/mydeveloperworks/groups/service/html/com

munityview?communityUuid=22d463bb-07c0-48fe-b392-ead5993ddc1f• Cognos Business Intelligence and Financial Performance Management

http://www-01.ibm.com/software/data/cognos/• IBM Netezza. The Simple Data Warehouse Appliance for Serious Analytics

http://www-01.ibm.com/software/data/netezza/• InfoSphere Warehouse

http://www-01.ibm.com/software/data/infosphere/warehouse/edition-comparison.html

• Контакты:• Арутюнян Гаяне: [email protected]

+ 7 985 226 78 64• Тихонов Александр: [email protected]