mds ap - yeni nesil gerçek zamanlı İş analitikleri ve büyük veri stratejisi

Yeni Nesil Gerçek Zamanlı İş Analitikleri

ve Büyük Veri Stratejisi

Konuşmacı Adı : MUZAFFER YÖNTEM

Firma Adı :

© 2014 SAP AG or an SAP affiliate company. All rights reserved. 2

To Continually deliver world Class Solutions &

Technologies with SAP

Help Customers better use their data assets to Improve

Performance and make smarter decisions

Core focus on Customer satisfaction &

Technology innovations

“A Midis Group company & a

Sybase Products Middle East

affiliate company”


The Group


MDS ap Vision

Information Manamagement

Enterprise Architect

Business Analytics

Enterprise

Performance

Management

Project Management


Source: IDC, 2011

MARKET EVOLUTION


DATA PEOPLE

A Network of Truth Is Needed

People’s expectations have

changed

From Single Version of The Truth


Standard Reports

Ad-hoc Reports

OLAP & Visualization

Dashboards & Scorecards

Exploration & Visualization

Value

Predictive Modeling

Traditional Business Intelligence

Big Data Analytics

Org

an

izati

on

al

& C

om

peti

tive I

mp

act

Not all business intelligence is the same The analytical tools continuum

Co

lle

cti

ve

In

sig

ht

Maturity of Analytics Capabilities

Us

er

En

ga

ge

me

nt

Continious Intelligence


Rethink Paradigms within the Big Data Context

Application

Layer

Database

Layer Calculation

Future

Delegation of data intense

operations to the SAP RTDP

components such as SAP

HANA, SAP Sybase IQ, and

SAP Sybase ESP.

Calculation Today

Applications

execute many data

intense operations in

the application layer


Faster Time To take an action with in-memory

prebuilt analytics

React Quicker, Create Better Value

Action Taken

Time

Value

Latency

Event Happens

Data Stored Action Value


Information Management Landscape Integration, Federation, Operational BI

Historical

Event Initiated User Initiated

Real Time

Data Federation

Data Integration (ETL

based)

Continuous Business

Intelligence

New Business

Segment

Business question are send to data

and not data to business questions

Analytics solutions from SAP

Agile

Visualization

Advanced

Analytics

Big

Data

Mobile

Collaboration

Cloud

Enterprise

Business Intelligence


End to End Complete Solution

IQ

Operational Data

SAP Business Analytics/Prediction

Analytic

DBMS

Data Sources e.g.

Oracle 11g, IBM DB2,

Microsoft SQL Server

ASE,ASA….

http://www.google.com.tr/url?sa=i&rct=j&q=&esrc=s&frm=1&source=images&cd=&cad=rja&docid=PzhSP5iYI1_XwM&tbnid=ASAGzdr44h4-CM:&ved=0CAUQjRw&url=http://wiki.scn.sap.com/wiki/display/stage/SAP+Sybase+IQ&ei=1RcFU7DXI7CV0QX1-4CQBQ&bvm=bv.61535280,d.d2k&psig=AFQjCNGYrUg4UcspuseGmHIdepAfE9jiXQ&ust=1392929102672541

SAP HANA/ Hadoop Reference Architecture

H2 – The Power of SAP HANA and

Hadoop

Big Data Platform Big Data Science

Real Time Real Value Real Results

Big Data

Analytics & Apps

SAP: Real-time, with real results

14

Bilyoner.com Sybase IQ

Veri Ambarı Migration Onur Temli - İş Zekası ve Veri Yönetim Müdürü

Bilyoner.com kimdir?

• Kuruluş: Eylül 2003 • Günde 400.000 kupon

• Türkiye’nin lider online şans oyunları platformu • 5000 http request/saniye (Canlı bahiste 30.000 request / saniye)

• 1.7 milyonun üstünde üye • Aylık 950.000 para yatırma

• Ayda 50 milyon sayfa ziyareti • 50.000 para çekme

• 65.000 günlük aktif oyuncu sayısı • Aylık 1 milyon para transfer işlemi

• 185.000 günlük tekil ziyaretçi • 250 Mbit ağ kullanımı

• Dağıtılan ikramiye miktarı yaklaşık 2 Milyar TL • Bilyoner dışında eTopaz ve TJK ‘nın online bahis alt yapılarının

geliştirilmesi ve operasyonu

17 © 2014 SAP AG or an SAP affiliate company. All rights reserved.

SOURCES

Web Servisler

WEB LOGS

BILYONER

Flat Dosyalar/

Excel

Loading

Extract & Profile

Sybase IQ DWH

Target ODS/Data Staging

Staging Area

ETL PROCESSES

Extracting Simple/Cleaning

Configuration

Extraction Performance Analysis

BusinessObjects

Files

Easy/Simple

Hierarchies

Loading Transform

Our High-Level Architecture

Edinimler & Başarı


230 GB

ÖNCEKİ VERİ

AMBARI

ÖRNEKLER - DWH boyutu 1/5 azaldı!


14 GB

3 GB

ÖNCEKİ VERİ AMBARI

ÖRNEKLER – Tablo sıkıştırma


Sonuç & Başarı ETL süreci 6 saatten 4.5 saate düştü

BO’dan çekilen raporlarda

%30 performans artışı

Önce

16 Core & 64 GB Ram

DWH modelimiz basitleşti

Sonra

6 Core & 48 GB Ram

Çok hızlı veri yükleme

Kolay Kurulum, basit admin

Performans

Satır bazlı veri ekleme

IQ v16 RLV (Row-

Level Versioning)

satır bazlı eklemeyi

hızlandırıyor!

5X


Nasıl Yaptık ve Gelecek Planlarımız

NASIL YAPTIK ?

• MDS ap ‘den 3 günlük Sybase IQ eğitimi

alındı (4 Bilyoner Uzmanı)

• MDS ap Uzmanlarına kalite kontrol ve özel

uzmanlık konularında danışıldı

• Toplam 3 Ay lık sürede Sybase IQ DWH

migrasyon çalışması ltamamlandı

• DWH modeli basitleştirildi

• ETL jobları gözden geçirildi

• Universe/Raporlar gözden geçirildi

GELECEK PLANLARIMIZ

• Kompleks Vaka Yönetimi(bellek içi gerçek

zamanlı analitik)

• Veri Madenciliği

(in-DB analytics/Predictive Analysis)