business intelligence - sas · •wizualizacja danych, wizualizacja wyników analizy, oraz big data...
Post on 27-Feb-2019
219 Views
Preview:
TRANSCRIPT
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
BUSINESS INTELLIGENCE
SAS VISUAL ANALYTICS
Artur
Jastrzębski
Copyr i g ht © 2013, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
CO TO JEST BIG DATA?
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
Perspektywa
SASBig Data jest WSZĘDZIE
17% populacji świata chociaż raz skorzystało z sieci społecznościowych.
Twitter notuje 100 milionów Tweetów dziennie.
Facebook notuje 350 milionów unikalnych użytkowników dziennie.
60 h materiału jest ładowanych do YOUTUBE każdej minuty.
80% firm używa social media w procesach rekrutacyjnych.
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
Source: IDC Digital Universe Study, sponsored by EMC, May 2010
THE CHALLENGE?
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
BIG DATA WHAT NEXT?
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
WHY DO WE CARE?
YOUR
COMPETITIVE
ADVANTAGE
Orient
Observe
Act
Act
Orient
DecideMARKET
OPPORTUNITY
Decide
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
CO TO JEST?
“Data that exceeds an organization’s
conventional database storage or
processing capacity”
BIG DATA
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
VOLUME
VARIETY
VELOCITY
VALUE
TODAY THE FUTURE
DA
TA
SIZ
EBIG DATA – THE CHALLENGE
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
PERSPEKTYWA
SAS
Big Data is RELATIVE not ABSOLUTE
Big Data
When volume, velocity and variety of data exceeds an organization’s storage or compute capacity for accurate and timely decision-making
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
BIG DATA I SAS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
WSTĘP BIG DATA A PROCES ANALITYCZNY
Vo
lum
e
Va
riety
Ve
locity
V a
l u e
Historyczne
transakcje
Fora
internetowe
Social
Media
Dane z
sensorów
Clickstream
Sformułowanie
Problemu
Przygotowanie
Danych
Eksploracja
Danych
Analiza i Modelowa
nie
Wykorzystanie i
Ewaluacja Modelu
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
Sformułowanie
Problemu
Przygotowanie
Danych
Eksploracja
Danych
Analiza i Modelowa
nie
Wykorzystanie i
Ewaluacja Modelu
ANALITYCZNY
CYKL ŻYCIACO OPÓŹNIA EFEKT BIZNESOWY?
∆t1
Latencja
Danych∆t2
Latencja
Analizy
∆t3
Latencja
Decyzji
TEXT
MINING
SENTIMENT
ANALYSIS
CONTENT
CATEGORIZA
TION
TEXT ANALYTICS
GRID
COMPUTING
IN-MEMORY
ANALYTICS
IN-DATABASE
PROCESSING
HIGH PERFORMANCE ANALYTICS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
Data latency Analysis latency Decision latency
WINDOW OF OPPORTUNITY
TimeAction
taken
Action
taken
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS & BIG DATA OBSZARY FUNKCJONALNE
Functionality SAS Technology Goal – decrease of How
Acquire &
Manage
Big Data repositories integration SAS/Access to Hadoop,
SAS In-database Technologies
Data latency Seamless access to any data
Big Data transformation and preparation for
analytics
SAS Data Loader for Hadoop
SAS Data Management
Data latency In-database &
In–HADOP data processing
Social Network and Web Data Acquisition SAS Social Media Analytics,
SAS Text Mining
Data latency Automated data acquisition and filtering
Real-time data filtering & selection SAS Event Stream Processing Data latency Real-time processing
Discover Visual Discovery & Exploration SAS Visual Analytics
SAS Visual Statistics
Analysis latency In-memory processing
Statistical Discovery & Desctriptive Analytics SAS High Performance Statistics Analysis latency In-memory processing
Concept Extraction for unstructured data SAS Enterprise Content Categorization
SAS Text Miner
Analysis latency Automated natural language processing
Model Predictive Modeling High Performance Data Mining
SAS In Memory Statistics for Hadoop
Analysis latency In-memory processing
Content Categorization, Sentiment Analysis,
Text Mining
High Performance Text Mining Analysis latency Automated natural language processing
Time series forecating, Optimization High Performance Forecasting,
High Performance Optimization
Analysis latency In-memory processing
Act Information Delivery & Reporting SAS Visual Analytics Decision latency In-memory processing
Automated decision management SAS Real-Time Decision Manager,
SAS In-database Technologies
Decision latency Integration with business process
Real–time signal detection SAS Event Stream Processing Decision latency Teal-time alerting and event processing
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS HIGH-PEFORMANCE
ANALYTICS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS HIGH-PEFORMANCE
ANALYTICS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS HIGH-PEFORMANCE
ANALYTICS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS HIGH-PEFORMANCE
ANALYTICS
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
SAS IN-MEMORY
Copyr i g ht © 2014, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
SAS®
LASR
ANALYTIC SERVER
In-memory
• Szybkość, sekundowe odpowiedzi
Dla wielu użytkowników
• Setki równoczesnych użytkowników
Bezstanowy
• Bez potrzeby wstępnego przeliczania
Interaktywny
• Natychmiastowa wizualizacja wpływu zmian parametrów na wyniki modelu
Opcje wdrożenia
• MPP (distributed) lub SMP (single machine)
Dedykowany serwer in-memory zaprojektowany do potrzeb
interaktywnej i iteracyjnej analityki
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
Przetwarzanie
danych
Eksploracja /
WizualizacjaModelowanie Wdrożenie
SAS®
LASR™
ANALYTIC SERVERZINTEGROWANY INTERFEJS UŻYTKOWNIKA
DATA SCIENTIST /PROGRAMISTA
Visual
Analytics
Visual
Statistics
IMSTAT for
Hadoop*
GUI GUI PROGRAMMING
ANALITYK BIZNESOWY
STATYSTYK
*SAS® In-Memory Statistics for Hadoop
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
BIG DATA
SOLUTIONS
SEARCH IS KEY……….BUT WHEN LOOKING
FOR THE ‘KNOWN UNKNOWNS’
“As we know, there are known knowns; there are things we
know we know. We also know there are known unknowns; that
is to say we know there are some things we do not know. But
there are also unknown unknowns -- the ones we don't know
we don't know. And if one looks throughout the history of our
country and other free countries, it is the latter category that
tend to be the difficult ones.”
Donald Rumsfeld, 2002
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
RÓŻNE OBLICZA BUSINESS INTELLIGENCE
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
DWIE TWARZE BI
• Świat raportów i dashboardów
• Monitorowanie efektywności
procesów
• Ustalone miary, KPI, alerty
• Ustalona ścieżka dla
informacji
• Odpowiedzi na
predefiniowane pytania
• Znane dane (nasze własne?)
• Świat analiz
• Pytania Ad-hoc
• Praca interaktywna
• Eksploracja wizualna
• Odkrywanie wiedzy przy
pomocy metod
analitycznych
• Nieznane, nowe dane
RAPORT
Co?
ODKRYCIE
Dlaczego?BI
Reporting Dashboards Ad-hoc Query Interactive
VisualizationOLAP Predictive Modelling
& Data Mining
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SELF SERVICE BI DEFINICJA
Self-service business intelligence definiuje się jako:
rozwiązania w środowisku BI, pozwalające użytkownikom na większą
samodzielność i mniejszą zależność od organizacji IT
główne cele
łatwe w użyciu narzędzia BI (w tym dla zaawansowanych analiz)
łatwy dostęp do danych źródłowych (nie tylko hurtownia)
wyniki proste w tworzeniu, zrozumieniu, dostępie i współdzieleniu
szybkie we wdrożeniu i łatwe w zarządzaniu procesy warehousingowe
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SELF SERVICE BI OD SUROWYCH DANYCH DO WYNIKU
Sandbox
WyliczeniaModel
Agregacje
Filtry
Hierarchie
Upload
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
WIZUALIZACJA WZROK – KRÓL ZMYSŁÓW
70% receptorów zmysłów jest
ulokowanych w oczach
Widzenie „zużywa” 25% mocy
obliczeniowej mózgu
Układ siatkówka-mózg działa z
prędkością ok. 10Mbps
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
OBRAZ JEST WART
1000 SŁÓWPOTRZEBA WIZUALIZACJI
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
WIZUALNA
EKSPLORACJAMETODA ANALIZY DANYCH
Wizualizacja
(wgląd)
Interakcja
(łatwość pytania)
Szybkość
(natychmiastowy rezultat)
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
WIZUALNA
EKSPLORACJASKŁADNIKI
• Paleta narzędzi wizualizacji oraz automatyzacja wizualizacji
• Wizualizacja danych, wizualizacja wyników analizy, oraz BIG DATA
• Animacje, podpowiedzi, tipsy
Wizualizacja
• Zaznaczanie, filtrowanie, sortowanie, pędzlowanie, drill down,
• Dynamiczne połączenia i aktywne obiekty
• Zaawansowane metody analizyInterakcja
• Czas reakcji do kilku sekund, niezależny od wielkości danych
• Możliwość bezkarnego weryfikowania wielu hipotez
• Samodzielność użytkownika jako efekt szybkości Szybkość
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
SAS® VISUAL ANALYTICS
Copyr i g ht © 2014, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
BUSINESS
VISUALIZATION
RÓŻNICA MIĘDZY WIZUALIZACJĄ, A WIZUALIZACJĄ Z
WYKORZYSTANIEM ANALITYKI
DATA VISUALIZATION ANALYTIC VISUALIZATION
EXPLORATION DISCOVERY
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSJEDNO ZINTEGROWANE ROZWIĄZANIE
Raport
Dystrybucja
RAPORT
Co?
ODKRYCIE
Dlaczego?
VISUAL
ANALYTICS
Eksploracja
Odkrycie
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
ARCHITEKTURA
ROZWIĄZANIA
Eksploracja
Projektowanie Raportów
Przeglądanie Raportów
Przygotowanie Danych
Administracja
WEB
Przeglądanie Raportów
MOBILE
SAS®
VISUAL ANALYTICS
MIEJSCE W ŚRODOWISKU INFORMATYCZNYM
ORGANIZACJI
PRACA WSADOWA
Ładowanie danych
BAZA IN-MEMORY
UŻYTKOWNIK
BIZNESOWY
ZAAWANSOWANY
UŻYTKOWNIK / IT
Pliki z PCSerwer klasy Commodity Hardware
Dowolne dane
dostępne z SAS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSGŁÓWNE KOMPONENTY
Centralny punkt dostępu Integracja Dedykowane interfejsy
MOBILE BIDATA BUILDER EXPLORER DESIGNER
• Natywne aplikacje iOS
i Android pozwalające
na interaktywny
dostęp do raportów
• Łączenie danych z
wielu źródeł
• Tworzenie kolumn
wyliczanych i
pochodnych
• Ładowanie danych
• Ad-hoc analiza
danych i odrywanie
związków
• Zaawansowane
analizy
• Tworzenie
dashboardów i
raportów dostępnych
przez web i tablety
SAS® LASR™ ANALYTIC SERVER
ADMINISTRATOR• Monitorowanie SAS®
LASR™ Analytic
server
• Ładowanie/usuwanie
danych
• Zarządzanie
bezpieczeństwem
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSHUB
Strona startowa dla wszystkich użytkowników
Widoki zależne od ról użytkowników
Nawigacja do różnych czynności
Ad-Hoc eksploracja danych
Tworzenie raportów
Przeglądanie raportów
Zadania administracyjne
Przygotowanie danych
Administracja i monitorowanie sytemu
Ulubione i wyszukiwanie
Komentarze i współpraca
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSDATA BUILDER
Wyszukiwanie tabel w metadanych
Łączenie tabel i ładowanie przyrostowe
Tworzenie kolumn wyliczanych (kreator budowy wyrażeń)
Filtrowanie kolumn i wierszy (dane surowe i zagregowane)
Ładowane danych z Excela do pamięci
Harmonogramowanie wykonania zapytań
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSADMINISTRATOR
Monitorowanie Środowiska
Zasoby (CPU, I/O, Memory)
Procesy (sesje użytkowników)
Logowanie z urządzeń mobilnych
Zarządzanie serwerami i danymi
Start/stop serwerów in-memory
Ładowanie/usuwanie tablel in-memory
Zarządzanie bezpieczeństwem
Bezpieczeństwo tabel i wierszy
Listy dostępu urządzeń mobilnych
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSEXPLORER
Eksploracja danych
Wizualizacja, poszukiwanie relacji, trendów, nieprawidłowości, itd.
Automatyczne wykresy
Wizualizacje: Tabele, Wykresy słupkowe, liniowe, rozproszenia, bąbelkowe, mapy geograficzne i wiele innych
Łatwa w użyciu analityka: Korelacje (Relacje), Regresja (Liniowa, kwadratowa, sześcienna, PSpline, Best Fit), Prognozowanie (wiele algorytmów), Statystyki agregujące
Dynamiczne hierarchie: Drill down, up, and across siblings
Zmienne wyliczane
Selekcja i zaznaczanie w celu odkrycia relacji
Zapisanie i udostępnienie eksploracji jako raport lubPDF
Eksport danych do Excela lub CSV/TSV
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSDESIGNER
Interfejs do tworzenia raportów i dashboardów
Wykorzystanie istniejących raportów i danych
Użycie wielu źródeł danych
Wiele opcji wizualizacji danych
Precyzja rozmieszczenia obiektów na raportach
Interakcje pomiędzy obiektami raportów oraz promptami
Komentarze na poziomie raportów i obiektów
Dynamiczne Hierarchie: Drill down, up, itp.
Zmienne wyliczane i tworzone
Eksport danych do Excela, CSV/TSV
Adaptacyjne prezentacje – budowane raz, używane w różnych kanałach dystrybucji.
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSVIEWER
Wisualizacja reportów
Wiele źródeł danych
Interakcje i prompty
Nawigacje według hierarchii
Współpraca i komentarze
Eksport danych do Excela, CSV/TSV
Wykorzystanie mechanizmów bezpieczeństwa Platformy SAS
Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .
SAS® VISUAL
ANALYTICSMOBILE
Natywne aplikacje dla tabletów iPad i Android
Zaawansowane metody wizualizacji i interakcji na raportach: filtrowanie, zaznaczanie, drill-down, powiększanie, itp.
Kolaboracja i komentarze
Współdzielenie poprzez email
Interaktywne przeglądanie raportów offline
Wykorzystanie mechanizmów bezpieczeństwa Platformy SAS
Dodatkowe mechanizmy bezpieczeństwa związane z urządzeniami mobilnymi: szyfrowanie, zdalne usuwanie zawartości, listy dostępu i wykluczeń, SSL itd.
Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .
DZIĘKUJĘ
artur.jastrzebski@sas.com
top related