bigdata w praktyce. wstęp do technologii bigdata i nosql

24
© OPITZ CONSULTING 2015 Strona 1 Bigdata w praktyce Act on DB

Upload: opitz-consulting-polska

Post on 29-Jul-2015

135 views

Category:

Technology


1 download

TRANSCRIPT

© OPITZ CONSULTING 2015 Strona 1 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Wprowadzenie • Służy jako„Wprowadzenie“,

np. przed / po evencie, celem

rozgrzania rzutnika etc.

• Tytuł jest opcjonalny,

ewentualnie może zostać

opuszczony.

• Tytułem może być np. tytuł

eventu.

Act on DB

© OPITZ CONSULTING 2015 Strona 2 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Slajd tytułowy:

• Zaczynamy nim referat.

• Tytuł główny: 1wersowy!

• Podtytuł: maks. 2 wersy

• Referent: Nazwisko, funkcja,

siedziba OC

• Logo: Opcjonalnie.

Dodać logo klienckie/ lub

tematyczne. Najlepiej w

kształcie kwadratu, szerokość

rastra 3.

• Stopka: wypełnić tytułem

głównym.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Daniel Osielczak

Senior Consultant

OPITZ CONSULTING Polska Sp. z o.o.

Wstęp do technologii Bigdata i NoSQL

Kraków, 25.03.2015

Bigdata w praktyce

© OPITZ CONSULTING 2015 Strona 3 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Agenda

Co to jest Bigdata?

Podstawy technologii

Połączenie z bazami relacyjnymi

Demo

© OPITZ CONSULTING 2015 Strona 4 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Slajd rozdzielający • Layout dla stron

rozdzielających

poszczególne części

prezentacji

• Tytuł: 1-2 wersy

• Tytuł zgodnie z agendą.

Proszę numerować części

zgodnie z agendą.

• Grafika na tej stronie NIE jest

przewidziana.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

1 Co to jest Bigdata?

© OPITZ CONSULTING 2015 Strona 5 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Bigdata to ...

© OPITZ CONSULTING 2015 Strona 6 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Bigdata to ...

Buzzword

© OPITZ CONSULTING 2015 Strona 7 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Bigdata to ...

Sposób postrzegania danych

"More data is better data.„ - Google (2009)

© OPITZ CONSULTING 2015 Strona 8 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Cztery główne wyznaczniki (VVVV)

Volume 2.5 biliona GB dziennie

Velocity 19 miliardów połączeń internetowych (2016)

Variety 420 milionów monitorów zdrowia (wearables)

Veracity 40-60% czasu analizy to „przygotowanie” danych (raport Ventana)

© OPITZ CONSULTING 2015 Strona 9 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Slajd rozdzielający • Layout dla stron

rozdzielających

poszczególne części

prezentacji

• Tytuł: 1-2 wersy

• Tytuł zgodnie z agendą.

Proszę numerować części

zgodnie z agendą.

• Grafika na tej stronie NIE jest

przewidziana.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

2 Podstawy technologii

© OPITZ CONSULTING 2015 Strona 10 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

2005, Doug Cutting and Mike Cafarella, Yahoo (kod Google)

© OPITZ CONSULTING 2015 Strona 11 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

Komponenty HDFS

MapReduce

Hive

Hbase

© OPITZ CONSULTING 2015 Strona 12 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

© OPITZ CONSULTING 2015 Strona 13 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

HDFS

© OPITZ CONSULTING 2015 Strona 14 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

MapReduce (YARN)

© OPITZ CONSULTING 2015 Strona 15 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Hadoop

© OPITZ CONSULTING 2015 Strona 16 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Oracle Bigdata Appliance

© OPITZ CONSULTING 2015 Strona 17 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Slajd rozdzielający • Layout dla stron

rozdzielających

poszczególne części

prezentacji

• Tytuł: 1-2 wersy

• Tytuł zgodnie z agendą.

Proszę numerować części

zgodnie z agendą.

• Grafika na tej stronie NIE jest

przewidziana.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

3 Połączenie z bazami relacyjnymi

© OPITZ CONSULTING 2015 Strona 18 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Sqoop

2012, Apache Foundation

W tej chwili mamy następujące connector:

MySQL

Netezza

Oracle JDBC

Teradata

SQL Server R2

© OPITZ CONSULTING 2015 Strona 19 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Apache Sqoop

© OPITZ CONSULTING 2015 Strona 20 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Slajd rozdzielający • Layout dla stron

rozdzielających

poszczególne części

prezentacji

• Tytuł: 1-2 wersy

• Tytuł zgodnie z agendą.

Proszę numerować części

zgodnie z agendą.

• Grafika na tej stronie NIE jest

przewidziana.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

4 Demo

© OPITZ CONSULTING 2015 Strona 21 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Nasze demo

Dane Zbieranie

|

Przesyłanie

|

Przechowywwanie

|

Analiza

|

Decyzja

© OPITZ CONSULTING 2015 Strona 22 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Tytuł i treść: • To główny szablon dla

stron z treścią prezentacji.

• Tytuł: 1-2 wersy!

• Treść:

• 3-7 pkt. lub 2-3 pkt. gł z

podpkt.

• Maks. 3 poziomy

• Logo: optionalnie po prawej

stronie tytułu pomiędzy

dwoma ostatnimi rastrami

• W stopce umieścić tytuł

główny prezentacji.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Nasze demo

Dane Raspberry Pi

|

NodeJS

|

WebHDFS

|

Pig

|

Sqoop => Oracle RDBMS

© OPITZ CONSULTING 2015 Strona 23 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Pytania i odpowiedzi: • Ten slajd może służyć jako

slajd Q&A, jeśli slajd taki

będzie potrzebny.

• Dawne slajdy

Pytania&Odpowiedzi, Q&A

(z/bez cieniowania,

ściągnięte z innych motywów

lub utworzone innym

sposobem) JUŻ NIE SĄ

STOSOWANE.

Design: • Schemat farb jest utrwalony

w motywach jako „OC 2009“.

• Podobnie w przypadku

czcionek.

• Kolory podstawowe to:

Pytania i odpowiedzi

© OPITZ CONSULTING 2015 Strona 24 Bigdata w praktyce

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Kontakt pojedynczy: • To przedostatni slajd,

stosowany celem przywołania

prelegenta.

• Kwadratowe zdjęcie

prelegenta, zdjęcie wysokiej

jakości.

• Szerokość rastra przy

zdjęciach 3.

• Dane kontaktowe powinny

być kompletne.

Kontakt

Daniel Osielczak Senior Consultant

OPITZ CONSULTING Polska Sp. z o.o.

Bratysławska 1A | 31-201 Kraków

Tel. +48 12 617 1822

[email protected]

youtube.com/opitzconsultingpl

slideshare.net/opitzconsultingpl