eolaíocht sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

46
Eolaíocht Sonraí Céard í agus cén tairbhe atá le baint aisti don innealtóireacht? ÉANNA MAC CON IOMAIRE, PHD HTTP://GUERRILLA-ANALYTICS.NET http://guerrilla-analytics.net Enda Ridge @enda_ridge

Upload: enda-ridge

Post on 23-Jan-2018

22 views

Category:

Data & Analytics


3 download

TRANSCRIPT

Page 1: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Eolaíocht SonraíCéard í agus cén tairbhe atá le baintaisti don innealtóireacht?

ÉANNA MAC CON IOMAIRE, PHD

HTTP://GUERRILLA-ANALYTICS.NET

http://guerrilla-analytics.net Enda Ridge @enda_ridge

Page 2: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Achoimre

1. Cás-staidéar ar fhadhb tradisiúnta innealtóirachta

2. Céard is Eolaíocht Sonraí ann?

3. Cén chaoi ar féidir le h-innealtóirí tairbhe a bhaint aisti?

Cén chaoi a chabhróidh an léacht seo libh?

A shoiléiriú céard is Eolaíocht Sonraí ann

Tuiscint a thabhairt nach le Google agus na comhlachtaí idirlín amháin a bhaineann sí

A léiriú cathain a bhéadh Eolaíocht Sonraí úsáideach i bhur gcomhlachtaí féin

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 3: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Beagán fúmsa

InnealtóirMeicniúil

PhD

‘Design of Experiments for

Tuning Algorithms’

Sainchomhairleóir i

mBoutique

Sain

chomhairleóir

Fóiréinsic

CeannasaíAlgartam

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

2004 2008 2010 2015

Níl eagraíochtaí ach ag tosnú leas a bhaint as sonraí

2000

HVACIonsamhlúcháin

FeidhmíochtAlgartaim

Líonra SóisialtaCaimiléireachta

Droch díoladh TáirgíEarnáil an Airgeadais

Page 4: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Cás staidéar

http://www.fastcompany.com/3031272/can-jeff-immelt-really-make-the-world-1-better

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 5: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Innill traenacha sna S.A.

73 slat ar fhad

436,000 punt mheáchan

5,300-galún díosail

200,000 páirt

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Costasach iad a oibriú

Costasach cúram a thabhairt dóibh

Brú iad a oibriú go héifeachtúil arna línte traenacha

Page 6: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Thosaigh siad ag bailiú sonraí

250 braiteoirí a bhailíonn 9 milliún pointe sonraí san uair

Teocht ola

Ábhair truaillithe san inneall

Luas agus suíomh

Innealtóirí ag obair le Eolaithe Sonraí

Ag lorg patrún agus comharthaí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 7: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Tháinig siad ar fheidhmeanna eile

Feabhsú i bpleanáil agus úsáid na líntetraenacha

Laghdú ar an am a chaitheann innill sa gharáiste

Laghdú in ídiú breosla

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 8: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Cur chuige céanna i dtionscail eile

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Eitlíocht Mianadóireacht Cumhacht

Page 9: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

An t-Idirlíon Tionsclaíoch

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 10: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Céard is EolaíochtSonraí ann?

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 11: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Dul i ngleic le dúsláin innealtóireachta

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Staidéar go córasach a

dhéanamh ar phróiseas

nó táirge

Athrú a dhéanamh

Page 12: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Dul i ngleic le dúsláin innealtóireachta

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Staidéar go córasach a

dhéanamh ar phróiseas

nó táirge

Athrú a dhéanamh

Eolaíochta Sonraí

Innealtóireacht

Page 13: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Céard is Eolaíochta Sonraí ann?

Úsáid a bhaint as sonraí le h-aghaidh staidéar a dhéanamh artáirgí, próiseais agus córais d’fhonn iad a fheabhsú

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

“”

Page 14: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Nach staitistic í sin?

Scáth téarma nua

EolaíochtSonraí

Staitistic

Ríomheolaío

cht

Maisíocht

físe

Foghlaim

mheaisín

Ollstóir

Sonraí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 15: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Nach Big Data í sin?

Úsáidtear Big Data ó am go h-am

Is bealach í dul i ngleic le dúshláin ina bhfuilsonraí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 16: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Ceannródaí

Fadhb a

shainmhíniú

Sonraí a

bhailiú

Anailís a

dhéanamh

Turgnamh a

chur i gcrích

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Athrú i gcóras nó

próiseas nó táirge

Page 17: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Céard is Sonraí ann?

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 18: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Cuma sonraí

Bailiúchán athróg

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Páirt Ainm Tomhas Ábhar

340 Bearing BE5x2

10mm Br

341 Bearing BE5x2

10mm Br

342 Bearing BE5x4

12mm St

343 … … …

Page 19: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Cuma sonraí

Bailiúchán athróg

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Páirt Ainm Tomhas Ábhar Uair Seirbhís MeánTeocht

340 Bearing BE5x2

10mm Br 100 75

341 Bearing BE5x2

10mm Br 3000 70

342 Bearing BE5x4

12mm St 4500 71

343 … … …

Page 20: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí san Ollstór Sonraí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 21: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí ó ghléasanna

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 22: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí ó bhogearraí

123.123.123.123 - - [26/Apr/2000:00:23:48 -0400] "GET /pics/wpaper.gif HTTP/1.0" 200 6248 "http://www.jafsoft.com/asctortf/" "Mozilla/4.05 (Macintosh; I; PPC)"

123.123.123.123 - - [26/Apr/2000:00:23:47 -0400] "GET /asctortf/ HTTP/1.0" 200 8130 "http://search.netscape.com/Computers/Data_Formats/Document/Text/RTF" "Mozilla/4.05 (Macintosh; I; PPC)"

123.123.123.123 - - [26/Apr/2000:00:23:48 -0400] "GET /pics/5star2000.gif HTTP/1.0" 200 4005 "http://www.jafsoft.com/asctortf/" "Mozilla/4.05 (Macintosh; I; PPC)"

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 23: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí ó bhogearraí

123.123.123.123 - - [26/Apr/2000:00:23:48 -0400] "GET /pics/wpaper.gif HTTP/1.0" 200 6248 "http://www.jafsoft.com/asctortf/" "Mozilla/4.05 (Macintosh; I; PPC)"

123.123.123.123 - - [26/Apr/2000:00:23:47 -0400] "GET /asctortf/ HTTP/1.0" 200 8130 "http://search.netscape.com/Computers/Data_Formats/Document/Text/RTF" "Mozilla/4.05 (Macintosh; I; PPC)"

123.123.123.123 - - [26/Apr/2000:00:23:48 -0400] "GET /pics/5star2000.gif HTTP/1.0" 200 4005 "http://www.jafsoft.com/asctortf/" "Mozilla/4.05 (Macintosh; I; PPC)"

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

ID IP Dáta Cineál Seoladh

1 123.123.123.123 26/Apr/2000:00:23:48 -0400

GET /pics/wpaper.gif HTTP/1.0" 200 6248 "http://www.jafsoft.com/asctortf/

2 123.123.123.123 26/Apr/2000:00:23:48 -0400

GET /asctortf/ HTTP/1.0" 200 8130 "http://search.netscape.com/Computers/Data_Formats/Document/Text/RTF

3 123.123.123.123 26/Apr/2000:00:23:48 -0400

GET /pics/5star2000.gif HTTP/1.0

Page 24: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí ó Innill

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 25: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí ón Eangach Fuinnimh

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 26: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Fiú anseo!

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 27: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Dul i ngleic le dúsláin innealtóireachta

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Staidéar go córasach a

dhéanamh ar phróiseas

nó táirge nó córas

Athrú a dhéanamh

Eolaíochta Sonraí

Innealtóireacht

Page 28: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Úsáid a bhaint as Eolaíocht Sonraí

1. GAISTÍ

2. RÉITEACHA

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 29: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Gaiste #1: Piléir

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 30: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Gaiste #2: Comhghaol

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

http://www.tylervigen.com/spurious-correlations

Page 31: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Gaiste #2: Comhghaol

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

http://www.tylervigen.com/spurious-correlations

Méid daoine ag ól uisce sa chathair

comhghaolach le

Laighdú chaighdeán an uisce ón lár cóireáil

Page 32: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Úsáid a bhaint as Eolaíocht Sonraí

1. GAISTÍ

2. RÉITEACHA

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 33: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí a Shimpliú le hAlgartaim

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

1. Tuair

2. Cur i ngrúpaí

3. Rangaigh

4. Nascanna

5. Leagaint amachturgnaimh

Staidéar go

córasach a

dhéanamh

Athrú a

dhéanamh

Page 34: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#1 Tuair a dhéanamh

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Nuair a bhraithníonn muidar an athróg seo, céard atámuid ag súil le feiceáilmaidir leis an athróg eileseo?

Ais X

Ais Y

Page 35: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#1 Tuair a dhéanamh

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Nuair a bhraithníonn muidar an athróg seo, céard atámuid ag súil le feiceáilmaidir leis an athróg eileseo?

Nuair a fhéacheann muidar mheán teocht agusmeán bhrú san inneal seo, céard é ráta caite an innill?

Ais Y

Ais X

Page 36: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#2 Rudaí a chur i ngrúpaí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Céard iad na páirt mheaisín atácosúil le chéile?

Céard iad na h-innill atá cosúil le chéile?

An bhfuil 3 chineál innill again maidir le h-obair dheisiúcháin? Nóan bhfuil deich gcinn?

Page 37: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#2 Rudaí a chur i ngrúpaí

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Céard iad na páirt mheaisín atácosúil le chéile?

Céard iad na h-innill atá cosúil le chéile?

An bhfuil 3 chineál innill again maidir le h-obair dheisiúcháin? Nóan bhfuil deich gcinn?

Page 38: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#3 Rangaigh

Tá roinnt eolas stairiúil again

Aois an innill

Meán teocht páirte

Déantusóirí na bpairteanna

Tá ranganna again:

Troiblóideach nó deamhúinte?

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 39: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#3 Rangaigh

Tá roinnt eolas stairiúil again

Aois an innill

Meán teocht páirte

Déantusóirí na bpairteanna

Tá ranganna again:

Troiblóideach nó deamhúinte?

Cén rang ina bhfuil sampla nua?

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 40: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#4 Nascanna a fháil

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Eachtraí a tharlaíonn le chéile nuairatá fadhb ag inneall

Page 41: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#4 Ceangail a fháil

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Eachtraí a tharlaíonn le chéile nuairatá fadhb ag inneall

Aimsir fhuar

Turas fada

> 6 mí ón cothabháil chosantadheireannach

Page 42: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#5 Leagaint amach turgnaimh

Plean a dhéanamh roimh ré

Roinnt cheart sonraí a bhailiú

Mionsamhail feidhmíochta

M.sh. Tá próiseas nua again maidirle cothabháil inneall

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 43: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

#5 Leagaint amach turgnaimh

Plean a dhéanamh roimh ré

Roinnt cheart sonraí a bhailiú

Mionsamhail a thógáil

M.sh. Tá próiseas nua again maidirle cothabháil inneall

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 44: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Sonraí a hSimpliú le hAlgartaim

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

1. Tuair

2. Chur i ngrúpaí

3. Rangaigh

4. Nascanna

5. Leagaint amachturgnaimh

Staidéar go

córasach a

dhéanamh ar

phróiseas

Athrú a

dhéanamh

Page 45: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Dúshlán daoibh!

Cá bhfuil an luach?

Cá bhfuil an neamhéifeachtúlacht?

Dá mbéadh mé in ann X a thomhais…

B’fhéidir go bhfuil Éolaíocht Sonraíuaibh!

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net

Page 46: Eolaíocht Sonraí: céard é agus cén tairbhe atá le baint as d’innealtóireacht?

Achoimre

Cás-staidéar ar fhadhb tradisiúntainnealtóirachta

Céard is Eolaíocht Sonraí ann?

Cén chaoi ar féidir le h-innealtóirítairbhe a bhaint aisti?

5 Cineál réiteacha

Gaistí

Chathain a bhéadh EolaíochtSonraí úsáideach daoibh

Enda Ridge @enda_ridgehttp://guerrilla-analytics.net