curs 1.4 reutilització de dades obertes 21/03
TRANSCRIPT
![Page 1: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/1.jpg)
INICIATIVA BARCELONA OPEN DATA EL VALOR D’OBRIR LES DADES
Reutilització De Dades Obertes
curs 1.4
Docents: Enric Montia i Marc Torres
![Page 2: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/2.jpg)
OBJECTIU DE LA SESSIÓ D’INTRODUCCIÓ A L’OPEN DATA
● Al final de la sessió sereu capaços de:1. Reconèixer fonts destacades de Dades Obertes
2. Conèixer els tipus i característiques de les fonts de
Dades Obertes,
3. Accedir manual i automàticament a fonts de Dades
Obertes,
4. Fer servir eines ofimàtiques per reutilitzar Dades
Obertes, i
5. Crear visualitzacions bàsiques de Dades.
Facultar als participants en l’ús i les eines per descobrir, analitzar, reutilitzar i presentar Dades Obertes.
![Page 3: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/3.jpg)
1. FONTS DESTACADES DE DADES OBERTES
![Page 4: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/4.jpg)
Heu fet servir maidades obertes?Expliqueu les vostres experiències(i de pas ens coneixem)
Activitat Inicial
Temps: 5 minuts
![Page 5: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/5.jpg)
8 principis de les dades obertes1. completes (s’han publicat totes les dades)
2. primàries (raw data, sense cuinar)
3. a temps (ASAP, sense caducar)
4. accessibles (per als màxims usuaris i propòsits)
5. processables per una màquina (estructurades)
6. no discriminatòries (accesibles per tothom, sense registre)
7. no propietàries (en formats oberts)
8. sense copyright (restriccions mínimes)https://public.resource.org/8_principles.html
FONTS DESTACADES DE DADES OBERTES
![Page 6: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/6.jpg)
Havent vist els principis anteriors, visita:http://data.worldbank.org/http://datos.gob.eshttp://dadesobertes.gencat.cat/http://www.idescat.cat/http://opendata.bcn.cat/opendata/https://gavaobert.gavaciutat.cat/
...i digues si són bones fonts de dades obertes
Activitat
Activitat individual, temps: 15 minuts
![Page 7: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/7.jpg)
Trieu un dataset i penseu quina informació en podem treure.
Podríem creuar algun dataset?quin valor afegit podria tenir?
Activitat
Temps: 10 minuts
![Page 8: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/8.jpg)
2. TIPUS DE FONTS DE DADES
![Page 9: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/9.jpg)
(segons el format)
1. Dades publicades no estructurades. Cal tractar el document. (pdf)
2. Dades publicades en formats estructurats propietaris. (xls)3. Dades publicades en formats estructurats oberts. (csv)4. Dades a demanda. Serveis API-REST. Protocols de comunicació
client-servidor a demanda. (formats xml, php ,json) http://api.idescat.cat/emex/v1/nodes.json?lang=es http://api.idescat.cat/emex/v1/dades.xml?id=250019&lang=es
5. Dades enllaçades interoperables (WWW) Grafs que inclouen dades i metadades. Sintaxi XML. Llenguatge SPARQL. Enllaços estables URI. (rdf) http://dadesobertes.gencat.cat/ca/cercador/detall-cataleg/?id=6690
Tipus de Fonts de Dades
![Page 10: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/10.jpg)
3. Accés manual i automàtica fonts de Dades Obertes
![Page 11: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/11.jpg)
1.Baixada d’Informació (URL)2.Carpeta Downloads/Baixades3.Bloqueig, pop ups4.FTP
Útil per a accessos a repositoris d’arxius massiusftp://ftp.geo.euskadi.net/cartografia/salud/
5.Serveis oberts GUI (semi manuals)http://serveisoberts.gencat.cat/equipaments/explorer
ACCÉS MANUAL I AUTOMÀTIC A FONTS DE DADES OBERTES
Accessos manuals
![Page 12: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/12.jpg)
Accessos Automatitzats1. APIsSón funcions ofertes per una biblioteca informàtica per ser utilitzades per un altre programa per interaccionarhttp://api.oberta.cat/event
2. WEB-SERVICE: Protocol REST (ODATA)És un tipus d’API que opera normalment sobre HTTP.Les dades són requerides al servidor mitjançant accions especificades a les capçaleres HTTP (peticions)http://api.idescat.cat/indicadors/v1/dades.xml
EXEMPLE REST-API: opendata.rubi.cathttps://opendata.rubi.cat/resource/7nx9-3d4yhttps://opendata.rubi.cat/resource/7nx9-3d4y.json?https://opendata.rubi.cat/resource/7nx9-3d4y.json?$select=nom_comercialhttps://opendata.rubi.cat/resource/7nx9-3d4y.xml?
ACCÉS MANUAL I AUTOMÀTIC A FONTS DE DADES OBERTES
![Page 13: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/13.jpg)
4. Eines ofimátiques (no programació ) per ús amb
dades obertes
![Page 14: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/14.jpg)
Algunes eines que cal conèixer
Desktop:
1. fulls de càlculLibre Office, Open Office, Microsoft
Office2. editors
Notepad++3. eina per netejar i treballar amb dades
http://openrefine.org/ 4. eina per extreure dades de pdfs
http://tabula.technology/
![Page 15: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/15.jpg)
Eines online:
● IMPORT.IO, extracció de dades de webs(https://magic.import.io)Web: http://opendataforafrica.org/apps/gallery
● Fusiontables, eina online per treballar amb dades d’arxius(https://fusiontables.google.com/DataSource?dsrcid=implicit)
● OverviewDocs, recerca en texts(https://www.overviewdocs.com)Dataset; http://datos.gob.es/es/catalogo/e00136201-2998la-defensa-nacional-y-las-fuerzas-armadas-x
● Vizydrop, una eina online per fer gràfics(https://vizydrop.com/)Dataset atur: http://www.idescat.cat/economia/inec?tc=5&id=0607&dt=201701
Algunes eines que cal conèixer
![Page 16: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/16.jpg)
Amb tot el que hem vist,visitem ... (eines, eines, eines)
http://keshif.me/demo/VisTools
Activitat
Activitat individual. Temps: 15 minuts
![Page 17: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/17.jpg)
Fem servir FusionTablesper netejar un Dataset
Activitat
Activitat individual. Temps: 10 minuts
Eina online per treballar amb dades d’arxius
(https://fusiontables.google.com/DataSource?dsrcid=implicit)
![Page 18: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/18.jpg)
5. Visualització bàsica de dades
![Page 19: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/19.jpg)
Activitat finalFem servir Instamaps
per mapificar dades obertesInstamaps permet accedir, tractar, estilitzar, posar en línia i compartir treballs en base a dades obertes.
http://www.instamaps.cat Activitat individual.
Temps: 2 hores.
![Page 20: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/20.jpg)
MATERIALS EXTENDED
![Page 21: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/21.jpg)
Origen: http://api.idescat.cat/emex/v1/dades.xml?Objectiu: llistat dels municipis de la província de Barcelona
OPEN REFINE: una eina per netejar i treballar amb dades
![Page 22: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/22.jpg)
Origen: http://opendata.portdebarcelona.cat/Memories/Estadistica/Informes/es/PortBcn-MemoriaEstadistica-2015-castellano.pdfObjectiu: Full de càlcul amb compte de pèrdues i guanys del port de Barcelona
TABULA: una eina per extreure dades de pdf
![Page 23: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/23.jpg)
Origen: http://aca-web.gencat.cat/aca/appmanager/aca/aca?_nfpb=true&_pageLabel=P31400135511285082745917Objectiu: Taula de dades de l’agenda d’events de l’Agència Catalana de l’Aigua
IMPORT.IO: una eina online per extreure dades pàgines web
![Page 24: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/24.jpg)
Origen: http://opendata.bcn.cat/opendata/ca (ACCIDENTS_TIPUS_GU_BCN_2015)Objectiu: Accidents amb atropellament a Barcelona en horari d’escola
FUSION TABLES: una eina online per treballar amb dades d’arxius
![Page 25: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/25.jpg)
Origen: http://opendata.bcn.cat/opendata/ca (ACCIDENTS_TIPUS_GU_BCN_2015)Objectiu: Gràfic d’accidents amb atropellament a Barcelona. Dia setmana
RAW: una eina online per treballar amb dades i fer gràfics
![Page 26: Curs 1.4 Reutilització de Dades Obertes 21/03](https://reader036.vdocuments.pub/reader036/viewer/2022062503/58ed38ea1a28ab4e4f8b45d9/html5/thumbnails/26.jpg)
Origen: http://opendata.bcn.cat/opendata/ca (ACCIDENTS_TIPUS_GU_BCN_2015)Objectiu: Gràfic de barres d’accidents amb atropellament a Barcelona per messos de l’any
Vizydrop: una eina online per fer gràfics