Dados Governamentais Abertos

Esta obra foi licenciada com uma Licena Creative Commons - Atribuio 3.0 No Adaptada.

Ricardo Poppi

Cientista Poltico e membro da comunidade Transparncia Hacker

O incio (2003)

Francis Irving

Julian Todd

Criadores do http://www.publicwhip.org.uk/ - whip, no sistema ingls a determinao do partido para que o parlamentar vote de uma determinada forma e do http://www.theyworkforyou.com/ - ambos sistemas de acompanhamento parlamentar, que geram visualizaes e acesso aos dados.

My Society (2004)

Francis e Julian ajudam a fundar a organizao mySociety que hoje agrega e d suporte a diversos aplicativos de transparncia pblica na web

Misso da mySociety

mySociety has two missions. The first is to be a charitable project which builds websites that give people simple, tangible benefits in the civic and community aspects of their lives. The second is to teach the public and voluntary sectors, through demonstration, how to use the internet most efficiently to improve lives

Nos EUA (2004)

Joshua Tauberer

http://www.govtrack.us/

Civic hacker norte americano, criador do govtrack.us site que coleta de forma automtica informaes legislativas de sites pblicos e as disponibiliza em formatos reprocessveis

O que o Joshua fez foi simplesmente transformaras informaes publicadas no site do congressoestadunidense em formatos processveis pormquinas

Isso foi preciso porque as informaes que estavamno site eram legveis apenas por humanos

Graas ao govtrack...

Graas ao govtrack(2)...

Visiblevote um aplicativo mvel que permite ao cidado acompanhar as proposies de seu interesse, votar, comparar seu perfil como perfil de voto dos respresentantes e mais outros tipos de cruzamentos de informaes. Ele s foi possvel porque as informaes do congresso foram abertas pelo govtrack em formato machine readable

Resposta .gov

data.gov (maio/2009)(3.186 datasets)

data.gov.uk (outubro/2009)(5.600 datasets)

data.australia.gov.au (2010)(200+ datasets)

US

UK

AU

No Brasil!

Primeiro Transparncia Hackday (Out-2009)

Projetos #thacker

Legisdados.org Pedro Belasco e Helder Ribeiro

http://www.legisdados.org/

Verso brasileira do govtrack.us

Projetos #thacker

Site oficial SAC-SP

Site burocrtico, focado no cidado individual: destinado a exibir o resultado da sua reclamao. Mas os dados de todas as reclamaes estavam l e no eram tratados nem pelo rgo da prefeitura.

Projetos #thacker

Hack/mashup do Bruno Barreto realizado em 3 dias

O curto tempo de realizao depende da habilidade do desenvolvedor mas tambm depende do uso de apis e apps disponveis na rede. Isso o mashup.

O hacker mostrou que os dados podem ser visualizados gerando conhecimento e que esse conhecimento pode ser compartilhado com os cidados.

SACSPhttp://sacsp.mamulti.com/

Projetos #thacker

Site oficial CMSP

O site feito basicamente para visualizar na tela a relao de despesas de cada deputado. O cidado comum no consegue, com base nessas informaes, traar um panorama mais geral do perfil de gastos da CMSP

Projetos #thacker

Site produzido pelo Mauricio Maia (comunidade thacker)

Esse site permite se ter uma viso geral dos dados:- vereadores mais gastadores- servios mais utilizados- maiores fornecedores

O hacker pautou a imprensa

CMSPhttp://cmsp.topical.com.br/

Projetos #thacker

http://noticias.r7.com/sao-paulo/noticias/vereadores-de-sp-gastam-mais-com-publicidade-em-ano-pre-eleitoral-20100528.html

Projetos #thacker

http://www.estadao.com.br/estadaodehoje/20100426/not_imp543051,0.php

Projetos #thacker

Centro de Gerenciamento de Emergncias de So Paulo (CGE-SP)

Mapa esttico s informa no interageConsulta de informaes est escondida

http://cgesp.com.br/index.php

Projetos #thacker

Centro de Gerenciamento de Emergncias de So Paulo (CGE-SP)

Consulta somente por dia (no h visualizao agregada)Dados no normalizados (a mesma rua aparece grafada de forma diferente)

http://cgesp.com.br/pontosdealagamento_dia.php

Projetos #thacker

Home do Alagamentos Projeto do Mauricio Maia (thacker)

- mapa dinamico, clica e vai para os alagamentos da regio

http://alagamentos.topical.com.br/

Projetos #thacker

Home do Alagamentos Projeto do Mauricio Maia (thacker)

- consulta agegada, quantidade de vezes que uma rua foi alagada- dados histricos

http://alagamentos.topical.com.br/pontos

Projetos #thacker

Twitter do Alagamentos SP Informa a populao

O twitter do alagamentos sp twitta as ruas que esto em situao de alagamento

http://twitter.com/#!/alagamentos_sp

Projetos #thacker

http://estadao.br.msn.com/ultimas-noticias/artigo.aspx?cp-documentid=27696011

OGD sobre educao - UK

Schooloscope.com: translating statistics into graphics and plain English statements

http://schooloscope.com/

Schooloscope provides a visual and textual narrative about the quality of each school, applying an algorithmic interpretation of the data on each school to make qualitative statements such as Pupils at The Cherwell School are more or less content. It is both a search interface and an information source: articulating a value-laden interpretation of each schools performance

OGD sobre educao - UK

http://schooloscope.com/primary/100674

Mostrar o cut-out-and-keep model. Sensacional!

Thackdaydf - Maio/2010

thackdaydf.com.br

Projeto #thackdaydf

Dados eleitorais DF - TSE

Projeto #thackdaydf

Xerifes do DF Autores: Bruno Barreto e Ricardo Poppi

No mundo

Banco Mundial abriu os dados

http://data.worldbank.org/

No mundo

Em 4 de Dezembro de 2010 ocorreu o Open Data Hackaton Day (#odhd) - Maratona Internacional de Dados Abertos:

- Milhares de pessoas- 73 pases- 5 continentes- Dezenas de aplicativos

Afinal, o que #opendata?

O movimento dos dados abertos no pretende colocar ningum em situaes de risco. Dados abertos referem-se fundamentalmente a dados pblicos

A grande maioria das informaes pblicas na Web ainda apresentada, mesmo quando em formatos abertos e padronizados, em modo legvel apenas por pessoas

Dados Abertos Governamentais no so apenas a publicao de tabelas de dados legveis apenas por pessoas, mas sim a publicao das informaes do setor pblico na Web, compartilhadas em formato bruto e aberto, compreensveis logicamente, de modo a permitir sua reutilizao em aplicaes digitais desenvolvidas pela sociedade

(Carlinhos Cecconi W3C)

Afinal, o que #opendata

The Open Mind Principle: O melhor uso que poder ser feito com os seus dados certamente ser feito por outros e no por voc

Tim davies: 80% of all survey respondents agreed with the statement Innovators from outside government will use OGD to build better online services than government can

http://practicalparticipation.co.uk/odi/report/2010/

Afinal, o que #opendata?

CompletosTodos os dados esto disponveis e no limitados. Um dado pblico o dado que no est sujeito a limitaes vlidas de privacidade, segurana ou privilgios de acesso.

PrimriosDados brutos sem agregao ou modificao.

AtuaisPublicados to rapidamente quanto necessrio para preservar o seu valor.

AcessveisPara o maior nmero possvel de usurios e para o maior nmero possvel de finalidades.

Processveis por mquinasRazoavelmente estruturados para permitir processamento automatizado.

No-discriminatriosDisponveis para todos, sem necessidade de cadastro.

No-proprietriosFormato sobre o qual nenhuma entidade tem controle exclusivo.

Licenas livresOs dados no esto sujeitos a nenhuma regulao de direitos autorais, patentes, propriedade intelectual ou segredo industrial. Restries sensatas relacionadas privacidade, segurana e privilgios de acesso podem ser permitidas.

Lei de acesso a informao

[...] 3o Os stios de que trata o 2o devero, na forma de regulamento, atender, entre outros, aos seguintes requisitos:I - Conter ferramenta de pesquisa de contedo que permita o acesso informao de forma objetiva, transparente, clara e em linguagem de fcil compreenso;II - Possibilitar a gravao de relatrios em diversos formatos eletrnicos, inclusive abertos e no proprietrios, tais com planilhas e texto, de modo a facilitar a anlise das informaes;III - Possibilitar o acesso automatizado por sistemas externos em formatos abertos, estruturados e legveis por mquina;IV - Divulgar em detalhes os formatos utilizados para estruturao da informao;V - Garantir a autenticidade e a integridade das informaes disponveis para acesso;VI - Manter atualizadas as informaes disponveis para acesso;V - [...]

Em tramitao no senado PLC 41/2010http://www.senado.gov.br/atividade/Materia/detalhes.asp?p_cod_mate=96674

O processo no Brasil

Em Novembro de 2010 a SLTI (Secretaria de Logstica e Tecnologia da Informao do Ministrio do Planejamento) publica o Roteiro para Abertura de Dados e formada a INDA (Infraestrutura Nacional de Dados Abertos)

- Documento de 12 pginas- Cobre aspectos gerenciais e tcnicos

Roteiro de Abertura

Melhores prticas para publicao

1. Identificador Persistente2. Metadados3. Padres de arquivo aberto4. Clareza nos direitos de Uso5. Ferramentas para consulta e indexao6. Ambiente de feedback

1. Identificador Persistente

A no persistncia dos identificadores dificulta a busca e o encontro dessas informaes,segundo as trs leis de David Eaves, se o dado no pode ser encontrado e indexado na web, eleno existe.

2. Metadados

Segundo o W3C, Sem documentao, os dados no so muito teis. Quando possvel, deve-seusar padres da indstria, tais como aqueles baseados em XML/RDF, que normalmente so autoDocumentveis. . A atribuio de Metadados facilita o processamento por mquinas e ocorrelacionamento de dados pelas pessoas.

3. Padres de arquivo aberto

Para que o acesso a esses dados ocorra de maneira isonmica, necessrio que eles possam serinterpretados por ferramentas gratuitas e possuam formatos abertos.

4. Clareza nos direitos de Uso

Levando em considerao que os dados esto sendo divulgados publicamente, necessrio quesejam explicitados os direitos de uso dessas informaes, e que seja analisado quais sopossveis de se utilizar abertamente.

5. Ferramentas para consulta e indexao

Com o atual volume de dados existente nas bases do governo, nada mais adequado que suacorreta organizao e indexao, o aspecto mais importante manter esses dados ordenados deuma forma que o leigo possa encontrar o que quer.To importante quanto a organizao dos dados o provimento de uma ferramenta que faciliteseu encontro, uma ferramenta de busca bem estruturada ajuda o interessado a encontrar seusdados de forma mais rpida e garante seu retorno quando precisar de novas informaes.

6. Ambiente de feedback

No menos importante que os demais, o ambiente de feedback a ferramenta essencial paraproporcionar a melhoria contnua da qualidade do portal de disseminao.Ao passo que existe sua importncia, evidente que existe um grande custo envolvido em ouviras sugestes e ter o comprometimento de implementar a melhoria.Esse ambiente, caso seja de fato administrado e utilizado, um marco para a maturidade de umportal ou sistema de disseminao.

Roteiro de Abertura

Definir os atores da iniciativa e seus papis

1. rgo central de suporte e controle s aes2. Patrocinador3. Coordenador/Articulador4. Gestor Negocial5. Gestor Tcnico6. Usurio do dado

Definir os atores da iniciativa e seus papis

A definio dos responsveis importante para formalizar a vinculao do nus aosrepresentantes das reas envolvidas, a seguir a representao dos que so considerados osprincipais responsveis no processo de abertura:

2.1. rgo central de suporte e controle s aes

Promove encontros peridicos para criao e evoluo dos modelos de plano de ao emanuteno dos dados, com fim de formalizar um processo integrado de governo: SLTI.

2.2. Patrocinador

Responsvel pela Iniciativa, principal interessado na abertura dos dados, Executivo denvel superior do rgo.

2.3. Coordenador/Articulador

Responde pela execuo do processo de abertura, articula entre os responsveis tcnicos egestores de negcio.

2.4. Gestor Negocial

Tem a capacidade de identificar os dados a serem abertos, os dados de risco, dadosconfidenciais. Tem na cabea os processo de negcio.

2.5. Gestor Tcnico

Deve dominar, na organizao, os assuntos de ambiente e segurana e conhecer os sistemasde suporte rea de negcio, responde tambm pelas aes tcnicas do processo deabertura(extrao e apresentao dos dados).

2.6. Usurio do dado

Cliente final do dado aberto, pessoa fsica ou jurdica que tem interesse de acesso queledado: Sociedade civil, em especial os hackers civis, iniciativa privada e os prprios gestorespblicos.

Roteiro de Abertura

Levantar os grupos de dados para a abertura

1. Levantar os grupos de dados possuidos pela organizao:

2. Obter autorizao para publicao dos grupos de dados do rgo:

3. Definir metadados preliminares:

4. Determinar quais grupos de dados so mais relevantes para abertura:

Levantar os grupos de dados para a abertura

Aps o mapeamento dos envolvidos no processo de abertura, so iniciadas as atividadesconjuntas de levantamento dos dados passveis de abertura. Antes mesmo que os dados sejampreparados e efetivamente publicados, preciso encontr-los, simplific-los e adquirirpermisso para disponibiliz-los. Em teoria o movimento de abertura de dados prega apublicao total dos dados o mais rpido possvel. Porm, os recursos disponibilizados aosrgos possuidores dos dados no prevem aes de publicao dos dados nos moldesatualmente discutidos. As aes sugeridas a seguir consideram a colaborao como peaimportante na priorizao dos dados a serem publicados, otimizando a utilizao dos recursos ereduzindo as incertezas quanto ao impacto.

3.1. Levantar os grupos de dados possuidos pela organizao:

O primeiro passo conhecer os ativos do rgo. Para que todos os grupos de dados sejamelicitados essencial o conhecimento dos negcios operacionais geridos pelo rgo. Olevantamento deve cobrir quais so os dados, gerados ou mantidos, cujo o rgo responsvel. O Gestor Negocial deve analisar os processos de negcio do rgo e identificartodos os grupos de dados produzidos no processo.Participantes: Coordenador e Gestor Negocial.

3.2. Obter autorizao para publicao dos grupos de dados do rgo:

Para que um grupo de dados seja disponibilizado publicamente imprescindvel umlevantamento jurdico e permisso formal da instncia responsvel. O rgo deve ter umapostura prativa na liberao dos dados. Deve-se tomar como premissa que todos os dadospodem ser liberados, e remover aqueles que possuem alguma restrio. importanteenfatizar que mesmo parcialmente publicado, um grupo de dados agrega algum valor. aceitvel que motivos relacionados a segurana nacional e estratgia de governo restrinjamos dados, mas justificativas fortalecem a atuao transparente do rgo.Participantes: Coordenador e Gestor Negocial.

3.3. Definir metadados preliminares:

O movimento de abertura de dados est embasado em algumas leis e princpios quedefendem o acesso irrestrito e automatizvel aos dados. Porm, para o sucesso domovimento importante facilitar a compreeso dos dados. Se um pacote de dados publicadono est gerando concluses ou algum servio, ento ele no atingiu a expectativa inicial. papel do provedor dos dados fornecer artefatos suficientes permitindo a mxima utilizaodo valor agregado nos dados.Sugerimos a utilizao de uma abordagem incremental. No primeiro momento importantea construo de metadados suficientes para que um usurio externo conhea a definio eescopo dos dados.

3.4. Determinar quais grupos de dados so mais relevantes para abertura:

O movimento de abertura de dados prega que todos os dados devem ser disponibilizados omais rpido possvel. Porm, os recursos envolvidos so escassos diante do montante dedados que podem ser disponibilizados. Para que a abertura alcane bons nveis de satisfao necessrio um planejamento enxuto priorizando a abertura dos dados mais importantes. Adefinio do que importante est relacionada ao valor percebido pelo consumidor dosdados. Recomendamos a utilizao de uma abordagem colaborativa para definio dasprioridades de abertura. Possibilitar que os usurios dos dados exponham suas ideias ecolaborativamente definam quais dados so necessrios para implement-las, reduz asincertezas quanto ao impacto e alcane da abertura posterior. A definio dos metadadospreliminares, descrita no tpico 3.3, essencial para que os usurios vislumbrem aspossibilidades .Participantes: Coordenador, Gestor Negocial, Gestor Tcnico e Usurio.

Roteiro de Abertura

Plano de Divulgao e Participao

4.1. Sociedade civil

4.2. Hackers civis

4.3. Acadmicos

4.4. Gestores pblicos

Plano de Divulgao e Participao

O objetivo dos esforos de divulgao maximizar o alcane e o impacto das aes deabertura de dados. Por causa disso, considerando que o paradigma de dados abertos orientado promoo da transparncia, colaborao e participao, torna-se essencial aexistncia de um plano de divulgao para alcance dessa meta.

O consumidor uma pea essencial no uso dos dados abertos, portanto o plano deve conteraes para seu envolvimento ainda no momento de definio dos pacotes de dados a serempublicados. Essa colaborao aumenta a transparncia da ao e reduz as incertezas quantoaos resultados da abertura dos dados.

O plano de divulgao pode ser especializado para cada tipo de usurio dos dados. Adefinio de papis prope o melhor aproveitamento dos colaboradores de acordo com opropsito de uso dos dados.

4.1. Sociedade civil

O cidado o principal usurio dos dados disponibilizados e suas aplicaes. O plano deveconter aes informativas do movimento como um todo, esclarecendo motivao, benefciose meios de acesso. Tambm deve promover a utilizao das aplicaes que fazem uso dosdados disponibilizados. Essas aplicaes fornecem as informaes contextualizadasaumentando a percepo dos impactos das aes de governo, ou seja, maior transparncia.

4.2. Hackers civis

Grupos de cidados organizados e com capacidade tecnica. O plano deve previlegiar acolaborao com esses grupos em vrias etapas do processo de abertura. Devem serpercebidos como representantes da sociedade em termos tecnolgicos. Tm a capacidade deespecificarem os requisitos tcnicos de formato e meio de acesso aos dados. Soconsiderados pontes facilitadoras para acesso informao contida nos dados.

4.3. Acadmicos

As universidades e centros de pesquisa constituem grupos com capacidade tcnica e visode tendncia.

4.4. Gestores pblicos

Apesar de o movimento primar pela disponibilizao dos dados aos cidados, os gestorespblicos tambm se beneficiaro. A abertura organizada e orquestrada dos diversos rgosdo governo, constitui uma oportunidade nica de interoperabilidade. Alm disso, os serviose aplicaes desenvolvidas sobre os dados abertos tambm pode ser utilizado comoferramenta de gesto. Na viso atual, essas aplicaes devem ser vistas como investimentoprivado em prol do Governo.

O incentivo mais percebido para utilizao dos dados, diferente dos meios usuais, amotivao do desenvolvimento de aplicaes atravs de torneios de programao. Ogoverno, provedor dos dados, promove torneios premiando quelas aplicaes inovadorassocialmente reconhecidas. Alguns exemplos:

Apps for climate action(A4CA)Apps for californiansOpen.UpApps for democracy

Concursos de apps

Cities can spend on average between $20,000 and $50,000 even as much as $100,000 to cover the costs of opening data, but thats a small price to pay when you consider how much is needed to develop a custom application that might not be nearly as useful.

Os concursos podem gerar- empreendedores locais que depois podem vender servios e apps- melhoria de servios pblicos para os cidados que usaro as apps- retorno para os portais de dados abertos

http://mashable.com/2011/02/15/how-open-data-initiatives-can-improve-city-life/

Iniciativas .gov.br

Tribunal de Contas dos Municpios do Estado do Cear(http://api.tcm.ce.gov.br/)

Governo Aberto SP(http://www.governoaberto.sp.gov.br)

Tribunal de Contas do Estado de So Paulo(http://www.portaldocidadao.tce.sp.gov.br)

http://api.tcm.ce.gov.br/ - bastante informao, mas ainda pouco utilizado

http://www.governoaberto.sp.gov.br/view/ - pouca informao, tem captcha para baixar

http://www.portaldocidadao.tce.sp.gov.br/ - informaes relevantes, baixa em csv

Prximos passos

1- Se inscrever no SISP e participar da comunidade da INDA

2- Comparecer ao WorkshopData: 01/03/2011 - tera-feiraHorrio: 08:30 - 18:00Local: Escola de Administrao Fazendria ESAFPreencher Formulrio de inscrio

Workshop

GTs preliminares da INDA:

1- ndice de informaes de governo e melhores prticas

2- Gesto e normativo da INDA

3- Tecnologia

4- Modelagem, Metadados, Dados e Padres

Workshop

Possveis produtos da INDA:

1- Criao/definio/levantamento de Licena para dados abertos governamentais no Brasil2- Infraestrutura fsica - Diretrio brasileiro de Dados Abertos3- Definio da poltica de fornecimento de dados abertos4- Plano de comunicao5- Ontologias de governo6- Capacitao7- Disponibilizao de Workshops de Dados Abertos Governamentais8- Investimento para capacitao social para o uso dos dados 9- Guia de abertura de dados10- Infraestrutura de URLs persistentes11- Modelo de maturidade (conceitos de Dataset e mtricas)12- Catlogo de Dados pblicos

Obrigado!

Referncias importantes:

1- Comunidade da INDA no SISP2- Link para inscrio no workshop3- Roteiro de abertura de dados4- Esta apresentao

http://thackdaydf.com.br/2011/02/links-inda

Esta obra foi licenciada com uma Licena Creative Commons - Atribuio 3.0 No Adaptada.

Muokkaa otsikon tekstimuotoa napsauttamalla

Muokkaa jsennyksen tekstimuotoa napsauttamallaToinen jsennystasoKolmas jsennystasoNeljs jsennystasoViides jsennystasoKuudes jsennystasoSeitsems jsennystasoKahdeksas jsennystasoYhdekss jsennystaso