Download - EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG
![Page 1: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/1.jpg)
![Page 2: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/2.jpg)
Encontro de Usuários FME 2016
Utilização de ETL espacial no ambiente de geoprocessamento
corporativo da CEMIG
Carlos Alberto Moura [email protected] Carlos José de Andrade [email protected]
Companhia Energética de Minas Gerais - Cemig
Superintendência de Tecnologia da Informação e Telecomunicações - TI
Gerência de Soluções de Tecnologia da Informação - TI/SI
Núcleo de Engenharia e Geoprocessamento - NENG 2
![Page 3: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/3.jpg)
Agenda
• Institucional - Grupo Cemig
• Produtos de ETL Espacial utilizados na Cemig
• Exemplos de utilização do FME - Sistema de Gestão de Redes da Distribuição
- Infraestrutura de Dados Espaciais (IDE – Cemig) / GeoPortal Corporativo
- Regulatório
- Iluminação Pública
• Relacionamento Comercial - Portal do GeoAtendimento - Integração com o SAS
3
![Page 4: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/4.jpg)
Apresentação Institucional - Grupo Cemig
4
![Page 5: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/5.jpg)
Perfil da Empresa
- Maior empresa integrada do setor de energia elétrica do Brasil
- Composição do Grupo: 214 empresas e participação em
consórcios
- Lucro Líquido 2015: R$ 2,49 bilhões
- Mais de 115 mil acionistas em 44 países
- Ações negociadas nas Bolsas de Valores de Nova York, Madri
e São Paulo
Principais Atividades
- Energia elétrica: geração, transmissão, distribuição e
comercialização
- Gás natural: distribuição (Gasmig)
- Telecomunicações: transferência de dados (Cemig Telecom)
- Uso eficiente de energia (Efficientia).
5
Grupo CEMIG Um dos maiores e mais sólidos grupos de energia elétrica
do Brasil e América Latina com 64 anos de tradição.
![Page 6: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/6.jpg)
Abrangência
A Cemig é responsável pelo atendimento de cerca de 33 milhões
de pessoas em 805 municípios em Minas Gerais e Rio de
Janeiro (incluindo a Light) e pela gestão da maior rede de
distribuição de energia elétrica da América do Sul, com mais de
460 mil quilômetros de extensão.
Nova Visão
Consolidar-se, nesta década, como o maior grupo do setor
elétrico nacional em valor de mercado, com presença em gás,
líder mundial em sustentabilidade, admirado pelo cliente e
reconhecido pela solidez e performance.
6
Grupo CEMIG Um dos maiores e mais sólidos grupos de energia elétrica
do Brasil e América Latina com 64 anos de tradição.
![Page 7: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/7.jpg)
Grupo Cemig
Atuação no Brasil: 22 estados e no Distrito Federal
Restrito 7
![Page 8: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/8.jpg)
Grupo Cemig
Atuação na América Latina
Investimento no Chile:
• Linha de Transmissão Charrúa – Nueva Temuco: 2 x 220 kV, 205 km • Período de concessão: 20 anos • Participação: 49% • Investimento total: US$ 88 milhões • Receita anual: US$ 6,5 milhões • Financiamento: 63% do investimento • Aportes já realizados pela Cemig: US$ 20,3 milhões • Início da implantação: junho/2005 • Liberação ambiental: março/2007 • Início das obras: abril/2007 • Início da operação: Janeiro de 2010
Restrito 8
![Page 9: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/9.jpg)
Produtos de ETL Espacial utilizados na Cemig
• FME Desktop 2015
- Oracle / SQL Server
- SmallWorld
• FME Server 2015
9
![Page 10: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/10.jpg)
Exemplo de utilização do FME Sistema de Gestão de Redes da Distribuição
• Migração para o novo sistema de Gestão de Redes da Distribuição
• Foi desenvolvido fluxo FME para a carga inicial da base de dados do Atlantis (GE SmallWorld) a partir do Gemini.
• O banco de dados nativo do GE SmallWorld é o VMDS.
Ele trabalha também com o Oracle.
10
FME Módulo
SmallWorld
Gemini
BD Redes da
Distribuição
Atlantis GE SmallWorld
BD - Redes da Distribuição
VMDS
O FME na “SmallWorld Edition” dispõe de conectores que viabilizam o acesso aos dados no formato proprietário VMDS.
![Page 11: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/11.jpg)
Exemplo de utilização do FME Regulatório - BDGD
• BDGD - Banco de Dados Geográficos da Distribuição
Base de dados georreferenciados no formato definido pela ANEEL (Agência Nacional de Energia Elétrica), contendo todos os ativos da Distribuidora.
• Os dados são enviados anualmente ao Regulador.
• A ANEEL utiliza os dados do BDGD para validar os reajustes nos Ciclos de Revisão Tarifária.
11
Sistemas de Engenharia Distribuição
ETL Espacial
Fluxos FME
SAP CCS / CRM
Dados para a ANEEL
BDGD
![Page 12: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/12.jpg)
Solução adotada para elaboração do BDGD
Extração dos dados
Adequação no formato
BDGD
Validação técnica
Verificação de
consistência dos dados
Arquivo gerado para
envio
Exemplo de utilização do FME Regulatório - BDGD
![Page 13: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/13.jpg)
Exemplo de utilização do FME Mapas de Iluminação Pública
• A partir de janeiro de 2014, os municípios ficaram com a responsabilidade de fazer a gestão da operação, manutenção, expansão e inovação do sistema de Iluminação Pública.
• A Cemig disponibilizou os mapas e dados georreferenciados para as Prefeituras de MG
• Confecção automatizada dos Mapas de Iluminação Pública para as 774 prefeituras
(ia demorar mais de 1 ano e foi feito em menos de 2 meses).
13
Sistema de Engenharia Distribuição
ETL Espacial
Fluxos FME
Mapas e dados georreferenciados
de Iluminação Pública para as 774 prefeituras
![Page 14: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/14.jpg)
Exemplo de utilização do FME Mapas de Iluminação Pública (em pdf)
14
![Page 15: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/15.jpg)
Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo
• IDE-Cemig - Infraestrutura de Dados Espaciais da Cemig - Baseada em serviços geográficos e Banco de Dados Espaciais
- Padrão OGC
• Criação do Banco de dados geográficos
• Higienização dos dados espaciais e alfanuméricos
• Conversão do sistema de coordenadas / Padronização
• Carga dos dados espaciais no Banco de Dados Oracle Spatial 11g
• Atualização da base
15
![Page 16: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/16.jpg)
Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo
IDE-CEMIG / GeoPortal
Sistemas de Engenharia e a IDE-CEMIG
Interface SIG
Segurança / permissões Metadados
Serviços geográficos (web services)
Banco de dados espaciais - BD Oracle Spatial 11g - Dados de interesse corporativo - Dados da Engenharia - Banco de imagens georreferenciadas
Extrator dos dados dos
sistemas da Engenharia
Sistemas da Engenharia da
Distribuição
Atlantis Gemini
GDIS Conint
BGED BDG Imagens georreferenciadas
16
![Page 17: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/17.jpg)
Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo
Banco corporativo de dados espaciais
GeoPortal SIG Corporativo
BD Espacial
Dados CEMIG Linhas de transmissão
Usinas Subestações
Infraestrutura do Estado Rodovias Ferrovias
Aeroportos / Helipontos
IBGE / IGA Estados
Municípios Localidades
Meio ambiente / recursos hídricos Hidrografia Vegetação
Fontes de dados espaciais
17
![Page 18: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/18.jpg)
IDE – Cemig / GeoPortal Corporativo
18
![Page 19: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/19.jpg)
Relacionamento Comercial (RC) Portal do GeoAtendimento
Solicitante: Superintendência de Relacionamento Comercial com Clientes da Distribuição (RC)
Objetivo: disponibilizar as informações espaciais da área de Relacionamento Comercial para os Clientes (externos e internos), utilizando plataforma de geoprocessamento, o que permitirá melhor gestão, análises e tomada de decisões.
Clientes externos: Baixa e Média tensões
Com isso, a RC irá atingir o objetivo interno, que é a migração para canais de atendimento com menor custo.
19
![Page 20: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/20.jpg)
GeoAtendimento Arquitetura simplificada
20
![Page 21: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/21.jpg)
21
Item Funcionalidades Cliente Interno
Cliente Externo (Consumidor) e
Imprensa
1 Interrupções programadas e emergenciais Sim Sim
2 Índices Gerenciais (Mapa temático) - Dados atuais – Por Municípios Sim Não
3 Índices Gerenciais (Mapa temático) - Dados atuais – Por Gerências de Campo Sim Não
4 Índices Gerenciais (Mapa temático) - Dados atuais – Por Malha Regional Sim Não
5 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Municípios
Sim Não
6 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Gerências de Campo
Sim Não
7 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Malha Regional
Sim Não
8 Índices Gerenciais (Mapa temático) - Evolução dos dados - Por Municípios Sim Não
9 Índices Gerenciais (Mapa temático) - Evolução dos dados – Por Gerências de Campo
Sim Não
10 Índices Gerenciais (Mapa temático) - Evolução dos dados - Por Malha Regional
Sim Não
11 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Municípios
Sim Não
12 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Gerências de Campo
Sim Não
13 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Malha Regional
Sim Não
14 Acompanhamento das ligações para o Call Center Sim Sim
Relacionamento Comercial Portal do GeoAtendimento
21
![Page 22: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/22.jpg)
Funcionalidades 2, 3, 4 Índices gerenciais - Dados atuais
Mapeamento dos índices gerenciais de DEC, FEC , DER, FER e ISAP em mapa temático. Dados atuais – Índices totalizados por: Municípios (774 Municípios da Área de Concessão Cemig) , Gerências de Campo (16 Gerências) e Malha Regional do Sistema Elétrico (7 Malhas). Índices Gerenciais – dados atuais: - DEC - Duração Equivalente de Interrupção por Unidade Consumidora - FEC - Frequência Equivalente de Interrupção por Unidade Consumidora - DER - Duração Equivalente de Reclamação - FER - Frequência Equivalente de Reclamação - IAPG - Índice de Serviços Atendidos no Prazo Geral
Relacionamento Comercial Portal do GeoAtendimento
22
![Page 23: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/23.jpg)
GeoAtendimento – Integração FME e SAS
23
http://www.sas.com/
FME Server
SAS BD Geográficos
No SAS:
Dados do FER Frequência Equivalente de Reclamação
Os dados dos Municípios são tratados e
consolidados mensalmente no SAS.
Software avançado de análise estatística
![Page 24: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/24.jpg)
GeoAtendimento – Integração FME e SAS
24
• A integração entre SAS e FME é feita por meio do produto SAS/SHARE.
• O SAS/SHARE é um serviço do SAS capaz de fornecer acessos multiusuários aos datasets por meio de conexões
ODBC ou JDBC.
![Page 25: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/25.jpg)
GeoAtendimento – Integração FME e SAS 1) Configurando o SAS Driver for ODBC: O SAS Driver for ODBC é instalado na estação de trabalho. O link para instalação é http://support.sas.com/downloads/browse.htm?cat=40 Após instalação, será possível configurar uma fonte de dados ODBC na estação de trabalho associando a um SAS/SHARE Server (serviço em execução no SAS para compartilhar dataset (tabelas) SAS via ODBC ou JDBC).
As configurações acima informam o IP e porta para conexão.
As configurações acima informam o diretório onde estarão as tabelas SAS.
25
![Page 26: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/26.jpg)
GeoAtendimento – Integração FME e SAS
2) Acesso pelo FME
Clicar em “Add Reader”. Selecionar Format “ODBC” Informar em “Dataset” o data source name descrito na configuração do item anterior.
Ao clicar em “Parameters” e em “...”, o FME lista todos os arquivos (tabelas SAS) contidos na pasta informada.
Finalmente, ao clicar em “Ok” da janela “Add reader”, o FME causa erro ao acessar e exibe a log na “Translation Log”, conforme o arquivo “fme_read_data.txt”.
26
![Page 27: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG](https://reader033.vdocuments.pub/reader033/viewer/2022052418/5875608f1a28ab00528b7175/html5/thumbnails/27.jpg)
EQUIPE MULTIDISCIPLINAR AMBIENTE DE GEOPROCESSAMENTO
• TI/SI-NENG – Núcleo de Engenharia e Geoprocessamento Carlos José de Andrade, Carlos Alberto Moura, Alexander Gonçalves da Silva, Jorge
Machado Quintanilha Neto
• Conexão Roberto Proença da Silva, Josemar Figueiredo Pereira, Celso Meireles Alves
• TI/SI-NBBD – Banco de Dados Roberto Gazzinelli de Lima, Paulo Adriano Barbosa
• TI/SI-BI – Business Intelligence / SAS Eduardo William Feres Duarte, Pedro de Assis Lara Junior, Isaac Dutra Gamarano
• Gestão de Redes da Distribuição (Equipe Axxiom) Claudio Lisias B. Gonçalves, Sólon de Assis Soares, Daniel Lorentz
• Relacionamento Comercial (RC) Marília Goretti de Castro, Alexandre Henrique Martins
• Regulatório / Iluminação Pública Marcelo de Castro Alves, Isa Vianini de Lucena Xavier
27