eu 2016 - utilização de etl espacial no ambiente de geoprocessamento corporativo da cemig

27

Upload: inovacao-gis-tecnologia-da-informacao

Post on 11-Jan-2017

110 views

Category:

Business


0 download

TRANSCRIPT

Page 1: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG
Page 2: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Encontro de Usuários FME 2016

Utilização de ETL espacial no ambiente de geoprocessamento

corporativo da CEMIG

Carlos Alberto Moura [email protected] Carlos José de Andrade [email protected]

Companhia Energética de Minas Gerais - Cemig

Superintendência de Tecnologia da Informação e Telecomunicações - TI

Gerência de Soluções de Tecnologia da Informação - TI/SI

Núcleo de Engenharia e Geoprocessamento - NENG 2

Page 3: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Agenda

• Institucional - Grupo Cemig

• Produtos de ETL Espacial utilizados na Cemig

• Exemplos de utilização do FME - Sistema de Gestão de Redes da Distribuição

- Infraestrutura de Dados Espaciais (IDE – Cemig) / GeoPortal Corporativo

- Regulatório

- Iluminação Pública

• Relacionamento Comercial - Portal do GeoAtendimento - Integração com o SAS

3

Page 4: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Apresentação Institucional - Grupo Cemig

4

Page 5: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Perfil da Empresa

- Maior empresa integrada do setor de energia elétrica do Brasil

- Composição do Grupo: 214 empresas e participação em

consórcios

- Lucro Líquido 2015: R$ 2,49 bilhões

- Mais de 115 mil acionistas em 44 países

- Ações negociadas nas Bolsas de Valores de Nova York, Madri

e São Paulo

Principais Atividades

- Energia elétrica: geração, transmissão, distribuição e

comercialização

- Gás natural: distribuição (Gasmig)

- Telecomunicações: transferência de dados (Cemig Telecom)

- Uso eficiente de energia (Efficientia).

5

Grupo CEMIG Um dos maiores e mais sólidos grupos de energia elétrica

do Brasil e América Latina com 64 anos de tradição.

Page 6: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Abrangência

A Cemig é responsável pelo atendimento de cerca de 33 milhões

de pessoas em 805 municípios em Minas Gerais e Rio de

Janeiro (incluindo a Light) e pela gestão da maior rede de

distribuição de energia elétrica da América do Sul, com mais de

460 mil quilômetros de extensão.

Nova Visão

Consolidar-se, nesta década, como o maior grupo do setor

elétrico nacional em valor de mercado, com presença em gás,

líder mundial em sustentabilidade, admirado pelo cliente e

reconhecido pela solidez e performance.

6

Grupo CEMIG Um dos maiores e mais sólidos grupos de energia elétrica

do Brasil e América Latina com 64 anos de tradição.

Page 7: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Grupo Cemig

Atuação no Brasil: 22 estados e no Distrito Federal

Restrito 7

Page 8: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Grupo Cemig

Atuação na América Latina

Investimento no Chile:

• Linha de Transmissão Charrúa – Nueva Temuco: 2 x 220 kV, 205 km • Período de concessão: 20 anos • Participação: 49% • Investimento total: US$ 88 milhões • Receita anual: US$ 6,5 milhões • Financiamento: 63% do investimento • Aportes já realizados pela Cemig: US$ 20,3 milhões • Início da implantação: junho/2005 • Liberação ambiental: março/2007 • Início das obras: abril/2007 • Início da operação: Janeiro de 2010

Restrito 8

Page 9: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Produtos de ETL Espacial utilizados na Cemig

• FME Desktop 2015

- Oracle / SQL Server

- SmallWorld

• FME Server 2015

9

Page 10: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME Sistema de Gestão de Redes da Distribuição

• Migração para o novo sistema de Gestão de Redes da Distribuição

• Foi desenvolvido fluxo FME para a carga inicial da base de dados do Atlantis (GE SmallWorld) a partir do Gemini.

• O banco de dados nativo do GE SmallWorld é o VMDS.

Ele trabalha também com o Oracle.

10

FME Módulo

SmallWorld

Gemini

BD Redes da

Distribuição

Atlantis GE SmallWorld

BD - Redes da Distribuição

VMDS

O FME na “SmallWorld Edition” dispõe de conectores que viabilizam o acesso aos dados no formato proprietário VMDS.

Page 11: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME Regulatório - BDGD

• BDGD - Banco de Dados Geográficos da Distribuição

Base de dados georreferenciados no formato definido pela ANEEL (Agência Nacional de Energia Elétrica), contendo todos os ativos da Distribuidora.

• Os dados são enviados anualmente ao Regulador.

• A ANEEL utiliza os dados do BDGD para validar os reajustes nos Ciclos de Revisão Tarifária.

11

Sistemas de Engenharia Distribuição

ETL Espacial

Fluxos FME

SAP CCS / CRM

Dados para a ANEEL

BDGD

Page 12: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Solução adotada para elaboração do BDGD

Extração dos dados

Adequação no formato

BDGD

Validação técnica

Verificação de

consistência dos dados

Arquivo gerado para

envio

Exemplo de utilização do FME Regulatório - BDGD

Page 13: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME Mapas de Iluminação Pública

• A partir de janeiro de 2014, os municípios ficaram com a responsabilidade de fazer a gestão da operação, manutenção, expansão e inovação do sistema de Iluminação Pública.

• A Cemig disponibilizou os mapas e dados georreferenciados para as Prefeituras de MG

• Confecção automatizada dos Mapas de Iluminação Pública para as 774 prefeituras

(ia demorar mais de 1 ano e foi feito em menos de 2 meses).

13

Sistema de Engenharia Distribuição

ETL Espacial

Fluxos FME

Mapas e dados georreferenciados

de Iluminação Pública para as 774 prefeituras

Page 14: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME Mapas de Iluminação Pública (em pdf)

14

Page 15: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo

• IDE-Cemig - Infraestrutura de Dados Espaciais da Cemig - Baseada em serviços geográficos e Banco de Dados Espaciais

- Padrão OGC

• Criação do Banco de dados geográficos

• Higienização dos dados espaciais e alfanuméricos

• Conversão do sistema de coordenadas / Padronização

• Carga dos dados espaciais no Banco de Dados Oracle Spatial 11g

• Atualização da base

15

Page 16: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo

IDE-CEMIG / GeoPortal

Sistemas de Engenharia e a IDE-CEMIG

Interface SIG

Segurança / permissões Metadados

Serviços geográficos (web services)

Banco de dados espaciais - BD Oracle Spatial 11g - Dados de interesse corporativo - Dados da Engenharia - Banco de imagens georreferenciadas

Extrator dos dados dos

sistemas da Engenharia

Sistemas da Engenharia da

Distribuição

Atlantis Gemini

GDIS Conint

BGED BDG Imagens georreferenciadas

16

Page 17: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Exemplo de utilização do FME IDE – Cemig / GeoPortal Corporativo

Banco corporativo de dados espaciais

GeoPortal SIG Corporativo

BD Espacial

Dados CEMIG Linhas de transmissão

Usinas Subestações

Infraestrutura do Estado Rodovias Ferrovias

Aeroportos / Helipontos

IBGE / IGA Estados

Municípios Localidades

Meio ambiente / recursos hídricos Hidrografia Vegetação

Fontes de dados espaciais

17

Page 18: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

IDE – Cemig / GeoPortal Corporativo

18

Page 19: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Relacionamento Comercial (RC) Portal do GeoAtendimento

Solicitante: Superintendência de Relacionamento Comercial com Clientes da Distribuição (RC)

Objetivo: disponibilizar as informações espaciais da área de Relacionamento Comercial para os Clientes (externos e internos), utilizando plataforma de geoprocessamento, o que permitirá melhor gestão, análises e tomada de decisões.

Clientes externos: Baixa e Média tensões

Com isso, a RC irá atingir o objetivo interno, que é a migração para canais de atendimento com menor custo.

19

Page 20: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

GeoAtendimento Arquitetura simplificada

20

Page 21: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

21

Item Funcionalidades Cliente Interno

Cliente Externo (Consumidor) e

Imprensa

1 Interrupções programadas e emergenciais Sim Sim

2 Índices Gerenciais (Mapa temático) - Dados atuais – Por Municípios Sim Não

3 Índices Gerenciais (Mapa temático) - Dados atuais – Por Gerências de Campo Sim Não

4 Índices Gerenciais (Mapa temático) - Dados atuais – Por Malha Regional Sim Não

5 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Municípios

Sim Não

6 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Gerências de Campo

Sim Não

7 Índices Gerenciais (Mapa temático) - Dados históricos, atuais e previstos – Por Malha Regional

Sim Não

8 Índices Gerenciais (Mapa temático) - Evolução dos dados - Por Municípios Sim Não

9 Índices Gerenciais (Mapa temático) - Evolução dos dados – Por Gerências de Campo

Sim Não

10 Índices Gerenciais (Mapa temático) - Evolução dos dados - Por Malha Regional

Sim Não

11 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Municípios

Sim Não

12 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Gerências de Campo

Sim Não

13 Índices Gerenciais (Mapa temático) - Mapa Síntese dos Dados atuais – Por Malha Regional

Sim Não

14 Acompanhamento das ligações para o Call Center Sim Sim

Relacionamento Comercial Portal do GeoAtendimento

21

Page 22: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

Funcionalidades 2, 3, 4 Índices gerenciais - Dados atuais

Mapeamento dos índices gerenciais de DEC, FEC , DER, FER e ISAP em mapa temático. Dados atuais – Índices totalizados por: Municípios (774 Municípios da Área de Concessão Cemig) , Gerências de Campo (16 Gerências) e Malha Regional do Sistema Elétrico (7 Malhas). Índices Gerenciais – dados atuais: - DEC - Duração Equivalente de Interrupção por Unidade Consumidora - FEC - Frequência Equivalente de Interrupção por Unidade Consumidora - DER - Duração Equivalente de Reclamação - FER - Frequência Equivalente de Reclamação - IAPG - Índice de Serviços Atendidos no Prazo Geral

Relacionamento Comercial Portal do GeoAtendimento

22

Page 23: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

GeoAtendimento – Integração FME e SAS

23

http://www.sas.com/

FME Server

SAS BD Geográficos

No SAS:

Dados do FER Frequência Equivalente de Reclamação

Os dados dos Municípios são tratados e

consolidados mensalmente no SAS.

Software avançado de análise estatística

Page 24: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

GeoAtendimento – Integração FME e SAS

24

• A integração entre SAS e FME é feita por meio do produto SAS/SHARE.

• O SAS/SHARE é um serviço do SAS capaz de fornecer acessos multiusuários aos datasets por meio de conexões

ODBC ou JDBC.

Page 25: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

GeoAtendimento – Integração FME e SAS 1) Configurando o SAS Driver for ODBC: O SAS Driver for ODBC é instalado na estação de trabalho. O link para instalação é http://support.sas.com/downloads/browse.htm?cat=40 Após instalação, será possível configurar uma fonte de dados ODBC na estação de trabalho associando a um SAS/SHARE Server (serviço em execução no SAS para compartilhar dataset (tabelas) SAS via ODBC ou JDBC).

As configurações acima informam o IP e porta para conexão.

As configurações acima informam o diretório onde estarão as tabelas SAS.

25

Page 26: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

GeoAtendimento – Integração FME e SAS

2) Acesso pelo FME

Clicar em “Add Reader”. Selecionar Format “ODBC” Informar em “Dataset” o data source name descrito na configuração do item anterior.

Ao clicar em “Parameters” e em “...”, o FME lista todos os arquivos (tabelas SAS) contidos na pasta informada.

Finalmente, ao clicar em “Ok” da janela “Add reader”, o FME causa erro ao acessar e exibe a log na “Translation Log”, conforme o arquivo “fme_read_data.txt”.

26

Page 27: EU 2016 - Utilização de ETL espacial no ambiente de geoprocessamento corporativo da CEMIG

EQUIPE MULTIDISCIPLINAR AMBIENTE DE GEOPROCESSAMENTO

• TI/SI-NENG – Núcleo de Engenharia e Geoprocessamento Carlos José de Andrade, Carlos Alberto Moura, Alexander Gonçalves da Silva, Jorge

Machado Quintanilha Neto

• Conexão Roberto Proença da Silva, Josemar Figueiredo Pereira, Celso Meireles Alves

• TI/SI-NBBD – Banco de Dados Roberto Gazzinelli de Lima, Paulo Adriano Barbosa

• TI/SI-BI – Business Intelligence / SAS Eduardo William Feres Duarte, Pedro de Assis Lara Junior, Isaac Dutra Gamarano

• Gestão de Redes da Distribuição (Equipe Axxiom) Claudio Lisias B. Gonçalves, Sólon de Assis Soares, Daniel Lorentz

• Relacionamento Comercial (RC) Marília Goretti de Castro, Alexandre Henrique Martins

• Regulatório / Iluminação Pública Marcelo de Castro Alves, Isa Vianini de Lucena Xavier

27