agosto / 2000. data warehousing processamento informacional para suportar o processo de tomada de...
TRANSCRIPT
DATA WAREHOUSING
PROCESSAMENTO INFORMACIONAL PARA SUPORTAR O PROCESSO DE TOMADA DE DECISÃO, COMPLEMENTANDO O PROCESSAMENTO TRANSACIONAL EXISTENTE, QUE SUPORTA A OPERAÇÃO DO NEGÓCIO
APLICAÇÕESOPERACIONAIS
PROCESSO DE DATA WAREHOUSING
DATAMART
DATAMART
DATAMART
DATAMART
APLICAÇÕESABORDAGEM IMEDIATISTAABORDAGEM IMEDIATISTA
APLICAÇÕES
DATAMART
DATAMART
DATAMART
DATAMART
PROCESSO DE DATA WAREHOUSING
ABORDAGEM EFETIVAABORDAGEM EFETIVA
FÁBRICA DE INFORMAÇÕES
DATAWAREHOUSE
ODSDATAMART
DATAMART
DATAMART
APLICAÇÕES
METADADOS
FONTE: CORPORATE INFORMATION FACTORY - W. H. INMON, CLAUDIA IMHOFF E RYAN SOUSA - 1998
INTERNET E INTRANET
INTEGRAÇÃO
EFETIVIDADE DO PROCESSO DE DW
BASE SÓLIDA PARA EVOLUÇÃO AQUISIÇÃO DE DADOS CONTROLADA, CONSISTENTE E DOCUMENTADA REDUNDÂNCIA CONTROLADA E GERENCIADA METADADOS CONSISTENTES INTEGRIDADE HISTÓRICA NECESSIDADES CORPORATIVAS E DEPARTAMENTAIS ATENDIDAS MANUTENÇÕES E EVOLUÇÕES FÁCEIS DE ADMINISTRAR
PERSPECTIVAS DO PROCESSO DE DW
DATADATAWAREHOUSINGWAREHOUSINGTECNOLOGIATECNOLOGIA DESENVOLVIMENTDESENVOLVIMENT
OO
VISÃO GERALVISÃO GERAL
ADMINISTRAÇÃOADMINISTRAÇÃO
PERSPECTIVA VISÃO GERALOBJETIVO
CARACTERIZAR AS NECESSIDADES DE INFORMAÇÃO E ELABORAR UM PLANO PARA A IMPLEMENTAÇÃO DO PROCESSO DE DATA WAREHOUSING, GARANTINDO O ALINHAMENTO ÀS ESTRATÉGIAS DE NEGÓCIO
NECESSIDADE DE INFORMAÇÃO
INDICADORES E MÉTRICAS DOS
PROCESSOS DO NEGÓCIO
AÇÕES ESTRATÉGICAS CHAVE DO NEGÓCIO
PROBLEMAS E OPORTUNIDADES
CARACTERIZAÇÃO DAS NECESSIDADES
ABORDAGEM EFETIVA
DEPARTAMENTODE PRODUÇÃO
DEPARTAMENTODE VENDAS
EEMMPPRREESSAA
PROCESSOS DO NEGÓCIOPROCESSOS DO NEGÓCIO
ASSUNTO1
ASSUNTO3
ASSUNTO2
ASSUNTO4
PROCESSO DE COMERCIALIZAÇÃO
PROCESSO DE FABRICAÇÃO
VISÃO POR PROCESSO
FORNECEDOR
EMPRESA
DESENV.PRODUTO PRODUÇÃO VENDAS FINANÇAS
DESENVOLVIMENTO DE MERCADODO
CLIENTE
SATISFAÇÃOGERAÇÃO DE RECEITA
GERAÇÃO DE PRODUTOS/SERVIÇOS
PROCESSOS CHAVE
DESENVOLVIMENTO DE MERCADO
DESENVOLVIMENTO DE PRODUTOS / SERVIÇOS
GERAÇÃO DE PRODUTOS / SERVIÇOS
GERAÇÃO DE RECEITA
PROCESSOS DE SUPORTE
AQUISIÇÃO DE MATERIAIS / SERVIÇOS
MEDIÇÃO DA VITALIDADE DO NEGÓCIO
ADMINISTRAÇÃO DA INFORMAÇÃO
ADMINISTRAÇÃO DE RECURSOS HUMANOS
PROCESSOS CHAVE
CADEIA DE VALORES
MERCADO PRODUTOS / SERVIÇOS
PRODUÇÃO VENDAS
RECURSOS FINANCEIROS
INFORMAÇÃO
MATERIAIS / SERVIÇOS
RECURSOS HUMANOS
CICLO DE VIDA
PlanejamentoInfra - EstruturaIncorporaçãoAdministraçãoRemoçãoControle
ATIVIDADES
PROCESSO
CLIENTE
PRODUTOINSUMO
FORNECEDOR
CLIENTE
SUB-PROCESSOS
CICLO DE VIDA
FORNECEDOR
DECOMPOSIÇÃO EM SUBPROCESSOS
ASSUNTO
CONJUNTO DE INFORMAÇÕES (ENTIDADES) FORTEMENTE RELACIONADAS, GERADAS PELO MESMO PROCESSO DO NEGÓCIO
CLIENTECLIENTE PESSOA FÍSICACLIENTE PESSOA JURÍDICAENDEREÇO
ASSUNTO CLIENTE
PEDIDO DE VENDACONTRATO DE VENDAPARCELA CONTRATO
ASSUNTO VENDA
PRODUTOFAMÍLIA PRODUTOREGRA DE COMERCIALIZAÇÃO
ASSUNTO PRODUTO
MODELAGEM DAS NECESSIDADES
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
ARQUITETURA INFORMACIONAL
DESENVOLVIMENTO DE PRODUTO
ÍNDICE DE ASSISTÊNCIA TÉCNICA
ACOMPANHAMENTO DE METAS
VENDAS
NÍVEL DE PENETRAÇÃO NO MERCADO
DESENVOLVIMENTO DE MERCADO
PLANO
VENDAS
PRODUTO
MERCADO
ASSUNTO
PROCESSO DO NEGÓCIO NECESSIDADE
• $ VENDAS• QTDE
VENDAS• PREÇO
MÉDIOHORA
DATA
PRODUTO
LOJA
CLIENTE
FONTEEXTERNA
MAPEAMENTO MACRO DAS ORIGENS
DEFINIÇÃO DE PRIORIDADES
PROJETO A
PROJETO B
PROJETO C
PROJETO D
ALTO
IMPACTOPOTENCIAL
NO NEGÓCIO
POSSIBILIDADEDE REALIZAÇÃO
BAIXOBAIXA ALTA
PERSPECTIVA TECNOLOGIAOBJETIVO
DEFINIR A ARQUITETURA E A INFRA-ESTRUTURA TECNOLÓGICA NECESSÁRIAS PARA SUPORTAR A IMPLEMENTAÇÃO DO PROCESSO DE DATA WAREHOUSING
DATAWAREHOUSE
ODS DATAMART
DATAMART
DATAMART
APLICAÇÕES
INTEGRAÇÃO
INTERNET E INTRANET
METADADOS
ARQUITETURA DE DATA WAREHOUSING
MANUTENÇÃO DOS METADADOS
INTEGRAÇÃO DOS DADOS
DISPONIBILIZAÇÃO DOS DADOS
ARMAZENAMENTO DOS DADOS
INFRA-ESTRUTURA TECNOLÓGICA
METADADOS
DATAMART
DATAMART
DATAMART
APLICAÇÕES
PLATAFORMA(S)DE HARDWARE E
SOFTWARES BÁSICOS FERRAMENTAS
DE ACESSO• QUERY &
REPORTING• OLAP• DATA MININGFERRAMENTAS
PARA INTEGRAÇÃO• EXTRAÇÃO• CONSOLIDAÇÃO• CONVERSÃO• LIMPEZA • POPULAÇÃO
INTERNET E INTRANET
FERRAMENTASDE
ADMINISTRAÇÃO
SGBD• RELACIONAL• MULTIDIMENSIONAL
DATAWAREHOUSE
ODS
INTEGRAÇÃO
OLAP TOOLS QUESTÕES NÃO ESTRUTURADAS VISÃO MULTIDIMENSIONAL DOS DADOS RESULTADO GRIDS OU CROSSTABS
QUERY AND REPORTING TOOLS QUESTÕES ESTRUTURADAS VISÃO TABULAR DOS DADOS RESULTADO FORMATO DE RELATÓRIO
FERRAMENTAS PARA ACESSO AOS DADOS
DATA MINING TOOLS CONHECIMENTO ESCONDIDO (RELACIONAMENTOS, PADRÕES E
TENDÊNCIAS) ANÁLISES ESTATÍSTICAS, ÁRVORES DE DECISÃO E REDES NEURAIS
CÁLCULOS (RANKINGS / TOP TEN)MÉDIASSOMAS CUMULATIVASCOMPARAÇÃO ENTRE PERÍODOSCÁLCULOS ESTATÍSTICOS / FINANCEIROSTABELA
(LINHAS E COLUNAS DIMENSÕES)SOBRE A QUAL O USUÁRIO PODE
“PIVOT”“DRILL DOWN”
“DRILL UP”“DRILL ACROSS”
OLAPONLINE ANALYTICAL PROCESSINGONLINE ANALYTICAL PROCESSING
FORMAS DE OLAP
MOLAPMOLAPESTRUTURA MULTIDIMENSIONALESTRUTURA MULTIDIMENSIONAL
OBJETOS = FATOS E DIMENSÕES
OBJETOS = TABELAS E COLUNAS
ROLAPROLAPESTRUTURA RELACIONALESTRUTURA RELACIONAL
HOLAPHOLAPESTRUTURA HÍBRIDAESTRUTURA HÍBRIDA
CARACTERÍSTICAS DAS FORMAS DE OLAP
VISÃO DO USUÁRIO
(FÍSICA)
VISÃO DO USUÁRIO
(LÓGICA)
DADOS DETALHADOS
DADOS DETALHADOSE AGREGADOS
VISÃO DO USUÁRIO
(LÓGICA/FÍSICA)
DADOS DETALHADOSE AGREGADOS
DADOSAGREGADOS
MOLAPMULTIDIMENSIONAL
OLAP
ROLAPRELATIONAL
OLAP
HOLAPHYBRIDOLAP
ACESSO RÁPIDO ÀS INFORMAÇÕESINDEPENDENTEMENTE
DE QUANDO E ONDE ELAS SÃO NECESSÁRIAS
DATA WAREHOUSING X INTERNET
DATA WEBHOUSE
TRAZER O WAREHOUSE PARA A INTERNET
TRAZER A WEB PARA O WAREHOUSE WEBHOUSE
“CLICKSTREAM ANALISYS” ENTENDER COMO O VISITANTE
EXPLORA UM SITE COMO O CLIENTE CHEGA A UMA
DECISÃO DE COMPRA COMO SE CHEGOU ATÉ O SITE
PERSPECTIVA DESENVOLVIMENTOOBJETIVO
EXECUTAR O CICLO DE DESENVOLVIMENTO PARA UM PROJETO VISANDO ATENDER AS NECESSIDADES CONTIDAS DENTRO DO SEU ESCOPO
DEFINIÇÃO DO ESCOPO DO PROJETO
OBJETIVOS ESTRATÉGICOS A SEREM ALCANÇADOS
BENEFÍCIOS ESPERADOS
CAPACIDADES
RESTRIÇÕES
FATORES CRÍTICOS DE SUCESSO
RISCOS
CAMADA DE DISPONIBILIZAÇÃO
IDENTIFICAR E MAPEAR AS NECESSIDADES DE INFORMAÇÃO, E DEFINIR A CAMADA DE ACESSO
R$ 75,00ALIMENTAÇÃO01/99
VALORCOMPRADO
CATEGORIAPRODUTOMÊS
R$ 75,00TOTAL
R$ 15,00CAFÉALIMENTAÇÃO01/99
R$ 40,00AZEITEALIMENTAÇÃO01/99
R$ 20,00ARROZALIMENTAÇÃO01/99
VALORCOMPRADOPRODUTOCATEGORIA
PRODUTOMÊS
MODELO MULTIDIMENSIONAL VISÕES
PRODUTO
MER
CA
DO
TEMPO
AD-HOC
PRODUTO
MER
CA
DO
TEMPO
GERENTE REGIONAL
PRODUTOM
ERC
AD
O
TEMPO
GERENTE DE PRODUTO
PRODUTO
MER
CA
DO
TEMPO
GERENTE FINANCEIRO
MODELO ESTRELASTAR SCHEME
É COMPOSTO DE UMA TABELA, COM CHAVE COMPOSTA, CHAMADA TABELA FATO, E UM CONJUNTO DE TABELAS MENORES, CHAMADAS TABELAS DIMENSÕES
MÊS COD_PROD COD_CLI COD_REG
VENDASREALIZADAS MÊS
MÊS
COD_REGREGIÃO
COD_CLICLIENTE
PRODUTO COD_ PROD
FATO / MEDIDA
MÊS COD_PROD COD_CLI COD_REG
VALORVENDIDO
QTDEVENDIDA
VENDASREALIZADAS MÊS
MÊS
COD_REGREGIÃO
COD_CLICLIENTE
PRODUTO COD_ PROD
DIMENSÃO / ATRIBUTO
MÊS COD_PROD COD_CLI COD_REG
VALORVENDIDO
QTDEVENDIDA
VENDASREALIZADAS
PRODUTO COD_ PROD
NOME_CAT
COD_REG
NOME_REG
REGIÃO
MÊSMÊS
COD_CLI
SEXO_CLI
CLIENTE
HIERARQUIA
TEMPO
ANO
MÊS
QUINZENA
SEMANA
DIA
PRODUTO
MARCA
LINHA DE PRODUTO
PRODUTO
MERCADO
REGIÃO
ESTADO
CIDADE
LOJA
DEFINIÇÃO DE GRANULARIDADE
PERÍODO PRODUTO UNIDADEVENDA
HORA
ANO
SEMESTRE
DIA
FAMÍLIA
CATEGORIA
VENDEDOR
REGIÃO VENDA
PRODUTO
MÊS PONTO VENDA
SNOWFLAKING
TÉCNICA DE MODELAGEM QUE CONSISTE EM NORMALIZAR UMA TABELA DIMENSÃO, OU SEJA, REMOVER ATRIBUTOS DO TIPO TEXTO DE BAIXA CARDINALIDADE DAS DIMENSÕES E COLOCÁ-LOS EM DIMENSÕES SECUNDÁRIAS, ESTABELECENDO UM RELACIONAMENTO ENTRE AS MESMAS
VENDASREALIZADAS MÊS COD_PROD COD_CLI COD_REG
VALORVENDIDO
QTDEVENDIDA
MÊS MÊS
CLIENTE COD_CLI
REGIÃO COD_REG
PRODUTO COD_PROD
COD_CAT
CATEGORIA COD_CAT
MÉTODO PARAMODELAGEM DE FATOS
PARA CADA NOVA NECESSIDADE: IDENTIFICAR O FATO
IDENTIFICAR A GRANULARIDADE DO FATO IDENTIFICAR O CONJUNTO MÍNIMO DE DIMENSÕES NECESSÁRIAS,
ATRAVÉS DA GRANULARIDADE VERIFICAR A EXISTÊNCIA DAS DIMENSÕES NECESSÁRIAS; CASO
ALGUMA NÃO EXISTA, DEFINIR A NOVA DIMENSÃO VERIFICAR A EXISTÊNCIA DAS HIERARQUIAS NECESSÁRIAS; CASO
ALGUMA NÃO EXISTA, DEFINIR A NOVA HIERARQUIA VERIFICAR A EXISTÊNCIA DE ALGUM FATO QUE TENHA A MESMA
GRANULARIDADE E DIMENSÕES; NESTE CASO, PODE SER NECESSÁRIO ACRESCENTAR APENAS NOVAS MEDIDAS AO FATO EXISTENTE; CASO CONTRÁRIO, DEFINA UM NOVO FATO
AGREGAÇÃO
COD_REG
REGIÃO
MÊS
MÊS
COD_CLI
MÊS
COD_CLI COD_REG VALOR
VENDIDO QTDE
VENDIDA
VENDASREALIZADAS
CLIENTE
COD_PROD
NOME_COR COD_CAT
PRODUTO
COD_PRODCOD_PROD
MÊSVENDAS
REALIZADAS POR CATEGORIA
MÊS
COD_CLI
VALORVENDIDO
QTDEVENDIDA
CLIENTE
MÊS
COD_CLI
COD_CAT
NOME_CAT
CATEGORIAPRODUTO
COD_COD_ CATCAT
DIMENSÃO EM CONFORMIDADE((CONFORMED DIMENSIONCONFORMED DIMENSION))
É UMA DIMENSÃO QUE SIGNIFICA A MESMA COISA EM QUALQUER TABELA FATO A QUAL ELA ESTÁ VINCULADA
CLIENTE
CONSOLIDAÇÃO DAS DIMENSÕESDO DATA WAREHOUSE
A MATRIZ DATA MART X DIMENSÃO É O PRINCIPAL INSTRUMENTO PARA GARANTIR A CONFORMIDADE DAS DIMENSÕES DEFINIDAS NO DATA WAREHOUSE
CADA NOVA DIMENSÃO OU NOVO DATA MART DEVE SER ACRESCENTADO À MATRIZ, DEVENDO SER ESTABELECIDA A REFERÊNCIA CRUZADA SOBRE QUAIS DATA MART’S UTILIZAM QUAIS DIMENSÕES
ESTOQUE
CLIENTE
AVALIAÇÃO DE PRODUTO
ANÁLISE DE MERCADO
MATERIAL
ARMAZÉM
PRODUTO
CLIENTE
MÊS
DIMENSÃO
DATA MART
CHAVE ARTIFICIAL((SURROGATE KEYSURROGATE KEY))
CHAVE ARTIFICIAL GERADA AUTOMATICAMENTE PARA IDENTIFICAR UNIVOCAMENTE CADA INSTÂNCIA DE UMA DIMENSÃO
GERALMENTE CORRESPONDE A UM NÚMERO SEQUENCIAL QUE NÃO POSSUI UM SIGNIFICADO PRÓPRIO E É TRANSPARENTE PARA O USUÁRIO
VANTAGENS INDEPENDÊNCIA E ESTABILIDADE DAS DIMENSÕES EM RELAÇÃO ÀS ATUALIZAÇÕES DAS
RESPECTIVAS CHAVES NATURAIS NO AMBIENTE TRANSACIONAL MAIOR PERFORMANCE EM “JOINS” EM ALGUNS CASOS, SÃO CRIADAS PARA INTEGRAÇÃO E UNIFICAÇÃO
OLTP DATA WAREHOUSECLIENTE CARTÃO DE CRÉDITO
143.631.475-28 MARIA270.712.632-78 JOÃO240.275.126-44 MARCOS
NUM_CPF NOM_CLIENTE
CLIENTE CORRENTISTA
5078-4 MARIA6070-9 JOÃO6120-5 CARLOS
NUM_CLIENTE NOM_CLIENTE
CLIENTE
00001 MARIA
00002 JOÃO
00003 MARCOS
00004 CARLOS
NUM_CLIENTE NOM_CLIENTE
DEFINIÇÕES DE NEGÓCIO
FATOS E MEDIDASDIMENSÕES,
HIERARQUIAS E ATRIBUTOSREGRAS DE DERIVAÇÃOREGRAS DE
SUMARIZAÇÃOACESSOUSUÁRIO
FINALDISPONIBILIZAÇÃO DE DADOS
ESPECIFICAÇÃO DOSMETADADOS DE DISPONIBILIZAÇÃO
DW /DM
PROJETO DA CAMADA DE ACESSO
CORRESPONDE AO PROJETO DAS SAÍDAS QUE ESTARÃO SENDO UTILIZADAS PELOS USUÁRIOS PARA ACESSAR AS INFORMAÇÕES
0102030405060708090
100
1° Trim. 2° Trim. 3° Trim.
0102030405060708090
1° Trim. 2° Trim. 3° Trim. 4° Trim.
PRODUTO
LOJA
SEMANA
•$ VENDAS•QTDE. VENDAS•PREÇO MÉDIO
FACILIDADES FACILIDADES
FORMATO FORMATO
MUDANÇA DOS EIXOS (LINHA/COLUNA) MUDANÇA NA ORDEM DE
CLASSIFICAÇÃO DOS DADOS SUB-TOTAIS, TOTAIS GERAIS, QUEBRAS DESTAQUE DE CORES PARA
CONJUNTOS DE DADOS FORMATO DE FONTES, ESTILOS,
TAMANHO E CORES
COLUNAR REFERÊNCIA CRUZADA SUPORTANDO A
VISÃO MULTIDIMENSIONAL DOS DADOS
MUDANÇA DE TIPO DE GRÁFICO MUDANÇA DOS EIXOS MUDANÇA DE CORES MUDANÇA DE TÍTULOS
LINHA BARRA PIZZA ÁREA DISPERSÃO
RECURSOS PARA APRESENTAÇÃOREPORTSREPORTS GRÁFICOSGRÁFICOS
CAMADA DE INTEGRAÇÃO
• EXTRAÇÃO• TRANSFORMAÇÃO * CONSOLIDAÇÃO * CONVERSÃO * LIMPEZA
• POPULAÇÃO
DATAWAREHOUSE
ODS
SISTEMAS QUE SUPORTAM A OPERAÇÃO DO NEGÓCIO
INTEGRAÇÀO
CAMADA ONDE OS DADOS NÃO INTEGRADOS DO AMBIENTE TRANSACIONAL SÃO COMBINADOS E REFINADOS PARA UMA VISÃO CORPORATIVA.
INTEGRAÇÀO
VALOR DA VENDALÍQUIDO
DE COMISSÃO
VALOR DA VENDAACRESCIDO
DE IMPOSTOS
QUAL É A FONTE
MAIS ADEQUADA?QUAL DADO ÉO CORRETO?
IDENTIFICAÇÃO DAS FONTES DE DADOS
ELABORAÇÃO DO MODELO DODATA WAREHOUSE
PRODUTOS
MER
CA
DO
S
PERÍODOS DE TEMPO
VALOR
MODELO MULTIDIMENSIONALMODELO MULTIDIMENSIONAL
DATA MARTDATA MARTMODELO RELACIONALMODELO RELACIONAL
DATA WAREHOUSEDATA WAREHOUSE
DATA WAREHOUSEDATA WAREHOUSE
COD_VENDEDORREGIONAL VENDEDORCOD_REGIONAL
ORIGEM
COD_VENDEDOR: 0 1 0 0 0 1
TRANSFORMAÇÃO DOS DADOS CONSOLIDAÇÃOCONSOLIDAÇÃO
É O PROCESSO DE ANALISAR E COMBINAR DADOS DAS DIVERSAS FONTES EM UMA ESTRUTURA ÚNICA E INTEGRADA
TRANSFORMAÇÃO DOS DADOS CONVERSÃOCONVERSÃO
DATA WAREHOUSEDATA WAREHOUSE
M = MASCULINO
F = FEMININO
FONTE A
1 = MASCULINO
2 = FEMININO
FONTE B
M = MASCULINO
F = FEMININO
b = NÃO IDENTIFICADO
É O PROCESSO DE ANALISAR O CONTEÚDO DO DADO, ESPECIFICANDO COMO TRATÁ-LO PARA ESTAR DE ACORDO COM A ESTRUTURA INTEGRADA DO DATA WAREHOUSE
TRANSFORMAÇÃO DOS DADOS LIMPEZALIMPEZA
AUSÊNCIA DE DADO CAMPOS COM VÁRIOS PROPÓSITOS DADOS CRIPTOGRAFADOS DADOS CONTRADITÓRIOS USO INADEQUADO DAS LINHAS DE ENDEREÇO VIOLAÇÃO DE REGRAS DE NEGÓCIO REUTILIZAÇÃO DE CHAVE PRIMÁRIA IDENTIFICADORES SEM UNICIDADE
VALORES DUMMY CEP: 04014-012 DATA DE NASCIMENTO: 11-11-1911 SALÁRIO: R$ 99.999,99 (CLIENTE É UM EMPREGADO)
É O PROCESSO DE "CORREÇÃO" DOS DADOS "COM DEFEITO"
INTEGRAÇÀO
WAREHOUSE
INTEGRAÇÀO
WAREHOUSE
EXTENSOCOMPLEXO
DIRETOSIMPLES
AVALIAÇÃO DACOMPLEXIDADE DO PROCESSO
ESPECIFICAÇÃO DOS METADADOS DE INTEGRAÇÃO
DADOSOPERACIONAIS
DEFINIÇÕES DE ARQUIVOSMAPAS “DE-PARA”
DDL (DATA DEFINITION LANGUAGE)
REGRAS DE TRANSFORMAÇÃOESPECIFICAÇÃO DO PROCESSO
SCRIPTS DE PRODUÇÃO
DW
INTE
GRA
ÇÃO
DE
DAD
OS
CATEGORIAS DE METADADOSMETADADOS DE INTEGRAÇÃO
METADADOS DE DISPONIBILIZAÇÃO
1. METADADOS DOS DADOS FONTE 5. METADADOS DE EXTRAÇÃO PARA DM2. METADADOS DE EXTRAÇÃO PARA DW
4. METADADOS DO CONTEÚDO DO DW3. METADADOS DE TRANSFORMAÇÃO
6. METADADOS DO MODELO MULTIDIMENSIONAL7. METADADOS DAS SAÍDAS
DATAWAREHOUSE
ODSDATAMART
DATAMART
DATAMART
APLICAÇÕES
1
2
3
4 5
6 7
INTEGRAÇÃO
METADADOS
INTERNET E INTRANET
TREINAMENTO
AGORA VOCÊS ESTÃO HABILITADOS PARA UTILIZAR O AMBIENTE DE WAREHOUSING, RECONHECENDO O DADO MAIS ADEQUADO PARA UM DETERMINADO TIPO DE ANÁLISE E A FORMA MAIS ADEQUADA DE REALIZAR A ANÁLISE COM AS FERRAMENTAS EXISTENTES.
UM PROGRAMA DE TREINAMENTO EM DATA WAREHOUSINGDEVE COMPREENDER: INTRODUÇÃO DOS CONCEITOS DE DATA WAREHOUSING INFORMAÇÕES SOBRE OS PRINCIPAIS DADOS E COMO ELES SÃO
ACESSADOS PELO USUÁRIO ORIENTAÇÕES SOBRE A UTILIZAÇÃO DAS FERRAMENTAS,
NAVEGAÇÃO, EXTRAÇÃO, GERAÇÃO DE QUERY ETC INFORMAÇÕES SOBRE OS TIPOS DE ANÁLISES QUE PODEM SER
REALIZADAS
IMPLANTAÇÃO
A IMPLANTAÇÃO É O PROCESSO DE DISPONIBILIZAÇÃO DO WAREHOUSE PARA OS VÁRIOS TIPOS DE USUÁRIO, O QUAL DEVE ESTAR TOTALMENTE TESTADO E COM SUPORTE PARA USO, GARANTINDO A SUA EFETIVIDADE AO NEGÓCIO
EXPLORADOR MINERADOR
EXECUTIVO
OPERADOR
GERENTE
WAREHOUSE
PERSPECTIVA ADMINISTRAÇÃOOBJETIVO
MANTER O WAREHOUSE OTIMIZADO, ABSORVENDO AS CONTÍNUAS CONSOLIDAÇÕES, CONVERSÕES E POPULAÇÃO, ESTIMULADAS PELO PROCESSO DE DESENVOLVIMENTO ITERATIVO
GERENCIAMENTO DA SEGURANÇA DE ACESSO
GERENCIAMENTO DA INTEGRAÇÃO DOS DADOS
GERENCIAMENTO DA UTILIZAÇÃO DO SISTEMA
GERENCIAMENTO DE MUDANÇAS
GERENCIAMENTO DA INFRA-ESTRUTURA TECNOLÓGICA
GERENCIAMENTO DOS METADADOS
GERENCIAMENTO DA INTEGRAÇÃO DOS DADOS
PRODUÇÃO
TRATARINTEGRAÇÃO
DE DADOS
PERSPECTIVA DESENVOLVI-
MENTO
GERENCIA-MENTO
DE MUDANÇAS
ANALISAR A QUALIDADE DA INFOR-
MAÇÃO
PLANEJARINTEGRAÇÃO
DE DADOS
Informação para liberação da geração dos Data Marts
Necessidade de recuperação
Necessidade de mudança
Resultado da execução da rotina
Integração realizada
Discrepâncias identificadas
Resultado da execução da rotina
Problema e/ou oportunidade de melhoriaCritérios de auditoria / resultados previstos
1.3
Necessidade de revisão do plano
Necessidadede mudança
1.1
1.2
DW/ODS/DM
GERENCIA-MENTO
DA UTILIZAÇÃO DO SISTEMA
PLANO DE GERENCIAMENTO DA INTEGRAÇÃO
DW/ODS/DM
METADADOS
Necessidadede correçãona origem
Rotina executada
USUÁRIO
Problema e/ou oportunidade de melhoria
Implantação DW/ODS/DM (Plano de execução da rotina)
PROCEDIMENTOS DE COMUNICAÇÃO COM
O USUÁRIO
GERENCIAMENTO DA SEGURANÇA DE ACESSO
USUÁRIO
GERENCIA-MENTO DA
INFRA-ESTRUT.TECNOLÓGICA
PERSPECTIVA DESENVOLVI-
MENTO
PLANEJAR ROTINA DE
SEGURANÇA
2.1
GERENCIA-MENTO
DA UTILIZAÇÃO DO SISTEMA
PROGRAMA PERMANENTE DE EDUCAÇÃO COM FOCO
EM SEGURANÇA
PERSPECTIVA DESENVOLVI-
MENTO
ADMINISTRAR SISTEMA DE SEGURANÇA
2.2
USUÁRIO
PERFIL USUÁRIO X ACESSO
MODELO DE SEGURANÇA
Necessidade de alteração / inclusão de perfil de usuários
Perfis do usuário
Implantação de DW/ODS/DM
Treinamento / reciclagem de usuários realizado
Necessidade de alteração no acesso
Programa permanente de educação com foco em segurança
Implantação de DW/ODS/DM
Necessidade de alteração no acesso
GERENCIAMENTO DA UTILIZAÇÃO DO SISTEMA
ACOMPANHAR UTILIZAÇÃO
DO AMBIENTE DE DATA
WAREHOUSING
USUÁRIO
APOIAR O USUÁRIO
USUÁRIO
PLANEJARUTILIZAÇÃO
DO AMBIENTE DE DATA
WAREHOUSING
Solicitação de suporte
Necessidade de manutenção
3.3
3.1
3.2
GERENCIA-MENTO DA
SEGURANÇA DE ACESSO
DW/ODS/DM
METADADOS
GERENCIA-MENTO DE MUDANÇAS
PERSPECTIVA DESENVOLVI-
MENTOCONTROLE DE OCORRÊNCIAS
PROCEDIMENTOS DE COMUNICAÇÃO COM
O USUÁRIO
Benefícios alcançados
PLANO DE ACOMPANHA-MENTO / AVALIAÇÃO DA UTILIZAÇÃO DO AMBIENTE
Necessidade de reorganização física dos dados
Necessidade de alteração de acesso
Necessidade de treinamento /
reciclagem
Necessidade de alteração na Infra-estrutura Tecnológica
Componente / versão de HW / SW incorporado
Implantação DW/ODS/DM
GERENCIA-MENTO DA
INTEGRAÇÃO DE DADOS
Problema e/ou oportunidade de melhoria
GERENCIA-MENTO DA
INFRA-ESTRUT. TECNOLÓGICA
GERENCIAMENTO DE MUDANÇAS
USUÁRIO
ELABORAR PROPOSTA
DE MUDANÇA
GERENCIA-MENTO DA
INTEGRAÇÃO DE DADOS
PERSPECTIVA DESENVOLVI-
MENTO
ESPECIFICAR MANUTENÇÃO
4.24.1
GERENCIA-MENTO
DA UTILIZAÇÃO DO SISTEMA
DW/ODS/DM
SISTEMAS ORIGEM
PROCEDIMENTOS DE COMUNICAÇÃO COM
O USUÁRIO
4.3
DESCREVER MUDANÇA NA
DEFINIÇÃO DA
INFORMAÇÃO
GERENCIA-MENTO
DE METADADOS
METADADOS
Informação sobre mudanças na política da empresa
Nova necessidade
Proposta de mudança / análise custo x benefício
Proposta de mudança validada
Informações de manutenção de sistemas
Necessidade manutenção validada
Necessidade de manutenção
Necessidade de reorganização
física dos dados
Necessidadede mudança
Necessidade de reorganização física dos dados validada
Necessidade de mudança na qualidade da informação validada
Modelos atualizados
Solicitação de alteração
Modelos atualizados
Especificação da necessidade de
mudança
Manutenção liberada
Especificação revisada
Parecer sobre a
especificação
Especificação da necessidade de manutenção
GERENCIAMENTO DAINFRA-ESTRUTURA TECNOLÓGICA
FORNECEDOR HW / SW
5.1
MONITORAR INFRA-
ESTRUTURATECNOLÓGICA
Novo componente / versão de HW / SW
Necessidade de ferramentas de administração de metadados
INFRA-ESTRUTURA TECNOLÓGICA
5.4
TRATAR PROCEDIMENTOS
DE COMUNICAÇÃO
PLANO DE TREINAMENTO
PROCEDIMENTOS DE COMUNICAÇÃO COM
O USUÁRIO
PERSPECTIVA TECNOLOGIA
USUÁRIO
GERENCIA-MENTO DE
METADADOS
Solicitação de Incorporação de HW / SW
5.2
TRATAR INFRA-
ESTRUTURA TECNOLÓGICA
GERENCIA-MENTO DA
UTILIZAÇÃO DO SISTEMA
Procedimentosde comunicação
ADMINISTRAR TREINAMENTO
USUÁRIO
Novo componente / versão de HW / SW disponível
Componente / versão de HW / SW incorporado
Componente / versão HW / SW
incorporado
Componente / versão HW / SW incorporado
Proposta de alteração na Infra-estrutura Tecnológica / análise custo x benefício
Proposta de alteração validada
Necessidade de alteração na Infra-estrutura Tecnológica
Informação de alteração do quadro de funcionários
Necessidade treinamento / reciclagem
Agenda de treinamento /
reciclagem
Avaliação sobre
treinamento / reciclagem
5.3
PERSPECTIVA DESENVOLVI-
MENTO
Implantação de DW/ODS/DM
Informação versão / ferramenta para administração dos metadados
PROCEDIMENTOS / PADRÕES DE
UTILIZAÇÃO DE HW/SW
GERENCIA-MENTO DA
SEGURANÇA DE ACESSO
Treinamento / reciclagem de usuários realizados
Treinamento / reciclagem
realizado
PERSPECTIVA DESENVOLVI-
MENTO
Implantação de DW/ODS/DM
GERENCIAMENTO DOS METADADOS
USUÁRIO
MANTER PROCEDIMENTOS
USUÁRIO
TRATAR MODELOS
DW/ODS/DMAPLICAR
PROCEDIMENTOS
Necessidade de ferramentas de administração de metadados
6.46.2
6.1
GERENCIA-MENTO
DE MUDANÇAS METADADOS
Informação versão / ferramenta para administração dos metadados
GERENCIA-MENTO DA
INFRA-ESTRUT. TECNOLÓGICA
Informações de
procedimentos de metadados
APOIAR EQUIPE DE
DESENVOLVI-MENTO / USUÁRIO
6.3
PERSPECTIVA DESENVOLVI-
MENTOARQUITETURA DA
INFORMAÇÃO
Especificação da necessidade de
mudança
Necessidade de revisão
de procedimentos
Necessidade de revisão de procedimentos Solicitação de suporte
Características dos metadados
Características dos metadados /
referência cruzada
Informaçãosobre os modelos
Informação sobre os modelos
DW/ODS/DM implantado
Notificação do início de
projeto
PROCEDIMENTOSDE BACKUP
PROCEDIMENTOS DE ADMINISTRAÇÃO DE
METADADOS
PADRÃO DE NOMENCLATURA PARA
OBJETOS DE DW
CUIDADO !!!
...AQUISIÇÃODE
FERRAMENTAS
AMBIENTE C/SSERVIDOR MULTIDIMENSIONALOLAPDATA MINING
PLAYGROUND DEALTA TECNOLOGIA
ATOLEIRO
GRAUDE
ESTRUTURA
COLMÉIAMETODOLOGIASCONTROLE DE QUALIDADE...
GERENCIAMENTODA INFORMAÇÃO
INFORMAÇÃO CERTA,NA HORA CERTA,
NO LOCAL CERTO,NO FORMATO CERTO,
NAS MÃOS DA PESSOA CERTA