Bacharel em Sistemas de Informação Pós-Graduado em Gerenciamento de Projetos. MCP - Microsoft Certified Professional em SQL SERVER e SHAREPOINT

Transcrição

1

2 Bacharel em Sistemas de Informação Pós-Graduado em Gerenciamento de Projetos. MCP - Microsoft Certified Professional em SQL SERVER e SHAREPOINT

3 Autor do livro Integração de Dados na Prática - Técnicas de ETL para Business Intelligence com Microsoft SSIS 2012 Blogueiro no

4 Microsoft Gold Partner. Consultoria, Implantação, Desenvolvimento, Suporte Técnico e Treinamento em soluções Microsoft com foco em: Portal Colaborativo (MS SharePoint) ECM - Gerenciamento de Conteúdo Corporativo GED - Gestão Eletrônica de Documentos EPM Gestão Corporativa de Projetos Desenvolvimento de aplicativos BI Business Inteligence

5 Registro de Imóveis de Florianópolis

6 O ETL ESTÁ EM UM CONTEXTO MAIOR... GESTÃO DE DADOS

7 Em um futuro próximo, concorrentes do mesmo nicho, serão muito semelhantes em tecnologia, metodologia, ERP... O DIFERENCIAL SERÁ O CAPITAL INTELECTUAL... OS ATIVOS INTANGÍVEIS!

8 Marca Reputação Conhecimento de negócio Qualificação da equipe Dados corporativos de qualidade...

9 "Uma campanha de imunização tem um custo: seringas, a vacina, pessoal, transporte, divulgação. Porém, o valor da população imunizada é intangível".

10 PORTAIS CORPORATIVOS, GED, INTRANETS, EXTRANETS, SISTEMAS DE BUSINESS INTELLIGENCE... SÃO FERRAMENTAS DE GESTÃO DE PARTE DOS ATIVOS INTANGÍVEIS

11 A GESTÃO DE DADOS PODE SER USADA EM DIVERSOS CONTEXTOS...

12 Em 2004 a SESINT foi vendida por U$ 775 MILHOES de dólares para a LEXIS NEXIS Depois do ataque as torres gêmeas, Hank Asher dono da SEISINT analisou a situação Análise SEISINT Acessou o Banco de dados SESINT com mais de 10 bilhões de informações sobre residentes, imigrantes, datas de nascimento,atividade profissional, obitos... Posteriormente verificaram que cinco dos sequestradores identificados estavam na lista original Utilizando técnicas de Data Mining, produziu uma lista de mais de 1200 suspeitos A sede da empresa na Flórida se tornou um QG temporário da CIA e do FBI

13 Dado no limite da segurança e da privacidade

14 Dado como elemento preditivo e alavancador de negócios

15 Cases como este, envolvem processos de integração de dados... Também chamado de ETL

16 EXTRACT TRANSFORM LOAD EXTRAÇÃO TRANSFORMAÇÃO e CARGA

17 Origem Transformações Carga

18 Integração de Sistemas Migração de Sistemas

19 Em SP é possível solicitar ao PROCON bloqueio de ligações de CALLCENTER PROCON disponibiliza um WebServices para consulta Solução: Integração para consultar no WebService os números que serão discados e se necessário invalidá-los

20 Business Intelligence ou B.I.

21 Business Intelligence é um sistema de suporte a tomada de decisão. Visão Estratégia Objetivos Fatores Críticos Sucesso Definição de KPIs Iniciativas e Ações Chave DECISÃO!

22 SSIS = SQL SERVER INTEGRATION SERVICES Criado em 2005 e disponibilizado junto Microsoft SQL SERVER Interface visual para a integração de dados, estruturada no Visual Studio Recursos avançados de Debug e visualização de dados no pipeline Integração total com as ferramentas Microsoft e desempenho diferenciado

23 Conceito de Solutions Integrações segmentadas em pacotes DTSX Pacotes DTSX utilizam componentes

24

25 Determinar Origem Transformações Destino

26 Arquivo com colunas delimitadas por virgulas e valores separados por aspas duplas Nome " "Cidade "Cep "Endereco "DtNascto"

27 Clientes com do hotmail devem ser importados com Status diferenciado devido a problemas com o AntiSpam

28 CREATE DATABASE ProjetoETL go USE ProjetoETL go CREATE TABLE Clientes ( id int identity(1,1) primary key, Nome varchar(255) default NULL, nunivel varchar(50) default NULL, varchar(255) default NULL, Cidade varchar(50) default NULL, Cep varchar(255) default NULL, Endereco varchar(255) default NULL, FlStatus varchar(1) default NULL, DtNascto Datetime default NULL, ) go

29

30

31

32 Clientes com do hotmail devem ter status diferenciado... Adicionar um derived column com a seguinte expressão (FINDSTRING( ,"hotmail",1)!= 0)? "I" : "A"

33 Componente DataFlow Origem Transformações Destino

34 Finalmente realizamos a carga com um OLE DB Destination, direcionando ao Database ProjetoETL tabela clientes.

35

36 Arquivo com colunas delimitadas por virgulas e valores separados por aspas duplas deproduto vlrprecocusto dedepartamento acervo

37 Utilizar o campo ACERVO do arquivo txt para dividir o fluxo de dados Realizar esta tarefa usando o componente Conditional Split

38 Use ProjetoETL GO create table ProdutosAcervo( id int identity(1,1), deproduto varchar(100) ) go create table ProdutosLancamento( id int identity(1,1), deproduto varchar(100) ) go

39

40