Framework OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

Tamanho: px

Começar a partir da página:

Download "Framework OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS"

Guilherme Ferretti Araújo
5 Há anos
Visualizações:

1 LOGO DO SHOPPING

2 Framework OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

3 OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

Informações gerais Problema Apresentado Base externa que apresenta os

telefone e e-mail Informações da base Nome CPF (campo a ser tratado)

4 Informações gerais Problema Apresentado Base externa que apresenta os atributos de endereço, CPF, telefone e sem padronização, normatização e consistência. Objetivo Analisar, tratar e padronizar os atributos de endereço, CPF, telefone e Informações da base Nome CPF (campo a ser tratado) (campo a ser tratado) Endereço (campo a ser tratado) (campo a ser tratado) Telefone (campo a ser tratado) Celular (campo a ser tratado)

Fotografia da base 676.464 Registros Recebidos Cenário pós de-duplicação 91% (619.

5 Fotografia da base Registros Recebidos Cenário pós de-duplicação 91% ( ) registros únicos Registros enriquecidos (49%) Atributos Adicionados HOUSE_HOLD_QTD HOUSE_HOLD_CLASSE FAIXA_RENDA CLASSE CBO GRAU_INSTRUCAO CNPJ_TRABALHA CNPJ_SOCIO

6 OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

7 Endereço 70,0% 60,0% Sem Com Endereço Endereço 50,0% 40,0% 30,0% 20,0% 10,0% 65% 0,0% Endereço Confirmado Correção de endereço sugerida 34% Endereço Inválido Endereços inválidos enriquecidos Endereço Recuperado

8 Cenário comparativo Endereço 70,0% 60,0% Sem 50,0% 40,0% 30,0% 20,0% 10,0% 0,0% 82% PRÉ TRATAMENTO PÓS TRATAMENTO Crescimento De 25% Endereço STATUS DESCRIÇÃO QTD % 0 Inválidos % 1 Endereço confirmado % 2 Endereço confirmado, logradouro corrigido 460 0% 3 Endereço confirmado, localidade corrigida, cidade de CEP único 84 0% 4 Endereço padronizado, localidade corrigida, cidade de CEP único 149 0% 5 Endereço e localidade corrigidos 246 0% 6 Endereço recuperado e localidade corrigida 5 0% 7 Endereço confirmado, logradouro recuperado, localidade corrigida, cidade de CEP único 2 0% 8 Endereço recuperado, logradouro recuperado, localidade corrigida, cidade de CEP único 1 0% 9 Endereço recuperado, logradouro recuperado utilizando CEP como entrada e métodos de contagens de toquens para logradouro % 10 Endereço sugerido, logradouro recuperado utilizando CEP como entrada e métodos de contagens de toquens para logradouro % 11 Endereço confirmado, logradouro recuperado, complemento e CEP corrigido 174 0% 12 Endereço recuperado, logradouro recuperado, complemento e CEP corrigido 31 0% 13 Endereço confirmado, logradouro confirmado, CEP corrigido % 14 Endereço recuperado, logradouro corrigido, CEP corrigido 460 0% 15 Endereço sugerido, logradouro corrigido, CEP corrigido 449 0% 16 Endereço recuperado, logradouro corrigido, CEP corrigido utilizando busca em profundidade nível I 81 0% 17 Endereço sugerido, logradouro corrigido, CEP corrigido utilizando busca em profundidade nível I 230 0% 18 Endereço recuperado, logradouro corrigido, CEP corrigido utilizando busca em profundidade nível II 243 0% 19 Endereço sugerido, logradouro corrigido, CEP corrigido utilizando busca em profundidade nível II 27 0% 20 Endereço confirmado, logradouro recuperado, localidade corrigida, cidade de CEP único 23 0% 21 Endereço padronizado, logradouro padronizado, cidade de CEP único 12 0% 22 Endereço confirmado, logradouro confirmado, cidade de CEP único 80 0% 23 Endereço sugerido, logradouro sugerido utilizando busca em profundidade nível IV e métodos de contagens de toquens para logradouro 200 0% 24 Endereço sugerido, logradouro sugerido utilizando busca em profundidade nível V e métodos de contagens de toquens para logradouro 12 0% 25 Endereço padronizado, localidade padronizada, CEP corrigido, cidade de CEP único % 26 Endereço sugerido, logradouro sugerido, somente CEP como parâmeto de entrada 206 0% 27 Endereço inválidos enriquecidos %

9 100,0% 90,0% Sem Com 80,0% 70,0% 60,0% 50,0% 40,0% 30,0% 20,0% 10,0% 56% 44% 0,0% Domínios Válidos 0 Domínios Corrigidos Domínios inválidos Registros inválidos enriquecidos 0 Domínios válidos(dmex-ping)

10 Cenário comparativo 70,0% 60,0% Sem 50,0% 40,0% Crescimento De 12% 0% Endereço 120% 100% 80% 60% 40% 20% ,0% 20,0% 10,0% 0,0% 82% PRÉ TRATAMENTO PÓS TRATAMENTO STATUS DESCRIÇÃO QTD 0 Domínios Inválidos Domínios Válidos Registros enriquecidos Domínios Válidos(DMEX-PING) 0 4 Registros Corrigidos 0

11 Telefone 50,0% 45,0% Sem Com Telefone Telefone 40,0% 35,0% 30,0% 25,0% 20,0% 15,0% 10,0% 5,0% 0,0% 43% 57% Telefones Válidos Telefones Corrigidos Telefones Inválidos Registros inválidos enriquecidos Telefones válidos classificados como celular

12 Cenário comparativo Telefone 45,0% 40,0% Sem 35,0% 30,0% 25,0% Crescimento De 22% 0% Endereço 500% 400% 300% 200% 100% ,0% 15,0% 10,0% 5,0% 0,0% 82% PRÉ TRATAMENTO PÓS TRATAMENTO STATUS DESCRIÇÃO QTD 0 Telefones Inválidos Telefones Válidos Telefones válidos classificados como celular Telefones recuperados Registros Enriquecidos

13 Cenário comparativo CPF 66,0% Sem Com CPF CPF 65,0% 64,0% 63,0% 62,0% Crescimento De 5% 61,0% 60,0% 59,0% 65% 58,0% 57,0% 35% PRÉ TRATAMENTO PÓS TRATAMENTO

14 OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

13% 46% 48% 11% 50% 5% 13% 87% 63% 37% 67% 33% 57% 43% 49% 51% 52% 48% 63% 37%

15 Idade X Sexo Classe Social X Sexo Classe Social Perfil Geral 60% Mulheres 40% 60% 40% Homens 6% AA 15% 31% 27% 13% 8% A B C D E 22% 25% 14% 46% 82% 46% 11% 13% 46% 48% 11% 50% 5% 13% 87% 63% 37% 67% 33% 57% 43% 49% 51% 52% 48% 63% 37% 54% 54% 54% 52% 50% 47% 53% 18% AA A B C D E

Trabalhadores por setor Agrupamento Familiar Grau de instrução

Completo 0% 1% 34% 30% 26% Superior Incompleto Ensino Médio

Fundamental Completo Ensino Fundamental Incompleto 3% 5% AA 7% A B

16 Trabalhadores por setor Agrupamento Familiar Grau de instrução Classe Social Familiar Perfil Geral Doutorado Mestrado Superior Completo 0% 1% 34% 30% 26% Superior Incompleto Ensino Médio Completo 9% 43% 14% 17% Ensino Médio Incompleto 40% 60% 5% Ensino Fundamental Completo Ensino Fundamental Incompleto 3% 5% AA 7% A B C D E 6% 18% 82% Indústria Comércio / Serviço Empreendedor 7% 84% 9% 18% 23% 28% 31%

em Adm 5% 40% 60% 5% Profissionais do Ensino 5% 22% J I H G F E D C B A Assistente Administrativo Auxiliar de Escritório, Em Geral Vendedor de Comercio Varejista

17 Grupo Ocupacional Ocupação específica Perfil Geral Escriturários Vendedores e P. Serv do comércio 10% Trabalhadores de Atendimento ao Público 8% Trabalhadores dos Serviços 8% Gerentes 5% Prof das Ciências Sociais e Humanas Técnicos De Nível Médio em Adm 5% 40% 60% 5% Profissionais do Ensino 5% 22% J I H G F E D C B A Assistente Administrativo Auxiliar de Escritório, Em Geral Vendedor de Comercio Varejista Recepcionista, Em Geral Operador De Caixa Supervisor Administrativo Professor De nível Médio No Ensino Fundamental Administrador Analista De Desenvolvimento De Sistemas Operador De Telemarketing Ativo E Receptivo 6% 7% 8% 2% 2% 2% 2% 1% 1% 1% A B C D E F G H I J

18 OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

19 Niterói Belford Roxo Nova Iguaçu São Joao De Meriti Duque De Caxias Rio De Janeiro Top 5 Cidades Top 15 Bairros Onde? 82% Taquara Higienopolis 2% 2% Engenho De Dentro 2% Vila Da Penha 2% Del Castilho 2% Bonsucesso 2% Penha 2% Pavuna 2% 1% 1% 2% 3% 3% Cachambi Tijuca 2% 3% Ramos 3% Meier 3% 82% Inhauma Olaria 3% 3% 18% Iraja 3%

20 OVERVIEW DATA QUALITY QUEM? ONDE? PROSPECTS

21 18 a 25 Anos 36 a 45 Anos 60+ a 55 Anos Prospects Total de Registros % 14% 18% Total Telefone % 82% 29% B 65% 21% C 18% 59% 23% D

Documentos relacionados

FRAMEWORK TRATAMENTO! QUEM? ONDE?

ANÁLISE FRAMEWORK TRATAMENTO! QUEM? ONDE? 1 - Tratamento TRATAMENTO! QUEM? ONDE? - Tratamento Visão Geral Problema Apresentado Base externa que apresenta os atributos de endereço, CPF, telefone e e-mail