Processamento de INDUSTRIA 4.0. Big Data. Aula #7 - Diversão de Sábado com SQL EDUARDO CUNHA DE ALMEIDA

Transcrição

1 INDUSTRIA 4.0 Processamento de Big Data Aula #7 - Diversão de Sábado com SQL EDUARDO CUNHA DE ALMEIDA

2 Agenda - SQL - SQL - e mais SQL - Exercícios UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL 4.0 2

3 autor autor_livro livro nome_a gen ro JK. Rowling F nome_a isbn JK. Rowling 1234 isbn titulo nome_e 1234 Harry Potter 1 Pottermore compra id_cesta qtd preco isbn H. Melville M H. Melville Moby Dick DCL F. Sabino M F. Sabino Grande Mentecapto Nordica F. Sabino Inglesa Deslumbrada Nordica F. Sabino De Ponta Cabeça Nordica F. Sabino Encontra Marcado Nordica cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim editora nome_e Pottermore DCL Nordica url cesta nome_c id_cesta dt_compra André /10/17 Cido /10/17 Siloé /10/ Juliana Av. Kennedy Juliana /10/17 Rosana Rua Itupava Rosana /10/17 3

4 autor autor_livro livro nome_a nome_a isbn isbn titulo nome_e id_cesta qtd preco isbn JK. Rowling JK. Rowling Harry Potter 1 Pottermore H. Melville H. Melville Moby Dick DCL F. Sabino F. Sabino Grande Mentecapto Nordica F. Sabino 2223 F. Sabino 2224 Quantos clientes por CEP? 2223 Inglesa Deslumbrada Nordica 2224 De Ponta Cabeçacep Nordica quantidade F. Sabino Encontra Marcado Nordica cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim editora nome_e Pottermore DCL Nordica cesta nome_c id_cesta dt_compra André /10/17 Cido /10/17 Siloé /10/ Juliana Av. Kennedy Juliana /10/17 Rosana Rua Itupava Rosana /10/17 4

5 Quantos clientes por CEP? cep quantidade cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava Exemplo FILE *F; F = fopen( /arquivo ); BTree *arv = achar tabela em F; hashtable *ht; int index; for t in arv: index = hashcode(t->cep); if(!ht[index]) ht.set(t->cep, 1); else ht[index]->quantidade ++;

6 Structured Query Language (SQL) - Projeto SEQUEL da IBM de 1974!! Structured English Query Language - Padrão ANSI (SQL:1986,, SQL:2016), 8 a revisão - Suportada pela maioria dos SGBDs modernos (inclusive NoSQL) - Adotado pela Oracle nos anos 70 UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL 4.0 6

7 Vantagens da SQL - Declarativa: especificar somente o resultado desejado e não como computa-lo SELECT COLUNAS, FUNÇÕES FROM TABELAS WHERE CONDIÇÕES GROUP BY COLUNAS; UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL 4.0 7

8 Quantos clientes por CEP? cep quantidade cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava FILE *F; Exemplo SELECT CEP, COUNT(*) FROM hashtable *ht; CLIENTE GROUP for BY t in arv: CEP; F = fopen( /arquivo ); BTree *arv = achar tabela em F; int index = ht.get(t->cep); if(!cep) ht.set(t->cep, 1); else ht[index]->quantidade ++;

9 Quantos clientes por CEP? cep quantidade cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava FILE *F; Exemplo SELECT CEP, COUNT(*) FROM hashtable *ht; CLIENTE GROUP for BY t in arv: CEP; F = fopen( /arquivo ); BTree *arv = achar tabela em F; int index = ht.get(t->cep); if(!cep) ht.set(t->cep, 1); else ht[index]->quantidade ++;

10 Vantagens da SQL - O SGBD fica responsável pela otimização SELECT A.*, B.* for t1 in left.getnext(): buildhashtable(t1) for t2 in FROM WHERE AND A, B VALOR > A.ID=B.ID; A for t in A: emit(t) σ B for t in child.getnext(): if evalpred(t):emit(t) for t in B: emit(t) UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL

11 Cláusula SELECT Projeta as colunas desejadas SELECT * FROM CLIENTE; SELECT CLIENTE.* FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

12 Cláusula SELECT Projeta as colunas desejadas SELECT * FROM CLIENTE; SELECT CLIENTE.* FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

13 Cláusula SELECT Projeta as colunas desejadas SELECT * FROM CLIENTE; SELECT CLIENTE.* FROM CLIENTE; SELECT NOME_C, RUA FROM CLIENTE; SELECT CLIENTE.NOME_C, CLIENTE.RUA FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

14 Cláusula FROM Define as tabelas de acesso e tipos de junção SELECT * FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava cesta nome_c id_cesta dt_compra André /10/17 Cido /10/17 Siloé /10/17 Juliana /10/17 Rosana /10/17

15 Cláusula FROM Define as tabelas de acesso e tipos de junção SELECT * FROM CLIENTE; SELECT * FROM CLIENTE, CESTA WHERE CLIENTE.NOME_C = CESTA.NOME_C; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava cesta nome_c id_cesta dt_compra André /10/17 Cido /10/17 Siloé /10/17 Juliana /10/17 Rosana /10/17

16 Cláusula FROM Define as tabelas de acesso e tipos de junção SELECT * FROM CLIENTE; cliente. nome_c rua cep cesta.nome_c id_cesta dt_compr André Rua XV André /10/17 SELECT * FROM CLIENTE, CESTA WHERE CLIENTE.NOME_C = CESTA.NOME_C; Cido Av. Kennedy Cido /10/17 Siloé Av. S. Jardim Siloé /10/17 Juliana Av. Kennedy Juliana /10/17 Rosana Rua Itupava Rosana /10/17

17 Cláusula FROM Define as tabelas de acesso e tipos de junção SELECT * FROM CLIENTE; SELECT * FROM CLIENTE, CESTA WHERE CLIENTE.NOME_C = CESTA.NOME_C; cliente.nome_c dt_compra André 10/10/17 Cido 11/10/17 Siloé 20/10/17 Juliana 20/10/17 Rosana 22/10/17 SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA FROM CLIENTE, CESTA WHERE CLIENTE.NOME_C = CESTA.NOME_C;

18 Cláusula FROM Define as tabelas de acesso e tipos de junção SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA, COMPRA.ISBN FROM CLIENTE, CESTA, COMPRA WHERE CLIENTE.NOME_C = CESTA.NOME_C AND CESTA.ID_CESTA= COMPRA.ID_CESTA; cliente. cesta. compra. nome_c dt_compra isbn André 10/10/ Cido 11/10/ Siloé 20/10/ Siloé 20/10/ Siloé 20/10/ Juliana 20/10/ Juliana 20/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/

19 Cláusula WHERE Define filtros SELECT * FROM CLIENTE WHERE CEP = ; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

20 Cláusula WHERE Define filtros SELECT * FROM CLIENTE WHERE CEP = ; nome_c rua cep cliente Cido Av. Kennedy nome_c rua cep Juliana Av. Kennedy André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

21 Cláusula WHERE Define filtros e junções Operadores AND, OR, NOT, IN, BETWEEN SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA, COMPRA.ISBN FROM CLIENTE, CESTA, COMPRA WHERE CLIENTE.NOME_C = CESTA.NOME_C AND CESTA.ID_CESTA= COMPRA.ID_CESTA AND CESTA.DT_COMPRA= 20/10/17 ;

22 Cláusula WHERE Define filtros e junções Operadores AND, OR, NOT, IN, BETWEEN SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA, COMPRA.ISBN FROM CLIENTE, CESTA, COMPRA WHERE CLIENTE.NOME_C = CESTA.NOME_C AND CESTA.ID_CESTA= COMPRA.ID_CESTA AND CESTA.DT_COMPRA= 20/10/17 ; cliente. cesta. compra. nome_c dt_compra isbn André 10/10/ Cido 11/10/ Siloé 20/10/ Siloé 20/10/ Siloé 20/10/ Juliana 20/10/ Juliana 20/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/

23 Cláusula WHERE Define filtros e junções Operadores AND, OR, NOT, IN, BETWEEN SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA, COMPRA.ISBN FROM CLIENTE, CESTA, COMPRA WHERE CLIENTE.NOME_C = CESTA.NOME_C AND CESTA.ID_CESTA= COMPRA.ID_CESTA AND CESTA.DT_COMPRA= 20/10/17 ; cliente. cesta. compra. nome_c dt_compra isbn André 10/10/ Cido 11/10/ Siloé 20/10/ Siloé 20/10/ Siloé 20/10/ Juliana 20/10/ Juliana 20/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/

24 Cláusula WHERE Define filtros e junções Operadores AND, OR, NOT, IN, BETWEEN SELECT CLIENTE.NOME_C, CESTA.DT_COMPRA, COMPRA.ISBN FROM CLIENTE, CESTA, COMPRA WHERE CLIENTE.NOME_C = CESTA.NOME_C AND CESTA.ID_CESTA= COMPRA.ID_CESTA AND CESTA.DT_COMPRA BETWEEN 11/10/17 AND 20/10/17 ; cliente. cesta. compra. nome_c dt_compra isbn André 10/10/ Cido 11/10/ Siloé 20/10/ Siloé 20/10/ Siloé 20/10/ Juliana 20/10/ Juliana 20/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/ Rosana 22/10/

25 Exercícios Considere o esquema da loja de livros: 1 - Qual o nome dos clientes da loja? 2 - Qual o nome dos clientes que moram no CEP ? 3 - Qual o autor do livro Moby Dick? 4 - Qual o nome dos clientes que compraram o livro do Harry Potter? UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL

26 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT COUNT(*) FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

27 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT COUNT(*) FROM CLIENTE; cliente nome_c rua cep André Rua XV Cido Av. Kennedy Siloé Av. S. Jardim Juliana Av. Kennedy Rosana Rua Itupava

28 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT AVG(PRECO), SUM(PRECO) FROM COMPRA; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

29 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT AVG(PRECO), SUM(PRECO) FROM COMPRA; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

30 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT ISBN, AVG(PRECO), SUM(PRECO) FROM COMPRA GROUP BY ISBN; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

31 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT ISBN, AVG(PRECO), SUM(PRECO) FROM COMPRA GROUP BY ISBN; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

32 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT LIVRO.TITULO, AVG(PRECO), SUM(PRECO) FROM COMPRA, LIVRO WHERE LIVRO.ISBN=COMPRA.ISBN GROUP BY LIVRO.TITULO; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

33 Cláusula GROUP BY Define agrupamentos Aplica funções: AVG(col), SUM(col), COUNT(col), MIN(col), MAX(col) SELECT LIVRO.TITULO, AVG(PRECO), SUM(PRECO) FROM COMPRA, LIVRO WHERE LIVRO.ISBN=COMPRA.ISBN GROUP BY LIVRO.TITULO; compra id_cesta qtd preco isbn , , , , , , , , , , , , ,

34 Exercícios Considere o esquema da loja de livros: 1 - Quantos clientes agrupados por CEP? 2 - Quantas vendas agrupadas por cesta? 3 - Quantas vendas agrupadas por cliente? 4 - Quantos clientes compraram o livro do Harry Potter? UNIVERSIDADE FEDERAL DO PARANÁ PÓS ENGENHARIA INDUSTRIAL

35 INDUSTRIA 4.0 Processamento de Big Data Aula #7 - Diversão de Sábado com SQL EDUARDO CUNHA DE ALMEIDA