Oracle Tuning. Este PDF está disponível em Ricardo Portilho Proni Nerv Informática

Transcrição

1 Oracle Tuning Este PDF está disponível em Ricardo Portilho Proni Nerv Informática

2 Quem sou eu Ricardo Portilho Proni - Consultor e Instrutor da Nerv Informática - Experiência em Bancos de Dados desde Primeiro Oracle ACE do Brasil (2009). São 683 Oracle ACEs no Mundo, 23 no Brasil Certificações, em 5 Bancos de Dados e 3 Sistemas Operacionais diferentes. - ex-membro do Conselho GPO (Grupo de Profissionais Oracle). - Membro do Conselho GUOB (Grupo de Usuários Oracle do Brasil). - Palestrante ENPO (Encontro Nacional de Profissionais Oracle). - Palestrante GUOB. - Palestrante Oracle Open World LAD. - Palestrante na Uninove, UnG, FIAP. - Articulista da Revista SQL Magazine. Nerv Blog Redes Sociais

3 Arquitetura Oracle 3

4 Arquitetura Oracle 4

5 Top Ten Mistakes 1 - Bad connection management 2 - Bad use of cursors and the shared pool 3 - Bad SQL 4 - Use of nonstandard initialization parameters 5 - Getting database I/O wrong 6 - Online redo log setup problems 7 - Serialization of data blocks in the buffer cache due to lack of free lists, free list groups, transaction slots (INITRANS), or shortage of rollback segments. 8 - Long full table scans 9 - High amounts of recursive (SYS) SQL 10 - Deployment and migration errors Fonte: Oracle Database Performance Tuning Guide 5 5

6 Oracle Tuning: Mistificação 6

7 Métodos incorretos funcionam mas precisam de... Experiência Intuição Imprecisão Tempo Sorte Recursos 7

8 TOP Tuning Verificar maior consumidor de CPU; Verificar o SQL agressor; Reclamar do SQL para o Desenvolvedor; Se o Desenvolvedor não fizer nada, adicionar índices e esperar que o desempenho melhore; Se não melhorar, matar a sessão. Se o desempenho não for satisfatório, voltar ao início. 8

9 TOP Tuning 9

10 Checklist Tuning Verificar Sistema Operacional (top / vmstat / iostat); Verificar SGA; Verificar PGA; Verificar parâmetros do Oracle; Verificar coleta de estatísticas; Verificar fragmentação de tabelas e índice; Verificar LOCKs; Verificar SQLs que consomem mais recursos; Construir uma teoria baseada nos dados observados; Alterar algo e esperar que o desempenho melhore; Se o cliente não gostar da teoria, apenas cite e altere alguns parâmetros relacionados; Se o desempenho não melhorar, voltar ao início. 10

11 Checklist Tuning Seu filho leva 2 horas para comprar leite na padaria, de carro. Como melhorar este tempo? É necessário um carro mais rápido? São necessários dois carros? É necessário tornar a estrada mais larga? É melhor só comprar 1 litro de leite de cada vez? Deve-se utilizar uma padaria que só tenha 1 tipo de leite? A porta da garagem deve estar sempre aberta? 11

12 Manager Tuning Migrar Banco para outro servidor; Executar Upgrade de Banco de Dados; Executar Upgrade da Aplicação; Executar Upgrade do Middleware; Juntar Aplicação e Banco de Dados; Separar Aplicação e Banco de Dados; Voltar Backups; Se o desempenho não melhorar, tentar outra coisa, até melhorar. 12

13 Manager Tuning 13

14 Hit Ratios Tuning Verificar Buffer Cache Hit Ratio; Verificar Data Dictionary Hit Ratio; Verificar SQL Cache Hit Ratio; Verificar Library Cache Hit Ratio; Construir uma teoria baseada nos dados observados; Alterar algo (geralmente aumentar) e esperar que o desempenho melhore; Se o desempenho não melhorar, voltar ao início. 14

15 Hit Ratios Tuning 15

16 KIWI Tuning KIWI = Kill It With Iron (ou resolva com força bruta ); Adicionar Memória RAM; Adicionar CPUs; Melhorar o I/O; Migrar para um Servidor maior; Migrar para RAC; Adicionar Nós no RAC; Pagar a conta, e esperar que o desempenho melhore. Se o desempenho não melhorar, voltar ao início. 16

17 KIWI Tuning 17

18 O que está errado? Paradigma 18

19 Que resultado você quer? 19

20 Tempo 20

21 Tempo Computacional R=S+W OU Response Time = Service Time + Wait Time 21

22 Instrumentação: Mainframe 22

23 Instrumentação: Solaris 23

24 OWI - Oracle Wait Interface (ou Oracle Event Interface) 24

25 Evolução da OWI Versão : 104 Wait Events Versão 8: 140 Wait Events Versão 8i: 220 Wait Events Versão 9i: 400 Waits Events Versão 10gR1: >800 Wait Events Versão 11gR2: >1100 Wait Events Versão 12cR1: >1650 Wait Events 25

26 Wait Classes Administrative Application Cluster Commit Concurrency Configuration Idle Network Other Queueing Scheduler System I/O User I/O 26

27 Waits mais comuns Leitura db file scatteread read / db file sequential read / direct path read / db file parallel read free buffer / buffer busy / read by oher session latch: cache buffers chains / latch: cache buffers lru chain gc cr request / gc buffer busy / gc buffer busy acquire / gc buffer busy release Gravação control file single write / control file parallel write / control file sequential read db file single write / db file parallel write / db file async I/O submit direct path write Gravação LGRW log buffer space log file parallel write / log file single write / log file sequential read log file switch (checkpoint incomplete) / log file switch completion log file switch (archiving needed) log file sync 27 27

28 Waits mais comuns Design / Concorrência / Troubleshooting enqueue: TX enqueue: TM enqueue: HW enqueue: SQ enqueue: CF free buffer / buffer busy / read by oher session gc cr request / gc buffer busy / gc buffer busy acquire / gc buffer busy release latch: shared pool / latch: library cache latch: cache buffers chains / latch: cache buffers lru chain latch: row cache objects Compilação / Concorrência latch free / latch: library cache library cache pin / library cache lock Rede SQL*Net message from client / SQL*Net message to client SQL*Net more data from client / SQL*Net more data to client SQL*Net break/reset from client / SQL*Net break/reset to client 28 28

29 Correção de Wait db file scatteread read / db file sequential read Cache DB File Multiblock Read Count Database Writers ASM Directo I/O Hugepages Compression (OLAP Compression, OLTP Compression, InMemory) Result Cache SQL Partitioning CBO Configuration Object Statistics System Statistics I/O Active Data Guard 29 29

30 Oracle Wait Interface: Fontes de Consulta Oracle Database Reference (explicação simples, direta) Oracle Database Performance Tuning Guide (explicação melhor, orientada a causas / soluções) MOS / My Oracle Support / Metalink (várias notas sobre Wait Events específicos) Livro "Oracle Wait Interface" 30

31 Diagóstico Ordem de Observação 1o: Há camadas abaixo do Sistema Operacional? 2o: Sistema Operacional 3o: Instância / Banco de Dados 4o: Sessão 5o: SQL 31

32 Deteccão de Waits Dynamic Performance Views V$SYSTEM_EVENT Todas as Waits acumuladas da instância, desde que a instância iniciou. Colunas mais importantes: EVENT, TIME_WAITED. V$SESSION_EVENT Todas as Waits acumuladas por sessão, desde que a sessão iniciou, e se a sessão ainda está conectada. Colunas mais importantes: SID, EVENT, TIME_WAITED. V$SESSION_WAIT As Waits que estão acontecendo no exato momento em que a View é consultada. Colunas mais importantes: SID, EVENT, SECONDS_IN_WAIT

33 Deteccão de Waits O banco está lento agora V$SESSION_WAIT SELECT W.SID, W.EVENT, W.SECONDS_IN_WAIT, SQL.SQL_TEXT FROM GV$SESSION_WAIT W, GV$SESSION S, GV$PROCESS P, GV$SQLTEXT SQL WHERE W.SID = S.SID AND S.PADDR = P.ADDR AND SQL.ADDRESS = S.SQL_ADDRESS AND SQL.HASH_VALUE = S.SQL_HASH_VALUE AND W.WAIT_CLASS!= 'Idle' AND W.INST_ID = S.INST_ID AND W.INST_ID = P.INST_ID AND W.INST_ID = SQL.INST_ID ORDER BY W.SECONDS_IN_WAIT, W.SID, SQL.PIECE; 33

34 Deteccão de Waits O banco está lento agora V$SESSION_EVENT SELECT EVENT, SUM(TIME_WAITED) FROM V$SESSION_EVENT WHERE WAIT_CLASS!= 'Idle' AND SID IN (SELECT SID FROM V$SESSION WHERE USERNAME IS NOT NULL) GROUP BY EVENT ORDER BY 2; SELECT EVENT, SUM(TIME_WAITED) FROM V$SESSION_EVENT WHERE WAIT_CLASS!= 'Idle' AND SID IN (SELECT SID FROM V$SESSION WHERE USERNAME IS NULL) GROUP BY EVENT ORDER BY 2; 34

35 Deteccão de Waits O banco está lento agora V$SYSTEM_EVENT CREATE TABLE PRE_SYSTEM_EVENT AS SELECT * FROM V$SYSTEM_EVENT; EXECUTE DBMS_LOCK.SLEEP(60); CREATE TABLE POS_SYSTEM_EVENT AS SELECT * FROM V$SYSTEM_EVENT; SELECT A.EVENT, A.TIME_WAITED, B.TIME_WAITED, (B.TIME_WAITEDA.TIME_WAITED) DIFF FROM PRE_SYSTEM_EVENT A, POS_SYSTEM_EVENT B WHERE A.EVENT = B.EVENT AND A.TIME_WAITED IS NOT NULL AND ((B.TIME_WAITED-A.TIME_WAITED) > 0) AND A.WAIT_CLASS!= 'Idle' ORDER BY DIFF; DROP TABLE PRE_SYSTEM_EVENT; DROP TABLE POS_SYSTEM_EVENT; 35

36 Deteccão de Waits O banco está lento agora $ /home/oracle/oratop.rdbms_12.1_linux_x64 -f -i2 / AS SYSDBA 36

37 Deteccão de Waits Este SQL / Sessão está lento Extended SQL Trace 37

38 Deteccão de Waits Este SQL / Sessão está lento Extended SQL Trace - tkprof 38

39 Deteccão de Waits Este SQL está lento SQLT (MOS ) oratop (MOS )

40 Deteccão de Waits O banco estava lento ontem Relatório Statspack / AWR 40 40

41 Resumo: Método de Tuning O Banco de Dados está lento agora: Encontrar indícios do gargalo na V$SYSTEM_EVENT. Encontrar indícios do gargalo na V$SESSION_WAIT. Encontrar o(s) SID(s) ofensor na V$SESSION_WAIT. Encontrar o maior Wait Event deste(s) SID(s) na V$SESSION_EVENT. Corrigir o maior Wait Event possível. Se o tempo esta satisfatório, finalizar o processo. O Banco de Dados estava lento ontem: Encontrar indícios do gargalo na V$SYSTEM_EVENT. Encontrar o maior Wait Event via Statspack / AWR. Corrigir o maior Wait Event possível. Se o tempo esta satisfatório, finalizar o processo. Este SQL está lento: Executar o comando SQL com Extended SQL Trace. Encontrar indícios do gargalo durante a execução do SQL Trace. Encontrar o maior Wait Event via tkprof. Corrigir o maior Wait Event possível. Se o tempo esta satisfatório, finalizar o processo. 41

42 Resumo de minha abordagem Oracle Tuning Performance de Sistemas Computacionais só pode ser medida em TEMPO. Performance Tuning deve ser reativa. Performance Tuning deve ter ROI. Apenas os maiores gargalos devem ser solucionados. O processo deve ser Diagnostics, e depois Tuning. Alto consumo de CPU não é um problema. O usuário não executa um SQL por prazer. O desenvolvedor não deveria saber como fazer um bom SQL (COBOL?). Ferramentas Gráficas / Enterprise Manager / Wizards / Automação são bons auxiliares. Bancos com bom desempenho devem ser observados. Conheça outros RDBMSs: TI não é lugar para paixões. Não acredite em nada (separar tabelas e índices?). Teste. Se houvesse um parâmetro que sempre deixasse o Oracle mais rápido, sem nenhum efeito colateral, ele já viria habilitado. Desenvolva um método de convencimento gerencial. Por algo chamar-se Storage, não quer dizer que ele não tenha problemas. KISS (Keep It Simple, Stupid): a probabilidade de falha cresce linearmente com o aumento de complexidade. Saiba dizer Não. Saiba dizer Não sei. 42

43 Sobre a Nerv Treinamentos de Especialização Treinamento DBA Júnior Treinamento Oracle Performance Diagnostic e Tuning Treinamento Oracle Performance Tuning - SQL Treinamento Oracle Backup e Recovery Treinamento Oracle RAC 12c Treinamento Oracle Data Guard Treinamento Oracle Maximum Availability Architecture Treinamento MySQL: Administração, Backup & Recovery, Tuning e Replicação Workshop Oracle AWR Workshop Zero Downtime Migration Workshop MySQL para DBAs Oracle Workshop de Extensão Workshop Mercado de Trabalho para DBAs Consultoria: Administração + Monitoração + Suporte a Equipe Nós monitoramos, administramos o ambiente, e auxiliamos a Equipe do Cliente. Consultoria: Monitoração + Suporte a Equipe Nós monitoramos e auxiliamos a Equipe do Cliente que administra o ambiente. Consultoria: Suporte a Equipe Nós auxiliamos a Equipe do Cliente, de DBAs e/ou Desenvolvedores.

44 Perguntas? Este PDF está disponível em Ricardo Portilho Proni Nerv Informática