Monitoração Distribuída com Nagios e Gearman

Transcrição

1 Monitoração Distribuída com Nagios e Gearman

2 Como funciona? Nagios Mod Gearman - NEB Gearman Server Checagens de Hosts Checagens de Serviços Event Handlers Resultados Gearman ( * ) (Event Handlers) (Hostgroup Linux)

3 Como funciona? Nagios Mod Gearman - NEB Gearman Server Checagens de Hosts Checagens de Serviços Event Handlers Resultados Gearman ( * ) (Event Handlers) (Hostgroup Linux)

4 Realidade dos Ambientes de TI Grande complexidade na Infraestrutura Serviços críticos Necessidade de alta disponibilidade Monitoração precisa e em tempo-real sobre a saúde do ambiente

5 Problema Quanto maior a infraestrutura, mais serviços serão monitorados. Quanto mais serviços monitorados, problemas de performance e escalabilidade surgem. Necessidade de implementar algum tipo de solução de cluster. Diferentes soluções possíveis

6 Checagens Passivas x Ativas Prós Monitoração de serviços de natureza assíncrona como Traps SNMP, alertas de segurança, etc. Checagem de serviços em redes remotas. Contras Configuração individual para cada serviço passivo. Necessidade de processos externos ( cron ). Falsos positivos.

7 NSCA Prós Monitoração distribuída. Centralização de informações. Contras Configuração descentralizada e complexa. Manutenção complicada.

8 DNX Prós Proposta de distribuir checagens em diferentes servidores. Redução significativa de carga do servidor de monitoração. Contras Muitas instabilidades Processo evolutivo lento

9 Diferentes propostas Não possuem a flexibilidade necessária Não atingem os objetivos esperados

10 O que é Gearman Framework simples para distribuição de tarefas Flexível Rápido API multi-linguagem

11 Estrutura de funcionamento Client API C, Perl, PHP, C#, Python Gearman Job Server

12 Nagios + Gearman Prós Checagens distribuídas em diferentes servidores. Consumo reduzido de recursos. Configuração mínima. Transparência na adição de novos nodos. Segurança no transporte de informações. Redundância / Failover. Distribuição de qualquer tipo de processamento. Contras???

13 Mod_Gearman Composto em três partes: Nagios Event Broker Agentes de checagem ( s ) Servidor de Tarefas ( Gearman Job Server ) Versão atual:

14 Como funciona? Nagios

15 Como funciona? Nagios Mod Gearman - NEB

16 Como funciona? Nagios Mod Gearman - NEB Gearman Server Checagens de Hosts Checagens de Serviços Event Handlers

17 Como funciona? Nagios Mod Gearman - NEB Gearman Server Checagens de Hosts Checagens de Serviços Event Handlers Gearman ( * ) (Event Handlers) (Hostgroup Linux)

18 Como funciona? Nagios Mod Gearman - NEB Gearman Server Checagens de Hosts Checagens de Serviços Event Handlers Resultados Gearman ( * ) (Event Handlers) (Hostgroup Linux)

19 Cenário I Balanceamento de Carga Hosts Serviços Event Handler Nagios Hosts Serviços Event Handler

20 Cenário II Monitoração Distribuída Hosts Serviços Event Handler Nagios Hostgroup Linux Hosts Serviços Event Handler

21 Cenário III Monitoração Distribuída e Balanceamento de Carga Hosts Serviços Event Handler Hosts Serviços Event Handler Nagios Hostgroup Linux Hostgroup Linux

22 Cenário IV Substituir NCSA Nagios send_gearman send_gearman send_gearman

23 Instalação Dependências gcc / g++ autoconf / automake / autoheader libtool libgearman (>= 0.14)

24 Instalação Download e descompactação root@linux# wget " tar.gz" root@linux# tar zxf mod_gearman tar.gz root@linux# cd mod_gearman-1.0.3

25 Compilação --prefix=/opt withgearman=/path/to/gearman --with-user=nagios with-initdir=/etc/init.d... make... make install... make install-config...

26 Configurando Nagios nagios.cfg event_broker_options=-1 broker_module=/path/to/mod_gearman.o config=/path/to/mod_gearman.conf

27 Configurando Mod_Gearman (NEB) Arquivo padrão server=<gearman_server>:4730 eventhandler=yes services=yes hosts=yes encryption=no result_workers=1 debug=0

28 Configurando Mod_Gearman () Arquivo padrão server=<gearman_server>:4730 eventhandler=yes services=yes hosts=yes encryption=no min-worker=1 max-worker=20 max-jobs=50 debug=0

29 Finalizando Iniciar Gearman service gearmand start Iniciar s mod_gearman_worker -config=/path/to/mod_gearman_worker.cfg Reiniciar nagios service nagios restart

30 Verificando instalação grep mod_gearman /path/to/nagios.log [ ] mod_gearman: Version [ ] Event broker module '/path/to/mod_gearman.o' initialized successfully.

31 Verificando filas mod_gearman_top Queue Name Available Jobs Waiting Jobs Running check_results host service eventhandler

32 Verificando Job Server./check_gearman -H localhost -t 20 check_gearman OK - 6 jobs running and 0 jobs waiting. check_results=0;0;1;10;100 host=0;0;9;10;100 service=0;6;9;10;100 Verificando./check_gearman -H <server> -q worker_<worker hostname> -t 10 -s check check_gearman OK - localhost has 10 worker and is working on 1 jobs worker=10 running=1 total_jobs_done=1508

33 Enviando checagens passivas./send_gearman --server=<job server> --encryption=no --host="<hostname>" --service="<service>" -- message="message"

34 Dicas 1 worker (no mínimo) para cada fila. Monitorar logs do Gearmand e mod_gearman_worker. Plugins que trabalham direto com o arquivo de comandos do Nagios devem rodar local. Nagios e Gearman Server na mesma máquina para melhor performance. Manter plugins sincronizados entre os workers.

35 Dicas 1 worker (no mínimo) para cada fila. Monitorar logs do Gearmand e mod_gearman_worker. Plugins que trabalham direto com o arquivo de comandos do Nagios devem rodar local. Nagios e Gearman Server na mesma máquina para melhor performance. Manter plugins sincronizados entre os workers.

36 Opções comuns server Definição do servidor gearman server=localhost:4730,host1:4730 hosts Habilita/desabilita checagens de hosts hosts=yes services Habilita/desabilita checagens de serviços services=yes hostgroups Hostgroups que irão para uma fila separada hostgroups=rede_mg,rede_rj servicegroups Servicegroups que irão para uma fila separada servicegroups=checagens_web

37 Opções Mod_Gearman (NEB) localhostgroups Hostgroups que não serão checados via Gearman localhostgroups=grupo1,grupo2 localservicegroups Servicegroups que não serão checados via Gearman localservicegroups=grupo1,grupo2 result_workers Número de workers para processar resultados. result_workers=3

38 Opções Mod_Gearman () min-worker Número mínimo de processos que irão rodar simultaneamente. max-worker=1 max-worker Número máximo de processos que irão rodar simultaneamente. max-worker=20

39 Demonstração prática

40 DÚVIDAS?

41 OBRIGADO