Explorando o Splunk. LINGUAGEM DE PROCESSAMENTO DE BUSCA (SPL) GUIA PRÁTICO Por David Carasso, Chief-Mind do Splunk

Transcrição

1

2 Explorando o Splunk LINGUAGEM DE PROCESSAMENTO DE BUSCA (SPL) GUIA PRÁTICO Por David Carasso, Chief-Mind do Splunk

3 Ressalva Este livro foi feito somente como um texto ou livro de referências. O real uso do software Splunk deve estar de acordo com sua licença de software e não com nada do que está escrito neste livro. A documentação dada pelos produtos do software Splunk, e não este livro, são a fonte de informação definitiva de como usar tais produtos. Apesar de um grande cuidado ter sido tomado para garantir a precisão e atemporalidade das informações neste livro, a Splunk não oferece nenhuma garantia da precisão ou atemporalidade das informações e o Splunk não se responsabiliza quanto aos resultados do uso das informações contidas neste livro. O leitor deve checar em docs.splunk.com para as descrições definitivas das funções e conteúdos do Splunk.

4 Sumário Prefácio... i Sobre Este Livro... ii O que está neste Livro?... iii Convenções... iv Avisos... v PARTE I EXPLORANDO SPLUNK A Historia do Splunk... 1 Splunk ao resgate do Data Center... 1 Splunk ao resgate do departamento de marketing... 2 Se aproximando do Splunk... 2 Splunk: A companhia e o Conceito... 5 Como o Splunk aperfeiçoou os dados de maquina no data Center... 6 Inteligência Operacional... 7 Inteligência operacional no trabalho Integrando os Dados O básico dos dados de maquina Tipos de dados que o Splunk consegue ler Fontes de dados do Splunk Baixando, Instalando e Iniciando o Splunk Baixando o Splunk Instalando o Splunk Starting Splunk Trazendo os dados para serem Indexados Entendendo como o Splunk Indexa os dados Buscando com o Splunk A Dashboard de Busca SPL : Linguagem de Processamento de Busca Pipes... 23

5 AND Implícito top user Campos Porcentagem O comando de busca Dicas para o uso do comando de busca Subpesquisas SPL: Linguagem de Processamento de Busca Organizando Resultados sort Filtrando Resultados where dedup head Agrupando Resultados transaction Reportando Resultados top stats chart timechart Filtrando, Modificando e Adicionando Campos fields replace eval rex lookup Enriquecendo seus dados Usando o Splunk para entender os dados Identificando campos: Olhando entre as peças do quebracabeça Explorando os dados para entender o escopo... 52

6 Preparando para reportagem e agregação Visualizando os Dados Criando Visualizações Criando Dashboards Criando Alertas Criando Alertas através do Instrutor Afinando Alertas Usando o Gerenciador Customizando as Ações para um Alerta O Gerenciador de Alertas PARTE II RECEITAS Receitas para monitoramentos e alertas Receitas de monitoramento Monitorando usuários concorrentes Monitorando hospedeiros inativos Reportando dados categorizados Comparando o principais valores com os do último mês Encontrando medidas que caíram em 10% na última hora. 75 Tabelando os resultados de semana a semana Identificando oscilações em seus dados Compactando uma tabulação baseada em tempo Reportando em campos dentro do XML ou JSON Extraindo campos de um evento Receitas de Alerta Alertar por quando o servidor atinge uma carga determinada Alertando quando a performance de um servidor está lenta Desligar instancias de EC2 desnecessárias Convertendo um monitoramento em um alerta Agrupando Eventos Introdução Receitas... 86

7 Unificando os nomes dos campos Encontrando Transações Incompletas Calculando o tempo dentro de transações Encontrando os últimos eventos Encontrando eventos repetidos Tempo entre transações Encontrando transações especificas Encontrando eventos perto de outros eventos Encontrando eventos depois de eventos Agrupando grupos Tabelas de Lookup Introdução lookup inputlookup outputlookup Leitura Posterior Receitas Colocando os Valores Padrões de Lookup Usando Lookups reversos Usando um lookup de duas camadas Usando lookups de múltiplos passos Criando uma tabela de lookup usando os resultados de uma busca Anexando resultados a tabelas de lookup Usando tabelas gigantes de lookup Comparando resultados com valores de lookup Controlando os encaixes da tabela de lookup Encaixando IPs Encaixando Coringas Apêndice A: Básico dos Dados de Maquina Logs de Aplicação

8 Logs de Acesso Web Logs de Proxy Web Registros de Detalhes de Chamadas Dados de Clickstream Enfileiramento de Mensagem Pacotes de Dados Arquivos de Configuração Logs de Auditoria de Bancos de Dados e Tabelas Logs de Auditoria do Sistema de Arquivos Gerenciamento e APIs de Log Medidas de OS, Estado e Comandos de Diagnostico Fontes de Dados de Outras Maquinas Apêndice B: Sensibilidade a Maiúsculas Apêndice C: Comandos Comuns Apêndice D: Recursos mais usados Apêndice E: Guia de Referencia Rápida do Splunk CONCEITOS COMANDOS COMUNS DE BUSCA Otimizando Buscas EXEMPLOS DE BUSCA FUNÇÔES EVAL FUNÇÕES COMUNS DO STATS EXPRESSÕES REGULARES FUNÇÕES COMUNS DO STRPTIME DO SPLUNK

9 Prefácio A Empresa de Software Splunk ( Splunk ) é provavelmente a ferramenta mais poderosa na assistência de busca e exploração de dados que você vai encontrar. Nós escrevemos este livro para fornecer uma introdução ao Splunk e tudo o que ele pode fazer. Este livro também seve como um ponto de partida de como ficar criativo com o Splunk O Splunk é geralmente usado por administradores de sistemas, administradores de redes e gurus da segurança, mas o seu uso não é restrito a estas audiências. Existe um grande valor de negócios escondido em dados corporativos que o Splunk pode liberar. Este livro foi feito para alcançar alem do típico entusiasta de tecnologia para os grupos de marketing e qualquer pessoa interessada em tópicos de Big Data e Inteligência Operacional. i

10 Sobre Este Livro O objetivo central deste livro é ajudar-lo a entender rapidamente o que o Splunk é e como ele pode te ajudar. Ele cumpre isto lhe ensinando sobre as partes mais importantes da Linguagem de Processamento de Busca do Splunk (SPL). O Splunk pode ajudar tecnólogos e empresários de diversas formas. Não espere aprender sobre o Splunk de uma vez. O Splunk não é como um canivete suíço, uma ferramenta simples que pode fazer várias coisas incríveis. Agora a questão é: Como este livro pode me ajudar? A resposta curta é que dando rapidamente um senso de o que você pode fazer com o Splunk e aponte para onde você pode aprender mais. Mas já não existe um monte de documentação sobre o Splunk? Sim: Se você checar você vai encontrar vários manuais com explicações detalhada do maquinário do Splunk. Se você checar você vai encontrar uma base de dados pesquisável com perguntas e respostas. Este tipo de conteúdo é valioso quanto você sabe um pouco sobre o Splunk e está tentando resolver um problema comum. Este livro cai entre estes dois níveis de documentação. Ele oferece um entendimento básico das partes mais importantes do Splunk e combina isso com soluções para problemas do mundo real. ii

11 O que está neste Livro? O capitulo 1 fala sobre o Splunk e como ele pode te ajudar. O capitulo 2 discute como baixar o Splunk e os primeiros passos para usar-lo. O capitulo 3 discute a interface de usuário para busca e como buscar usando o Splunk. O capitulo 4 cobre as partes mais usadas da SPL. O capitulo 5 explica como visualizar e enriquecer os seus dados com conhecimento. O capitulo 6 cobre as soluções e monitoramento e alertas mais comuns. O capitulo 7 cobre soluções para problemas que podem ser resolvidos através do grupamento de eventos. O capitulo 8 cobre muitas das formas que você pode usar as tabelas de lookup para resolver problemas comuns. Se você pensa que a Parte I (capítulos de 1 a 5) como um curso intensivo em Splunk, a Parte II (capítulos de 6 a 8) mostra como você fazer manobras mais avançadas combinando tudo isso, usando o Splunk para resolver alguns dos problemas mais comuns e interessantes. Revisando estas receitas - e experimentando algumas - irá lhe dar alguma idéia de como você usar o Splunk para responder a todos os mistérios do universo (ou pelo menos do data center). Os apêndices contornam o livro com algumas informações que podem ajudar. O apêndice A dispõe um resumo do básico dos dados de maquina para abrir seus olhos para as possibilidades e variedades de Big Datas. O apêndice B proporciona uma tabela sobre o que é e não é sensível a letras maiúsculas nas buscas do Splunk. O apêndice C proporciona uma olhada nas buscas mais comuns feitas com o Splunk (nós descobrimos isto usando o Splunk, só pra avisar). O apêndice E aponta para algumas das maiores fontes de aprendizagem relacionadas ao Splunk. O apêndice E é uma versão especialmente projetada do cartão de referências do Splunk, que á o documento educacional mais popular que nós temos. iii

12 Convenções Enquanto você for lendo este livro, você irá perceber que nós usamos varias fontes para apontar certos elementos: Elementos da UI aparecem em negrito. Comandos e nomes de campo estão largura constante. Se você for dito para selecionar a opção Y do menu X, ela estará escrita concisamente como selecione X» Y. iv

13 Avisos Este livro não seria possível se não fosse pela ajuda de inúmeras pessoas que emprestaram seu tempo e talentos. Para revisões cuidadosas dos rascunhos do manuscrito fazendo melhoramento valiosos, nós gostarias de agradecer especialmente Ledion Bitincka, Gene Hartsell, Gerald Kanapathy, Vishal Patelm, Alex Raitz, Stephen Sorkin, Sophy Ting e ao Steve Zhang, PhD; por me fornecer parte de seu tempo para uma entrevista: Maverick Garner; pela ajuda adicional: Jessica Law, Tera Mendonca, Rachel Perkins e Michael Wilde. v

14 PARTE I EXPLORANDO SPLUNK 1 A Historia do Splunk O Splunk é uma poderosa plataforma para análise de dados de maquina, dados que as maquinas emitem em grandes volumes mas que são raramente usados efetivamente. Os dados de maquina já são importantes para o mundo da tecnologia e estão se tornando cada vez mais importantes no mundo dos negócios. (Para aprender mais sobre dados de maquina, veja o Apêndice A.) A forma mais rápida de entender o poder e versatilidade do Splunk é considerar duas situações: uma no data Center e outra no departamento de marketing. Splunk ao resgate do Data Center São 2 da manha na quarta. O telefone toca. Seu chefe está ligando; o site está fora do ar. Por que ele falhou? Foi por culpa dos servidores, das aplicações dos servidores de dados, algum disco cheio ou algum balanceador de carga que fritou? Ele está gritando com você para que conserte isto agora. Está chovendo. Você está perdendo a cabeça. Relaxa. Você instalou Splunk no dia anterior. Você liga o Splunk. Em um único lugar, você pode procurar os arquivos de log de todos os seus servidores web, bancos de dados, firewalls, roteadores e balanceadores de carga, assim como buscar dentro de arquivos de configuração e dados de todos os outros dispositivos, sistemas operacionais ou aplicativos de interesse. (Isto é verdade, não importa em quantos Data Centers ou provedores de nuvem eles possam estar espalhados.) Você olha no gráfico de tráfego do servidor para ver quando o problema ocorreu. As 17:03, erros no servidor web tiveram um pico repentino. Você então olha para as 10 paginas com mais erros, a home page estava bem. A página de busca estava bem. A, mas o carrinho de comprar é o problema. Começando as 17:03, cada pedido na pagina estava produzindo um erro. Isto está custando dinheiro - impedindo vendas e afastando clientes - e isto tem que ser corrigido. Você sabe que o carrinho de comprar conta com um servidor de e-commerce conectado ao banco de dados. Uma olhada nos logs mostra que o banco de dados está online. Bom. Vamos checar os logs do servidor de e-commerce. As 17:03m o servidor de e-commerce começa a dizer que ele não consegue se conectar ao servidor de banco de dados. Você então busca por mudanças na configuração dos arquivos e vê que alguém mudou uma das configurações de rede. Você olha mais de perto; ela foi feita incorretamente. Você contata a pessoas que fez a mudanças, que faz o rollback, e o sistema começa a funcionar novamente. 1

15 Tudo isso pode levar menos de 5 minutos porque o Splunk já juntou todas as informações relevantes em um índice central que você pode pesquisar rapidamente. Splunk ao resgate do departamento de marketing Você trabalha no departamento de promoções de um grande varejista. Você afina a otimização e promoção do mecanismo de busca dos seus produtos para otimizar a carga de trafego que vem dele. Na ultima semana, os caras do data Center instalaram uma nova dashboard do Splunk que mostra (pelo ultima hora, dia e semana) todas os termos de pesquisa usados para encontrar o site. Olhando no gráfico pelas ultimas horas, você vê um pico de 20 minutos atrás. Buscas pelo nome de sua companhia e o seu ultimo produto estão bem altos; Você chega o relatório ao topo referenciando URLs na ultima hora e o Splunk mostra que uma celebridade publicou um tweet sobre o produto e com o link para sua home page. Você olha para outro gráfico que mostra a performance da maioria das páginas mais frequentadas. A página de busca está sobre carregada e está ficando mais lenta. Uma multidão de pessoas estão vindo ao seu site mas não podem achar chave do produto que eles estão procurando, então eles estão todos usando a busca. Você loga no sistema gerenciador de conteúdo do seu site e coloca uma propaganda promocional para o novo produto ao centro da home page. Você então volta e olha as paginas mais visitadas. O trafego de busca começa a diminuir, e o trafego na página do novo produto começa a subir, da mesma forma, o trafego da página do carrinho de compras. Você olha para a lista dos 10 produtos mais adicionados ao carrinho e os 10 produtos mais comprados; o novo produto se encontra no topo das listas. Você envia um recado para do departamento de RP para acompanhar o processo. O trafego que está chegando está sendo convertido em dinheiro ao invés de frustração, exatamente o que você quer que aconteça. Sua habilidade de fazer o máximo com uma oportunidade imprevista se tornou possível graças ao Splunk. Seu próximo passo é ter certeza de que você tem o suficiente deste produto em estoque, pois isto é um problema grave. Estes dois exemplos servem para mostrar como o Splunk pode providenciar uma janela detalhada do que está acontecendo com o dados da sua maquina. O Splunk também pode revelar padrões históricos, correlacionar múltiplas fontes de informação e ajudar em milhares de outras forma. Se aproximando do Splunk Enquanto você usa o Splunk para responder certas questões, você vai descobrir que você pode dividir a tarefa em três fases. Primeiro, identificar os dados que podem responder a sua questão. Segundo, transformar os dados em resultados que podem responder a sua questão. 2

16 Terceiro, mostrar a resposta em forma de um relatório, tabela interativa ou gráfico para tornar-la legível para uma audiência mais ampla. Comece com a questão que você quer responder: Por que este sistema falhou? Por que ele está tão lento ultimamente? Aonde as pessoas estão tendo problemas com o nosso site? Enquanto você fica melhor com o Splunk, fica mais obvio que tipos de dados e pesquisas ajudam a responder estas questões. Este livro vai acelerar o progresso da sua perícia. A questão então se torna: Os dados podem oferecer a resposta? Muitas vezes, quando iniciamos uma análise, não sabemos o que os dados podem nos dizer. Mas o Splunk também é uma poderosa ferramenta para a exploração e entendimento dos dados. Você pode descobrir a maioria dos valores mais comuns ou mais estranhos. Você pode sumarizar os dados com estatísticas ou agrupar eventos em transações, de forma que todos os eventos que fazem parte de uma reserva online em um hotel através de sistemas de registro. Você pode criar fluxos que começam com data set inteiro, então é filtrado dos eventos irrelevantes, analisando que sobrou. Então, talvez, adicionar algumas informações de uma fonte externa até então, depois em um número de passos simples, você tem somente os dados necessário para responder a sua questão. A figura 1-1 mostra o processo básico de análise do Splunk. 3

17 Figura Trabalhando com o Splunk 4

18 Splunk: A companhia e o Conceito A verdadeira razão pela qual as pessoas estão excitadas com o Splunk é porque ele ajuda a resolver problemas que os clientes sempre tiveram. A historia do Splunk começou em 2002, quando os co fundadores Erik Swan e Rob Das começaram a procurar pelo próximo desafio. Erik e Rob já haviam feito alguns projetos juntos e estavam procurando por uma nova aventura, então eles começaram a falar sobre as companhias e seus problemas. Erik e Rob perguntaram a possíveis clientes Como vocês resolvem os seus problemas na sua infra estrutura? continuamente, e ouviram sobre as experiências dos praticantes tentando resolver os problemas de TI e recuperar os dados na forma tradicional. Os dados estavam muito espalhados; eram difíceis de juntar e conseguir tirar algum sentido de tudo aquilo. Todo mundo estava tentando resolver os problemas verificando manualmente arquivos de log, algumas vezes escrevendo scripts para ajudar ao longo do processo. Os scripts caseiros eram fracos e as pessoas que faziam eles geralmente acabavam saindo das empresas depois de um tempo, levando com elas o conhecimento de como eles funcionavam, e com cada nova tentativa de explorar o problema iria acabar causando discussões, apontar culpados e a necessidade de refazer o script do zero, com vários plantões do departamento de TI para suprir a emergência. Estes praticantes disseram aos fundadores do Splunk que resolver problemas de infra estrutura era como rastejar lentamente para fora de um buraco (seus datacenters) com picaretas, iluminação ruim e navegação limitada (velhos scripts e tecnologia de gerenciamento de logs). Resumindo, era como minerar uma caverna desconhecida, e pensando na palavra Splunk (desbravador de cavernas) que eles escolheram dar o nome do sistema de Splunk. Entendendo a dificuldade da mineração digital, a única alternativa disponível para estas pessoas era procurar na internet para ver se outras companhias tinham problemas similares e haviam postado suas soluções online. Os fundadores estavam abismados que as pessoas estavam gastando dinheiro nestes problemas de conhecimento comum, e mesmo assim ninguém havia tentado construir uma solução. Erik e Rob perguntaram a si mesmos, Por que pesquisar dados de TI não pode ser tão fácil e intuitivo quanto uma pesquisa no Google? A primeira visão do Splunk estava direcionada em fazer um união e análise de dados mais fácil de ser feita e resolver os problemas de um data Center ou grandes redes ou ambientes computacionais. A missão do Splunk foi combinar a facilidade do uso das pesquisas web com o poder dos trabalhosos métodos caseiros que os profissionais de TI estavam usando para resolver os seus problemas. Erik e Rob juntaram os fundos e a primeira versão do Splunk foi estreada na LinuxWorld O produto foi um grande sucesso e imediatamente virou um viral, espalhado por sua disponibilidade como um download gratuito. Uma vez baixado, o Splunk começou a resolver os problemas de uma diversa gama de problemas impensados pelos clientes e acabou se espalhando de departamento em departamento e de companhia em companhia. Quando usuários perguntaram a gerência para comprar 5

19 ele, eles já poderiam apontar para uma lista de problemas que já haviam sido resolvidos com o Splunk. Originalmente pensado como uma forma de ajudar os gerentes de TI e datacenters a resolver problemas técnicos, o Splunk cresceu para se tornar uma plataforma extremamente útil para todos os tipos de empresas porque ele permite que eles pesquisem, coletem e organizem os dados de uma forma bem mais fácil de compreender e seja uma forma que consuma menos recursos que os bancos de dados tradicionais. O resultado é que temos novos pontos de vista e inteligência operacional que as organizações nunca tiveram antes. Como o Splunk aperfeiçoou os dados de maquina no data Center O primeiro lugar que o Splunk tomou, naturalmente, foi o data Center, que está submerso em dados de maquina. O Splunk se tornou popular com administradores de sistema, engenheiros de rede e desenvolvedores de aplicações como um mecanismo para rapidamente entender (e aumentar a utilidade dos) dados de maquina. Mas por que eles gostam tanto dele? Um exemplo que ajuda não somente a explicar a popularidade precoce do Splunk mas também ajuda-nos a entender a natureza dos dados de maquina, que é central para o valor que o Splunk agrega ao mundo dos negócios. Na maioria dos ambientes computacionais, muitos sistemas diferentes dependem um do outro. Sistemas de monitoramento enviam alertas depois de que algo deu errado. Por exemplo, a página principal de um site pode depender de servidores web, servidores de aplicação, servidores de dados, sistemas de arquivos, balanceadores de cargas, roteadores, aceleradores de aplicação, sistema de cache, etc. Quando algo da errado em algum destes sistemas, por exemplo o banco de dados, alarmes podem começar a apitar em todos o níveis. Quando isto acontece, um administrador de sistema ou especialista de aplicação deve encontrar a raiz do problema e consertar o que está causando ele. O problema é que os arquivos de log estão espalhados através de múltiplas maquinas, as vezes em múltiplas zonas de tempo e podem conter milhões de entradas que não tem nada a ver com o problema. Em adição, os registros relevantes - aqueles que indicam alguma falha do sistema - tendem a aparecer todos de uma vez. O desvio então é encontrar o problema que começou tudo isso. Vamos dar uma olhada em como o Splunk faz isso. O Splunk começa indexando, que significa juntar todos os dados de diversos locais e combinar eles em índices centralizados. Antes do Splunk, administradores de sistema teriam de criar um acesso a várias maquinas diferentes para alcançar toda a informação, ainda usando ferramentas muito menos poderosas. Usando os índices, o Splunk pode rapidamente procurar logs de todos os servidores e vasculhar por dentro onde o problema ocorreu. Com a sua velocidade, escala e usabilidade, o Splunk faz a determinação de quando o problema ocorreu muito mais rápida. 6

20 O Splunk pode se aprofundar no tempo em que o problema originalmente ocorreu e determinar a causa. Alertas podem ser criados para lidar com o problema no futuro. Através da indexação e agregação de arquivos de log de várias fontes para fazer elas pesquisáveis de forma centralizada, o Splunk se tornou popular entre os administradores de sistema e outras pessoas que comandam operações técnicas para empresas ao redor do mundo. Analistas de segurança usam o Splunk para farejar vulnerabilidades de segurança e ataques. Analistas de sistemas usam o splunk para descobrir ineficiências e gargalos em aplicações complexas. Analistas de rede usam o Splunk para encontrar as causas de deficiências de rede e gargalos de bandwidth. Esta discussão traz vários pontos chave sobre o Splunk: A criação de um repositório central é vital: Uma das maiores vitórias do Splunk é a forma que diversos tipos de dados de diferente fontes são centralizados para a pesquisa. O Splunk converte dados em respostas: O Splunk te ajuda a encontrar os aspectos escondidos nos dados. O Splunk ajuda a entender a estrutura e o significado dos dados: Quanto mais você entender seus dados, mais você vai ter aproveitamento deles. O Splunk também ajuda você a capturar o que você aprende e fazer futuras investigações mais fáceis e a compartilhar o que você aprendeu com o outros. A visualização fecha o loop: Toda essa indexação e pesquisa dão frutos eventualmente quando você vê uma tabela ou relatório que faz a respostas simples e obvia. Ser capaz de visualizar dados de formas diferentes acelera o entendimento e ajuda a compartilhar o seu entendimento com os outros. Inteligência Operacional Porque quase tudo que a gente faz é suportado de alguma forma por tecnologia, a informação coletada sobre cada um de nós cresceu drasticamente. Muitos dos eventos recordados pelos servidores na verdade representam o comportamento de clientes ou parceiros. Os clientes do Splunk perceberam bem cedo que os logs de acesso web poderiam ser usados não somente para diagnósticos de sistema mas também para melhor entender o comportamento das pessoas navegando um site. O Splunk tem sido a vanguarda em levantar a atenção sobre a inteligência operacional, uma nova categoria de métodos e tecnologias para o uso de dados de maquina para ganhar visibilidade dentro dos negócios de TI e o resto da empresa. A inteligência operacional não é um subproduto da inteligência de negócios (BI), mas uma nova aproximação baseada em fontes de informação não tipicamente dentro do escopo das soluções de BI. Os dados operacionais não são somente inacreditavelmente valiosos para o melhoramento das operações de TI, mas também fornece idéias para outras partes dos negócios. 7

21 A inteligência operacional permite que organizações: Usando dados de maquina para ganhar um entendimento mais profundo dos seus clientes: Por exemplo, se você observar as transações em um site, você o que as pessoas compraram. Mas olhando com atenção nos logs servidor web você pode ver todas as paginas que eles passaram antes de comprar, e, talvez elas sejam ainda mais importantes para os lucros, as paginas que as pessoas que não compraram passaram. (Lembram-se de nosso exemplo de busca para um novo produto no começo?) Revelar padrões importantes e dados analíticos derivados da correlação de várias fontes: Quando você pode rastrear os indicadores do comportamento de um consumidor de sites, chamar por detalhes dos registros, mídia social e informações de transações armazenadas, uma imagem bem mais completa do consumidor começa a surgir. E quanto mais e mais a interação com o cliente aparece nos dados de maquina, mais pode ser aprendido. Reduzir o tempo entre um evento importante e a sua detecção: Dados de maquina podem ser monitorados e co relatados em tempo real. Alavanque os feeds ao vivo e os dados históricos para fazer que está acontecendo agora fazer sentido, encontrar tendências e anomalias e tomar uma decisão mais informada baseada nesta informação: Por exemplo, o trafego criado pro uma promoção na internet pode ser medido em tempo real e comparado com promoções anteriores. Implementar uma solução rapidamente e entregar ela com a flexibilidade necessária para as organizações de hoje em dia e no futuro - quer dizer, a habilidade de entregar relatórios ad hoc, responder perguntas e adicionar novas fontes de dados: Os dados do Splunk podem ser apresentados em dashboards tradicionais que permitem aos usuários que eles explorem os eventos que continuem fazendo novas questões. Inteligência operacional no trabalho O Splunk faz algo que nenhum outro produto pode: capturar de forma eficiente e analisar enormes quantidade de dados de maquina não estruturados em series de tempo. Apesar dos departamentos de TI geralmente começarem usando o Splunk para resolver problemas tecnicamente esotéricos, eles rapidamente ganharão um entendimento valioso para todos os outros setores dos negócio. Usando dados de maquina no Splunk ajuda a resolver problemas irritantes de trabalho. Aqui estão alguns exemplos: Um time de operações implementou uma aplicação de atendimento ao cliente através da nuvem e usou o Splunk para fazer o diagnóstico. Eles logo perceberam que eles 8

22 poderiam acompanhar as estatísticas dos usuários e planejar melhor a capacidade - uma medida com profundas implicações nos negócios. Logs de trafego de um servidor web podem ser usados para acompanhar quantos carrinhos de compra estão sendo preenchidos e abandonados em tempo real. O departamento de marketing pode usar esta informação para determinar aonde os consumidores estão tendo problemas e que tipos de compras estão sendo abandonadas para que qualquer problema possa ser corrigido na hora e promoções possam se focar em itens que estão sendo abandonados. Organizações usando o Splunk para monitorar aplicações direcionadas a resolução de problemas acabaram percebendo que elas podem facilmente providenciar visões para os seus times de suporte de primeira linha para cuidas das chamadas dos clientes diretamente, ao invés de acumular estas ligações em custosos recursos de engenharia. Uma das principais companhias de utilidades foi capaz de eliminar as custosas taxas manutenção de software substituindo seis outras ferramentas de monitoramento e diagnóstico pelo Splunk. Uma das principais organizações de mídia publica reduziu o tempo que levava para capturar dados analíticos de extrema importância de meses para horas. Eles eram também capazes de acompanhar o seus componentes digitais com confiabilidade e precisão que eles não teriam de outra forma, resultando em uma melhor divisão de lucros e marketing de conteúdo. Um restaurante fast-food que vende taco conectou seus pontos de vendas (POS) ao Splunk, e dentro de uma hora, os analistas de negócios foram capazes de começar a responder perguntas como Quantas pessoas estão comprando tacos da meia noite as duas da manha, neste local, nesta época do ano? Finalmente, a inteligência operacional permite as organizações que elas façam as perguntas certa, levando a respostas que podem oferecer um entendimento melhor de negócio, usando combinações de tempo real e dados históricos, mostrados de forma fácil de digerir em dashboards e ferramentas gráficas. Existe um motivo de por que temos a tendência de chamar dados de maquina de big data. Ela é grande, é bagunçada e está lá, enterrada em algum lugar, ela é a chave para o futuro do seu negócio. Agora vamos em frente para o capítulo 2, onde você irá aprender como conseguir os dados no Splunk e começar a encontrar o ouro enterrado em meio aos seus dados. 9