FLISOL DF Assuma o controle do seu parque virtualizado. Palestrantes: Guto Daniel

Transcrição

1 FLISOL DF Assuma o controle do seu parque virtualizado Palestrantes: Guto Daniel

2 Já teve a sensação de estar perdendo o controle do seu ambiente virtualizado? Foto tirada do site sysadminday.com por Frank Schicksal

3 Necessidades do cliente Isolamento de ambientes e serviços em vm's Facilidade de migração inter-sites Maior estabilidade e disponibilidade dos serviços Curta curva de aprendizagem

4 Desafios Centralização da administração e configuração Padronização do ambiente Rápida implantação e implementação Conversão de infraestrutura Manutenção descomplicada

5 Decisões Importantes Utilização de tecnologia livre ou opensource Internalizar suporte Utilização coerente de recursos e orçamento

6 Caso de Estudo Empresa Brasil de Comunicação Cerca de 160 máquinas virtuais rodando em um cluster com 15 nós Gestão e distribuição de configurações Administração compartilhada de 4 devops

7 Especialistas Envolvidos Equipe Tecnisys José Augusto Daniel Jefferson Equipe EBC Coordenadores Tadeu Ibns N. Rocha José SysAdmins Nieson Santos

8 VIRTUALIZAÇÃO

9 Terminologia Virtualization [... ] a hypervisor, also called virtual machine monitor, allows multiple operating systems to run concurrently on a host computer. (Wikipedia) Cluster Node physical machine Instance machine virtual machine

10 Nossa Escolha: GANETI Produto criado pelo Google Case interessante de uso interno no Google Facilidade de implementação Utilização de hypervisors livres XEN e KVM Funciona em modo Cluster Permite migração de máquinas entre nós Administração simplificada via CLI ou WEB (frontends) Boa documentação, desenvolvimento ativo e comunidade crescente

11 GANETI: Overview Gerenciador Open Source para clusters virtualizados Combina virtualização e replicação de disco em tempo real Oferece uma aplicação de alta disponibilidade promovendo uma melhor utilização dos recursos do seu datacenter. Usa Python, OpenSSL, Xen, KVM, LVM, DRBD Desenvolvida pelo Google, disponibilizado em Agosto de É utilizado pelo Google internamente. Foi liberado com a licença GPLv2 Site do projeto:

12 GANETI: Hypervisors XEN Xxxx Xxxx Xxx KVM Xxx Xx Xx Xx

13 GANETI: Estrutura Lógica Cluster Nó mestre Nós Instâncias

14 GANETI: Organização Lógica do Cluster

15 GANETI: Exemplos de melhorias Na infraestrutura XEN a administração é descentralizada, precisávamos entrar em cada máquina para fazer manutenções nas VM. Hoje fazemos isto de forma centralizada no master node. Informações descentralizadas: antes para criar máquinas precisávamos entrar em cada servidor XEN para avaliar os recursos disponíveis e escolher um servidor ideal para instalar o serviço. Com o ganeti temos um visão completa de todo o cluster no nó master.

16 GANETI: Listando nós

17 GANETI: Listando instâncias

18 GANETI: Listando info de VM

19 GANETI: Movendo VM entre nós

20 GANETI: Operações 1. Criando um cluster # gnt-cluster init gnt-node01.empresa 2. Adicionando nó ao cluster # gnt-instance add node02 # gnt-instance add node03 3. Criando máquina virtual # gnt-instance add -n node1 -t plain -H memory=1g -s 10G -o debian apache01

21 GANETI: Operações 4. desligando # gnt-instance shutdown maquina 5. ligando # gnt-instance startup maquina 6. reiniciando # gnt-instance reboot maquina 7. acessando console de maquinas em qualquer lugar do cluster a partir do nó mestre # gnt-instance console maquina 8. removendo # gnt-instance remove maquina

22 GANETI: Operações Movendo máquinas entre nós # gnt-instance move -n gnt-node05 maquina Ativando discos para montagem # gnt-instance activate-disks maquina # ssh gnt-nodexx # kpartx -av /dev/mapper/xenvg-xxx.disk0 # mount /dev/xenvg/xxxx /mnt/disco

23 GANETI: Operações Adicionando mais memoria # gnt-instance modify -B memory=4g maquina Adicionando mais processadores # gnt-instance modify -B vcpus=3 maquina Adicionando mais placas de rede # gnt-instance modify -B --net add:ip= maquina Adicionando disco # gnt-instance gnt-instance modify --disk add:size=1g smtp02

24 GANETI: Hooks Padronização de configurações do OS durante a instalação Instalação dos softwares básicos para administração das máquinas

25 GANETI: Ganhos Cliente Uso coerente dos recursos de hardware/rede Investimento em conhecimento da equipe Investimento de SW direcionado para HW Equipe Facilidade na criação e adm. de máquinas Movimentação de VM's entre nós e SITES Replicação DRDB = Alta disponibilidade

26 GANETI: Problemas Uso de Múltiplos volumes storage area network (SAN) SNAPSHOTs Clonagem de máquinas DRDB e desempenho I/O Múltiplas Redes

27 GANETI: Front-End

28 GANETI: Web Manager

32 GANETI: Comparações Máquina Física Debian Lenny Tempo de instalação de maquina física 40 minutos sem atualizações (CD) Tempo de configuração/update* padrão - de maquina física 40 minutos Máquina Virtual Debian Lenny Tempo de criação de maquina virtual - 2 minutos Tempo de configuração/update* usando Hooks 2 a 4 minutos * Levando em conta configurações da rede, locale, ntpdate, backup, monitoramento, criação de usuários, instalação de pacotes básicos do sysadmin.

33 GANETI: Comparações Máquina Física Debian Lenny Tempo de instalação de maquina física 40 minutos sem atualizações (CD) Tempo de configuração/update* padrão - de maquina física 40 minutos Máquina Virtual Debian Lenny Tempo de criação de maquina virtual - 2 minutos Tempo de configuração/update* usando Hooks 2 a 4 minutos * Levando em conta configurações da rede, locale, ntpdate, backup, criação de usuários, instalação de pacotes básicos do sysadmin.

34 GANETI: Dicas Atenção com DNS, dependência grande para criar a VMs Uso e abuse de Activate Disks para montar e `clonar` máquinas GrowDisk e Parted Nunca dê CTRL+C Usar - - submit Nunca, jamais, de forma alguma, dê um KILL em um processo de MOVE ou CREATE.

35 GANETI: Limitações dos Hooks Sabendo que os hooks são podem ser utilizados instalação das VMS, como ir além dos hooks...?

36 Gestão de Configuração

37 Gestão de Configuração Facilitar o trabalho de administração de servidores Padronizar as configurações utilizadas Possibilitar auditoria de configuração Centralizar a administração Elementos comumente gerenciados Usuários Grupos Arquivos pacotes instalados execução periódica de scripts

38 Nossa Escolha Puppet (2005) Ruby, GPL AIX, BSD, HP-UX, Linux, MaxOS, Solaris, Windows(*) Wikipedia: Configuration_management Comparison_of_open_sourc e_configuration_manageme nt_software

39 PUPPET: Funcionamento Autônomo Cliente obtém plugins Cliente/Servidor Cliente envia fatos HTTPS Certificado de Cliente Pull por default Push opcional Servidor produz catálogo Cliente processa catálogo Cliente envia relatório

40 Puppet: Fácil Aprendizado Sintaxe Declarativa c l ass r sy sl og { pac kage { ' r s ysl og': ens ur e => pr esent, } s er vi ce { ' r s ysl og': has r es t ar t => t r ue, } } f i l e { ' / et ens ur e s our ce not i f y } c/ r sy s l og. d/ l ogs er v er 01. conf ' : => pr esent, => ' puppet : / / / f i l es / r s ys l og/ r s ys l og. d/ l ogser ver 01. c onf ', => Ser vi ce[ ' r s ys l og' ],

41 Puppet: Fácil Aprendizado Independente de Plataforma c l as s edi t or { $v i m = $oper at i ngs y s t em? { ' RedHat ' => ' v i m- enhanc ed', ' Cent OS' => ' v i m- enhanc ed', ' Fedor a' => ' v i m- enhanc ed', def aul t => ' v i m', } pac k age { " $v i m": ens ur e => pr es ent, al i as => ' v i m', } } node hos t 01. domai n. c om. br { i nc l ude edi t or } node hos t 02. domai n. c om. br { i nc l ude edi t or }

42 Puppet: Auto documentado c l as s l i nux - s er v er { # I nc l ude c l as s es c ommon t o al l l i nux s er v er s i nc l ude l oc al mt a i nc l ude nt pdat e i nc l ude puppet : : c onf i nc l ude s s h: : s er v er i nc l ude s udoer s i nc l ude us er s i nc l ude ut i l s i nc l ude z abbi x - agent i nc l ude edi t or i nc l ude s nmpd i nc l ude r s y s l og } #...

43 Puppet: Controle de Versão e Rollback #gi t l og c ommi t 263b2239cc f f 746f 345c448d723f 4f f 52d3f 8c0f Aut hor : Dani el Sobr al <dcs obr l. com> Dat e: Thu Mar 31 22: 11: Ex cl ui a bol et i ns das máqui nas c onf i gur adas c omo mt a s at él i t e. Li mi t a a conf i gur aç ão do ex i m4 às máqui nas Ubunt u e Debi an. c ommi t 8f bed5a4b8095b c598454d47f 3b3dec7e Aut hor : Dani el Sobr al <dcs obr l. com> Dat e: Thu Mar 31 22: 08: Cl as se debi an- c ommon adapt ada par a l i dar com Ubunt u. Basi cament e, f or ça l i dar com s er vi ços no padr ão Debi an ( Ubunt u s upor t a padr ão Fr eebsd t ambém), e não mexe no sour ce l i st ( por hor a). Si st emas Ubunt u t ambém i nc l ui r ão a c l as s e debi an- s er ver. Ver i f i ca se o k er nel é xen, e, s e f or, i nc l ui o l i nux modul es cor r es pondent e.

44 Puppet: Altamente Flexível node " el ei c oes c onc ur v m01" { i nc l ude l i nux - s er v er j bos s : : app { ' c ons el ho': c onf => ' def aul t ', pgdb => ' c ons el hopr od', # Al t er a pg_ hba. c onf } } node el ei c oes c onc ur v mbd01 { i nc l ude l i nux - s er v er pgdb { ' c ons el hopr od' : # Ger a XML par a dat as our c e pas s wor d => ' * * * * * * * * ', pgv er s i on => ' 8. 4', } }

45 Puppet: Expansível Puppet Classes Definições Templates (ERB) Ruby Fatos Funções Tipos Provedores def i ne pgcl i ent ( $ens ur e = pr esent, $i p = $i paddr ess) i ne { " pgcl i ent ${ i p} ": ens ur e => $ensur e, l i ne => " ${ i p} / 32\ n", r equi r e => Fi l e[ ' c l i ent i p' ], t ag => " pgcl i ent _ $ { t i t l e} ", } } # augeas v er s i on. r b Fact er. add( " augeasv er si on" ) do set code do begi n r equi r e ' augeas ' aug = Augeas: : open( ' ', ' ', Augeas: : NO_LOAD & Augeas : : NO_ STDI NC) aug. get ( ' / augeas/ v er s i on' ) ni l #...

46 Puppet: Problemas Documentação Deficiente Mensagens de erro ruins Servidor default nao segura mais de 20 máquinas Não distribui arquivos grandes Grande investimento de tempo para chegar ao nível de expert

47 Frontends Puppet Dashboard

48 Frontends The Foreman Visualiza Inventário (fatos) Relatório Configurações Provisiona servidores Kickstart Jumpstart Preseed

49 PUPPET + GANETI Onde podemos chegar com essa combinação?

50 Comparação Final Máquina Física Debian Lenny + LAMP Tempo de instalação de maquina física 40 minutos sem atualizações (CD) Tempo de configuração/update OS* padrão - de maquina física 40 minutos Tempo de instalação e configuração Apache2, PHP5, MYSQL 2 horas** Máquina Virtual Debian Lenny Tempo de criação de maquina virtual - 2 minutos Tempo de configuração/update OS* usando Hooks 2 a 4 minutos Tempo de instação e configuração Apache2, PHP5, MYSQL 2 a 4 minutos** * Levando em conta configurações da rede, locale, ntpdate, backup, monitoração, criação de usuários, instalação de pacotes básicos do sysadmin. ** Levando em conta hardening, tuning os, apache2, php5, mysql, considerando ter as classes prontas

51 Conclusão O Ganeti é uma alternativa viável, moderna estável, largamente utilizado no google, em franco desenvolvimento com um comunidade crescente e ativa. O Puppet é uma ferramenta essencial para gerenciar e distribuir configurações, ele é um batalhão de sysadmins trabalhando para você.

52 Informações dos projetos Site/Blog Site/Blog Docs Twitter (manager web do Google Groups Puppet-camp, puppet-users, puppet-dev Google Groups ganeti, ganeti-devel ganeti-webmgr IRC Irc.freenode.org #puppet IRC Irc.freenode.org #ganeti

53 Contato, Dúvidas, Perguntas Guto Daniel Palestras de hoje disponíveis em nossos sites. Palestra sob licença Creative Commons - Atribuição