Recuperação de Desastres Facilitada

Transcrição

1 Recuperação de Desastres Facilitada GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 01/10

2 Recuperação de Desastres Facilitada ou Seguro contra perda total bom, bonito (não muito) e barato! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 01/10

3 Recuperação de Desastres Facilitada ou Seguro contra perda total bom, bonito (não muito) e barato! Danton Nunes, engenheiro e encrenqueiro danton.nunes@inexo.com.br GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 01/10

4 Estudo de caso de replicação da infraestrutura de TI de uma empresa usando um datacenter remoto e a Internet. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 02/10

5 Estudo de caso de replicação da infraestrutura de TI de uma empresa usando um datacenter remoto e a Internet. Queremos mostrar que ter um mecanismo de retomada dos negócios em caso de desastre no CPD principal pode estar ao alcance de empresas pequenas e médias e mesmo de pessoas físicas cujo trabalho depende da integridade de seus recursos de TI (profissionais liberais, artistas, espiões,...). GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 02/10

6 Estudo de caso de replicação da infraestrutura de TI de uma empresa usando um datacenter remoto e a Internet. Queremos mostrar que ter um mecanismo de retomada dos negócios em caso de desastre no CPD principal pode estar ao alcance de empresas pequenas e médias e mesmo de pessoas físicas cujo trabalho depende da integridade de seus recursos de TI (profissionais liberais, artistas, espiões,...). Orquestração de tecnologias: Redes virtuais privativas (VPNs); Replicação em tempo quase real; Virtualização de servidores. Volumes lógicos, especialmente retratos instantaneos. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 02/10

7 Estudo de caso de replicação da infraestrutura de TI de uma empresa usando um datacenter remoto e a Internet. Queremos mostrar que ter um mecanismo de retomada dos negócios em caso de desastre no CPD principal pode estar ao alcance de empresas pequenas e médias e mesmo de pessoas físicas cujo trabalho depende da integridade de seus recursos de TI (profissionais liberais, artistas, espiões,...). Orquestração de tecnologias: Redes virtuais privativas (VPNs); Replicação em tempo quase real; Virtualização de servidores. Volumes lógicos, especialmente retratos instantaneos. IMPORTANTE: replicação não substitui o bom e velho BACKUP! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 02/10

8 Estudo de caso de replicação da infraestrutura de TI de uma empresa usando um datacenter remoto e a Internet. Queremos mostrar que ter um mecanismo de retomada dos negócios em caso de desastre no CPD principal pode estar ao alcance de empresas pequenas e médias e mesmo de pessoas físicas cujo trabalho depende da integridade de seus recursos de TI (profissionais liberais, artistas, espiões,...). Orquestração de tecnologias: Redes virtuais privativas (VPNs); Replicação em tempo quase real; Virtualização de servidores. Volumes lógicos, especialmente retratos instantaneos. IMPORTANTE: replicação não substitui o bom e velho BACKUP! sítio principal VPN Internet réplica máquinas virtuais >100Km GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 02/10

9 Tecnologia: Rede Virtual Privativa (VPN) Por que VPN? GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 03/10

10 Tecnologia: Rede Virtual Privativa (VPN) Por que VPN? O protocolo de replicação segue o paradigma "peer to peer" e não o mais comum cliente servidor; GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 03/10

11 Tecnologia: Rede Virtual Privativa (VPN) Por que VPN? O protocolo de replicação segue o paradigma "peer to peer" e não o mais comum cliente servidor; A rede da empresa tem acesso à Internet por um desses serviços GPON com CGNAT (Carrier Grade Network Address Translation), que não permite protocolos "peer to peer"; GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 03/10

12 Tecnologia: Rede Virtual Privativa (VPN) Por que VPN? O protocolo de replicação segue o paradigma "peer to peer" e não o mais comum cliente servidor; A rede da empresa tem acesso à Internet por um desses serviços GPON com CGNAT (Carrier Grade Network Address Translation), que não permite protocolos "peer to peer"; A VPN garante privacidade por causa da criptografia e também oferece compressão de dados, aumentando a banda passante efetiva. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 03/10

13 Tecnologia: Rede Virtual Privativa (VPN) Por que VPN? O protocolo de replicação segue o paradigma "peer to peer" e não o mais comum cliente servidor; A rede da empresa tem acesso à Internet por um desses serviços GPON com CGNAT (Carrier Grade Network Address Translation), que não permite protocolos "peer to peer"; A VPN garante privacidade por causa da criptografia e também oferece compressão de dados, aumentando a banda passante efetiva. Solução encontrada: openvpn! pode não ser a coisa mais bonita ou elegante do universo, mas o canal é cifrado, tem compressão, e, o mais importante, ATRAVESSA CGNAT! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 03/10

14 Tecnologia: Virtualização GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

15 Tecnologia: Virtualização Os servidores usados na empresa são máquinas virtuais que rodam em hospedeiros Linux com qemu kvm. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

16 Tecnologia: Virtualização Os servidores usados na empresa são máquinas virtuais que rodam em hospedeiros Linux com qemu kvm. Há máquinas de vários sabores: GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

17 Tecnologia: Virtualização Os servidores usados na empresa são máquinas virtuais que rodam em hospedeiros Linux com qemu kvm. Há máquinas de vários sabores: Há sistemas legados que não tem a menor ideia de que se trata replicação. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

18 Tecnologia: Virtualização Os servidores usados na empresa são máquinas virtuais que rodam em hospedeiros Linux com qemu kvm. Há máquinas de vários sabores: Há sistemas legados que não tem a menor ideia de que se trata replicação. Nesse cenário faz muito mais sentido replicar os volumes dos hospedeiros do que dos hóspedes, pois não há necessidade de alterar qualquer coisa neles. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

19 Tecnologia: Virtualização Os servidores usados na empresa são máquinas virtuais que rodam em hospedeiros Linux com qemu kvm. Há máquinas de vários sabores: Há sistemas legados que não tem a menor ideia de que se trata replicação. Nesse cenário faz muito mais sentido replicar os volumes dos hospedeiros do que dos hóspedes, pois não há necessidade de alterar qualquer coisa neles. sistemas legados GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 04/10

20 Tecnologia: Replicação GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

21 Tecnologia: Replicação Neste caso empregamos o DRBD, da empresa austríaca LINBIT. pró: é fácil de usar. contra: é exclusivamente para Linux. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

22 Tecnologia: Replicação Neste caso empregamos o DRBD, da empresa austríaca LINBIT. pró: é fácil de usar. contra: é exclusivamente para Linux. imagem copiada do site da LINBIT GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

23 Tecnologia: Replicação Neste caso empregamos o DRBD, da empresa austríaca LINBIT. pró: é fácil de usar. contra: é exclusivamente para Linux. O DRBD intercepta as mensagens para o disco e as copia pela rede para o replicador. imagem copiada do site da LINBIT GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

24 Tecnologia: Replicação Neste caso empregamos o DRBD, da empresa austríaca LINBIT. pró: é fácil de usar. contra: é exclusivamente para Linux. O DRBD intercepta as mensagens para o disco e as copia pela rede para o replicador. A interceptação é feita no kernel e as transferências pela rede são tratadas na userland. imagem copiada do site da LINBIT GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

25 Tecnologia: Replicação Neste caso empregamos o DRBD, da empresa austríaca LINBIT. pró: é fácil de usar. contra: é exclusivamente para Linux. O DRBD intercepta as mensagens para o disco e as copia pela rede para o replicador. A interceptação é feita no kernel e as transferências pela rede são tratadas na userland. O sistema replica volumes, tais como partições de disco ou volumes lógicos. imagem copiada do site da LINBIT GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 05/10

26 Como funciona a replicação com o DRBD Recursos (resources) São os objetos da replicação. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 06/10

27 Como funciona a replicação com o DRBD Recursos (resources) São os objetos da replicação. uso esperto de snapshots! Dados: volumes lógicos, partições, discos inteiros... Meta dados: estado da sincronização. interno ou externo. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 06/10

28 Como funciona a replicação com o DRBD Recursos (resources) São os objetos da replicação. uso esperto de snapshots! Dados: volumes lógicos, partições, discos inteiros... Meta dados: estado da sincronização. interno ou externo. Papeis: Primario (dados originais) e Secundario (copia) Os papeis podem ser alterados administrativamente. Na recuperação eles se invertem. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 06/10

29 Como funciona a replicação com o DRBD Recursos (resources) São os objetos da replicação. uso esperto de snapshots! Dados: volumes lógicos, partições, discos inteiros... Meta dados: estado da sincronização. interno ou externo. Papeis: Primario (dados originais) e Secundario (copia) Os papeis podem ser alterados administrativamente. Na recuperação eles se invertem. Estados: esperando conexão tráfego intenso ocioso sincronizando atualizado tráfego moderado e por rajadas GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 06/10

30 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

31 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG Fase de sincronização GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

32 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG Fase de sincronização Transição da sincronização para atualizado às 3:30 AM GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

33 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG Fase de sincronização atualizações Transição da sincronização para atualizado às 3:30 AM GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

34 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG Fase de sincronização atualizações Transição da sincronização para atualizado às 3:30 AM Uso esperto de snapshots de volumes lógicos: GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

35 Como funciona a replicação com o DRBD Medindo o tráfego da replicação com o bom e velho MRTG Fase de sincronização atualizações Transição da sincronização para atualizado às 3:30 AM Uso esperto de snapshots de volumes lógicos: Antes de começar a atualização faz se uma copia instantanea do volume no secundario. Se alguma coisa MUITO errada acontecer durante a sincronização ainda teremos uma copia consistente, porém desatua lizada. Mas isso é bem melhor do que nada! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 07/10

36 O caso real 2 computadores em cada sitio, com um volume total de dados de aprox. 7TB. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 08/10

37 O caso real 2 computadores em cada sitio, com um volume total de dados de aprox. 7TB. Acesso à Internet no sitio principal via GPON com CGNAT, devidamente driblada com o uso de VPNs. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 08/10

38 O caso real 2 computadores em cada sitio, com um volume total de dados de aprox. 7TB. Acesso à Internet no sitio principal via GPON com CGNAT, devidamente driblada com o uso de VPNs. Banda das VPNs limitada a 2Mbps. Medições das escritas nos volumes a replicar mostraram que com isto a chance de sair de atualização de volta para sincronização ficou menor que uma ocorrencia por mês. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 08/10

39 O caso real 2 computadores em cada sitio, com um volume total de dados de aprox. 7TB. Acesso à Internet no sitio principal via GPON com CGNAT, devidamente driblada com o uso de VPNs. Banda das VPNs limitada a 2Mbps. Medições das escritas nos volumes a replicar mostraram que com isto a chance de sair de atualização de volta para sincronização ficou menor que uma ocorrencia por mês. Uma vantagem em limitar a banda é fazer com que a replicação não provoque muita carga no servidor. Os usuários reclamam se ficar lento... GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 08/10

40 O caso real 2 computadores em cada sitio, com um volume total de dados de aprox. 7TB. Acesso à Internet no sitio principal via GPON com CGNAT, devidamente driblada com o uso de VPNs. Banda das VPNs limitada a 2Mbps. Medições das escritas nos volumes a replicar mostraram que com isto a chance de sair de atualização de volta para sincronização ficou menor que uma ocorrencia por mês. Uma vantagem em limitar a banda é fazer com que a replicação não provoque muita carga no servidor. Os usuários reclamam se ficar lento... A outra é o cu$to! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 08/10

41 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

42 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! Toyota based replication São Paulo S.José dos Campos GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

43 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! Toyota based replication Embarca os computadores São Paulo S.José dos Campos GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

44 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! Toyota based replication São Paulo S.José dos Campos GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

45 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! Toyota based replication chegada ao destino São Paulo S.José dos Campos GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

46 O caso real Carga inicial feita pela rede local do sitio principal, caso contrario a sincronização tomaria mais de um mês! Toyota based replication São Paulo S.José dos Campos e aí estão eles, no conforto do gabinete de 19" GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 09/10

47 Conclusões GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10

48 Conclusões É pereitamente possível manter a réplica da infraestrutura de TI em local remoto, sincronizada com a matriz, e pronta para entrar em ação em caso de desastre. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10

49 Conclusões É pereitamente possível manter a réplica da infraestrutura de TI em local remoto, sincronizada com a matriz, e pronta para entrar em ação em caso de desastre. A combinação (ou orquestração, como está na moda) de tecnologias prontamente disponíveis permite implementar a replicação com baixo custo. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10

50 Conclusões É pereitamente possível manter a réplica da infraestrutura de TI em local remoto, sincronizada com a matriz, e pronta para entrar em ação em caso de desastre. A combinação (ou orquestração, como está na moda) de tecnologias prontamente disponíveis permite implementar a replicação com baixo custo. Não é necessário usar enlaces LAN to LAN; VPNs sobre acessos "vagabundos" resolvem. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10

51 Conclusões É pereitamente possível manter a réplica da infraestrutura de TI em local remoto, sincronizada com a matriz, e pronta para entrar em ação em caso de desastre. A combinação (ou orquestração, como está na moda) de tecnologias prontamente disponíveis permite implementar a replicação com baixo custo. Não é necessário usar enlaces LAN to LAN; VPNs sobre acessos "vagabundos" resolvem. O esquema implementado pressupõe que as alterações no conteúdo dos volumes sejam graduais. Alterações massivas (p.ex. copiar para dentro de um deles um HD inteiro de 1/4 de Tera, como eu fiz) fazem o estado do recurso voltar de atualizado para sincronizando. GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10

52 Conclusões É pereitamente possível manter a réplica da infraestrutura de TI em local remoto, sincronizada com a matriz, e pronta para entrar em ação em caso de desastre. A combinação (ou orquestração, como está na moda) de tecnologias prontamente disponíveis permite implementar a replicação com baixo custo. Não é necessário usar enlaces LAN to LAN; VPNs sobre acessos "vagabundos" resolvem. O esquema implementado pressupõe que as alterações no conteúdo dos volumes sejam graduais. Alterações massivas (p.ex. copiar para dentro de um deles um HD inteiro de 1/4 de Tera, como eu fiz) fazem o estado do recurso voltar de atualizado para sincronizando.? GTS 24 Recuperação de Desastres Facilitada 2014 Internexo Ltda. 10/10