SOLUÇÃO HADOOP COM EMC ISILON E CLOUDERA ENTERPRISE

Transcrição

1 SOLUÇÃO HADOOP COM EMC ISILON E CLOUDERA ENTERPRISE PRINCÍPIOS BÁSICOS EMC ISILON Use a primeira e única solução NAS scale-out do setor com suporte nativo ao Hadoop Reduza os custos e acelere os resultados com lógica analítica de dados no local Aumente a eficiência com mais de 80% de utilização do armazenamento e desduplicação de dados Dê suporte simultaneamente a várias versões e instâncias do Hadoop Ganhe mais flexibilidade operacional com suporte a vários protocolos Obtenha uma escalabilidade fácil e rápida para 68 PB em um só cluster do Isilon Lógica analítica eficiente e flexível do Hadoop no local A OPORTUNIDADE DO BIG DATA O rápido crescimento dos dados representa um desafio significativo para muitas empresas de uma ampla variedade de setores atuais. Muitas organizações estão percebendo que o Big Data é um ativo valioso que pode ser aproveitado para desvendar novas oportunidades de acelerar seus negócios e ganhar vantagem competitiva. O elemento central para aproveitar essa oportunidade é o Hadoop, um mecanismo inovador de Big Data Analytics projetado especificamente para analisar conjuntos de dados de grande escala. DESAFIOS DAS IMPLEMENTAÇÕES TRADICIONAIS DO HADOOP Embora muitas empresas comecem a usar o Hadoop para capturar e armazenar dados para análise futura em um pool consolidado, muitas já têm sistemas de armazenamento de NAS (Network-Attached Storage) ou SAN (Storage Area Network) que existem em estruturas isoladas da organização. Como esses sistemas de armazenamento de dados podem ser utilizados sem o capital de investimento separado necessário e sem recursos adicionais de gerenciamento? Como as organizações resolvem O armazenamento ineficiente com pouca utilização e gerenciamento complexo devido às estruturas isoladas? A inclusão manual de grandes conjuntos de dados no Hadoop, que consome tempo e recursos? O acesso ou compartilhamento de resultados de dados e lógica analítica da organização, já que a maioria dos sistemas não dá suporte ao HDFS (Hadoop Distributed File System)? ABORDAGEM COMBINADA ENTRE O ISILON E A CLOUDERA O EMC Isilon combinado à Cloudera oferece uma solução completa, testada e conhecida que abrange a distribuição do Apache Hadoop e os projetos relacionados. A combinação do armazenamento compartilhado de Big Data do Isilon com a plataforma de gerenciamento de dados do Cloudera Enterprise ajuda as organizações a acelerar o tempo para obter percepções, aplicar uma segurança consistente, habilitar o acesso com vários protocolos e eliminar as estruturas isoladas de armazenamento com uma solução avançada, mas simples, eficiente, dimensionável e completa. VISÃO GERAL DA SOLUÇÃO

2 O Isilon é a primeira e única plataforma de NAS scale-out que tem suporte nativo ao HDFS e aos tradicionais SMB (Server Message Block), NFS (Network File System, sistema de arquivos de rede), HTTP e FTP. Isso permite que as organizações implementem um sistema de armazenamento compartilhado que funciona com as cargas de trabalho tradicionais, novas e emergentes. Além de oferecer os elementos principais do Hadoop, o Cloudera Enterprise se concentra em tornar a plataforma de gerenciamento de Big Data segura, gerenciada, controlada e aberta. O Cloudera Enterprise é uma solução completamente testada, documentada e compatível que elimina a necessidade de adivinhações durante a implementação do Hadoop. Juntos, o Isilon e a Cloudera oferecem uma solução abrangente de armazenamento dimensionável e computação distribuída para atender à maioria das necessidades corporativas de Big Data Analytics. ARMAZENAMENTO COMPARTILHADO DO EMC ISILON O Isilon combina uma plataforma de armazenamento avançada, porém simples, altamente eficiente e extremamente dimensionável com suporte integrado à lógica analítica do Hadoop. O suporte nativo do Isilon ao HDFS permite que você implemente rapidamente uma solução de lógica analítica de dados no local e evite gastos de capital desnecessários, aumento dos custos operacionais e replicação demorada de seu Big Data em uma infraestrutura separada. Basta conectar seus recursos de computação de lógica analítica a seu sistema de armazenamento do Isilon e, assim, você estará pronto para começar seus projetos de lógica analítica imediatamente.

3 OBTENHA PERCEPÇÕES MAIS RAPIDAMENTE A abordagem do Isilon de lógica analítica de dados no local permite que você elimine o tempo e os recursos necessários para replicar seu conjunto de Big Data em uma infraestrutura separada do Hadoop. Por exemplo, a cópia de 100 TB de dados por uma linha de 10 Gb pode demorar mais de 24 horas. Com o Isilon, por outro lado, você pode iniciar os projetos de lógica analítica de dados imediatamente e obter resultados com rapidez. DESFRUTE DE MAIS FLEXIBILIDADE O Isilon dá suporte simultaneamente a várias instâncias e várias versões das distribuições do Apache Hadoop. Isso permite que você aproveite as ferramentas de que precisa em todos os seus projetos de lógica analítica de dados não estruturados. Além do suporte nativo ao HDFS 1.0 e ao HDFS 2.0, as soluções Isilon incluem suporte integrado a uma ampla variedade de protocolos padrão do setor, inclusive NFS, SMB, HTTP, FTP, SWIFT e acesso a objetos com base em REST. TENHA ACESSO A UMA ENORME ESCALABILIDADE Com o Isilon, você tem um grande espaço para crescimento de seus ativos de dados não estruturados e os projetos relacionados de lógica analítica. O Isilon pode ser dimensionado de 18 TB a 68 PB de capacidade em um só cluster. O sistema operacional EMC Isilon OneFS permite que um sistema de armazenamento seja aumentado de maneira simétrica ou independente à medida que mais espaço ou capacidade de processamento forem necessários. Isso proporciona a você uma verdadeira abordagem de crescimento em seu próprio ritmo e a capacidade de fazer scale-out conforme as necessidades dos negócios. Com o Isilon, a capacidade e o desempenho podem ser dimensionados. PROTEJA SEUS ATIVOS DE BIG DATA O Isilon oferece níveis inigualáveis de disponibilidade e proteção de dados para atender a uma ampla variedade de necessidades corporativas. O OneFS permite que todos os nós do cluster de armazenamento do Isilon tornem-se NameNodes, o que melhora a resiliência de seu ambiente Hadoop. O Isilon também oferece opções completas de proteção de dados para proporcionar backup e recuperação eficientes dos dados. É possível agendar snapshots com a frequência necessária para atender a seus objetivos específicos de ponto de recuperação. Para proporcionar uma proteção confiável de recuperação de desastres, o Isilon oferece uma rápida replicação de dados, juntamente com failback e failover simples, para aumentar ainda mais a disponibilidade de seus ativos de dados. Ele também faz o roteamento automático dos clients aos nós com base na carga, o que impede o excesso de inscrição dos nós de armazenamento que já estão extremamente sobrecarregados com uma alta carga de trabalho. Além disso, o Isilon oferece separação de tráfego com o uso de zonas de acesso, para que as cargas de trabalho do Hadoop possam ser isoladas de outras cargas de trabalho relevantes. PROTEJA SEUS ATIVOS DE BIG DATA Para ajudar você a cumprir os requisitos de conformidade e governança corporativa, o Isilon oferece sólidas opções de segurança, inclusive auditoria de file system e proteção de dados WORM (Write Once Read Many times), para impedir alterações ou exclusões acidentais ou malintencionadas. Com o Isilon, você pode também garantir a segurança na separação de funções entre a administração de armazenamento e o acesso ao file system, bem como as zonas de autenticação, para criar pools de armazenamento isolados e protegidos para departamentos específicos de sua organização. Independentemente de seus dados estarem em trânsito ou em repouso, o Isilon proporciona uma solução completa de criptografia.

4 MELHORE A UTILIZAÇÃO DO ARMAZENAMENTO CLOUDERA ENTERPRISE Unificado um sistema integrado que reúne vários usuários e cargas de trabalho de aplicativo em um pool de dados de uma infraestrutura comum, sem necessidade de movimentação de dados Seguro segurança de perímetro, autenticação, autorização granular e proteção de dados Gerenciado alta disponibilidade nativa, tolerância para falhas, armazenamento com autocorreção, automatização de recuperação de desastres e backups e gerenciamento avançado de dados e de sistemas Aberto código aberto licenciado pela Apache para garantir que seus dados e aplicativos continuem sendo seus, e uma plataforma aberta que se conecta a todos os seus investimentos existentes em tecnologia e qualificações Com o Isilon, você pode consolidar sua infraestrutura de armazenamento, inclusive ativos de dados não estruturados e semiestruturados. Devido à taxa de utilização do armazenamento de mais de 80%, que pode ser melhorada em mais 35% com o uso da desduplicação de dados do EMC Isilon SmartDedupe (que elimina dados redundantes), você precisará de menos capacidade de armazenamento e espaço físico para hospedar seu conjunto de dados, o que reduz os gastos iniciais de capital e os custos operacionais contínuos. CLOUDERA ENTERPRISE O Cloudera Enterprise ajudará você a orientar-se por informações, aproveitando o melhor da comunidade de código aberto e os recursos corporativos de que você precisa para ter sucesso com o Apache Hadoop em sua organização. Projetado especificamente para ambientes de missão crítica, o Cloudera Enterprise inclui o CDH (a plataforma baseada em Hadoop e de código aberto mais popular do mundo), ferramentas avançadas de gerenciamento de sistemas e dados, além de suporte dedicado e defesa da comunidade oferecidos por nossa equipe internacional de desenvolvedores e especialistas do Hadoop. A Cloudera é sua parceira no caminho para o Big Data. REPENSE O GERENCIAMENTO DE DADOS O Cloudera Enterprise foi projetado para funcionar como um hub de dados corporativos. Ele é: Uma plataforma extremamente dimensionável para armazenar qualquer volume ou tipo de dados no formato original e pelo período desejado ou obrigatório Integrado a sua infraestrutura e a suas ferramentas existentes Flexível para executar várias cargas de trabalho corporativas, inclusive processamento em lote, SQL interativo, pesquisa corporativa e lógica analítica avançada O elemento que oferece sólidos recursos de segurança, governança, proteção de dados e gerenciamento de que as empresas precisam Com o Cloudera Enterprise, as principais organizações atuais podem colocar os dados no centro de suas operações para aumentar a visibilidade dos negócios e reduzir os custos, ao mesmo tempo que gerenciam os riscos e os requisitos de conformidade.

5 NOSQL ON-LINE HBASE O HBase é uma área de armazenamento distribuída de chaves e valores que ajuda você a criar aplicativos em tempo real e com rápido acesso aleatório em grandes tabelas com bilhões de linhas e milhões de colunas. Ao implementar o HBase como parte do Cloudera Enterprise Flex Edition ou o Data Hub Edition como parte de um hub de dados corporativos, você poderá contar com nosso suporte técnico líder do setor ao HBase, além de influenciar ativamente o futuro do projeto. SQL ANALÍTICO CLOUDERA IMPALA O Cloudera Impala é o mecanismo líder do setor de consulta SQL com MPP (Massively Parallel Processing, processamento altamente paralelo) que é executado nativamente no Apache Hadoop. Com o Impala, você pode permitir que os analistas e cientistas de dados interajam diretamente com todos os dados armazenados no Hadoop usando ferramentas e qualificações de BI (Business Intelligence) por meio de uma interface SQL padrão do setor. Também é possível liberar o Business Intelligence com autoatendimento ao Hadoop, aliviando a carga sobre os bancos de dados analíticos existentes e reduzindo seu "acúmulo de BI". PESQUISA CLOUDERA SEARCH O Cloudera Search permite que seus usuários consultem e procurem dados no Hadoop da mesma forma que em uma pesquisa no Google ou em seu site favorito de comércio eletrônico. Viabilizado pelo Apache Hadoop e pelo Apache Solr (o padrão corporativo de pesquisa de código aberto), o Cloudera Search traz escala e confiabilidade para uma nova geração de pesquisas integradas e com várias cargas de trabalho. Por meio de suas integrações exclusivas ao Cloudera Enterprise, o Cloudera Search apresenta os mesmos recursos de tolerância para falhas, escala, visibilidade, segurança e flexibilidade oferecidos às outras cargas de trabalho dos hubs de dados corporativos. APRENDIZAGEM AUTOMÁTICA EM MEMÓRIA E PROCESSAMENTO DE FLUXO APACHE SPARK O Apache Spark (em criação) é um framework de processamento paralelo de dados que complementa o Apache Hadoop para facilitar o desenvolvimento de aplicativos rápidos e unificados de Big Data, combinando a lógica analítica em lote, de fluxo e interativa em todos os seus dados.

6 RESUMO O EMC Isilon combinado à Cloudera oferece uma solução de lógica analítica e armazenamento de Big Data que é avançada, mas simples e altamente eficiente. Além disso, ela conta com uma plataforma de armazenamento compartilhado extremamente dimensionável e com a distribuição líder do setor de lógica analítica do Hadoop. Com o Isilon, você pode simplificar sua infraestrutura de armazenamento consolidando ativos de dados não estruturados e arquivos de grande escala, eliminando assim as estruturas isoladas de armazenamento e reduzindo os custos. Com a lógica analítica no local, as soluções Isilon também permitem que você reduza o tempo de obtenção de percepções. Ao mesmo tempo, você ganha flexibilidade para dar suporte simultaneamente a várias instâncias das distribuições do Apache Hadoop de diferentes fornecedores. FALE CONOSCO Para saber mais sobre como os produtos, serviços e soluções da Dell EMC podem ajudam a resolver seus desafios de negócios e de TI, entre em contato com seu representante local ou revendedor autorizado, ou visite nosso site Brazil.EMC.com/Isilon Com o Cloudera Enterprise, você recebe os elementos principais do Hadoop, componentes adicionais, como interface do usuário, e os recursos corporativos necessários, como segurança e integração a uma ampla variedade de soluções de software e de hardware. Todo o serviço de integração é feito para você, e a solução como um todo é completamente testada e documentada. Eliminando a necessidade de adivinhações durante sua implementação Hadoop, o Cloudera Enterprise oferece um caminho simplificado para o sucesso resolvendo problemas reais dos negócios. DÊ O PRÓXIMO PASSO Entre em contato com seu revendedor autorizado ou seu representante da equipe de vendas da EMC para saber mais sobre como as soluções de lógica analítica e armazenamento de Big Data do EMC Isilon podem beneficiar sua organização. Veja também nossas soluções na EMC Store em e as soluções da Cloudera em