Geo Big Data - criar mapas incríveis com milhões de pontos pode ser simples

Transcrição

1 21/10/2014 gogeo High Performance Maps Platform Vagner Sacramento

2 Quem somos? Head Vagner Sacramento - Ph.D in Computer Science - Experienced in Distributed Algorithms - Experienced in Distributed Scalable System and high performance computing gogeo It s the result of years of research and projects that have gone into the creation of a company with global potential. Headquarters Goiânia, Goiás - Brazil

3 Agenda 1. O que é GIS? 2. Requisitos e Desafios para as plataformas de Big Data Geoespacial 3. As plataformas GIS suportam Geo Big Data? 4. Hands-on 3

4 O que é Geoservice ou GIS? Geographic Information System GIS 4

5 Por que GIS? Logística Inteligência de Mercado - Imobiliário - Franquias - Varejo - Indústrias

6 Isto é GIS B2B Pesquisando Geo Business Data Analysis Mobile Data ERP Data CRM Data Open Data Gov Data Sales Force BI Data Social Data Logistic Data Tracking 6 Data 6

7 Cenário Atual Grande volume de dados acessível Dados Geolocalizados: Dados dos Governos (municipal, estadual e federal) IBGE (Census Data Brasil e outros países) Dados Abertos: ( GDELT ( OpenStreetMaps: Transações do seu ERP, CRM, Força de Venda Mobile Location Rastreamento de veículos e dispositivos móveis 7

8 Cenário Atual Recursos computacionais para processamento disponíveis E CADA VEZ MAIS BARATO! Guerra de preço entre os provedores de infraestrutura em Cloud!!! 8

9 Geospatial Big Data Como explorar o poder de análise das informações sobre um MAPA processando BIG DATA? 9

10 O que é Big Data? 10

11 Plataformas de Geo Big Data Duas categorias: Off-line Analytics Hadoop Hadoop GIS Real-time Processing (Alta perfomance!) gogeo SAP HANA Spatial 11

12 Escopo de uma Plataforma Big Data Serviços de uma Plataforma de Big Data? Analytics GEO Big Data Platforms Serviço de Recomendação Análise de Sentimento via Twitter Infra-estrutura 12

13 Requisitos Básicos de uma Plataforma de Big Data Geoespacial Como é feito na gogeo?

14 Processamento centralizado não é adequado para Big Data Your Data in Your Data in Your Data in Plataformas GIS Atuais Escalabilidade Vertical Map Server + Spatial Data Base Server Processamento Geo Centralizado e Limitado 14

15 Processamento centralizado não é adequado para Big Data Geoespacial Client Tier Servidor de Mapa Banco de dados Geográfico [ { "type": "Feature", "geometry": { "type": "Point", "coordinates": [102.0, 0.6] }, "properties": 2Gb Business Logic Tier Database Tier

16 Plataforma de Big Data Geoespacial Your Data In Your Data In Your Data In gogeo Cloud Native GIS Platform Escalabilidade Horizontal Out Map Server + Spatial Data Base Server Distributed Geo Processing 16

17 gogeo: High Perfomance Maps Platform Unique Cloud Native GIS Platform

18 Qual é o Problema? Desenvolver uma aplicação que analisa grande volume de dados geolocalizados é complexo, muito caro e tecnicamente impeditivo. 18

19 Por que resolvemos este problema de forma ÚNICA? gogeo é uma plataforma GIS nativa para Cloud Computing Permite um desenvolvedor criar um serviço GIS de alta performance em 30 minutos para analisar milhões de itens sobre um mapa. Nenhuma Plataforma GIS faz isto! Nem mesmo ArcGIS e Oracle Spatial. 19

20 Por que usar a gogeo? Reduzimos seu cu$to, tempo e risco para criar serviços GIS inovadores. 20

21 GOGEO DEMONSTRATION APPS Geo Big Data - criar mapas incríveis com milhões de pontos pode ser simples 21

22 gogeo Cloud - Demos Apps Bases de dados 8 milhões de empresas no Brasil 2 milhões de empresas em São Paulo 4 milhões de empresas nos EUA Infra-estrutura IBM SoftLayer Cluster com 7 máquinas em rede Gigabit 24 x 7 = 168 cores 24 x 7 = 168 GB de RAM 22

23 Aplicação de Demonstração Nada pré-processado. Análises interativas e em tempo real! 23

24 gogeo Cloud: Geospatial Platform as a Service Data Uploaded API Projetada para Geo Big Data Alta performance Escala sob demanda 24

25 Hands -on O que vamos fazer? Primeiro: Experimentar várias bases de dados com milhões de pontos fazendo restrições espaciais e relacionais Depois: Implementar um Serviço de Clustering para datasets com milhões de empresas no Brasil e nos EUA fazendo análises dinâmicas sobre os dados com restrições espaciais e relacionais As bases foram inseridas previamente 25

26 Hands -on Não precisa de Sign Up Oferecemos chave de mapa pública para seus primeiros testes 26

27 Por que ser um Beta Tester da gogeo? Usar a gogeo por um mês prorrogável por mais um Explorar a gogeo Data Store Acesso a uma base com 2 milhões de empresas do Brasil (Temos uma base de 13 milhões de CNPJ) Base do CENSO IBGE de 3 estados Sua própria base de dados Inserir e criar serviços com sua própria base com até 1 milhão de registros Observação: - Google Maps Engine concede 10 mil pontos para teste. - ARC GIS online não suporta processamento e visualização com BIG DATA. 27

28 O que esperamos de você? FEEDBACK!!! Crie Serviços OUSADOS para o seu (novo) negócio? 28

29 Usar a gogeo?

30 Vagner Sacramento