Pentaho IoT Analytics Open Source Trilha IoT

Tamanho: px

Começar a partir da página:

Download "Pentaho IoT Analytics Open Source Trilha IoT"

Iasmin Galindo
4 Há anos
Visualizações:

1 Pentaho IoT Analytics Open Source Trilha IoT Marcio Junior Vieira CEO & Data Scientist, Ambiente Livre

2 Marcio Junior Vieira Mini-cv 18 anos de experiência em informática, vivência em desenvolvimento e análise de sistemas de Gestão empresarial e Analise de Dados. Trabalhando com Free Software e Open Source desde 2000 com serviços de consultoria e treinamento. Graduado em Tecnologia em Informática(2004) e pós-graduado em Software Livre(2005) ambos pela UFPR. Palestrante FLOSS em: FISL, LATINOWARE,Campus Party, Pentaho Day, TDC, Ticnova, FTSL. Organizador Geral: Pentaho Day 2017, 2015 e apoio nas ed e CEO da Ambiente Livre, Prof de MBA em Big Data da Univ. Positivo. Data Scientist, Instrutor e Consultor de Big Data com tecnologias abertas. Ajudou a capacitar equipes de Big Data na IBM, Accenture, Tivit, Serpro, MP, Netshoes, Embraer entre outras. 2017, Ambiente Livre. Todos direitos reservados (41)

4 Indústria 4.0. A próxima revolução industrial. baseado no Quarto paradigma da ciência

5 O Quarto Paradigma da Ciência Empírica: É uma maneira de adquirir conhecimento por meio de observação ou experiência direta e indireta. Investigação: Melhorar as teorias científicas para uma melhor compreensão ou previsão de fenômenos naturais. Muitas vezes impulsionado pela curiosidade. Computação: Estuda as técnicas, metodologias e instrumentos computacionais, que automatiza processos e desenvolve soluções baseadas no uso do processamento digital. Baseada em dados ( data-driven ) Ciência Sobre os Dados ou Ciência dos Dados

6 Data Science Campo interdisciplinar de pesquisa sobre métodos científicos, processos e sistemas para extrair conhecimentos ou insights a partir de dados em várias formas, estruturadas ou não estruturadas, semelhantes ao KDD. Unificar estatísticas, análise de dados e seus métodos relacionados, a fim de compreender e analisar fenômenos reais com dados. Emprega técnicas e teorias extraídas das áreas amplas de matemática, estatística, ciência da informação e ciência da computação, aprendizagem de máquinas, classificação, análise de cluster, mineração de dados, bancos de dados e visualização.

7 Impacto IoT (Big Data) U$ 4 a 11 trilhões a partir de 2025

8 Vantagens Competitivas Big Data Melhorar a precisão das previsões de demanda; Desenvolver novos serviços; Descobrir novos padrões de demanda; Realizar um planejamento de oferta em tempo real, usando recursos e dados de sensores de produção e da IOT.

9 Otimizando Operações com Video Analytics

10 0 Video Analytics LIDAR - Light Detection And Ranging Camera: Time of flight (TOF) 3D-LiDAR (TOF) Motion Sensor

11 1 IoT no Campo! "Congresso Brasileiro de Agricultura de Precisão:" "Construção de Dados na Era da Digitalização Agrícola"

12 2 Sensores de Voo

13 3 Uso dos dados

14 4 Inteligência Artificial

15 Convergência Tecnológica Big Data Business Intelligence Databases 5 Data Analytics Blockchain Deep Learning Inteligência Artificial Machine Learning Data Science RPA Data Mining Inteligência Cognitiva Chatbots

16 6

17 7 Pentaho Data Integration ( PDI ) Processa em Paralelo ( Também roda em Cluster Spark) Acessar dados diretamente (se necessário sem DW ) Permite publicar dados diretamente em Reports, Ad-Hoc Reports e Dasboards. Programação e Fluxo Visual com aproximadamente 350 steps diferentes

18 8 Ingestão de Dados de Sensores MQTT Message Queue Telemetry Transport Protocolos de rede para a IoT Padrão para comunicações de IoT Desenvolvido pela IBM

19 9 IoT Analytics - Arquitetura

20 0 CTools / Pentaho Dashboards

21 1 IoT Analytics - CTools / Pentaho Dashboards

proporcionam aos gestores empresariais a informação

22 2 Dashboards ( Ctools ) Oferecer métricas em uma atrativa interface intuitiva e visual, painéis proporcionam aos gestores empresariais a informação crítica de que necessitam para entender e melhorar o desempenho organizacional.

23 3 Pentaho Data Mining - Weka Weka Desenvolvido pela Universidade de Waikato (Waikato Environment for Knowledge Analysis) Licença GPL Desenvolvido em Java Iniciado o desenvolvimento em O software foi adquirido pela Pentaho Corporation em 2016 (Hoje Hitachi Vantara ). Site do projeto:

24 4 Pentaho e Machine Learning / Data Mining Data Integration Plugins Machine Learning Intelligence. Drag-and-Drop Machine Learning Engines: python, R, Weka and Spark MLlib..

25 5 Machine Learning e Data Science inclusive R, Python, WEKA com Spark Automação e orquestração do fluxo

26 6 Um exemplo Data Science / Machine Learning

27 7 Extração de Características

28 8 Aprendizagem Supervisionada Fase 1 Supervisor Extração de Características Algoritmo de Aprendizagem Modelo Preditivo Fase 2 Extração de Características Modelo Preditivo Iris Versicolor

29 9 Um exemplo para ilustração Data Science

30 0 AEL Arquitetura Visão Geral

31 1

32 Obrigado Marcio

Documentos relacionados

Elaborando uma plataforma de Big Data & Analytics 100% Open Source com apoio do Pentaho.

Open Source Data Science Elaborando uma plataforma de Big Data & Analytics 100% Open Source com apoio do Pentaho. Palestrante: Marcio Junior Vieira CEO e Data Scientist na Ambiente Livre marcio@ambientelivre.com.br