O QUE É O BIG DATA? Big Data é o termo que descreve uma quantidade enorme de informações (volume de dados). BIG DATA ALGORITMOS 2

Tamanho: px

Começar a partir da página:

Download "O QUE É O BIG DATA? Big Data é o termo que descreve uma quantidade enorme de informações (volume de dados). BIG DATA ALGORITMOS 2"

Júlia Terra
5 Há anos
Visualizações:

2 O QUE É O BIG DATA? Big Data é o termo que descreve uma quantidade enorme de informações (volume de dados). BIG DATA ALGORITMOS 2

3 O QUE É O BIG DATA? Os dados são o novo petróleo O Big Data, tal como o petróleo, precisa ser refinado antes da utilização. Andreas Weigend(ex-cientista e chefe da Amazon) BIG DATA ALGORITMOS 3

4 O QUE É O BIG DATA? Grande conjunto de dados que só pode ser armazenado e compreendido com a ajuda de ferramentas especiais e métodos específicos." Cambridge Dictionary BIG DATA ALGORITMOS 4

5 O QUE É O BIG DATA? VOLUME VALOR VELOCIDADE BIG DATA VERACIDADE VARIEDADE BIG DATA ALGORITMOS 5

6 Importância de Big Data nas empresas BIG DATA ALGORITMOS 6

7 Desafios do Big Data Infraestrutura de armazenamento e processamento BIG DATA ALGORITMOS 7

8 Desafios do Big Data Técnicas de análise Análise Descritiva Análise Diagonóstica Análise Preditiva Análise Prescritiva BIG DATA ALGORITMOS 8

9 Desafios do Big Data Privacidade e segurança dos utilizadores BIG DATA ALGORITMOS 9

10 Algoritmos Algoritmo: fórmula matemática ou estatística executada por um software para realizar análises de dados. É uma sequência lógica, finita e definida de instruções que devem ser seguidas para resolver um problema ou executar uma tarefa, geralmente consiste de vários cálculos. BIG DATA ALGORITMOS 10

11 Supervisionados Não Supervisionados Preditivos entre Muitos outros Algoritmos de Agrupamento de Dados de Procura Classificação Documentos BIG DATA ALGORITMOS 11

12 Algoritmos Preditivos BIG DATA ALGORITMOS 12

13 Algoritmos Preditivos Modelo Preditivo: função matemática que aplicada a uma massa de dados, consegue identificar padrões ocultos e prever o que poderá ocorrer. BIG DATA ALGORITMOS 13

Algoritmos Preditivos Supervisionados Estes passam por uma fase a que chamamos treino do modelo, os dados de entrada e saída desejada são apresentados juntos.

14 Algoritmos Preditivos Supervisionados Estes passam por uma fase a que chamamos treino do modelo, os dados de entrada e saída desejada são apresentados juntos. O treino dura até que o modelo aprenda a mapear os dados e a identificar padrões entre as entradas e as saídas. Como exemplos destes modelos temos as redes neuronais e árvores de decisão. BIG DATA ALGORITMOS 14

15 Algoritmos Preditivos Não Supervisionados Os modelos não supervisionados só recebem os dados de entrada e a sua função é descobrir os relacionamentos entre os dados apresentados. BIG DATA ALGORITMOS 15

16 Algoritmos Preditivos Volume de Dados Dados Válidos Algoritmos Preditivos eficazes, com predições credíveis BIG DATA ALGORITMOS 16

17 Algoritmos de Agrupamento de Dados Este tipo de algoritmo agrupa objetos similares, utilizando um conjunto de atributos e valores. BIG DATA ALGORITMOS 17

18 Algoritmos de Agrupamento de Dados K-means O agrupamento K-means, contém uma sequência de ações que são interativas, paradas por um critério limitador de qualidade de agrupamento. BIG DATA ALGORITMOS 18

19 Algoritmos de Classificação de Documentos Conteúdo Vocabulário (palavras específicas) Classificação de documentos é um algoritmo utilizado onde cada documento é analisado e classificado num grupo de acordo com o teor da sua classe. Emoticons BIG DATA ALGORITMOS 19

e retorna a solução para o problema, geralmente após

20 Algoritmos de Busca Um algoritmo de busca, em termos gerais é um algoritmo que toma um problema como entrada e retorna a solução para o problema, geralmente após resolver um número possível de soluções. BIG DATA ALGORITMOS 20

21 Atualmente, os algoritmos do Google utilizam mais de 200 sinais ou "pistas" diferentes para "adivinhar" o que nós estamos realmente à procura. Esses sinais incluem termos mencionados nos websites, a atualização do conteúdo e a região do usuário. BIG DATA ALGORITMOS 21

Data Mining (Prospeção de Dados) Data Mining é o processo de explorar grandes quantidades de dados à procura de padrões consistentes, como regras de

22 Data Mining (Prospeção de Dados) Data Mining é o processo de explorar grandes quantidades de dados à procura de padrões consistentes, como regras de associação ou sequências temporais, para detetar relacionamentos sistemáticos entre variáveis, detetando assim novos subconjuntos de dados. BIG DATA ALGORITMOS 22

23 Data Mining (Prospeção de Dados) Limpeza Consistência, preenchimento de informações, remoção de ruído e redundâncias Repositórios Organizados A partir da "limpeza" de dados nascem os repositórios organizados, locais de armazenamento de onde pacotes de software podem ser recuperados e instalados num computador. É a partir deles que se pode selecionar algumas colunas para atravessarem o processo de prospeção de dados. Data Mining Neste momento os dados estão organizados de tal forma que é possível aplicarem-se os algoritmos eficientemente. Interpretação Normalmente depois dos algoritmos serem aplicados, um analista refine e conduz o processo até que os padrões apareçam. BIG DATA ALGORITMOS 23

24 Produto BIG DATA ALGORITMOS 24

25 Conclusão O uso do Big Data revolucionou a sociedade moderna, mais especificamente no tratamento e na análise de informação. O Big Data abriu novos horizontes, permitindo-nos analisar gigantescas quantidades de dados de forma rápida e eficiente. Estamos, deste modo, a dar um grande passo em direção a um futuro mais inovador, produtivo e rentável. BIG DATA ALGORITMOS 25

Documentos relacionados

Data Mining. Rodrigo Leite Durães

Data Mining. Rodrigo Leite Durães Rodrigo Leite Durães rodrigo_l_d@yahoo.com.br Processo de mineração de dados e descoberta de informações relevantes em grandes volumes de dados. "... processo não-trivial de identificar, em dados, padrões