Treinamento Pentaho Data Integration - Kettle - ETL Open Source - Fundamental + Avançado

Transcrição

1 Treinamento Pentaho Data Integration - Kettle - ETL Open Source - Fundamental + Avançado Sobre o treinamento O treinamento é recomendado a profissionais que busca maximizar seus conhecimentos em processos de ETL. O Pentaho Data Integration ( Kettle ) é uma poderosa ferramentas para transformações de dados ( ETLs ), com o PDI ( Pentaho Data Integration ) você pode fazer tarefas como migração de dados, transformação de dados, conversões de sistemas ou carga de bancos de dados, Além de tarefas avançadas como transferência de arquivos, envios de s, integração com webservices e programações com scripts com schedules. Todo o treinamento utiliza a versão Community Edition e pode ser interpretado como uma transferência de tecnologia para os participantes do curso. {tabs type=sliders} {tab title=disponibilidade e Calendário do Curso} LOCAL DATA E HORÁRIO INVESTIMENTO Curitiba - PR 22 a 23 de Novembro de Solicite 2018 das Orçamento 8:30 as 17:30 Desconto progressivo para grupos. Solicite Orçamento 1 / 7

2 Capacite treinamentos pessoas. {/tab} {tab *Os tem - title=treinamentos title=formas Depósito Boleto. Nota Em juros até toda de 12 in-company empenho Bancário. sua vezes de equipe, Pagamento} com in-company} para permitem realizamos cartão são orgãos calculados de um públicos. créditos treinamentos investimento de via acordo PayPal* In-company único com para seu cartão uma em todo equipe de o crédito, Brasil. de até Os cada 12 {/tab} {/tabs} Objetivo Ministrar geração Público Desenvolvedores desenvolvedores {tab=conteúdo quantidade Alvo transformação as principais Programático} de de parcelamento sistemas, ETL, funcionalidades de Analistas dados. analistas diferenciado. de e Negócio, de técnicas suporte. Analistas Pentaho de Data Business Integration Intelligence, ( Kettle DBAs, ) para cartão a Conceitual - Introdução a Business Intelligence - Introdução a Datawarehouse - O que é ETL?ÂÂ ( Extração, Transformação e Carga ). - Histórico do Pentaho Data Integration ( Kettle ). - A Suíte Pentaho. - Diferenças de versão Community Edition X Enterprise Edition. - Introdução a Data Staging Instalação - Pentaho Data Integration - Instalação do Kettle ( Linux,Windows e MacOS ). - Ambiente Server (Produção e Desenvolvimento ). PDI - Pentaho Data Integration - Fundamentos 2 / 7

3 - Componentes do Pentaho Data Integration ( Kettle). - Spoon - Pan - kitchen - Carter - Steps e Hops. - Transformação de dados. - Transformando dados em bases de dados Dimensionais ( OLAP ) - Populando Tabelas ( Dimensões e Fatos ) - Integração entre Sistemas Transacionais. - Trabalhando com Merge de dados. - Trabalhando com constantes. - Explorando componentes. - Enviando s. - Trabalhando com Jobs. Trabalhando com Planilhas e Arquivos Texto - Transformando Planinhas em bases de dados SQL. - Transformando Base de Dados SQL em Planinhas. - Transformando arquivos texto em bases de dados SQL - Transformando Base de dados SQL em arquivos Texto ( posicional ou delimitado ) Steps Complementares e Avançados - Steps de Input (Get System info,get File Names, OLAP Input, messages input ) - Steps de Transformação ( Row denormaliser, Row flattener,row Normaliser,Split field to Rows, Split Fields ) - Steps Utility ( Clone Row, If field value is null, Run SSH commands) - Steps Lookup ( Call DB procedure, Check if a column exists, check if file is locked, Database Join, Database lookup, File Exists ) - Steps Joins ( Join Rows ( cartesian product ), Merge rows (diff), Sorted Merge, XML Join ) - Steps Experimentais ( Script Javascript, Script Python ) 3 / 7

4 - Steps Jobs Utility ( ping a Host, Truncate tables ) - Steps Jobs Mail ( Get mails POP3/IMAP) - Steps File management ( Copy Files, create file, create a folder, file comparate, delete files, delete folters, Zip file) - Steps Condition ( Check DB connection, Check webservice availability ) - Steps Scripting ( Javascript, Shell, SQL ) - Steps XML ( DTD Validation ) - Steps File Transfer ( FTP delete, Get a file with FTP, Get a file with SFTP, Upload files to FTPS, SSH2 Get, SSH2 Put ) PDI - WebServices e HTTP - Acesso a WebServices com Web services lookup (SOAP) - Acesso a WebServices REST com step Rest Client - Gerando JSON para envio por REST com os steps JSON Output e JavaScript - Chamadas HTTP por URL com step HTTP Client - Chamadas submit via Post/HTTP com o step HTTP Post PDI Automatizando Jobs e Transformações - Automatizando Jobs e Transformações via agendador ( Schedulers no Linux e Windows). - Passando Parâmetros via linha de comando - Passagem de parâmetro entre transformações e Jobs. - Trabalhando com Logs. Pentaho e Big Data - OverView - Overview Conceitual de Big Data - Overview Pentaho Data Integration e seus componentes para Big Data 4 / 7

5 - Overview Orquestração do Big Data com Pentaho {tab=pré-requisitos} - Conhecimento básico em lógica de programação. - Conhecimento básico banco de dados. - Conhecimento em SQL ANSI. {tab=requisitos} Alunos - Todos os participantes devem trazer um notebook para realizar as atividades práticas. - O Computador deve estarââ com acesso de administrador para possibilitar instalações de aplicativos e acesso a Internet. - Para turmas In-Company não trabalhamos com limite de participantes para os treinamentos, orientamos que as turmas sejam de até 12 alunos para um melhor desempenho. Requisitos mínimos de hardware 5 / 7

6 - Memória RAM : 4GB - Espaço em Disco: 5GB - Processador: Dual-core AMD 64, EM64T - Sistemas Operacionais : Linux( de preferência baseados em Debian), Windows, MacOS. {tab=carga Horária} 16 Horas de Duração 100% Presencial {tab=material e Metodologia} Serão disponibilizados os seguintes materiais aos alunos do treinamento: - Todos os softwares Pentaho CE e acessórios na sua última versão estável. - Material próprio em Português do Brasil. - Apresentações ( slides do treinamento ) desenvolvidas pela equipe Ambiente Livre. - Apostilas digitais dos softwares desenvolvidas pela Ambiente Livre. - Apostilas com exercícios práticos desenvolvidos no treinamento. - Materiais e documentações complementares desenvolvido pela Comunidade Open Source Mundial. - Caneta, Pasta e Bloco de Anotações. Metodologia - Todos os dias serão apresentados novos recursos e conceitos e avaliados através de 6 / 7

7 exercícios práticos em todas as aulas. {/tabs} 7 / 7