Web Crawlers Open Source. Heitor de Souza Ganzeli Analista de Projetos do nic.br

Tamanho: px
Começar a partir da página:

Download "Web Crawlers Open Source. Heitor de Souza Ganzeli Analista de Projetos do nic.br"

Transcrição

1 Web Open Source Heitor de Souza Ganzeli Analista de Projetos do nic.br

2 O Comitê Gestor da Internet no Brasil (CGI.br) foi criado pela Portaria Interministerial nº 147, de 31 de maio de 1995, alterada pelo Decreto Presidencial nº 4.829, de 3 de setembro de 2003, para coordenar e integrar todas as iniciativas de serviços Internet no país, promovendo a qualidade técnica, a inovação e a disseminação dos serviços ofertados.

3 O NIC.br é uma instituição sem fins de lucro, que funciona como braço executivo do CGI.br Nomes de domínio.br Números IP Segurança na Internet brasileira Indicadores sobre uso das TICs Infraestrutura PTTs IPv6 SIMET = medição de qualidade Estudo da Web Zappiens Padrões Web

4 Agenda INTRODUÇÃO CRAWLERS PROJETOS RELACIONADOS

5 Projetos Funcionamento Relacionados

6 Projetos Funcionamento Relacionados Projeto TIC Web Iniciado em 2009 Publicação de dados do domínio.gov.br em CEPTRO/MenuCEP TROSPCensoWeb

7 Projetos Funcionamento Relacionados O que é um Web crawler Programa que navega de forma automática e ordenada a Web Alguns sinônimos: Spider Bots Robots indexadores

8 Projetos Funcionamento Relacionados Aplicações Buscadores Ranking Interface de usuário Web Indexador Índice Servidores Broker

9 Projetos Funcionamento Relacionados Aplicações Buscadores Ranking Interface de usuário Web Indexador Índice Servidores Broker

10 Projetos Funcionamento Relacionados Como Funciona Seleção Lista Inicial Extração de links Download

11 Projetos Funcionamento Relacionados Limitações senha

12 Projetos Funcionamento Relacionados Desafios Tamanho Obsolescência Qualidade Uso eficiente de recursos Controle Distribuído

13 Projetos Funcionamento Relacionados Alguns exemplos de web crawler Open source Wire Heritrix Wget Nutch

14 WIRE

15 Características Desenvolvido pelo CWR Cunho acadêmico Escalável C/C++ Altamente configurável Foco em análise dos dados

16 Arquitetura Manager Seeder Base de dados Harvester Gatherer

17 Exemplo de configuração Arquivo XML Configuração centralizada

18 Exemplo de execução export WIRE_CONF=/media/drive2/teste/sample.conf wire-bot-reset wire-bot-seeder --start /media/drive2/teste/list wire-bot-run 5

19 Exemplo de execução

20 WIRE-NIC Algumas correções: Melhora do parsening de páginas Suporte a HTTP1.1 Melhora na identificação do encoding das páginas Correção de alguns bugs de execução

21 Problemas Relativamente lento Storage único Difícil de ser testado Arquitetura unithead Antigo

22 GNU WGET

23 Características Simples Linha de comando Download sequencial Utiliza sistema de arquivos da máquina

24 Controles de básicos Limite de profundidade Lista de domínios Tipos de arquivos baixados Tempo entre downloads Substituir links

25 Alguns exemplos Baixar site: wget r

26 Baixar site: wget r Alguns exemplos

27 Alguns exemplos Adicionar delay: wget r w 2

28 Alguns exemplos Baixar apenas páginas: wget r w 2 A.html,.htm,.php

29 Alguns exemplos

30 Alguns exemplos

31 Alguns exemplos Baixar apenas páginas: wget -r -w 2 -R.gif,.png,.jpeg

32 HERITRIX

33 Características Internet Archive Java Componentes intercambiáveis Scopo Frontier Gerenciador Process Chains

34 Arquitetura Interface Web Requisição de Crawling Controlador Frontier Nova URI Process Chain URIs a serem executadas URIs já incluídas Adiciona novas URIs Conclui URI

35 Problemas Difícil de ser configurado Não se recupera bem de falhas Fornece poucas ferramentas de análise

36 Exemplo de execução

37 APACHE NUTCH

38 Características Apache foundation Parte do projeto Apache Solr Alta performace em clusters com hadoop Robusto Escalavel

39 Arquitetura Injetor Gerador Buscador Base de Crawling Base de links Atualiza Inversot de links repositório indexador parser Filtros, normalizadores

40 Exemplos de Execução

41 Projetos Relacionados

42 O ASA

43 Projeto Top Sites Estatísticas sobre a lista dos top 1 milhão sites do Alexa

44 Projeto BR Sites Estatísticas sobre lista do.br baseada em consultas ao DNS do registro.br

45 TIC Web Análise periódica de domínios específicos Como analisar o.com.br

46 Sistema Projetos Funcionamento Relacionados Motivação Obrigado! Perguntas? Contatos:

47 Sistema Projetos Funcionamento Relacionados Motivação referências https://webarchive.jira.com/wiki/display/heritrix/heritrix https://webarchive.jira.com/wiki/download/attachments/5441/mohr-etal-2004.pdf Distributed WR tutorial Ricardo Baeza-yates lecki_bbuzz2010.pdf

Tendências Web Estatísticas da rede. Heitor de Souza Ganzeli Analista de Projetos do nic.br

Tendências Web Estatísticas da rede. Heitor de Souza Ganzeli Analista de Projetos do nic.br Tendências Web Estatísticas da rede Heitor de Souza Ganzeli Analista de Projetos do nic.br O Comitê Gestor da Internet no Brasil (CGI.br) foi criado pela Portaria Interministerial nº 147, de 31 de maio

Leia mais

Utilizando ferramentas de software livre para estudar a Web Brasileira

Utilizando ferramentas de software livre para estudar a Web Brasileira Utilizando ferramentas de software livre para estudar a Web Brasileira Agenda 1. O projeto 2. As Etapas 3. Ferramentas Utilizadas: Wire, Analise internet 4. Desafios Utilizando ferramentas de software

Leia mais

Ensinando Redes com Emuladores. Edwin Cordeiro NIC.br

Ensinando Redes com Emuladores. Edwin Cordeiro NIC.br Ensinando Redes com Emuladores Edwin Cordeiro NIC.br Agenda Sobre o CGI.br e o NIC.br Curso IPv6.br Laboratórios reais Laboratórios virtuais Opções de emuladores Exemplos Conclusões O Comitê Gestor da

Leia mais

IPv6 nas Universidades e Redes Acadêmicas

IPv6 nas Universidades e Redes Acadêmicas IPv6 nas Universidades e Redes Acadêmicas O Comitê Gestor da Internet no Brasil (CGI.br) foi criado pela Portaria Interministerial nº 147, de 31 de maio de 1995, alterada pelo Decreto Presidencial nº 4.829,

Leia mais

Analisador de Sites Automático. Palestrante: Heitor de Souza Ganzeli

Analisador de Sites Automático. Palestrante: Heitor de Souza Ganzeli Analisador de Sites Automático Palestrante: Heitor de Souza Ganzeli O que é o ASA? Monitor de sites http://vpereiro.files.wordpress.com/2010/05/dominio.jpg Realiza a verificação automática e periódica

Leia mais

Esgotamento do IPv4 e implantação do IPv6

Esgotamento do IPv4 e implantação do IPv6 Esgotamento do IPv4 e implantação do IPv6 Reunião Itinerante do CGI.br Curitiba 19/03/2013 Milton Kaoru Kashiwakura Antonio Marcos Moreiras O Comitê Gestor da Internet no Brasil (CGI.br) foi criado pela

Leia mais

IPv6. Situação atual e desafios. Congresso SET 2012. Antonio M. Moreiras moreiras@nic.br

IPv6. Situação atual e desafios. Congresso SET 2012. Antonio M. Moreiras moreiras@nic.br IPv6 Situação atual e desafios Congresso SET 2012 Antonio M. Moreiras moreiras@nic.br O Comitê Gestor da Internet no Brasil (CGI.br) foi criado pela Portaria Interministerial nº 147, de 31 de maio de 1995,

Leia mais

Dimensões e características da Web brasileira: um estudo do.gov.br. Agosto de 2010

Dimensões e características da Web brasileira: um estudo do.gov.br. Agosto de 2010 Dimensões e características da Web brasileira: um estudo do.gov.br Agosto de 2010 Agenda: Introdução Objetivos da pesquisa Desafios técnicos para o estudo da Web Análise dos resultados O que é o Projeto

Leia mais

A importância dos padrões para a WEB e o ASA. Palestrante: Heitor de Souza Ganzeli

A importância dos padrões para a WEB e o ASA. Palestrante: Heitor de Souza Ganzeli A importância dos padrões para a WEB e o ASA Palestrante: Heitor de Souza Ganzeli Agenda INTRODUÇÃO FUNCIONAMENTO MOTIVAÇÃO SISTEMA Siga os padrões Internet e Dê ASAs a seu site Castro no site: http://asa.nic.br

Leia mais

Sistemas Distribuídos. Professora: Ana Paula Couto DCC 064

Sistemas Distribuídos. Professora: Ana Paula Couto DCC 064 Sistemas Distribuídos Professora: Ana Paula Couto DCC 064 Sistemas Distribuídos Basedos na Web Capítulo 12 Agenda Arquitetura Processos Comunicação Nomeação Sincronização Consistência e Replicação Introdução

Leia mais

Dados Internacionais de Catalogação na Publicação (CIP) (Câmara Brasileira do Livro, SP, Brasil)

Dados Internacionais de Catalogação na Publicação (CIP) (Câmara Brasileira do Livro, SP, Brasil) Licença Este livro está sob a licença Creative Commons Atribuição Uso não Comercial Com compartilhamento pela mesma licença 4.0 Internacional (CC BY-NC-SA 4.0), que está aqui resumida e pode ser lida em

Leia mais

Dimensões e características da Web brasileira: um estudo do.gov.br. Agosto de 2010

Dimensões e características da Web brasileira: um estudo do.gov.br. Agosto de 2010 Dimensões e características da Web brasileira: um estudo do.gov.br Agosto de 2010 Agenda: Introdução Objetivos da pesquisa Desafios técnicos para o estudo da Web Parceiros Secretaria de Logistica e Tecnologia

Leia mais

Analisador Automáticos de Sites para o.br

Analisador Automáticos de Sites para o.br Analisador Automáticos de Sites para o.br Introdução O que é o Projeto? >> Monitor de sites http://vpereiro.files.wordpress.com/2010/05/dominio.jpg Realiza a verificação automática e periódica da qualidade

Leia mais

FISL 16. Um comparativo entre diferentes análises de qualidade da internet no Brasil. Fabrício Tamusiunas. NIC.br

FISL 16. Um comparativo entre diferentes análises de qualidade da internet no Brasil. Fabrício Tamusiunas. NIC.br FISL 16 Um comparativo entre diferentes análises de qualidade da internet no Brasil Fabrício Tamusiunas NIC.br Sobre o NIC.br Núcleo de Informação e Coordenação do Ponto BR Entidade civil, sem fins lucrativos,

Leia mais

O nosso ADN Quem Somos Somos um instituto público integrado na administração indireta do Estado, dotado de autonomia administrativa e financeira e património próprio, com intervenção sobre todo o território

Leia mais

Audiência Pública Senado Federal Escolha da EAQ da Banda Larga

Audiência Pública Senado Federal Escolha da EAQ da Banda Larga Audiência Pública Senado Federal Escolha da EAQ da Banda Larga Demi Getschko demi@cgi.br Brasília, 22 de março de 2012 Internet, características distintivas Colaboração A Internet é uma coleção de milhares

Leia mais

Fabrício Tamusiunas. Aferição da Qualidade pelo Usuário e defesa de seus direitos. 5º Encontro de Telecomunicações respeito ao consumidor. NIC.

Fabrício Tamusiunas. Aferição da Qualidade pelo Usuário e defesa de seus direitos. 5º Encontro de Telecomunicações respeito ao consumidor. NIC. 5º Encontro de Telecomunicações respeito ao consumidor Aferição da Qualidade pelo Usuário e defesa de seus direitos Fabrício Tamusiunas NIC.br O que é Qualidade da Internet? Qualidade da Internet é muito

Leia mais

Desafios no Tratamento de Incidentes de

Desafios no Tratamento de Incidentes de Desafios no Tratamento de Incidentes de Segurança Klaus Steding-Jessen jessen@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil Núcleo de Informação e Coordenação do

Leia mais

Transição IPv4 è IPv6: Desafios e Riscos

Transição IPv4 è IPv6: Desafios e Riscos Transição IPv4 è IPv6: Desafios e Riscos Cristine Hoepers cristine@cert.br! Apresentação desenvolvida em conjunto com a equipe do CEPTRO.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança

Leia mais

André Aziz (andreaziz.ufrpe@gmail.com) Francielle Santos (francielle.ufrpe@gmail.com) Noções de Internet

André Aziz (andreaziz.ufrpe@gmail.com) Francielle Santos (francielle.ufrpe@gmail.com) Noções de Internet André Aziz (andreaziz.ufrpe@gmail.com) Francielle Santos (francielle.ufrpe@gmail.com) Noções de Internet Noções de Internet: O que é Internet; História da Internet; Recursos da Internet; Serviços não-web.

Leia mais

Cenários do CGI.br. My Fire. Diretoria de Projetos 13 de setembro de 2011

Cenários do CGI.br. My Fire. Diretoria de Projetos 13 de setembro de 2011 Cenários do CGI.br My Fire Diretoria de Projetos 13 de setembro de 2011 Sobre o CGI.br Comitê Gestor da Internet no Brasil (CGI.br) Criado em maio de 1995 Pela Portaria Interministerial Nº 147 de 31/05/1995,

Leia mais

Histórico referente a redes no Brasil

Histórico referente a redes no Brasil Histórico referente a redes no Brasil em 2009 te(re)mos: 21 anos das conexões brasileiras às redes acadêmicas 20 anos do registro do.br 20 anos de existência da RNP 18 anos dos primeiros pacotes TCP/IP

Leia mais

PTTMetro. 11 Jan 2010

PTTMetro. 11 Jan 2010 PTTMetro 11 Jan 2010 Antonio Galvao de Rezende Filho Eduardo Ascenço Reis Milton Kaoru Kashiwakura PTTMetro http://ptt.br/ Apresentação 1 Sobre o CGI.br

Leia mais

PTTMetro Informações e Destaques

PTTMetro Informações e Destaques PTTMetro Informações e Destaques 3 o PTT Forum 3 Dez 2009 Antonio Galvao de Rezende Filho Eduardo Ascenço Reis Milton Kaoru Kashiwakura 3o PTT Forum

Leia mais

Evolução Tecnológica e a Segurança na Rede

Evolução Tecnológica e a Segurança na Rede Evolução Tecnológica e a Segurança na Rede Miriam von Zuben miriam@cert.br! Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasill Núcleo de Informação e Coordenação do Ponto br

Leia mais

Uso de software livre para implementação de provedores de serviços OAI-PMH: caso do provedor de serviços Sabiia

Uso de software livre para implementação de provedores de serviços OAI-PMH: caso do provedor de serviços Sabiia Uso de software livre para implementação de provedores de serviços OAI-PMH: caso do provedor de serviços Sabiia Anderson Hirata Isaque Vacari Introdução A iniciativa de Acesso Aberto promove a interoperabilidade

Leia mais

Segurança da Informação na Internet no Brasil: Últimos Estudos do Comitê Gestor da Internet no Brasil e Iniciativas para Aumentar a Segurança

Segurança da Informação na Internet no Brasil: Últimos Estudos do Comitê Gestor da Internet no Brasil e Iniciativas para Aumentar a Segurança Segurança da Informação na Internet no Brasil: Últimos Estudos do Comitê Gestor da Internet no Brasil e Iniciativas para Aumentar a Segurança Cristine Hoepers cristine@cert.br Centro de Estudos, Resposta

Leia mais

Testes de Software. Anne Caroline O. Rocha TesterCertified BSTQB NTI UFPB. Anne Caroline O. Rocha Tester Certified BSTQB NTI UFPB

Testes de Software. Anne Caroline O. Rocha TesterCertified BSTQB NTI UFPB. Anne Caroline O. Rocha Tester Certified BSTQB NTI UFPB Testes de Software 1 AULA 05 FERRAMENTAS TESTE DE CARGA E GERÊNCIA DE TESTE Anne Caroline O. Rocha Tester Certified BSTQB NTI UFPB Conteúdo Programático Aula 05 Ferramentas para gerência dos testes Ferramentas

Leia mais

IPv6: a próxima geração de IPs na Internet!

IPv6: a próxima geração de IPs na Internet! IPv6: a próxima geração de IPs na Internet! Antonio M. Moreiras moreiras@nic.br CONIP 14 o. Congresso de Inovação da Gestão Pública Governança da informação backoffice 05 de Junho de 2008 São Paulo - SP

Leia mais

Projeto SpamPots: Uso de Honeypots na Obtenção de Métricas sobre Abuso de Redes de Banda Larga para o Envio de Spam

Projeto SpamPots: Uso de Honeypots na Obtenção de Métricas sobre Abuso de Redes de Banda Larga para o Envio de Spam Projeto SpamPots: Uso de Honeypots na Obtenção de Métricas sobre Abuso de Redes de Banda Larga para o Envio de Spam Marcelo H. P. C. Chaves mhp@cert.br CERT.br Centro de Estudos, Resposta e Tratamento

Leia mais

Introdução ao IPv6. Antonio M. Moreiras moreiras@nic.br

Introdução ao IPv6. Antonio M. Moreiras moreiras@nic.br Introdução ao IPv6 Antonio M. Moreiras moreiras@nic.br Agenda O CGI.br e o NIC.br O CGI.br e o NIC.br Breve Introdução ao IPv6 Agenda O CGI.br e o NIC.br O CGI.br e o NIC.br Breve Introdução ao IPv6 Sobre

Leia mais

Introdução à Tecnologia Web 2010

Introdução à Tecnologia Web 2010 IntroduçãoàTecnologiaWeb2010 Internet ÓrgãosRegulamentadores ProfªMSc.ElizabeteMunzlinger ProfªMSc.ElizabeteMunzlinger Internet Órgãosregulamentadores Índice 1 Breve Histórico da Internet... 2 2 Surgimento

Leia mais

Prefeitura Municipal De Campo Novo

Prefeitura Municipal De Campo Novo Prefeitura Municipal De Campo Novo Manual Contribuinte Nota Fiscal Eletrônica Fly-eNota 1 Fly-Enota Abaixo observamos a tela inicial ao Contribuinte/Contador da emissão de Nota Fiscal Eletrônica. Após

Leia mais

REPOSITÓRIO DIGITAL UNIVERSIDADE FEDERAL DO RIO GRANDE DO SUL. UFRGS Porto Alegre, RS Brasil 2009

REPOSITÓRIO DIGITAL UNIVERSIDADE FEDERAL DO RIO GRANDE DO SUL. UFRGS Porto Alegre, RS Brasil 2009 REPOSITÓRIO DIGITAL UNIVERSIDADE FEDERAL DO RIO GRANDE DO SUL UFRGS Porto Alegre, RS Brasil 2009 LUME Repositório Digital da Universidade Federal do Rio Grande do Sul Implementado em janeiro de 2008, a

Leia mais

PTT Fórum 6 Encontro dos Sistemas Autônomos da Internet no Brasil 3 e 4 de dezembro de 2012

PTT Fórum 6 Encontro dos Sistemas Autônomos da Internet no Brasil 3 e 4 de dezembro de 2012 PTT Fórum 6 Encontro dos Sistemas Autônomos da Internet no Brasil 3 e 4 de dezembro de 2012 MILTON KAORU KASHIWAKURA Diretor de Projetos Especiais e de Desenvolvimento NIC.br Sobre o CGI.br e o NIC.br

Leia mais

Segurança na Internet Brasileira: Principais Ameaças e

Segurança na Internet Brasileira: Principais Ameaças e Segurança na Internet Brasileira: Principais Ameaças e Recomendações para Prevenção Cristine Hoepers Klaus Steding-Jessen Marcelo H. P. C. Chaves {cristine,jessen,mhp}@cert.br Centro de Estudos, Resposta

Leia mais

Os Pontos de Troca de Tráfego, o PTTMetro, e seu papel na Internet brasileira. Antonio M. Moreiras moreiras@nic.br

Os Pontos de Troca de Tráfego, o PTTMetro, e seu papel na Internet brasileira. Antonio M. Moreiras moreiras@nic.br Os Pontos de Troca de Tráfego, o PTTMetro, e seu papel na Internet brasileira. Antonio M. Moreiras moreiras@nic.br Agenda O CGI.br e o NIC.br O que é a Internet? E o protocolo IP? Quais as relações possíveis

Leia mais

Diretoria de Projetos do NIC.br NIC.br Núcleo de Informação e Coordenação do Ponto BR Abril de 2010 Sobre o CGI.br Sobre o CGI.br Criado em maio de 1995 Pela Portaria Interministerial Nº 147 de 31/05/1995,

Leia mais

Evolução dos Problemas de Segurança e Formas de Proteção

Evolução dos Problemas de Segurança e Formas de Proteção Evolução dos Problemas de Segurança e Formas de Proteção Núcleo de Informação e Coordenação do Ponto.br Nic.br http://www.nic.br/ Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no

Leia mais

Projeto OBAA. Relatório Técnico RT-OBAA-07 Grupo Agentes e Ontologias. Proposta de Federação de Repositórios de Objetos Educacionais.

Projeto OBAA. Relatório Técnico RT-OBAA-07 Grupo Agentes e Ontologias. Proposta de Federação de Repositórios de Objetos Educacionais. Edital MCT/FINEP/MC/FUNTTEL Plataformas para Conteúdos Digitais 01/2007 Projeto OBAA Relatório Técnico RT-OBAA-07 Grupo Agentes e Ontologias Proposta de Federação de Repositórios de Objetos Educacionais

Leia mais

Milton Kashiwakura (Fabrício Tamusiunas)

Milton Kashiwakura (Fabrício Tamusiunas) Medição de Tráfego Internet de Banda Fixa usando os PTTs Milton Kashiwakura (Fabrício Tamusiunas) NIC.br NIC.BR conduz projeto de medição de qualidade desde 2006 IDEC São Paulo, em 2007 TTM-box do RIPE

Leia mais

Procedimentos para utilização do Sistema de Apoio a Gerência Unificada de Informações - SAGUI

Procedimentos para utilização do Sistema de Apoio a Gerência Unificada de Informações - SAGUI Procedimentos para utilização do Sistema de Apoio a Gerência Unificada de Informações - SAGUI Índice 1. - Histórico do Documento...1 2. - Introdução...2 3. - Requisitos...3 4. - Operacionalização do SAGUI...3

Leia mais

Nesse artigo abordaremos os principais aspectos de instalação e uso do NTOP no Fedora Core 4.

Nesse artigo abordaremos os principais aspectos de instalação e uso do NTOP no Fedora Core 4. Diego M. Rodrigues (diego@drsolutions.com.br) O NTOP é um programa muito simples de ser instalado e não requer quase nenhuma configuração. Ele é capaz de gerar excelentes gráficos de monitoramento das

Leia mais

OCEL001 Comércio Eletrônico Módulo 9_4: OpenStack

OCEL001 Comércio Eletrônico Módulo 9_4: OpenStack OCEL001 Comércio Eletrônico Módulo 9_4: OpenStack Prof. Charles Christian Miers e-mail: charles.miers@udesc.br OpenStack OpenStack é um projeto de computação em nuvem criado em julho de 2010, fruto de

Leia mais

IPv6 Análise sobre uso na Internet BR. Ricardo Patara

IPv6 Análise sobre uso na Internet BR. Ricardo Patara IPv6 Análise sobre uso na Internet BR Ricardo Patara Agenda Estatísticas de alocação No mundo, na Região e no Brasil Atividades de difusão Estatísticas de uso Tabela de Rotas Serviços Introdução IPv6 sendo

Leia mais

Guerreiro SEO. John I. Jerkovic. Novatec

Guerreiro SEO. John I. Jerkovic. Novatec Guerreiro SEO John I. Jerkovic Novatec Sumário Prefácio... 13 CAPÍTULO 1 Uma visão geral... 20 Benefícios da SEO... 21 Áreas nas SERPs... 21 O fator confiança... 23 Menor custo de propriedade...25 Desafios

Leia mais

A Evolução dos Problemas de Segurança e Formas de Proteção

A Evolução dos Problemas de Segurança e Formas de Proteção A Evolução dos Problemas de Segurança e Formas de Proteção Cristine Hoepers cristine@cert.br Klaus Steding-Jessen jessen@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil

Leia mais

Introdução ao Conceito de Redes e Infra estrutura Internet

Introdução ao Conceito de Redes e Infra estrutura Internet Introdução ao Conceito de Redes e Infra estrutura Internet Prof. José Alexandre da Costa Alves (MSc) O que é uma rede de Computadores Conjunto de unidades de processamento com capacidade de trocar informações

Leia mais

www.andrix.com.br professor@andrix.com.br Conceitos Básicos

www.andrix.com.br professor@andrix.com.br Conceitos Básicos Desenvolvimento Andrique web Amorim II www.andrix.com.br professor@andrix.com.br Conceitos Básicos Sites e Aplicações Web Normalmente, as pessoas utilizam o termo SITE quando se referem a blogs, sites

Leia mais

Gestão de Incidentes e Resiliência das Infraestruturas Críticas de Internet

Gestão de Incidentes e Resiliência das Infraestruturas Críticas de Internet Gestão de Incidentes e Resiliência das Infraestruturas Críticas de Internet Cristine Hoepers cristine@cert.br! Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil Núcleo de Informação

Leia mais

SIMET Medindo a qualidade das conexões Internet no Brasil. Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic.br

SIMET Medindo a qualidade das conexões Internet no Brasil. Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic.br SIMET Medindo a qualidade das conexões Internet no Brasil Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic.br NIC.br Criado para implementar os projetos e decisões do CGI.br Registro e

Leia mais

Fabrício Tamusiunas. Michel Vale Ferreira

Fabrício Tamusiunas. Michel Vale Ferreira PTT-Forum 6 Panorama das Medições de Qualidade Internet em 2012 e Novas Medições Fabrício Tamusiunas NIC.br Michel Vale Ferreira NIC.br Projetos de Medições no NIC.br Banda Larga Fixa Qualidade da conexão

Leia mais

Um Caminho Seguro para as Empresas do País: 3 Milhões de domínios do.br. Panorama setorial da Internet SETEMBRO DE 2012

Um Caminho Seguro para as Empresas do País: 3 Milhões de domínios do.br. Panorama setorial da Internet SETEMBRO DE 2012 Panorama setorial da Internet SETEMBRO DE 2012 DOMÍNIO DE PRIMEIRO NÍVEL NO BRASIL Um Caminho Seguro para as Empresas do País: 3 Milhões de domínios do.br Ano 4 Número 2 A INTERNET BRASILEIRA Apresentação

Leia mais

Estatísticas de Qualidade de Acesso Internet no Brasil para Usuários Finais. NIC.br

Estatísticas de Qualidade de Acesso Internet no Brasil para Usuários Finais. NIC.br Estatísticas de Qualidade de Acesso Internet no Brasil para Usuários Finais NIC.br SIMET - Introdução SIMET Sistema de Medição de Tráfego IP de Última Milha http://simet.nic.br Projeto que provê recursos

Leia mais

Novas Ameaças na Internet e Iniciativas do CERT.br e CGI.br para Combatê-las

Novas Ameaças na Internet e Iniciativas do CERT.br e CGI.br para Combatê-las Novas Ameaças na Internet e Iniciativas do CERT.br e CGI.br para Combatê-las Klaus Steding-Jessen jessen@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil CERT.br http://www.cert.br/

Leia mais

PLATAFORMA DE DESENVOLVIMENTO PINHÃO PARANÁ MANUAL DE UTILIZAÇÃO DO CVS NO ECLIPSE

PLATAFORMA DE DESENVOLVIMENTO PINHÃO PARANÁ MANUAL DE UTILIZAÇÃO DO CVS NO ECLIPSE PLATAFORMA DE DESENVOLVIMENTO PINHÃO PARANÁ MANUAL DE UTILIZAÇÃO DO CVS NO ECLIPSE Agosto 2007 Sumário de Informações do Documento Tipo do Documento: Manual Título do Documento: MANUAL DE UTILIZAÇÃO DO

Leia mais

Introdução a Servlets

Introdução a Servlets Linguagem de Programação para Web Introdução a Servlets Prof. Mauro Lopes 1-31 21 Objetivos Iniciaremos aqui o estudo sobre o desenvolvimento de sistemas web usando o Java. Apresentaremos nesta aula os

Leia mais

Fraudes via Internet Estatísticas e Tendências Cristine Hoepers cristine@cert.br

Fraudes via Internet Estatísticas e Tendências Cristine Hoepers cristine@cert.br Fraudes via Internet Estatísticas e Tendências Cristine Hoepers cristine@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil Núcleo de Informação e Coordenação do Ponto

Leia mais

ENTENDENDO O SERVIÇO DE ESTATÍSTICAS

ENTENDENDO O SERVIÇO DE ESTATÍSTICAS ENTENDENDO O SERVIÇO DE ESTATÍSTICAS DEFININDO O PERÍODO (MÊS E ANO) EM QUE OS DADOS SERÃO VISUALIZADOS Indique o período (mês e ano) que deseja visualizar as estatísticas para o seu site. ENTENDENDO O

Leia mais

FISL9.0 Porto Alegre, RS, Brasil 17-19 de abril de 2008

FISL9.0 Porto Alegre, RS, Brasil 17-19 de abril de 2008 www.cgi.br Agenda Sobre o CGI.br Sobre o NIC.br www.cgi.br Sobre o CGI.br Criado em maio de 1995 Pela Portaria Interministerial Nº 147 de 31/05/1995, alterada pelo Decreto Presidencial Nº 4.829 de 03/09/2003

Leia mais

ADMINISTRAÇÃO DE SISTEMAS OPERACIONAIS SISTEMA DE ARQUIVOS

ADMINISTRAÇÃO DE SISTEMAS OPERACIONAIS SISTEMA DE ARQUIVOS ADMINISTRAÇÃO DE SISTEMAS OPERACIONAIS SISTEMA DE ARQUIVOS DISTRIBUÍDOS (DFS) Visão geral sobre o Sistema de Arquivos Distribuídos O Sistema de Arquivos Distribuídos(DFS) permite que administradores do

Leia mais

Troca de Tráfego : criando uma infraestrutura Internet melhor e mais barata (http://ptt.br). Milton Kaoru Kashiwakura mkaoruka@nic.

Troca de Tráfego : criando uma infraestrutura Internet melhor e mais barata (http://ptt.br). Milton Kaoru Kashiwakura mkaoruka@nic. Troca de Tráfego : criando uma infraestrutura Internet melhor e mais barata (http://ptt.br). Milton Kaoru Kashiwakura mkaoruka@nic.br Agenda O CGI.br e o NIC.br O que é a Internet? E o protocolo IP? Quais

Leia mais

GERADOR DE RELATÓRIOS

GERADOR DE RELATÓRIOS GERADOR DE RELATÓRIOS Sumário 1. INTRODUÇÃO... 3 2. COMO FUNCIONA?... 4 3. TELA DE LOGIN... 5 4. RELATÓRIOS DE ACESSO A WEB... 6 5. RELATÓRIOS DE USO DE LINK... 14 6. RELATÓRIOS DE USO DE E-MAIL... 18

Leia mais

Internet. Edy Hayashida E-mail: edy.hayashida@uol.com.br

Internet. Edy Hayashida E-mail: edy.hayashida@uol.com.br Internet Edy Hayashida E-mail: edy.hayashida@uol.com.br Internet A Internet não é de modo algum uma rede, mas sim um vasto conjunto de redes diferentes que utilizam certos protocolos comuns e fornecem

Leia mais

Tópicos Especiais em Informática

Tópicos Especiais em Informática Tópicos Especiais em Informática DNS Prof. Ms.-Eng. Igor Sousa Faculdade Lourenço Filho 10 de novembro de 2014 igorvolt@gmail.com (FLF) Tópicos Especiais em Informática 10 de novembro de 2014 1 / 15 Introdução

Leia mais

Documentação - Software Público Brasileiro (SPB)

Documentação - Software Público Brasileiro (SPB) Documentação - Software Público Brasileiro (SPB) Versão 2.0 Universidade de Brasília 09/11/2014 Sumário 1 Introdução 1 2 Conteúdos 3 2.1 Instalação................................................. 3 2.2

Leia mais

Segurança na Internet Brasileira: Principais Ameaças e

Segurança na Internet Brasileira: Principais Ameaças e Segurança na Internet Brasileira: Principais Ameaças e Recomendações para Prevenção Luiz Eduardo Roncato Cordeiro Marcelo H. P. C. Chaves {cordeiro,mhp}@cert.br Centro de Estudos, Resposta e Tratamento

Leia mais

Autoria Web Apresentação e Visão Geral sobre a Web

Autoria Web Apresentação e Visão Geral sobre a Web Apresentação e Visão Geral sobre a Web Apresentação Thiago Miranda Email: mirandathiago@gmail.com Site: www.thiagomiranda.net Objetivos da Disciplina Conhecer os limites de atuação profissional em Web

Leia mais

Segurança da Internet no Brasil e Atuação do CERT.br Cristine Hoepers

Segurança da Internet no Brasil e Atuação do CERT.br Cristine Hoepers Segurança da Internet no Brasil e Atuação do CERT.br Cristine Hoepers Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil - CERT.br Núcleo de Informação e Coordenação do Ponto

Leia mais

Boas Práticas de Segurança

Boas Práticas de Segurança Boas Práticas de Segurança Miriam von Zuben miriam@cert.br CERT.br - Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil NIC.br - Núcleo de Informação e Coordenação do Ponto br

Leia mais

Incidentes de Segurança no Brasil: Principais Ameaças e

Incidentes de Segurança no Brasil: Principais Ameaças e Incidentes de Segurança no Brasil: Principais Ameaças e Recomendações para Prevenção Luiz Eduardo Roncato Cordeiro cordeiro@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no

Leia mais

Sistemas Distribuídos

Sistemas Distribuídos Sistemas Distribuídos Aula 2 Msc. Daniele Carvalho Oliveira Doutoranda em Ciência da Computação - UFU Mestre em Ciência da Computação UFU Bacharel em Ciência da Computação - UFJF Por que definir uma arquitetura?

Leia mais

Sistema SciELO de Publicação Eletrônica - OJS. Solange Santos BIREME/OPAS/OMS Unidade SciELO

Sistema SciELO de Publicação Eletrônica - OJS. Solange Santos BIREME/OPAS/OMS Unidade SciELO Sistema SciELO de Publicação Eletrônica - OJS Solange Santos BIREME/OPAS/OMS Unidade SciELO Sistema SciELO de Publicação Eletrônica Nova metodologia de publicação na SciELO baseado no sistema Open Journal

Leia mais

Mecanismos para Medição da Qualidade de Tráfego da Internet Brasileira. Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic.

Mecanismos para Medição da Qualidade de Tráfego da Internet Brasileira. Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic. Mecanismos para Medição da Qualidade de Tráfego da Internet Brasileira Fabricio Tamusiunas fabricio@nic.br César Linhares Rosa cesar@nic.br Necessidades para Medições de Qualidade na Internet Garantia

Leia mais

Índice de audiência no jornalismo digital

Índice de audiência no jornalismo digital Índice de audiência no jornalismo digital Tanto na indústria jornalística, com na imprensa alternativa, é preciso fazer uma verificação de como está o índice de audiência do site. No caso da indústria

Leia mais

Estatísticas --------------------------------------------------------------------------------------------------------------- Manual do cliente

Estatísticas --------------------------------------------------------------------------------------------------------------- Manual do cliente Estatísticas --------------------------------------------------------------------------------------------------------------- Manual do cliente www.plugin.com.br 1 ÍNDICE O que é o PlugStats:...4 Acessando

Leia mais

Introdução a DNS & DNSSEC 1

Introdução a DNS & DNSSEC 1 Introdução a DNS & DNSSEC 1 David Robert Camargo de Campos Rafael Dantas Justo Registro.br 1 versão 1.0.0 (Revision: ) 1/28 DNS - Domain Name System O Sistema de Nomes de

Leia mais

Privacidade na Web. Cristine Hoepers cristine@cert.br!

Privacidade na Web. Cristine Hoepers cristine@cert.br! Privacidade na Web Cristine Hoepers cristine@cert.br! Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil Núcleo de Informação e Coordenação do Ponto BR Comitê Gestor da Internet

Leia mais

PROJETO: PRODUTO 4 RELATÓRIO FINAL DO DESENVOLVIMENTO E IMPLANTAÇÃO DO SISTEMA DE INFORMAÇÕES

PROJETO: PRODUTO 4 RELATÓRIO FINAL DO DESENVOLVIMENTO E IMPLANTAÇÃO DO SISTEMA DE INFORMAÇÕES Nome da Empresa: DEPARTAMENTO INTERSINDICAL DE ESTATÍSTICA E ESTUDOS SÓCIO-ECONÔMICOS (DIEESE) PROJETO: PROJETO DE COOPERAÇÃO TÉCNICA BRA/IICA/03/005 PARTICIPAÇÃO SOCIAL NÚMERO DO CONTRATO: 205037 TEMA:

Leia mais

World Wide Web e Aplicações

World Wide Web e Aplicações World Wide Web e Aplicações Módulo H O que é a WWW Permite a criação, manipulação e recuperação de informações Padrão de fato para navegação, publicação de informações e execução de transações na Internet

Leia mais

Principais Ameaças na Internet e

Principais Ameaças na Internet e Principais Ameaças na Internet e Recomendações para Prevenção Cristine Hoepers cristine@cert.br Klaus Steding-Jessen jessen@cert.br Esta Apresentação: http://www.cert.br/docs/palestras/ Centro de Estudos,

Leia mais

Minicurso Computação em Nuvem Prática: Openstack

Minicurso Computação em Nuvem Prática: Openstack Minicurso Computação em Nuvem Prática: Openstack Glauber Cassiano Batista Ricardo Sohn Membros Colméia Roteiro Geral Definições Virtualização Data center Computação em Nuvem Principais classificações:

Leia mais

PTTMetro. Interconexão de Sistemas Autônomos (AS) 15 Agosto 2010. Equipe de Engenharia PTTMetro

PTTMetro. Interconexão de Sistemas Autônomos (AS) 15 Agosto 2010. Equipe de Engenharia PTTMetro <eng@ptt.br> PTTMetro Interconexão de Sistemas Autônomos (AS) 15 Agosto 2010 Equipe de Engenharia PTTMetro 1 Sobre o CGI.br Comitê Gestor da Internet no Brasil (CGI.br) Criado em maio de 1995 Pela Portaria

Leia mais

Dados Internacionais de Catalogação na Publicação (CIP) (Câmara Brasileira do Livro, SP, Brasil)

Dados Internacionais de Catalogação na Publicação (CIP) (Câmara Brasileira do Livro, SP, Brasil) Licença Este livro está sob a licença Creative Commons Atribuição Uso não Comercial Com compartilhamento pela mesma licença 4.0 Internacional (CC BY-NC-SA 4.0), que está aqui resumida e pode ser lida em

Leia mais

INTERNET. Professor: Leandro Crescencio E-mail: leandromc@inf.ufsm.br. http://www.inf.ufsm.br/~leandromc. Colégio Politécnico 1

INTERNET. Professor: Leandro Crescencio E-mail: leandromc@inf.ufsm.br. http://www.inf.ufsm.br/~leandromc. Colégio Politécnico 1 INTERNET Professor: Leandro Crescencio E-mail: leandromc@inf.ufsm.br http://www.inf.ufsm.br/~leandromc Colégio Politécnico 1 Internet Origem: Guerra Fria DARPA (Departamento de Defesa de Pesquisas Avançadas)

Leia mais

Domínios. Domínios Mundiais Usado para atividades comerciais. Usado em instituições sem fins lucrativos. Usado para nomes pessoais.

Domínios. Domínios Mundiais Usado para atividades comerciais. Usado em instituições sem fins lucrativos. Usado para nomes pessoais. Aula 01 Domínios Domínios são todos os nomes registrados na base de dados do DNS e que, portanto, recebem um endereço IP e passam a estar disponíveis na Internet. Todos os endereços de sites existentes

Leia mais

A Governança da Internet no Brasil e os padrões para Web

A Governança da Internet no Brasil e os padrões para Web A Governança da Internet no Brasil e os padrões para Web ALGUNS EVENTOS E DADOS IMPORTANTES DA INTERNET NO BRASIL E NO MUNDO NO BRASIL Primeira conexão à redes (Bitnet) => Outubro 88 Domínio.br foi registrado

Leia mais

Evolução Tecnológica e a (Falta de) Educação dos Usuários Finais

Evolução Tecnológica e a (Falta de) Educação dos Usuários Finais Evolução Tecnológica e a (Falta de) Educação dos Usuários Finais Miriam von Zuben miriam@cert.br! Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasill Núcleo de Informação e Coordenação

Leia mais

Intranets. FERNANDO ALBUQUERQUE Departamento de Ciência da Computação Universidade de Brasília 1.INTRODUÇÃO

Intranets. FERNANDO ALBUQUERQUE Departamento de Ciência da Computação Universidade de Brasília 1.INTRODUÇÃO Intranets FERNANDO ALBUQUERQUE Departamento de Ciência da Computação Universidade de Brasília 1.INTRODUÇÃO As intranets são redes internas às organizações que usam as tecnologias utilizadas na rede mundial

Leia mais

Sistema Gerenciador de Conteúdo OpenCms: um caso de sucesso no CEFET-MG

Sistema Gerenciador de Conteúdo OpenCms: um caso de sucesso no CEFET-MG Sistema Gerenciador de Conteúdo OpenCms: um caso de sucesso no CEFET-MG Marco T. A. Rodrigues*, Paulo E. M. de Almeida* *Departamento de Recursos em Informática Centro Federal de Educação Tecnológica de

Leia mais

Biblioteca Digital da UNIVATES utilizando a ferramenta DSpace. Alexandre Stürmer Wolf, Ana Paula Lisboa Monteiro, Willian Valmorbida

Biblioteca Digital da UNIVATES utilizando a ferramenta DSpace. Alexandre Stürmer Wolf, Ana Paula Lisboa Monteiro, Willian Valmorbida Biblioteca Digital da UNIVATES utilizando a ferramenta DSpace Alexandre Stürmer Wolf, Ana Paula Lisboa Monteiro, Willian Valmorbida Roteiro Biblioteca Digital da UNIVATES Bibliotecas: Conceitos Metas da

Leia mais

Guia de instalação JMap 5.0

Guia de instalação JMap 5.0 Guia de instalação JMap 5.0 Instalação JMap A instalação de JMap é normalmente feita em um servidor que será acessado pelo conjunto de usuários. Durante a instalação, todos os componentes de JMap são instalados

Leia mais

XDR. Solução para Big Data.

XDR. Solução para Big Data. XDR Solução para Big Data. ObJetivo Principal O volume de informações com os quais as empresas de telecomunicações/internet têm que lidar é muito grande, e está em constante crescimento devido à franca

Leia mais

Tecnologia para resultados Mais ERP

Tecnologia para resultados Mais ERP Tecnologia para resultados Mais ERP Cada vez mais as pequenas empresas, precisam e procuram a melhor tecnologia que traga resultados concretos na gestão de seus negócios. Porém a falta de recursos sempre

Leia mais

Projeto Pé na Dança. www.penadanca.com. Bruno Barros Comunicador Visual. bruno@brunobarros.com www.brunobarros.com 21 2704 3991 / 9605 0589

Projeto Pé na Dança. www.penadanca.com. Bruno Barros Comunicador Visual. bruno@brunobarros.com www.brunobarros.com 21 2704 3991 / 9605 0589 Projeto Pé na Dança www.penadanca.com 1 Sumário I. Esta proposta... 3 II. Metodologia de trabalho... 5 III. Investimento... 6 IV. Cronograma... 6 V. Termos e Condições... 7 VI. Manutenção do site... 7

Leia mais

Manual da Ferramenta Metadata Editor

Manual da Ferramenta Metadata Editor 4 de março de 2010 Sumário 1 Introdução 3 2 Objetivos 3 3 Visão Geral 3 3.1 Instalação............................. 3 3.2 Legenda.............................. 4 3.3 Configuração Inicial........................

Leia mais

Palavras-chave: i3geo, gvsig, Mapserver, integração, plugin. Contato: edmar.moretti@terra.com.br ou edmar.moretti@gmail.com

Palavras-chave: i3geo, gvsig, Mapserver, integração, plugin. Contato: edmar.moretti@terra.com.br ou edmar.moretti@gmail.com III Jornada Latinoamericana e do Caribe do gvsig Artigo: Integração do software i3geo com o gvsig Autor: Edmar Moretti Resumo: O i3geo é um software para a criação de mapas interativos para internet qu

Leia mais

Capacitação IPv6.br. Serviços em IPv6. Serviços rev 2012.08.07-01

Capacitação IPv6.br. Serviços em IPv6. Serviços rev 2012.08.07-01 Capacitação IPv6.br Serviços em IPv6 Serviços DHCPv6 Firewall DNS NTP HTTP Proxy Proxy Reverso SMB CIFS SSH... Implementações BIND Squid IPv6 desde Julho/2001 IPv6 nativo desde Outubro/2008 BIND 9.1.3

Leia mais

Critérios para certificação de Sites SciELO: critérios, política e procedimentos para a classificação e certificação dos sites da Rede SciELO

Critérios para certificação de Sites SciELO: critérios, política e procedimentos para a classificação e certificação dos sites da Rede SciELO Critérios para certificação de Sites SciELO: critérios, política e procedimentos para a classificação e certificação dos sites da Rede SciELO Versão Março 2008 1 Introdução Este documento tem por objetivo

Leia mais

Segurança em Redes Sociais

Segurança em Redes Sociais Segurança em Redes Sociais Luiz Eduardo Roncato Cordeiro cordeiro@cert.br Miriam von Zuben miriam@cert.br Centro de Estudos, Resposta e Tratamento de Incidentes de Segurança no Brasil Núcleo de Informação

Leia mais