PTTMetro/PTT.br Evolução, Atualizações e Planejamento http://ptt.br/ GTER 35 23 Maio 2013 Antonio Galvao de Rezende Filho <galvao@nic.br> Eduardo Ascenço Reis <eascenco@nic.br> Equipe PTT.br <eng@ptt.br> 1
CGI.br NIC.br - PTT.br CGI.br - Comitê Gestor da Internet no Brasil Criado em 1995. Responsável pela coordenação e integração dos serviços Internet no país. Fomentar o desenvolvimento de serviços Internet e Recomendar padrões e procedimentos técnicos operacionais para a Internet no Brasil NIC.br - Núcleo de Informação e Coordenação do Ponto BR Entidade civil, sem fins lucrativos, criada em 2003 e começando a atuar em 2005, braço executivo do Comitê Gestor da Internet no Brasil PTT.br Ponto de Troca de Tráfego do Ponto BR Projeto do CGI.br criado em 2004 que promove e cria a infra-estrutura necessária (Ponto de Troca de Tráfego PTT) para a interconexão direta entre as redes ("Autonomous Systems" - ASs) que compõem a Internet Brasileira. 2
Referência IXP - Internet exchange Point PTT Ponto de Troca de Tráfego 3
PTT Historico e Datas Marcantes Ano Localidade (Cidade/Estado) Evento 1989 São Paulo / SP Ativação do TLD.br 1991 São Paulo / SP Primeira Conexão do Brasil a Internet via FAPESP (Dawn of Brazil Internet) 1996 São Paulo / SP Início operações do PTT ANSP/FAPESP 1997 São Paulo / SP Início operações do Registro.br 2000 Porto Alegre / RS Início PTT RSIX (RNP UFRGS) 2000 São Paulo / SP Início PTT OPTiX-LA (Optiglobe Inc, now Tivit) 2002 Curitiba / PR Início PTT PriX (RNP UFPR) 2002 Brasilia / DF Início PTT FIX (RNP) 2004 São Paulo / SP PTTMetro (CGI.br) 2004 Rio de Janeiro / RJ PTTMetro (CGI.br) 2004 Brasilia / DF PTT FIX absorvido pelo PTTMetro (CGI.br) 2004 Barueri / SP PTT ANSP/FAPESP transferido para NAP do Brasil (Terremark Latin America) 2005 Curitiba / PR PTT PRIX absorvido to PTTMetro (CGI.br) From Peering in Brazil presentation @ LACNIC XI / Salvador, BA Brazil - Interconnection Schemes and Strategies for ISPs Tutorial 4
PTT Close Proliferation Problem (e.g. São Paulo city in the past) - 1/3 City Area PTT Optix-LA PTT ANSP/FAPEP PTT Diveo PTT Telcomp Customer AS Too many Connections High Cost From Peering in Brazil presentation @ LACNIC XI / Salvador, BA Brazil - Interconnection Schemes and Strategies for ISPs Tutorial 5
PTT Close Proliferation Problem (e.g. São Paulo city in the past) - 2/3 City Area PTT Optix-LA PTT ANSP/FAPEP PTT Diveo PTT Telcomp? Customer AS From Peering in Brazil presentation @ LACNIC XI / Salvador, BA Brazil - Interconnection Schemes and Strategies for ISPs Tutorial 6
PTT Close Proliferation Problem (e.g. São Paulo city in the past) - 3/3 City Area PTT Optix-LA PTT ANSP/FAPEP PTT Diveo PTT Telcomp Customer AS IP Transit ISP NSP From Peering in Brazil presentation @ LACNIC XI / Salvador, BA Brazil - Interconnection Schemes and Strategies for ISPs Tutorial 7
PTTMetro PTT.br Projeto # Operação PTTMetro Projeto do CGI.br iniciado em 2004 e ainda ativo. PTT.br Divisão do NIC.br responsável pela operação, implantação e manutenção das localidades do PTTMetro. O PTT.br conta com as seguintes entidades como parceiras para suporte operacional local e para hospedagem de PIX (lista não completa): Rede Nacional de Ensino e Pesquisa (RNP) Academica (e.g. Universities) Empresas de Informática do Governo (e.g. Procempa, Prodest, Prodepa) Internet Data Centers (IDC) Internet Service Providers (ISP) Internet Network Providers (NSP) 8
PTTMetro/PTT.br Operational Responsibilities NIC.br PTT.br is responsible for: Installation, Management, Administration, Monitoring and Supporting all IX locations. Always keeping Neutrality and High Quality as main targets. Highlight: PTT.br is responsible to provide enough capacity to sustain bandwidth demand on connection between PIX: (e.g. 1GE, 10GE, nx 10GE with DWDM). PIX Each entity that hosts a PTT.br PIX is responsible to provide continuous and high quality: IDC Infrastructure Rack Space, Electrical Energy, Refrigeration, Physical Security, Operational Hand, etc Dark Fiber Pair (preferably redundant) to Central PIX 9
CGI.br NIC.br Modelo Financeiro Brasileiros (física ou jurídica) R$ Registro de domínios Alocação IP / ASN.br Sistema de Nomes DNS.br NIC.br Benefícios Melhor Internet Registro.br CERT.br Cetic.br Ceptro.br PTT.br / IPv6.br/ SIMET.nic.br / etc 10
PTTMetro/PTT.br Destaques Projeto arca com os equipamentos ativos (hardware), responsáveis pela transmissão intra e inter PIXes e pelas interfaces de conexão dos participantes. Não há repasse de custo para os participantes, sobre as suas interfaces de conexão, independente da capacidade (Fast Ethernet, Gigabit Ethernet ou 10 Gigabit Ethernet), e mesmo considerando eventual redundância. Pontos de Interconexão (PIX) Provêm ao projeto recursos de infraestrutura: espaço, alimentação elétrica, refrigeração, segurança física e 1 ou 2 (preferência) pares de fibras ópticas apagadas até o PIX central. 11
PTTMetro/PTT.br Definição São características fundamentais para a implementação adequada de um PTTMetro: * Neutralidade - independência de provedores comerciais * Qualidade - troca de tráfego eficiente * Baixo custo das alternativas, com alta disponibilidade * Matriz de troca de tráfego regional única A coordenação do PTTMetro, a cargo do CGIbr, e sua operação por organizações tecnicamente habilitadas, mas sem fins lucrativos, que estabelecerão os requisitos de arquitetura e gerência das interconexões, garantem os dois primeiros tópicos. A hospedagem dos PIXes em instalações comerciais com elevado padrão de segurança e infraestrutura, agregando-se matrizes de tráfego já existentes, é condição para obtenção dos demais quesitos acima. 12
Definição PTT Ponto de Troca de Tráfego Definição Solução de Rede com o objetivo de viabilizar a conexão direta entre as entidades que compõem a Internet, os Sistemas Autônomos (AS). PTT otimiza a interconexão entre AS, pois possibilita: Melhor qualidade (menor latência) evita intermediários externos Menor custo Maior organização da estrutura de rede regional (pontos concentradores) Maior Resiliência 13
PTTMetro/PTT.br - Regional Metro Ethernet Non-Blocking Switch/Peering Fabric AS A Router IXP PIX A AS D Router PIX D PIX Central PIX B Router AS B PIX C Router PIX: Interconnection Point AS C 14
PTTMetro/PTT.br High Availability Network Topology Model PIX Central C1 PIX Central C2 PIX Remote PIX: Interconnection Point Dark Fiber Pair 15
PTTMetro/PTT.br São Paulo PIX Topology 16
PTTMetro/PTT.br Maio 2012 Localidades # AS 1. Americana 2. Belém 3. Belo Horizonte 4. Brasília 5. Caxias do Sul 6. Campina Grande 7. Campinas 8. Curitiba 9. Florianópolis 10. Fortaleza 11. Goiânia 12. Londrina 13. Manaus 14. Natal 15. Porto Alegre 16. Recife 17. Rio de Janeiro 18. Salvador 19. São José dos Campos 20. São José do Rio Preto 21. São Paulo 22. Vitória PTT.br Existentes AS Candidaturas 17
PTTMetro/PTT.br Evolução - 2004 1. Brasília 2. Rio de Janeiro 3. São Paulo 3 localidades 18
PTTMetro/PTT.br Evolução - 2005 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 5 localidades 19
PTTMetro/PTT.br Evolução - 2006 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 7 localidades 20
PTTMetro/PTT.br Evolução - 2007 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 8 localidades 21
PTTMetro/PTT.br Evolução - 2008 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 9. Fortaleza 10. Londrina 10 localidades 22
PTTMetro/PTT.br Evolução - 2009 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 9. Fortaleza 10. Londrina 11. Campinas 12. Recife 12 localidades 23
PTTMetro/PTT.br Evolução - 2010 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 9. Fortaleza 10. Londrina 11. Campinas 12. Recife 13. Campina Grande 14. Goiânia 14 localidades 24
PTTMetro/PTT.br Evolução - 2011 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 9. Fortaleza 10. Londrina 11. Campinas 12. Recife 13. Campina Grande 14. Goiânia 15. Americana 16. Belém 17. Caxias do Sul 18. Natal 19. São J dos Campos 20. Vitória 20 localidades 25
PTTMetro/PTT.br Evolução - 2012 1. Brasília 2. Rio de Janeiro 3. São Paulo 4. Porto Alegre 5. Curitba 6. Belo Horizonte 7. Florianópolis 8. Salvador 9. Fortaleza 10. Londrina 11. Campinas 12. Recife 13. Campina Grande 14. Goiânia 15. Americana 16. Belém 17. Caxias do Sul 18. Natal 19. São J dos Campos 20. Vitória 21. Manaus 22. São J do Rio Preto 22 localidades 26
PTTMetro/PTT.br Modelo de Localidades Satélite Small IX Small IX Small IX Local IX (e.g. Americana) Medium IX Concentrator IX (e.g. Campinas) Large IX National IX (e.g. São Paulo) 27
PTTMetro/PTT.br Localidades Isoladas As diferentes localidades do PTTMetro são isoladas. O objetivo principal para a criação de localidades do PTTMetro é permitir que o tráfego local fique no próprio local de origem e assim evitar a interconexão remota. O CGI.br não tem planos de interconectar as localidades do PTTMetro e competir com as operadoras de Telecomunicações. O projeto PTTMetro estimula e apoia que empresas participantes em diferentes localidades façam o provisionamento de serviços de transporte entre as mesmas. (o PTTMetro possui alguns modelos de transporte entre localidades para otimizar recursos comuns e assim colaborar na redução de custos) 28
PTTMetro/PTT.br Acordos de Troca de Tráfego Acordo de Troca de Tráfego Multilateral (ATM) VLAN Compartilhada Troca de tráfego entre todos os participantes. Sessões BGP são estabelecidas entre participantes e servidores de rotas. Participantes podem se conectar em modo acesso (untag). Acordo de Troca de Tráfego Bilateral (ATB) Modo VLAN Compartilhada Troca de tráfego apenas entre participantes. Participantes podem se conectar em modo acesso (untag). Mesmo domínio de broadcast do acordo multilateral (ATM). Modo VLAN Dedicada Troca de tráfego apenas entre participantes (e.g. venda de trânsito). Utiliza VLAN dedicada apenas entre os participantes. 29
PTTMetro/PTT.br Logical Connection Structure per Location AS A MLPA IPv4 (e.g. VLAN tag 10) AS B MLPA IPv6 (e.g. VLAN tag 20) AS D Dedicated VLAN (e.g. tag 2010) AS E AS F Dedicated VLAN (e.g. tag 2020) AS G AS C 30
PTTMetro/PTT.br Reference Model Fundamental Definition IP (v4 v6) AS A AS B 31
PTTMetro/PTT.br Basic Operational Model Allowed Traffic AS A MAC A MAC B AS B IP (v4 v6) PTT.br Location Peering Fabric Allowed Frames with Ethertypes: 0x0800 - IPv4 0x0806 - ARP 0x86dd - IPv6 32
PTTMetro/PTT.br Extended Operational Model Inter AS Traffic Allowed Multiple Connections to a Location for Redundancy and/or Load Balancing AS A MAC A MAC B AS B MAC C AS C PTT.br Location Peering Fabric AS A MAC A' 33
PTTMetro/PTT.br Extended Operational Model Intra AS Traffic Denied Multiple Connections to a Location for Internal Traffic (local loop) AS A MAC A MAC B AS B MAC C AS C PTT.br Location Peering Fabric AS A MAC A' 34
PTTMetro/PTT.br Extended Operational Model Multiple AS per Single Port Shared L2 structure outside PTT.br operation domain AS A MAC A NSP Transport Provider AS D PTT.br Location Peering Fabric MLPA MAC D 35
PTTMetro/PTT.br Extended Operational Model Multiple AS per Single Port Use Different VLAN Tags for Logical Isolation (IEEE 802.1Q) AS A MAC A VLAN A VLAN A NSP Transport Provider PTT.br Location Peering Fabric MLPA VLAN C VLAN B AS D MAC D VLAN B 36
PTTMetro/PTT.br Resumo Financeiro PTTMetro/PTT.br Interesse Econômico para Empresas de Telecomunicações Redução dos custos de interconexão Provisionamento de Last/First Mile para conexão ao PTTMetro Serviços IP de Interconexão Utilização de VLANs dedicadas para prover isolamento lógico L2 para: Trânsito Internet (IPv4 e IPv6), Backup, Storage, VoIP, etc Transporte entre Localidades do PTTmetro Hospedagem de Pontos de Interconexão (PIX) Instalações Neutras para Prover Interconexões Reguladas/Arbitradas pela ANATEL 37
PTT.br ASNs X Trafego ASNs Trafego Gbps (média / dia) Pico Gbps (dia) NOV/07 73 2,7 4,6 NOV/08 91 4,9 12,4 NOV/09 122 10 19,1 NOV/10 200 25.5 40 MAY/11 270 34 56 NOV/11 306 49 72 NOV/12 451 87 137 MAY/13 500 98 160 38
PTT.br Crescimento Anual - ASNs Participantes X Trafego 180,00% 160,00% 140,00% 120,00% 100,00% 80,00% 60,00% 40,00% 20,00% 0,00% 07 to 08 08 to 09 09 to 10 ASNs Participants 10 to 11 11 to 12 12 to May/13 Peak Gb/Day 39
PTT.br ASNs Participantes por Localidade Localidades # AS % Sao Paulo 392 52 Porto Alegre 48 6 Curitiba 37 5 Campinas 26 3 Rio de Janeiro 28 4 Salvador 29 3 Londrina 23 3 Brasília 18 2 Belo Horizonte 19 2 Florianópolis 25 3 Fortaleza 12 2 Goiânia 21 3 Campina Grande 11 1 Americana 9 1 Outras 8 localidades 59 8 Sao Paulo Rio de Janeiro Belo Horizonte Campina Grande Porto Alegre Salvador Curitiba Londrina Campinas Brasília Florianópolis Fortaleza Goiânia Americana Others 8 locations # Participantes AS Unicos: 500 Total: 757 Valres de May 2013 40
PTT.br Comparativo - ASNs Participantes X ASNs Alocações 70,00% 60,00% 50,00% 40,00% 30,00% 20,00% 10,00% 0,00% 07 to 08 08 to 09 09 to 10 ASNs Participants 10 to 11 11 to 12 ASNs Allocated 41
PTT.br Números Todas Localidades - 92 PIXes (Pontos de Interconexão) Participantes: - 105 interfaces 10GE - 1650 interfaces 1GE (Optico / UTP) Core / PIXes - 225 interfaces 10GE - 125 interfaces 1GE (Optico / UTP) 42
PTT.br Tráfego Agregado - Todas Localidades 43
PTT.br Tráfego Agregado Trocado - Todas Localidades 40000 35000 30000 Terabytes 25000 20000 15000 10000 5000 0 13 012 / 20 Feb /2 Aug 12 011 / 20 Feb /2 Aug 010 1 / 201 Feb /2 Aug 10 009 / 20 Feb /2 Aug 09 008 / 20 Feb /2 Aug 08 007 / 20 Feb /2 Aug 44
PTT.br Percentual Tráfego PTT-SP 27,52% 0,28% Ipv4 Ipv6 Acordos Bilaterais 71,56% 45
PTT.br São Paulo Plano 2013 Os trabalhos para implantação da nova estrutura de rede do PTT-SP esta em andamento. - VPLS Network - Utilizando Cisco ASR9K - IP/DWDM - 100GB Ethernet 46
Processo de ativação: Números em 2012 No ano de 2012 foram realizadas: 193 ativações de novas conexões 128 solicitações de liberação de MAC address 118 solicitações de vlans Bi-laterais 76 migrações 47 solicitações de filtros 40 solicitações de aumento no limite de prefixos 27 ativações de redundância 19 ativações no ATMv6 19 cancelamentos 19 pedidos de reset de senha 17 ativações de Trânsito IPv6 13 pedidos de alteração na página de participantes 1 Ativação no ATMv4 1 Ativação no LG Total de solicitações atendidas: 708 Fonte: RT Nic.Br 47
Números Ativações: 2011 / 2012 / 2013 Atividades Ativação PTT.br Comparativo: 2011 x 2012 193 200 180 160 140 120 140 120 118 128 100 70 80 60 52 40 42 43 48 21 20 0 47 2011 Ativações de novas conexões 2012 Solicitações de vlans Bilaterais 2013 (Maio) Solicitações de liberação de MAC address Solicitações de Filtros BGP 48
PTT.br Rio de Janeiro Fórum Regional Destaques 2012 - Ativação de Servidores de DNS (nós anycast).br Root Server (L.root) - 2 novos PIXes - PIX NetBotanic - PIX NET - Atualização de Equipamentos - Upgrade da infraestrutura Suporte para links 10Gb - Interligação entre os PIXes Centrais - 20Gb - Ativação de Novos Participantes (e.g. Globo e GVT) 49
PTT.br Rio de Janeiro Fórum Regional Forum Regional Realizado em 17 Maio 2013 ~ 60 Participantes Apresentações e Apoio Alog Globo Level 3 Netflix NIC.br RNP 50
PTT.br Rio de Janeiro Fórum Regional Planos Anunciados - 2013 Novos PIXes (e.g. Alog 2 e L3); Novos Participantes de Conteúdo (e.g. Netflix, Google, Amazon); Nova Rede VPLS Modelo adotado em São Paulo Virtual Private LAN Service VPLS Maior Disponibilidade e Escalabilidade; Equipamentos Extreme Networks e Padtec. Previsão: Nova Localidade Nacional do PTT.br 51
PTT.br Meu PTT.br https://meu.ptt.br/ O Portal meu.ptt.br é utilizado para solicitações de serviços e suporte Para obter acesso a área de pedidos seguir o procedimento: 1 - Acessar https://meu.ptt.br 2 - Criar um usuário 3 - Vincular ASN 52
PTT.br Meu PTT.br https://meu.ptt.br/ Alguns serviços que já estão disponivel no Portal - Solicitações de adesão - Pedidos de suporte - Serviços (e.g. Vlan Bilateral / Troca de MAC) - Visualizar estatísticas de tráfego. Via Portal é possivel visualizar todas as solicitações em aberto e também interagir com a Equipe do PTT.br 53
PTTMetro PTT Fórum 7 São Paulo, Brazil http://ptt.br/pttforum/ 6o PTT Fórum - Nov/2012 São Paulo 300 participantes; 2 dias (Estudo de Casos / Apresentações); 7o PTT Fórum - 02 e 03 Dez/2013 São Paulo Plano que aconteça durante a III Semana de Infraestrutura do NIC.br, juntamente com GTER / GTES / IPV6 Fórum 54
PTTMetro/PTT.br Contato http://ptt.br/ eng@ptt.br 55