Relatório Final de Teste

Transcrição

1 Relatório Final de Teste Wireless MAXg Router e Wireless MAXg PC Card Referência de Desempenho do g ID de projecto: de Março de South 520 West Lindon, UT (801) Fax: (801) info@keylabs.com KeyLabs Confidencial Copyright KeyLabs Todos os direitos reservados

2 Certificação por KeyLabs Qualquer acesso ou utilização deste Relatório está condicionada pelo seguinte: 1. As informações contidas neste Relatório estão sujeitas a alteração pela KeyLabs sem aviso prévio. 2. As informações contidas neste Relatório são consideradas, pela KeyLabs, como precisas e fiáveis, mas não são dadas garantias. Toda e qualquer utilização e confiança em relação a este Relatório é da sua inteira responsabilidade. A KeyLabs não é responsável por quaisquer danos, perdas ou encargos resultantes de qualquer erro ou omissão neste Relatório. 3. NÃO SÃO DADAS QUAISQUER GARANTIAS, EXPRESSAS OU IMPLÍCITAS PELA KEYLABS. TODAS AS GARANTIAS IMPLÍCITAS, INCLUINDO GARANTIAS IMPLÍCITAS DE COMERCIABILIDADE, ADEQUAÇÃO PARA UM FIM ESPECÍFICO E NÃO VIOLAÇÃO NÃO SÃO DA RESPONSABILIDADE DA KEYLABS E SERÃO EXCLUÍDAS. EM NENHUMA EVENTUALIDADE DEVERÁ A KEYLABS SER CONSIDERADA RESPONSÁVEL POR QUAISQUER DANOS CONSEQUENCIAIS, ACIDENTAIS OU INDIRECTOS OU POR QUALQUER PERDA DE LUCROS, RECEITAS, DADOS, PROGRAMAS INFORMÁTICOS OU OUTROS BENS, MESMO QUE TENHA SIDO ACONSELHADA ACERCA DESSA POSSIBILIDADE. 4. Este Relatório não constitui um aval, recomendação ou garantia de quaisquer produtos (hardware ou software) testados ou do hardware e software utilizados para testar os produtos. O teste não garante que não existam erros ou defeitos nos produtos ou que os produtos correspondam às suas expectativas, requisitos, necessidades ou especificações ou que funcionem sem quaisquer interrupções. 5. Este Relatório não implica qualquer aval, patrocínio, afiliação ou verificação por ou com quaisquer empresas mencionadas neste relatório. Todas as marcas registadas, marcas de serviço e nomes de marcas utilizados neste Relatório são marcas registadas, marcas de serviço ou nomes de marcas dos respectivos detentores e nenhum aval, patrocínio, afiliação ou envolvimento, em qualquer dos testes, neste Relatório ou da KeyLabs está implícito, nem deverá, assim, ser interpretado. KeyLabs Confidencial - Copyright KeyLabs ii - Confidencial

3 Índice 1.0 Introdução Resumo Executivo Perspectiva Geral e Resultados Observações MAXg versus Concorrentes Pre-N/MIMO Recomendações Ambiente de Teste e Metodologia Ambiente de Teste Resumo da Metodologia Descrição das Métricas Recolhidas Resultados do Teste Problemas e Questões Conhecidos Anexo...13 Lista de Tabelas Tabela 1: Rendimento a 7 Metros...10 Tabela 2: Rendimento a 27 Metros...11 Tabela 3: Rendimento a 48 Metros...12 KeyLabs Confidencial - Copyright KeyLabs iii - Confidencial

4 1.0 INTRODUÇÃO Em Março de 2005, a U.S. Robotics contratou a KeyLabs para a condução de um teste de referência de rendimento independente ao desempenho de seis produtos g. O objectivo deste estudo de referência consiste em ajudar os compradores a tomarem decisões bem informadas ao seleccionarem os melhores produtos conforme as suas necessidades. Além disso, os resultados neste Relatório ajudarão os compradores a considerarem os custos / vantagens da norma de funcionamento em rede g versus Pre N. 2.0 RESUMO EXECUTIVO 2.1 Perspectiva Geral e Resultados A KeyLabs foi contratada pela U.S. Robotics para a condução de um teste de rendimentos em routers sem fios e adaptadores de rede sem fios Netgear 108. D Link, Linksys, Belkin High Speed Mode e U.S. Robotics g. Foi utilizada a ferramenta de referência de rede Charior da Ixia para levar a cabo os testes de rendimento. O objectivo consistia em comparar o rendimento ascendente e descendente de produtos de desempenho g da Netgear 108, D Link, Linksys, Belkin e U.S. Robotics em redes g nas distâncias de 7 metros, 27 metros e 48 metros. Os testes foram levados a cabo num ambiente de escritório em Schaumburg, Illinois de 7 de Março de 2005 a 11 de Março de A KeyLabs considera que este espaço representa, de forma adequada, as condições de funcionamento da norma para este tipo de dispositivo. Os produtos específicos testados neste estudo foram: Fabricante N.º de modelo Descrição U.S. Robotics USR5461 Wireless MAXg Router U.S. Robotics USR5411 Wireless MAXg PC Card Linksys WRT54GS Wireless G Broadband Router with SpeedBooster Linksys WPC54GS Wireless G Notebook Card with SpeedBooster Netgear WGT Wireless Firewall Router Netgear WGT511T 108 Wireless PC Card Belkin F5D High Speed Mode Wireless Router Belkin F5D7011 High Speed Mode Wireless Notebook Card Belkin F5D Wireless Pre N Router Belkin F5D8010 Wireless Pre N Notebook Card DLINK DI 624M SuperG MIMO Wireless Router DLINK DWL G650M SuperG MIMO Wireless Router 2.2 Observações MAXg versus Concorrentes do Modo de Alta Velocidade g KeyLabs -Confidencial- Página4

5 As descobertas deste teste revelaram que o produto de desempenho g U.S. Robotics MAXg, ultrapassou, consistentemente, a concorrência em termos de rendimento total na norma g. Os ganhos de desempenho oscilaram entre 5 e 312% quando comparados com outros produtos neste teste de referência, que incluiu o Netgear 108 Wireless Firewall Router/PC Card, Belkin High Speed Mode Wireless Router/Notebook Card e o Linksys Wireless G Broadband Router/Notebook Card with SpeedBooster. Também foi observado que a magnitude dos ganhos de desempenho depende da distância e da direcção (ascendente ou descendente) do tráfego do teste. Desempenho Ascendente U.S. Robotics MAXg 5% a 312% de melhor desempenho. Rendimento em Mbps U.S.Robotics MAXg Belkin High Speed Mode Linksys Wireless G with Speedbooster Netgear metros 27 metros 48 metros Distância em Metros Figura 1: Desempenho ascendente (do nó final ao ponto de acesso) g Rendimento em Mbps Desempenho Descendente 7 metros 27 metros 48 metros Distância em Metros U.S. Robotics MAXg 6% a 56% de melhor desempenho. U.S.Robotics MAXg Belkin High Speed Mode Linksys Wireless G with Speedbooster Netgear 108 Figura 2: Desempenho descendente (do ponto de acesso ao nó final) g KeyLabs -Confidencial- Página5

6 Estes dois gráficos mostram os resultados dos testes de rendimento, utilizando o script throughput.scr Ixia da Chariot com o U.S. Robotics MAXg Router, Belkin High Speed Mode Wireless Router, Linksys Wireless G with SpeedBooster e o Netgear 108 Wireless Firewall Router. O primeiro gráfico mostra o desempenho ascendente e o segundo gráfico mostra o desempenho descendente. Os números mais elevados indicam um melhor desempenho MAXg versus Concorrentes Pre-N/MIMO O mercado de produtos de funcionamento em rede apresenta avanços constantes. E, agora que os consumidores conhecem a norma g, muitos programadores estão de olhos postos na próxima geração da norma x (com o nome provisório de n). Alguns fornecedores estão a proceder ao pré lançamento de produtos antes da finalização da norma n. Estes produtos Pre N prometem velocidades de rendimento de 110 Mbit por segundo, mas, tal como indicado neste relatório, de momento, não se recomenda o pagamento de preços superiores por estes produtos Pre N. O U.S. Robotics MAXg Router teve um desempenho entre 8 e 50% superior que o router/pc Card D Link Pre N. O U.S. Robotics MAXg conseguiu até bater o rendimento ascendente do Belkin Wireless Pre N Router/PC Card na distância de 7 metros por 0,59 Mbits por segundo, embora nos rendimentos ascendentes das distâncias de 27 e 48 metros, o Belkin Wireless Pre N tenha conseguido um rendimento ligeiramente superior em cerca de 1 a 6,3 Mbit por segundo, dependendo da distância e da direcção (ascendente e descendente). A KeyLabs não observou quaisquer resultados de testes que conseguissem consubstanciar a afirmação da Belkin de 600% de maior velocidade em relação ao g. Desempenho Ascendente Rendimento em Mbps U.S.Robotics MAXg Belkin Wireless Pre-N DLINK SuperG MIMO metros 27 metros 48 metros Distância em Metros Figura 3: Desempenho ascendente (do nó final ao ponto de acesso) Pre-N KeyLabs -Confidencial- Página6

7 Desempenho Descendente Rendimento em Mbps metros 27 metros 48 metros Distância em Metros U.S.Robotics MAXg Belkin Wireless Pre-N DLINK SuperG MIMO Figura 4: Desempenho descendente (do ponto de acesso ao nó final) Pre-N Estes dois gráficos mostram os resultados dos testes de rendimento, utilizando o script throughput.scr Chariot da Ixia com o U.S. Robotics MAXg Router, o Belkin Wireless Pre N Router e o DLINK SuperG MIMO Wireless Router. O primeiro gráfico mostra o desempenho ascendente e o segundo gráfico mostra o desempenho descendente. Os números mais elevados indicam um melhor desempenho. 2.3 Recomendações Com base nos resultados deste teste: Os utilizadores que utilizam o rendimento como o principal factor para a consideração de produtos sem fios g devem escolher a solução da U.S. Robotics em relação ao Netgear 108, D Link, Linksys ou Belkin High Speed Mode. Embora o Belkin Wireless Pre N tenha um rendimento ligeiramente superior em distâncias mais longas, não correspondeu às promessas de 600% mais velocidade. E, ao considerarmos o custo dos produtos com activação Pre N, o produto U.S. Robotics MAXg oferece uma relação preço / desempenho atraente. 3.0 AMBIENTE DE TESTE E METODOLOGIA 3.1 Ambiente de Teste O ambiente de teste foi instalado num espaço de escritório de área aberta. Foi utilizado um analisador de espectro para monitorizar o ambiente durante os testes. Se foram criadas quaisquer condições em que a interferência dificultou os testes, essas condições foram rectificadas antes da continuação dos testes Foi elaborada a média dos resultados dos testes neste ambiente, de modo a fornecer valores do mundo real para fins de marketing. O ambiente de teste incluía os seguintes componentes: KeyLabs -Confidencial- Página7

8 Um ponto de acesso emparelhado com um cliente correspondente por caso de teste. Foram utilizados os seguintes pontos de acesso e clientes durante os testes: o Linksys SpeedBooster Wireless Router with SpeedBooster. Firmware g SpeedBooster Client. Controlador o Netgear WTG624 Super G Wireless Router. Firmware WG511T Super G Client. Controlador o D Link Pre N DL 624M Xtreme G Wireless Router. Firmware v1.00 DWL G650M Xtreme G Client. Controlador v o U.S. Robotics MAXg USR5461 MAXg Wireless Router. Firmware USR5411 MAXg Client. Controlador o Belkin High Speed Mode F5D Wireless Router. Firmware F5D7011 Wireless Client. Controlador o Belkin Wireless Pre N F5D Wireless Router. Firmware F5D8010 Wireless Client. Controlador Um cliente sem fios activo em teste por caso de teste (do mesmo fornecedor que o ponto de acesso a ser testado). Os clientes e os pontos de acesso foram configurados, utilizando convenções da norma g utilizando a configuração predefinida dos produtos. Cada cliente em teste era um ponto final Chariot. Cada ponto de acesso incluía o respectivo comutador de 4 portas integrado. Uma destas portas foi utilizada para a ligação da consola Chariot. O laboratório de teste, na imagem em baixo, era composto por dois PCs a executar testes de rendimento, de acordo com a descrição: A Consola Chariot directamente ligada ao Router em teste. Computador portátil Dell Latitude CSx Pentium 3 de 500MHz Windows 2000 Pro com todos os pacotes de serviço 256 MB de memória Ponto final Chariot com uma placa de interface sem fios associada ao Router. Computador portátil Dell Latitude CSx Pentium 3 de 500MHz Windows XP Pro com todos os pacotes de serviço 256 MB de memória KeyLabs -Confidencial- Página8

9 Chariot Console Wireless Client Endpoint 10/100 Ports on AP g Access Point Under Test Figura 5: Configuração de teste sem fios Figura 6: Desenho da configuração do escritório Os pontos de acesso foram configurados sem encriptação ou activação de quaisquer outras funções de segurança adicionais. Após a análise do ambiente de trabalho, foi seleccionado o canal 6, que foi também utilizado para todos os testes. Para além da definição do canal, todos os pontos de acesso mantiveram as suas definições de fábrica. Não foi activada qualquer ligação de canais em qualquer um dos routers. KeyLabs -Confidencial- Página9

10 3.1.1 Resumo de Metodologia Os testes foram conduzidos utilizando o Chariot da Ixia e o script de teste throughput, fornecido com a instalação predefinida. O script foi modificado para enviar um ficheiro de bytes em vez de um ficheiro de bytes. Cada teste executado teve uma duração de dois minutos, de modo a mitigar a normal variação de comportamentos das placas a serem testadas. Ocorreram 10 passagens na direcção descendente e 10 na direcção ascendente para um total de 20 passagens por par e por local. Estas 20 passagens foram executadas a 7 metros e repetidas novamente a 27 metros e 48 metros para um total de 360 execuções de testes Descrição das Métricas Recolhidas Para cada caso de teste, o rendimento de cada par de pontos finais foi registado na direcção ascendente (do cliente) e descendente (para o cliente). Cada caso de teste foi executado dez vezes em cada direcção. A matriz de testes que se segue mostra as execuções de testes concluídas. O rendimento total médio (total de todos os pares de clientes) foi registado e comunicado para cada execução do teste em megabits por segundo (Mbps). 4.0 RESULTADOS DO TESTE Tabela 1: Rendimento a 7 Metros Emparelhamento Rendimento Médio a 7 Metros Transferência ascendente Transferência descendente MAXg Belkin HIGH SPEED MODE Linksys SpeedBooster Belkin Wireless Pre-N D-Link Pre-N Netgear Desempenho a 7 Metros Rendimento USR MAXg Belkin HSM Linksys HSM Belkin Pre-N D-Link Pre-N Netgear 108 Emparelhamento Ascendente Descendente KeyLabs -Confidencial- Página10

11 Emparelhamento Tabela 2 Rendimento a 27 Metros Rendimento Médio a 27 Metros Transferência ascendente Transferência descendente MAXg Belkin HIGH SPEED MODE Linksys SpeedBooster Belkin Wireless Pre-N D-Link Pre-N Netgear Desempenho a 27 Metros Rendimento Ascendente Descendente USR MAXg Belkin HSM Linksys HSM Belkin Pre-N D-Link Pre-N Netgear 108 Emparelhamento KeyLabs -Confidencial- Página11

12 Tabela 3: Rendimento a 48 Metros Rendimento Médio a Emparelhamento 48 Metros Transferência ascendente Transferência descendente MAXg Belkin HIGH SPEED MODE Linksys SpeedBooster Belkin Wireless Pre-N D-Link Pre-N Netgear Desempenho a 48 Metros Rendimento USR MAXg Belkin HSM Linksys HSM Belkin Pre-N D-Link Pre-N Netgear 108 Emparelhamento Ascendente Descendente 5.0 PROBLEMAS E QUESTÕES CONHECIDOS Não foram encontradas questões ou problemas. Ocasionalmente, foram detectadas interferências no analisador de espectro; quando foram encontradas interferências, a execução foi parada, as condições rectificadas e a execução reiniciada. KeyLabs -Confidencial- Página12

13 6.0 ANEXO As tabelas que se seguem contêm todos os dados recolhidos durante os testes. Tabela 5: Rendimento do U.S. Robotics MAXg a 7 Metros U.S. Robotics MAXg Média Tabela 6: Rendimento do Linksys a 7 Metros Linksys SpeedBooster Média KeyLabs -Confidencial- Página13

14 Tabela 7: Rendimento do D Link Pre N a 7 Metros D-Link Pre-N Média Tabela 8: Rendimento do Belkin HIGH SPEED MODE a 7 Metros Belkin HIGH SPEED MODE Média Tabela 9: Rendimento do Belkin Wireless Pre N a 7 Metros Belkin Wireless Pre- N Média KeyLabs -Confidencial- Página14

15 Tabela 10: Rendimento do Netgear 108 a 7 Metros Netgear Média Tabela 11: Rendimento do U.S. Robotics MAXg a 27 Metros USR MAXg Média Tabela 12: Rendimento do Linksys SpeedBooster a 27 Metros Linksys SpeedBooster Média KeyLabs -Confidencial- Página15

16 Tabela 13: Rendimento do D Link Pre N a 27 Metros D-Link Pre-N Média Tabela 14: Rendimento do Belkin HIGH SPEED MODE a 27 Metros Belkin HIGH SPEED MODE Média Tabela 15: Rendimento do Belkin Wireless Pre N a 27 Metros Belkin Wireless Pre-N Média KeyLabs -Confidencial- Página16

17 Tabela 16: Rendimento do Netgear 108 a 27 Metros Netgear Média Tabela 17: Rendimento do U.S. Robotics MAXg a 48 Metros MAXg Média Tabela 18: Rendimento do Linksys SpeedBooster a 48 Metros Linksys SpeedBooster Média KeyLabs -Confidencial- Página17

18 Tabela 19: Rendimento do D Link Pre N a 48 Metros D-Link Pre-N Média Tabela 20: Rendimento do Belkin HIGH SPEED MODE a 48 Metros Belkin HIGH SPEED MODE Média Tabela 21: Rendimento do Belkin Wireless Pre N a 48 Metros Belkin Wireless Pre-N Média KeyLabs -Confidencial- Página18

19 Tabela 22: Rendimento do Netgear 108 Throughput a 48 Metros Netgear Média KeyLabs -Confidencial- Página19