Interfaces Pessoa Máquina Avaliação III Cap. 9 - Avaliação 11
Melhor e Pior?
Melhor e Pior?
Resumo Aula Anterior Avaliadores 3 a 5 avaliadores (normal) Graus de Severidade 5 graus (0 a 4) Fases da Avaliação Heurística Treino; Avaliação; Consolidação; Balanço Exercício de Avaliação Heurística
Perguntas! Número de avaliadores? Em que consiste a consolidação?
Av. Heurística de Prot. Papel
Sumário Avaliação Preditiva GOMS KLM Avaliação com Utilizadores Planeamento dos testes
01 AVALIAÇÃO PREDITIVA
Método Analítico
Porquê avaliação preditiva?
Porquê avaliação preditiva? 11
Fases de aplicação Identificação da sequência pela qual a atividade é realizada e dos seus passos Análise dos passos para determinar medidas de usabilidade Tempo para realizar cada passo Passos onde podem ocorrer erros
02 GOMS
GOMS Goals Operators Methods Selection (Card, Moran, 14 Newell 1983)
Goals Objetivos da interação Podem ser divididos em subobjetivos Exemplo: Objetivo: Apagar frase Subobjetivos: Selecionar frase Apagar texto selecionado 15
Operators Ações básicas para atingir os objetivos Exemplo: Mover o cursor do rato Carregar no botão do rato Carregar numa tecla Escolher entre rato e teclado 16
Methods Sequência de operadores para atingir um objetivo Podem existir métodos alternativos Usando o rato ou o teclado Usar select 17
Selection rules Regras de seleção para escolher método a usar Exemplo: Regra para determinar qual o método a usar em função do contexto 18
Como se aplica? Identificar objetivo de alto-nível Escrever método para atingir objectivo (pode ter subobjetivos) Escrever métodos para subobjetivos Isto é recursivo Parar quando chegar a operadores 19
Exemplo GOMS
Exemplo GOMS
Exemplo GOMS
Exemplo GOMS
Exemplo GOMS
Exemplo GOMS
Exemplo GOMS - Regra 1 Usar APAGAR-COM-TECLADO se o utilizador usar o teclado - Regra 2 Usar APAGAR-COM-RATO se o utilizador usar o rato
GOMS Requer conhecimento detalhado Estratégia utilizador Tarefa Domínio do problema Produz medidas de desempenho Boas para utilizadores peritos Não tão boas para principiantes 27
03 KLM
KLM Mesmos autores do GOMS Modelo físico que prevê tempo Utilizadores peritos Relacionado com o GOMS
Operadores de Execução Operadores K - premir uma tecla (físico-motor) B - premir botão rato (físico-motor) P - apontar, mover rato (físico-motor) H - localizar rato/teclado (físico-motor) D - desenhar com rato (físico-motor) M - Preparação mental p/ ação (mental) R - resposta do sistema (sistema) Tempo de execução T exe = T K + T B + T P + T H + T D + T M + T R 30
Valores Típicos dos Operadores T K (depende da velocidade de escrita) 0,12 s (90 ppm) 0,28 s (40 ppm) 1,20 s T B T P 0,1 s (down/up) 0,2 s (click) = 1,10 s (média) dado pela Lei de Fitts T H = 0,4 s T D =? (variável) T M = 1,35 s T R =? (medir) 31
Exemplo - Regra 1 Usar APAGAR-COM-TECLADO se o utilizador usar o teclado - Regra 2 Usar APAGAR-COM-RATO se o utilizador usar o rato
Tempo Seleção Ac a o Operador Tempo (seg) Passar mão para rato H 0,40 Identificar início da frase M 1,35 Mover-Cursor-Início-Frase P 1,10 Carregar-Sem-Libertar-Botão-Esquerdo- Rato B 0,10 Identificar fim da frase M 1,35 Mover-Cursor-Fim-Frase P 1,10 Libertar-Botão-Esquerdo-Rato B 0,10 Total -- 5,50
Tempo Apagar com teclado Ac a o Operador Tempo (seg) Passar mão para teclado H 0,40 Escolher tecla M 1,35 Carregar-Tecla-Delete K 0,28 Total -- 2,03
Tempo Apagar com rato Ac a o Operador Tempo (seg) Carregar-Botão-Direito B 0,20 Escolher opção M 1,35 Mover-Cursor-Opção-Delete P 1,10 Carregar-Botão-Esquerdo B 0,20 Total -- 2,85
Tempo Total Parciais Seleção do texto: 5,50 seg Apagar usando teclado: 2,03 seg Apagar usando rato: 2,85 seg Total com teclado = 7,53 seg Total com rato = 8,35 seg Mais rápido com teclado.
Resumo Avaliação Preditiva Não é necessário construir sistema Úteis apenas para tarefas prevísiveis Previsões são apenas aproximações Mais valia é permitir comparações de soluções Permite identificar solução mais rápida Mais barato que testes com utilizadores Mais barato que avaliação com peritos 37
04 AVALIAÇÃO COM UTILIZADORES
Avaliação com Utilizadores
Avaliação com Utilizadores Obter dados objetivos de quanto usável o sistema é
E os Peritos?
Avaliação com Utilizadores
05 PLANEAMENTO DOS TESTES
Planear os Testes Objetivo
Planear os Testes Objetivo Onde
Planear os Testes OCT 12 Objetivo Onde Quando
Planear os Testes OCT 12 Objetivo Onde Quando Duração
Planear os Testes OCT 12 Objetivo Onde Quando Duração Equipamento
Planear os Testes OCT 12 Objetivo Onde Quando Duração Equipamento Software
Antes dos Testes Estado
Antes dos Testes Estado Tempo de Resposta
Antes dos Testes Estado Tempo de Resposta Quem Conduz?
Antes dos Testes Estado Tempo de Resposta Quem Conduz? Angariar Utilizadores
Antes dos Testes Estado Tempo de Resposta Quem Conduz? Angariar Utilizadores Quantos?
Antes dos Testes Estado Tempo de Resposta Quem Conduz? Angariar Utilizadores Quantos? Tarefas
Antes dos Testes Fim Correto
Antes dos Testes Fim Correto Ajuda & Docs.
Antes dos Testes Fim Correto Ajuda & Docs. Podemos Ajudar?
Antes dos Testes Fim Correto Ajuda & Docs. Podemos Ajudar? Dados
Antes dos Testes Fim Correto Ajuda & Docs. Podemos Ajudar? Dados Sucesso?
Resumo: Planeamento dos Testes
Guião dos Testes
Objetivo do Planeamento Mesmas condições para todos os participantes
Resumo Avaliação Preditiva GOMS KLM Avaliação com Utilizadores Planeamento dos testes
TPC Avaliação Ler Cap. 9 do Livro Secção 9.4