IV – AVALIAÇÃO IV.1 – AVALIAÇÃO POR PERITOS II (AVALIAÇÃO HEURÍSTICA)

HCI, Cap. 9, Alan Dix

www.useit.com (Webpage de) Jakob Nielsen

Guerrilla HCI, Jakob Nielsen

Resumo Aula Anterior

o Avaliação Heurística

– é fácil, é barata, dá...

Nº de Avaliadores (3-5)

Heurísticas de Usabilidade

• Analisar se conforme às heurísticas

– Anotar não conformidade (onde, qual, porquê ?)

2

Sumário

o Fases da Avaliação Heurística

o Exercício de Avaliação Heurística

o Consolidação de Avaliações

3

Melhor e Pior?

4

Melhor e Pior?

5

6

FASES DA AVALIAÇÃO

Fases da Avaliação Heurística

1.Treino pré-avaliação

7

Fases da Avaliação Heurística

1.Treino pré-avaliação

2.Avaliação

8

Fases da Avaliação Heurística

1.Treino pré-avaliação

2.Avaliação

3.Classificação de severidade

9

Fases da Avaliação Heurística

1.Treino pré-avaliação

2.Avaliação

3.Classificação de severidade

4.Relatar (Debriefing)

10

Como conduzir Avaliação

Pelo menos dois passos por avaliador

Primeiro para familiarizar com aplicação

Segundo para focar em elementos específicos

11

Como conduzir Avaliação

Cada avaliador

produz lista de

problemas

12

Graus de Severidade

Permitem atribuir

recursos à solução de

problemas

Estimativas de

esforço a investir em

usabilidade

13

Graus de Severidade

Determinados com base em

Frequência

Impacto

Persistência (isolado; repetitivo)

14

Graus de Severidade

Atribuídos independentemente

por cada avaliador

Calculados de novo depois de

consolidar avaliações

15

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

16

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

1 - problema cosmético

17

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

1 - problema cosmético

2 - problema menor

18

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

1 - problema cosmético

2 - problema menor

3 - problema importante de usabilidade - corrigir

19

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

1 - problema cosmético

2 - problema menor

3 - problema importante de usabilidade - corrigir

4 - CATÁSTROFE de usabilidade - imperativo

corrigir!

20

Como Relatar (Debriefing)

Sessão com avaliadores, observadores e

equipa de projecto

Discutir características gerais da IU

Sugerir possíveis melhoramentos para

resolver principais problemas de usabilidade

Equipa de projecto avalia custos de corrigir

cada problema

Sessão de brainstorming

minimizar críticas negativas durante o exercício 21

Exemplo de Problemas

Problema: Campo da data não indica formato

Heurística(s): H2-5: Evitar erros

Descrição: A falta de indicação do formato leva os

utilizadores a cometer erros

Correcção: Substituir campo por um calendário

Severidade: 3

22

Exemplo de Problemas

Problema: Tipografia mistura letra maiúscula e

minúscula e tipos

Heurística(s): H2-4: Consistência e Aderência a

Normas

Descrição: A utilização de vários tipos de texto

atrapalha os utilizadores

Correcção: usar um só tipo em toda a interface

Severidade: 2

23

Exemplo de Problema

Problema: Nomes diferentes para operação Guardar

H2-4: Consistência e Aderência a Normas

Descrição: A interface usa “Salvaguardar” no

primeiro ecrã para salvaguardar ficheiro do

utilizador, mas usa “Guardar Ficheiro” em ecrãs

subsequentes. O uso de terminologia diferente para

a mesma função pode confundir os utilizadores.

Correcção: Definir uma terminologia e usá-la sempre.

Severidade: 3

24

EXERCÍCIO AVALIAÇÃO HEURÍSTICA

25

Heurísticas de Usabilidade

H2-1 - Tornar estado do sistema visível

H2-2 - Falar a linguagem do utilizador

H2-3 - Utilizador controla e exerce livre-arbítrio

H2-4 - Consistência e Aderência a Normas

H2-5 - Evitar Erros

H2-6 - Reconhecimento em vez de lembrança

H2-7 - Flexibilidade e Eficiência

H2-8 - Desenho de ecrã estético e minimalista

H2-9 - Ajudar utilizador a reconhecer, diagnosticar

e recuperar dos erros

H2-10 - Dar Ajuda e Documentação 26

Graus de Severidade

0 - não há consenso quanto a problema de

usabilidade

1 - problema cosmético

2 - problema menor

3 - problema importante de usabilidade - corrigir

4 - CATÁSTROFE de usabilidade - imperativo

corrigir!

27

28

H2-7 e H2-4 [3] Falta URL H2-8 e H2-4 [2]

Morada no sítio errado e com muito destaque

H2-4 e H2-6 [2] Cor do link errada

H2-1 [3] Passo 2 de quantos?

H2-8 [3] Notícias desnecessárias

H2-4 [3] Termos diferentes

H2-8 [3] Ordem dos campos

H2-6 e H2-5 [4] Adicionar usando código

H2-4 [2] Texto em Inglês

H2-9 [4] Mensagem de erro não clara

H2-3 [4] Sem botão de retorno

H2-10 [3] Sem botão de ajuda

H2-8 [2] Confirmação + Morada Facturação

H2-8 [1] Preto sobre cinzento escuro

Como Identificar um Problema

2. Problema: Morada da empresa demasiado destacada

• Heurística(s): H2-4 - Consistência e Aderência a Normas H2-8 - Desenho de ecrã estético e minimalista

• Descrição: Os contactos da empresa estão demasiado destacados entrando em conflito com o próprio título da página. Por outro lado, não estão num lugar esperado ou normativo.

• Correcção: Colocar morada no fundo da página à direita e com uma fonte mais pequena, ou colocar um logótipo com elo para uma página adicional com esta e outras informações da empresa.

• Severidade: 2 29

1

2

Agrupamento de Avaliações

o Imaginem que:

O vosso protótipo foi avaliado por 3 avaliadores

Cada um deles enviou um relatório com os problemas de usabilidade

Como se junta tudo?

30

Consolidação de Avaliações

1. Identificar problemas iguais em vários

relatórios

Converter num só problema

Juntar as descrições numa mais completa

Escolher a severidade mais alta

2. Sumarizar nº de violações por Heurística

1. Sumarizar nº de violações por Severidade

31

Problemas Iguais (Exemplo)

o Relatório 1: Nomes diferentes para operação Guardar

• H2-4: Consistência e aderência a normas

• Descrição: A interface usa “Salvaguardar” no primeiro ecrã para salvaguardar ficheiro do utilizador, mas usa “Guardar Ficheiro” em ecrãs subsequentes.

• Correcção: Definir uma terminologia e usá-la sempre.

• Severidade: 3

o Relatório 2: Nomes diferentes para botão Guardar

• H2-4: Consistência e aderência a normas

• Descrição: “Salvaguardar” e “Guardar Ficheiro” são usados sem critério. Isto é confuso.

• Correcção: Usar sempre o mesmo.

• Severidade: 2

o Consolidado H2-4: Consistência e aderência a normas

Descrição: A interface usa “Salvaguardar” no primeiro ecrã para salvaguardar ficheiro do utilizador, mas usa “Guardar Ficheiro” em ecrãs subsequentes. O uso de terminologia diferente para a mesma função pode confundir os utilizadores.

Correcção: Escolher uma terminologia e usá-la sempre.

Severidade: 3 32

Violações por Heurística

33

2 H2-10

6 H2-2

25 Total

…

3 H2-1

Frequência Heurística

Violações por Severidade

34

8 3

5 4

3 1

25 Total

7 2

2 0

Frequência Severidade

AH vs. Testes com Utilizadores

o AH é muito mais expedita

1-2 horas por avaliador vs. dias-semanas

o AH não requer interpretação das acções utilizador

o Teste com utilizadores é muito mais preciso

Considera utilizadores e tarefas “reais”

AH pode ignorar problemas ou indicar “falsos positivos”

o Boa ideia alternar entre AH e teste com utilizadores

identificam problemas diferentes

desperdiça menos recursos (participantes) 35

Próxima Aula

o Modelo Humano de Processamento

Subsistema de Percepção

• Visão

• Audição

• Tacto

Subsistema Motor

36