Aula 12 – Apresentação da Avaliação com Utilizadores
“LX+Card”
Este documento tem como objectivo mostrar os resultados do desempenho dos utilizadores
nas 4 tarefas.
Resultados dos Testes com Utilizadores
Tarefa
Parâmetro
Mínimo
Confiança
(90%)
Máximo
Confiança
(90%)
Valor
Esperado
Dentro das
Métricas?
1
Nº de cliques
2,957777183
4,242222817
4
NÃO
Nº de erros
0,079497228
1,120502772
1
NÃO
Tempo gasto
(mm:ss)
(ver abaixo)
(ver abaixo)
00:43
SIM
61
SIM
2
3
4
Nº de cliques
53,251769296 67,748230704
Nº de erros
1,748736822
6,051263178
4
NÃO
Tempo gasto
(mm:ss)
(ver abaixo)
(ver abaixo)
02:44
SIM
24
SIM
Nº de cliques
21,208023794 27,491976206
Nº de erros
0,754346614
2,245653386
2
SIM
Tempo gasto
(mm:ss)
(ver abaixo)
(ver abaixo)
02:19
SIM
Nº de cliques
4,979108622 17,020891378
11
SIM
Nº de erros
0,335141072
2,564858928
1
SIM
Tempo gasto
(mm:ss)
(ver abaixo)
(ver abaixo)
03:07
SIM
(tabela consolidada com valores dos parâmetros recolhidos por observação directa)
Grupo 79:
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
1
Tabelas com todos os valores observados e respectivos
resultados estatísticos
Utilizador
R1
R2
R3
R4
R5
R6
P1
P2
P3
P4
P5
F1
F2
F3
F4
F5
F6
F7
F8
F9
Médias
Desvio-Padrão
Variância
I.C. (Amplitude)
I.C. (Mínimo)
I.C. (Máximo)
Tarefa 2 –
Cliques
Sexo
M
M
F
F
F
M
F
F
M
M
F
F
M
M
F
F
M
M
M
F
22
26
24
30
36
32
17
50
49
64
33
21
20
20
19
16
31
15
55
55
32
Tarefa 2 –
Erros
6
55
68
58
Grupo 79:
Idade
0
0
8
1
Tarefa 1 –
Cliques
Tarefa 1 –
Erros
4
3
4
3
3
3
3
6
7
3
4
4
2
2
2
3
3
7
3
3
4
1,47
2,147368421
0,642222817
2,957777183
4,242222817
1
0
0
0
0
0
0
0
1
0
0
0
0
0
0
2
1
5
1
1
1
1,19
1,410526316
0,520502772
0,079497228
1,120502772
Tarefa 2 – Tempo (mm:ss)
02:08
01:10
01:56
02:00
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Tarefa 3 –
Cliques
Tarefa 1 – Tempo (mm:ss)
00:58
00:20
00:15
01:00
01:00
00:20
00:55
00:50
01:37
00:45
00:42
00:28
00:20
00:28
00:15
00:22
00:25
01:57
00:26
01:05
00:43
0,00
1,02463E-07
0,000140287
0,000362028
0,000642602
Tarefa 3 –
Erros
26
35
30
27
Francisco Morais – 56941;
0
1
0
0
Tarefa 3 – Tempo (mm:ss)
01:42
01:30
01:25
02:00
Zoran Vitez – 58832
2
73
60
64
70
67
67
67
81
66
66
75
31
57
49
66
64
61
16,54
273,5263158
7,248230704
53,251769296
67,748230704
1
0
0
1
3
2
2
17
1
2
12
11
10
1
3
3
4
4,91
24,09473684
2,151263178
1,748736822
6,051263178
03:07
01:00
01:28
02:20
02:07
02:49
01:32
00:20
01:14
02:53
07:55
06:12
06:29
01:29
02:57
03:34
02:44
0,00
1,87873E-06
0,000600709
0,001297439
0,002498858
Tarefa 4 – Cliques
Grupo 79:
Ricardo Lopes – 54570;
30
41
26
30
26
30
23
18
25
21
14
16
16
20
17
16
24
7,17
51,39736842
3,141976206
21,208023794
27,491976206
Tarefa 4 – Erros
3
2
0
1
1
1
0
4
0
1
6
4
2
0
3
1
2
1,70
2,894736842
0,745653386
0,754346614
2,245653386
Tarefa 4 – Tempo (mm:ss)
0
0
00:00
0
0
00:00
Pedro Vilaça – 56748;
02:30
02:40
01:50
02:40
02:45
04:48
01:31
01:11
01:27
01:46
01:56
01:48
02:55
02:04
04:17
03:28
02:19
0,00
4,52518E-07
0,000294816
0,001309930
0,001899561
Francisco Morais – 56941;
Zoran Vitez – 58832
3
Grupo 79:
0
0
00:00
0
0
00:00
0
0
00:00
0
0
00:00
31
1
04:15
41
3
04:50
29
0
02:40
26
1
04:30
27
2
03:50
0
0
00:00
0
0
00:00
0
0
00:00
0
0
00:00
0
0
00:00
18
4
05:46
17
10
15:21
19
5
08:19
12
3
12:47
11
1
03:07
13,74
2,54
0,00
188,7368421
6,471052632
9,92102E-06
6,020891378
1,114858928
0,001380418
4,979108622
0,335141072
0,000782777
17,020891378
2,564858928
0,003543612
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
4
Comentários aos Resultados dos Testes

Tarefa 1:
Comparando os valores designados nas Métricas de Usabilidade definidas previamente (tempo
gasto e nº erros cometidos) com os valores obtidos, podemos concluir que o Valor Esperado
para o primeiro parâmetro está dentro do Valor Previsto, uma vez que foi obtido o tempo de
43 segundos (que é inferior a 1 minuto), ao passo que o Valor Esperado obtido para o segundo
parâmetro (1) ultrapassa o Previsto (0). Este valor pode ser explicado pelo facto de na
primeira interacção, o utilizador sentir alguma dificuldade em adaptar-se à interface ou ao
ambiente.
Tarefa 1 - Cliques/Erros
8
7
Número
6
5
Cliques
4
Erros
3
2
1
0
1
2
3
4
5
6
7
8
9
10 11 12 13 14 15 16 17 18 19 20
Utilizador

Tarefa 2:
Tal como na tarefa 1, o Valor Esperado para o tempo (2 minutos e 44 segundos) foi inferior ao
previsto (3 minutos), mas o número de erros (4) foi bem superior ao valor designado nas
Métricas(1). Acreditamos que isto se deve ao facto de muitos utilizadores terem tido
dificuldade em visualizar o botão “Pesquisa Avançada” e alguns também não terem
conseguido seleccionar o filtro “Monumentos” na primeira tentativa.
Grupo 79:
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
5
Tarefa 2 - Cliques/Erros
90
80
70
Número
60
50
Cliques
40
Erros
30
20
10
0
1
2
3
4
5
6
7
8
9
10 11 12 13 14 15 16 17 18 19 20
Utilizador
Eis o ecrã “problemático”:
Grupo 79:
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
6

Tarefa 3:
No que concerne à terceira tarefa, ambos os Valores Esperados estão dentro dos Valores
Previstos (2 minutos e 19 segundos é um tempo inferior a 4 minutos) e 2 era o número
previsto de erros para esta tarefa.
Tarefa 3 - Cliques/Erros
45
40
35
Número
30
25
Cliques
20
Erros
15
10
5
0
1
2
3
4
5
6
7
8
9
10 11 12 13 14 15 16 17 18 19 20
Utilizador

Tarefa 4:
Para a quarta e última tarefa, tal como na terceira, tanto o Valor Esperado do primeiro como
do segundo parâmetros não ultrapassam, respectivamente, os Valores Previstos (3 minutos e 7
segundos é um tempo inferior a 5 minutos e 1 erro é menor que 3 erros). Há que realçar,
porém, que nem todos os utilizadores concretizaram esta tarefa completamente, pois os ecrãs
e botões ainda não estavam implementados.
Tarefa 4 - Cliques/Erros
45
40
Número
35
30
25
Cliques
20
Erros
15
10
5
0
1
2
3
4
5
6
7
8
9
10 11 12 13 14 15 16 17 18 19 20
Utilizador
Grupo 79:
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
7
Como nota final, mostramos ainda aqui um gráfico que ilustra o tempo gasto por cada
utilizador para cada tarefa:
Tempos gastos nas Tarefas
17:17
14:24
Tempo
11:31
Tarefa 1
Tarefa 2
08:38
Tarefa 3
Tarefa 4
05:46
02:53
00:00
1
2
3
4
5
6
7
8
9 10 11 12 13 14 15 16 17 18 19 20
Utilizador
Grupo 79:
Ricardo Lopes – 54570;
Pedro Vilaça – 56748;
Francisco Morais – 56941;
Zoran Vitez – 58832
8