No artigo 13. E-book LIM | Teste com Utilizadores coloquei as tabelas e os diagramas referentes às tarefas. De seguida, irei apresentar as conclusões retiradas dos testes.
Como procedimento adoptado, todos os testes foram cronometrados e foi dada aos utilizadores a possibilidade de explorarem o e-book durante 5 minutos. Todos eles apresentaram, em geral, reacções e sugestões distintas, embora algumas delas fossem comuns aos 4 utilizadores. Um dos utilizadores tem uma insuficiência visual: daltonismo, portanto, as conclusões retiradas deste teste revestem-se de grande importância devido à forte componente de acessibilidade de que se reveste este trabalho.
O utilizador 1 revelou mais dificuldade na exploração do e-book. Embora já conhecesse o produto, apresentou bastantes críticas construtivas por ter um grande contacto com questões relacionadas com "estética". Nas 3 tarefas revelou mais de 5 cliques, acabando por desistir de cada uma delas e passar à seguinte. Não cumpriu nenhum dos objectivos e errou nas 3. Perdia-se no percurso e clicava nos ícones/botões errados, que o desviavam do objectivo. Demorou algum tempo a chegar aos capítulos, por considerar o início do e-book (agradecimentos, prólogo, etc.) muito extenso. Este utilizador comentou: "Uma vez perdendo-me no caminho, nunca mais consigo voltar ao sítio onde me encontrava!". Teve dificuldade em encontrar as áreas clicáveis e em ler o texto no ecrã. Foi, ainda, o utilizador que mais tempo demorou a desempenhar as 3 tarefas, exceptuando o utilizador 4 que demorou 3min e 38seg na segunda tarefa.
O utilizador 2 foi aquele que mais facilidade e rapidez apresentou no desempenho das tarefas, exceptuando o utilizador 3 que demorou apenas 3seg no cumprimento da terceira tarefa. Nas tarefas 1 e 3 demorou apenas 2 seg e 4 seg, respectivamente. Cumpriu ambas com apenas um clique (um passo). Na tarefa 2 errou e desistiu por ter efectuado mais de 5 cliques ao longo da tarefa. Perdeu-se algumas vezes no caminho mas considerou o e-book intuitivo e interessante a nível de conteúdos. Em alguns conteúdos admitiu ter de andar "à descoberta".
O utilizador 3 também revelou relativa facilidade e rapidez no cumprimento das tarefas 1 e 3, demorando apenas 3seg em cada uma delas. No entanto, na segunda tarefa errou nos diversos passos, desistindo com mais de 5 cliques e demorando 2min e 54seg. Achou o e-book agradável à vista, sóbrio, embora tenha considerado as simulações pouco intuitivas e as imagens e letras demasiado pequenas.
O utilizador 4 revelou-se rápido no cumprimento das tarefas 1 e 3, com 2seg e 4seg em cada uma delas, respectivamente. Necessitou de, apenas, 1 clique em ambas. As dificuldades deste utilizador eram acrescidas, devido ao facto de ser daltónico. Na segunda tarefa o utilizador efectuou mais de 5 cliques e não atingiu o objectivo. Esta tarefa foi, sem dúvida, a mais complicada para todos os utilizadores, não sendo cumprida por nenhum deles. Este utilizador comentou: "Não vejo bem as setas ao lado do número da página, esta cor é muito esbatida...". Embora este factor dependa em grande parte do hardware, o utilizador realçou o facto de a aplicação demorar muito tempo a carregar as páginas e imagens. Perdeu-se algumas vezes no caminho de exploração e teve dificuldades em identificar as várias cores (ícones de navegação entre páginas), logo, a sua navegação ficou condicionada. Apontou que as páginas iniciais (agradecimentos, prólogo, etc.) não são mais importantes que o Índice de Capítulos, portanto, sugeriu que o e-book começasse com o conteúdo que interessa aos alunos, o público-alvo.
Das 3 tarefas, a segunda foi aquela que mais dúvidas suscitou e a que mais tempo exigiu aos utilizadores.
No que diz respeito ao questionário de satisfação, as opiniões diferem. Os utilizadores revelaram sensações bem distintas. Apresento, de seguida, a tabela referente às opiniões dos utilizadores, com a respectiva pontuação em cada pergunta.
O utilizador 2 foi aquele que mais facilidade e rapidez apresentou no desempenho das tarefas, exceptuando o utilizador 3 que demorou apenas 3seg no cumprimento da terceira tarefa. Nas tarefas 1 e 3 demorou apenas 2 seg e 4 seg, respectivamente. Cumpriu ambas com apenas um clique (um passo). Na tarefa 2 errou e desistiu por ter efectuado mais de 5 cliques ao longo da tarefa. Perdeu-se algumas vezes no caminho mas considerou o e-book intuitivo e interessante a nível de conteúdos. Em alguns conteúdos admitiu ter de andar "à descoberta".
O utilizador 3 também revelou relativa facilidade e rapidez no cumprimento das tarefas 1 e 3, demorando apenas 3seg em cada uma delas. No entanto, na segunda tarefa errou nos diversos passos, desistindo com mais de 5 cliques e demorando 2min e 54seg. Achou o e-book agradável à vista, sóbrio, embora tenha considerado as simulações pouco intuitivas e as imagens e letras demasiado pequenas.
O utilizador 4 revelou-se rápido no cumprimento das tarefas 1 e 3, com 2seg e 4seg em cada uma delas, respectivamente. Necessitou de, apenas, 1 clique em ambas. As dificuldades deste utilizador eram acrescidas, devido ao facto de ser daltónico. Na segunda tarefa o utilizador efectuou mais de 5 cliques e não atingiu o objectivo. Esta tarefa foi, sem dúvida, a mais complicada para todos os utilizadores, não sendo cumprida por nenhum deles. Este utilizador comentou: "Não vejo bem as setas ao lado do número da página, esta cor é muito esbatida...". Embora este factor dependa em grande parte do hardware, o utilizador realçou o facto de a aplicação demorar muito tempo a carregar as páginas e imagens. Perdeu-se algumas vezes no caminho de exploração e teve dificuldades em identificar as várias cores (ícones de navegação entre páginas), logo, a sua navegação ficou condicionada. Apontou que as páginas iniciais (agradecimentos, prólogo, etc.) não são mais importantes que o Índice de Capítulos, portanto, sugeriu que o e-book começasse com o conteúdo que interessa aos alunos, o público-alvo.
Das 3 tarefas, a segunda foi aquela que mais dúvidas suscitou e a que mais tempo exigiu aos utilizadores.
No que diz respeito ao questionário de satisfação, as opiniões diferem. Os utilizadores revelaram sensações bem distintas. Apresento, de seguida, a tabela referente às opiniões dos utilizadores, com a respectiva pontuação em cada pergunta.
Por ordem de "importância" de eficácia, interpretada pela pontuação alcançada:- Pergunta 1 - O e-book do LIM é útil para a complementação dos conhecimentos adquiridos na disciplina “Electrónica e Instrumentação”. - 19 em 20 pontos, com 3 "Concordo totalmente" e 1 "Concordo".
- Pergunta 6 - As imagens, vídeos e animações são apelativas. - 17 em 20 pontos, com 1 "Concordo totalmente" e 3 "Concordo".
- Pergunta 5 - O e-book apresenta variados recursos (imagens, animações, vídeos, etc.) úteis para a compreensão dos assuntos. - 16 em 20 pontos, com 4 "Concordo".
- Pergunta 4 - O e-book proporciona uma experiência agradável de navegação e interacção e gostaria de ter mais tempo para o explorar. - 15 em 20 pontos, com 1 "Concordo totalmente", 2 "Concordo" e 1 "Discordo".
- Pergunta 3 - O conteúdo é facilmente compreendido por qualquer pessoa, mesmo do público em geral (a linguagem é acessível). - 15 em 20 pontos, com 1 "Concordo totalmente", 1 "Concordo" e 2 "Sem opinião".
- Pergunta 7 - O layout (cores, tamanho de letra, tipo de letra) é apelativo. - 14 em 20 pontos, com 3 "Concordo".
- Pergunta 2 - O e-book é eficaz na explicação da realização das experiências (medições). - 14 em 20 pontos, com 2 "Concordo" e 2 "Sem opinião".
- Pergunta 8 - O e-book é bastante prático, mais do que teórico. - 11 em 20 pontos, com 1 "Concordo", 1 "Sem opinião" e 2 "Discordo".
- Pergunta 9 - A navegação pelos conteúdos é intuitiva (consegue fácil e rapidamente alcançar os conteúdos). - 11 em 20 pontos, com 2 "Concordo", 1 "Discordo" e 1 "Discordo totalmente".
Estas opiniões traduziram-se em sugestões para melhorar o produto. Irei apresentá-las no artigo 16. E-book LIM | Teste com Utilizadores . Sugestões para melhorar o produto.
0 comentários:
Enviar um comentário