Versão final dos instrumentos para testes de usabilidade

Aqui fica a versão final do cognitive walkthrough e inquérito final que apresentamos aos participantes.

testes

Usabilidade

Aqui fica a documentação elaborada para a realização dos testes de usabilidade.

Tabelas de avaliação de eficácia e eficiência, será usada uma para cada participante:

Cognitive Walkthrough e inquérito de avaliação de satisfação e sugestões:

cognitivewalkthrough_inquerito

Reunião 27/5

Na reunião com os orientadores de hoje ficaram decididas algumas alterações a implementar.
A página “partners” vai sofrer alterações significativas relativamente à apresentada anteriormente, devido a novas necessidades encontradas em termos deconteúdo.
A página “history” está em “stand by” pois ainda não possuímos os conteúdos necessários para a sua implementação, assim sendo, eventualmente, terá também alterações quanto ao que inicialmente estava proposto.
Foi também importante começar a definir prioridades quanto aos problemas com que nos deparamos neste momento, tendo em conta a opinião dos orientadores do projecto.

Testes de Usabilidade

Após  termos estudado as heurísticas de Shneiderman, Nielsen e Jordan, decidimos seguir o modelo de Nielsen como base teórica para os nossos testes de usabilidade, pois considerámos este o mais adequado ao nosso projecto uma vez que aborda os seguintes aspectos, essenciais para a boa usabilidade de um site.

Heurísticas de Nielsen:

1-       visibilidade do estado do sistema

2-       compatibilidade com o contexto

3-       controlo do utilizador

4-       consistência geral

5-       prevenção de erros

6-       visibilidade dos elementos relevantes

7-       flexibilidade e eficiência de uso

8-       estética e design minimalista

9-       prevenção, diagnóstico e recuperação de erros

10-    ajuda e documentação

Os testes de usabilidade a realizar terão como base a norma ISO 9241-11 ,norma esta que determina as três normas /atributos essenciais de especificação e avaliação da usabilidade – eficácia, eficiência e satisfação.

ISO 9241-11 – extend to which a product can be used by specified users to achieve specified goals with effectiveness, efficiency and satisfaction in a specified context of use.

A eficácia pode descrever-se como o nível de alcance dos objectivos pretendidos, ou seja, avalia-se se as tarefas são alcançadas ou não, independentemente de outros factores, como tempo, dificuldade etc.

Assim, ao verificarmos se os objectivos propostos no “Cognitive walkthrough” são atingidos estamos a verificar o nível de eficácia dessas tarefas (através de uma tabela de registo).

No caso da eficiência importa perceber os recursos cognitivos ou materiais necessários para a realização das tarefas, ou seja, importa perceber o tempo dispendido, o número de cliques necessários e outros factores que ajudem a perceber a facilidade e imediatez com que os objectivos copnseguem ser alcançados. Assim, usaremos tabelas de obeservação em que registaremos o tempo, número de cliques e o número de erros até ser alcançado determinado objectivo.

A satisfação é uma métrica bastante mais subjectiva que as anteriores, que se prende com a forma como o utilizador vivênciou a sua experiência de utilização, ou seja, qual foi o nível de aceitação. Neste caso pretendemos realizar inquéritos que serão respondidos pelos participantes do teste , após o teste de interacção. Faremos perguntas directas de forma a perceber a opinão dos utlizadores quanto ao site em geral.

As questões mais específicas serão feitas através do “contextual Inquiry” em que faremos perguntas de uma forma informal, em contexto natural de interacçaõ de forma a obter resposta a questões que consideramos pertinentes e susceptíveis de ambiguidade no nosso projecto.

Brevemente publicaremos o post com os instrumentos finais de recolha de dados, pois como a versão beta ainda não está completa ainda não temos uma visão completa e realista dos possíveis problemas a testar e resolver.

Actualização da tabela do teste de funcionalidade

Em discussão com os professores acerca dos materiais já feitos para os testes (as tabelas disponibilizadas no post anterior) percebemos que nos faltava a recolha de alguns dados como , utilizador que fez o teste, sexo, faixa etária, literacia tecnológica, data e hora do teste. Estes dados serão recolhidos tanto no teste de funcionalidade como de usabilidade.

Segue-se a tabela do teste de funcionalidade actualizada:

tabelas para testes de compatibilidade e funcionalidade

Visto já termos elaborado o plano dos testes a fazer para a versão beta apresentamos agora as primeiras tabelas feitas para os testes de funcionalidade e compatibilidade.
Tomámos como base o material fornecido (slides) e matéria leccionada nas disciplinas de ICPMM e Ergonomia de Sistemas.
Para a concepção da tabela que se segue, referente ao teste de funcionalidade, tomámos por base as tabelas de prioridade e calendarização da correcção e de descrição e caracterização de erros. Estas encontram-se presentes na fase de teste apresentada no modelo de Friedlein.

A segunda tabela apresentada é um ferramenta para o teste de compatibilidade. Aqui considerámos importante verificar a compatibilidade entre dois Sistemas Operativos diferentes (Mac e Windows), quatro browsers, dois de cada SO anteriormente referidos, (IE, Mozilla, Opera e Safari) e três diferentes resoluções (800/600, 1024/768 e 1280/800). Assim temos – 2 SOs x 4 Browsers x 3 Resoluções = 24 testes.

Plano de Testes

Disponibilizamos, seguidamente, a tabela com o plano de testes : tipos, técnicas, técnicas de recolha de dados, áreas a testar, participantes e agendamento.

É de salientar que a funcionalidade de “help”, não estará implementada aquando da realização dos testes.

Versão beta e testes

Para este módulo de versão beta e componente de testes, decidimos que os testes mais indicados para o melhor desenvolvimento do nosso site são : testes de funcionalidade, compatilbilidade e usabilidade.

Os testes de funcionalidade terão como objectivo verificar e testar a funcionalidade da aplicação, e consequentemente localizar, descrever e corrigir os erros encontrados, através da construcção de grelhas, que facilitam o processo de debbuging.

Os testes de compatibilidade têm como objectivo verificar a adaptação do sistema a diversos sistemas operativos, plataformas e resoluções, o que se torna bastante pertinente no nosso caso uma vez que se trata de site de acesso público e por isso é necessário certificarmo-nos de que será correctamente visualizado por todos os utilizadores, independentemente das características da computador em que é visualizado.

Quanto à usabilidade pretendemos realizar o tipo de teste “contextual inquiry”, ou seja, entrevista informal com utilizadores finais em ambiente natural de interacção, de modo a perceber os problemas que os utilizadores gerais possam encontrar, a fim de os poder corrigir.

Em seguida o mapa com as zonas a implementar e testar na versão beta :