Testes
Atividades relacionadas (a testes de usabilidade)
Recomendações a partir do teste
Depois de realizar os testes de usabilidade com os participantes convidados, chega a hora de transformar os dados coletados em informação realmente útil para o aperfeiçoamento do web site em projeto.
Este processo que se adapta aos prazos da produção do layout, das funcionalidades, do conteúdo do web site, se demorar muito pode acabar perdendo a sua razão de ser. Ao mesmo tempo, precisa gerar informações que contemplem todos os aspectos que precisam ser ajustados.
De modo geral, a análise dos resultados dos testes inclui:
◊ Uma primeira reunião com a equipe e os observadores do teste, para a criação de consenso sobre as recomendações mais urgentes e de um diagnóstico preliminar que permita o ajuste do produto enquanto é feita a análise mais aprofundada.
◊ A compilação e o resumo dos dados coletados, que começa durante a realização do teste. Inclui a digitação dos dados anotados a mão ou gravados e a geração de sumários descritivos, como:
■ O resumo dos dados dos formulários entregues aos participantes, entregues no início do teste, sobre a sua formação e experiência, e entregues no final, para o registro de impressões sobre o teste e o produto.
■ O resumo dos dados de desempenho, como por exemplo o tempo médio que os participantes levaram para realizar uma tarefa, o desvio padrão no tempo médio de realização das tarefas, o número de vezes que as tarefas foram (ou não) realizadas.
■ O grau de precisão com que as tarefas foram realizadas, que pode ser avaliado pela contagem do número de erros durante a sua execução. Ou através da verificação do relação do tempo de realização com um tempo ideal estabelecido a priori, antes dos testes.
◊ A análise dos dados, com o uso de todos os dados coletados e organizados (incluindo os guardados na memória e registrados em conversas com os observadores), para a identificação das tarefas nas quais os participantes sentiram mais dificuldade ou que não completaram de maneira satisfatória.
Jeffrey Rubin (1) considera que se 70% dos participantes não realizaram satisfatoriamente uma tarefa, esta pode ser considerada como "difícil."
Este processo inclui também a identificação da origem dos erros registrados, seja um fator ou um conjunto de fatores combinados, para entender que aspectos do produto causam os principais problemas de desempenho ou afetam a experiência do participante.
Os aspectos mais críticos são priorizados a partir da combinação do grau de importância do problema com as chances de que vá realmente ocorrer - pode-se inclusive perguntar aos participantes do teste quais foram as situações que considerou mais críticas (se houver algum consenso, pode-se considerar estas indicações como as mais críticas).
◊ A criação das recomendações, a partir dos dados coletados e da análise dos dados, priorizando as soluções abrangentes, que influenciarão o produto, como navegação, layout, funcionalidades gerais da interface em processos críticos (como o processo de vendas, num site de comércio, por exemplo), acessibidade.
Mesmo que alguns pontos não possam ser resolvidos a curto prazo, é importante explicitá-los para desenvolvimento posterior.
As recomendações precisam se manter neutras em relação as aspectos políticos internos da organização que produzi o web site. Como os testes de usabilidade se concentram mais nos interesses dos usuários finais, pode ser necessário propor algumas mudanças na cultura organizacional para fortalecer esta priorização.
◊ A formalização das recomendações num relatório, mesmo que os principais aspectos observados no teste já estejam sendo ajustados pela equipe de desenvolvimento.
As recomendações são catalizadoras de mudanças e orientam as ações necessárias para que o produto final alcance seus objetivos. Técnicas que ilustrem os resultados, como a narrativa de casos de uso (fictícios ou não) ou a descrição de detalhes de uso coletados, facilitam a compreensão dos problemas estruturais apontados neste documento.
Eventualmente podem ser apresentados dois documentos neste relatório, um com os resultados objetivos e outro com as observações e impressões mais subjetivas, que podem ajudar a ajustar o layout e a arquitetura da informação.
De qualquer forma, o(s) relatório(s) dos testes precisam ser redigidos e apresentados em linguagem e formato adequados ao seu público, de forma que ajudem a tomada de decisões e estimulem o processo craitivo de novas soluções quando necessárias.
◊ Apresentação e discussão dos resultados, de modo a garantir que as recomendações sejam bem compreendidas e, as mais importantes, priorizadas.
A apresentação também provê importante retorno sobre os próprios testes e sua realização, bem como sobre a análise e apresentação dos resultados.
Texto criado em 2.11.2008
Assuntos relacionados
► Preparo dos dados das pesquisas
► Usabilidade
► Avaliação dos resultados : Atividades relacionadas : Interpretação dos dados de acesso (web analytics)
► Antecipaçãoda experiência
Referências
► Livro: Storytelling for user experience - crafting stories for better design, de Whitney Quesenbery e Kevin Brooks. New York: Rosenfeld Media, 2010
► 1) Livro: Handbook of usability testing - How to plan, design and conduct effective tests, de Jeffrey Rubin. New York: Wiley, 1994.
► Quick turnaround usability testing (Boxes and Arrows, acesso em 20.9.2008)
Mais informação sobre o assunto (links externos)
► Research logistics, de Demetrius Madrigal (Boxesandarrows, acesso em 8.1.2010)
► Should designers and developers do usability? (AlertBox, acesso em 28.6.2007)
► Fast, cheap, and good: Yes, you can have it all, de Jakob Nielsen, sobre a relação entre preço, qualidade e tempo de realização de testes de usuários (AlertBox, acesso em 2.1.2007)
