Este artigo apareceu pela primeira vez na edição de abril de 2012 (# 226) da revista .net - a revista mais vendida do mundo para web designers e desenvolvedores.
.net: O que é teste de usabilidade quantitativo?
RM: Conforme a indústria de usabilidade evolui, estamos descobrindo que muitos gerentes insistem em respostas quantitativas para questões de usabilidade, bem como nas informações qualitativas tradicionais. Eles querem ver uma prova de que a usabilidade está melhorando ano após ano, para que possam demonstrar aos seus gerentes que o dinheiro que investem na experiência do usuário vale a pena.
É possível fazer boas medições quantitativas de usabilidade, mas custa muito mais do que o teste tradicional e você tem que ter muito cuidado sobre como isso é realizado. A medição qualitativa é um método amigável em que você pode cometer erros e ainda obter bons resultados. A medição quantitativa é um método muito mais frágil - só dá bons resultados se você for disciplinado e seguir os métodos rigorosamente.
.net: Que erros os testadores de usabilidade cometem?
RM: Um grande problema é o manuseio incorreto de números. Por exemplo, toda medição tem um grau de incerteza associado a ela e que deve ser incluído nos resultados. Isso não é trivial - a incerteza é parte da verdade, mas muitos profissionais não a incluem.
Eu conduzi uma série de estudos chamados de Avaliação Comparativa de Usabilidade, em que pegamos um grande número de equipes e fizemos o mesmo estudo quantitativo em um site.Muitas das equipes usaram a metodologia correta e chegaram a resultados semelhantes, mas algumas das equipes chegaram a resultados tão distantes entre si que seus intervalos de incerteza não se sobrepuseram. Portanto, alguns dos estudos estavam simplesmente errados. Investigamos o que deu errado nesses estudos e descobrimos que os problemas estavam principalmente relacionados ao recrutamento insuficiente de pessoas para testar o site e ao manuseio incorreto das medições.
Uma descoberta importante em tudo isso é que as equipes cujos estudos eram fundamentalmente falhos não tinham consciência disso - e eram pessoas que estavam sendo pagas para ensinar ou praticar a usabilidade. Isso me preocupa um pouco, porque essas pessoas não entendiam suas próprias limitações e eu não vi nenhum senso de cautela em promover seus resultados. Este é um problema da comunidade em geral; Raramente vejo qualquer discussão sobre erros de teste de usabilidade. É uma marca de maturidade em uma profissão quando os erros são vistos como um ativo que pode ser usado para melhorar o desempenho futuro.
.net: Que fatores contribuem para essa cultura?
RM: Nossa profissão ainda é jovem, e muitas pessoas veem o que estão fazendo como uma arte, e não como um processo industrial. Temos feito testes de usabilidade de forma razoavelmente sistemática agora por cerca de 25 anos - não é mais uma arte, deveria ser um processo industrial que podemos medir, padronizar e no qual podemos certificar pessoas.
Mas muitos profissionais de usabilidade não gostam dessa visão, porque eles realmente valorizam a liberdade que sentem que têm em aplicar regras de design e fazer pequenas reviravoltas interessantes nos testes de usabilidade. Às vezes, essas adaptações são para melhor, mas na maioria dos casos não são. Eu escrevi uma lista de verificação que define as qualidades essenciais de um bom teste de usabilidade e acho que algo assim deve fazer parte do contrato quando uma empresa encomenda um teste de usabilidade.
.net: Então você acha que deveria haver acreditação para testes de usabilidade?
RM: Sim, muito fortemente, porque existem muitos praticantes ruins por aí. Existem esforços em andamento na Europa, liderados pela Associação Alemã de Profissionais de Usabilidade, para desenvolver o credenciamento no nível básico e, em todas as oportunidades, eu pressiono para que isso seja feito também no nível avançado.
.net: Quais são os maiores erros de experiência do usuário que você ainda vê em sites?
RM: O erro número um são mensagens de erro mal formuladas - ou nada acontece quando um erro é cometido ou a mensagem é incompreensível porque está escrita em linguagem técnica. Depois disso, deixando de tornar as opções visíveis para o usuário.
.net: Qual é a primeira coisa que deve ser considerada ao projetar um site ou resolver um problema?
RM: O mais importante é fazer as tarefas certas: descobrir o que os usuários querem fazer em um site e torná-lo altamente visível.
