Framework · Medição · 3 min de leitura
Benchmarking de UX
Medir as mesmas tarefas principais com o mesmo método ao longo do tempo, para mostrar mudança, por exemplo "sucesso 70% → 92%".
- 1Tarefas principais
Escolha as 5 tarefas principais de cada app por frequência × importância.
"Quais tarefas importam mais?" - 2Linha de base
Meça sucesso, tempo e SEQ com 5–8 usuários.
Mesmo roteiro, mesmas tarefas - 3Questionário
Acrescente um questionário SUS ou UMUX-Lite por app, uma ou duas vezes por ano.
Uma nota por app - 4Nova medição
Repita o mesmo protocolo depois de mudanças grandes.
Não mude nada no método - 5Relatório
Mostre o antes e o depois, tarefa por tarefa.
"Sucesso 70% → 92%"
Repita depois de cada release grande: a última rodada vira a nova linha de base.
Use quando
- Você precisa de evidência de antes e depois de que um redesign ou a implantação de um design system melhorou um app.
- A liderança pergunta como a qualidade de UX está evoluindo nos seus apps ao longo do ano.
- Você quer uma linha de base nos primeiros meses, para poder mostrar o progresso depois.
Como usar
- Escolha as tarefas principais. Escolha as 5 tarefas principais de cada app importante, priorizadas por frequência × importância. Resultado: uma lista de tarefas por app, com critérios de sucesso.
- Meça a linha de base. Meça sucesso na tarefa, tempo na tarefa e SEQ em testes moderados ou não moderados com 5–8 usuários, mais analytics onde for permitido. Resultado: valores de linha de base por tarefa.
- Acrescente um questionário por app. Aplique um SUS ou um UMUX-Lite por app, uma ou duas vezes por ano. Resultado: uma nota de usabilidade por app.
- Registre o protocolo. Anote as tarefas, a redação dos cenários, os critérios, o perfil dos participantes e a configuração, para a próxima rodada repetir tudo exatamente. Resultado: um documento de protocolo.
- Meça de novo depois de mudanças grandes. Rode o mesmo protocolo depois de um release grande ou de um redesign. Resultado: um segundo conjunto de valores.
- Reporte antes e depois. Reporte por tarefa, por exemplo: "Tarefa X: sucesso 70% → 92%, tempo mediano 3:10 → 1:55." Dê as contagens além das porcentagens. Resultado: um relatório de benchmark de uma página.
Exemplo prático
Um benchmark do app de reservas numa plataforma interna de operações, antes e depois de um redesign do formulário (números ilustrativos).
| Tarefa | Sucesso antes → depois | Tempo mediano antes → depois | SEQ antes → depois |
|---|---|---|---|
| Criar uma reserva | 70% → 92% | 3:10 → 1:55 | 4,8 → 6,1 |
| Corrigir um código alfandegário | 5/8 → 7/8 | 2:30 → 1:40 | 3,9 → 5,4 |
| Exportar um relatório mensal | 7/8 → 7/8 | 1:20 → 1:15 | 5,1 → 5,3 |
A tarefa de exportação não mudou, o que era esperado: ela não fazia parte do redesign. Isso deixa as outras melhoras mais críveis.
Cuidado com
- Mudar o método entre rodadas. Tarefas novas, redação nova ou outro grupo de participantes invalidam a comparação.
- Tarefas demais. Fazer benchmark de todas as tarefas deixa as rodadas caras demais para repetir. Fique nas 5 principais.
- Amostras pequenas lidas como precisas. Com 5–8 usuários, as diferenças são aproximadas. Reporte as contagens e tome cuidado com mudanças pequenas.
- Uma rodada só. Uma linha de base sem nova medição não mostra nada. Planeje a segunda rodada quando planejar a primeira.
Modelo
Copie isto no seu plano de benchmark e mantenha igual em todas as rodadas.
App: Rodada: Data:
Participantes (perfil, número):
Método: moderado / não moderado Configuração:
| # | Tarefa (redação do cenário) | Critérios de sucesso | Sucesso | Tempo mediano | SEQ |
|---|-----------------------------|----------------------|---------|---------------|-----|
| 1 | | | | | |
| 2 | | | | | |
| 3 | | | | | |
| 4 | | | | | |
| 5 | | | | | |
Questionário do app: SUS / UMUX-Lite Nota: Rodada anterior:
Mudanças desde a última rodada:
- Measuring the User ExperienceBill Albert & Tom TullisLivro · 3rd ed. 2022 (Amazon)
- Benchmarking UX: Tracking MetricsNN/g (site externo)
- 7 Steps to Benchmark Your Product's UXNN/g (site externo)
Os links "Ver na Amazon" são de afiliado: como associado, recebo por compras qualificadas, sem custo a mais para você.