Marcus Andrey Estudo
Read in English Biblioteca

Framework · Medição · 3 min de leitura

Benchmarking de UX

Medir as mesmas tarefas principais com o mesmo método ao longo do tempo, para mostrar mudança, por exemplo "sucesso 70% → 92%".

  1. 1Tarefas principais

    Escolha as 5 tarefas principais de cada app por frequência × importância.

    "Quais tarefas importam mais?"
  2. 2Linha de base

    Meça sucesso, tempo e SEQ com 5–8 usuários.

    Mesmo roteiro, mesmas tarefas
  3. 3Questionário

    Acrescente um questionário SUS ou UMUX-Lite por app, uma ou duas vezes por ano.

    Uma nota por app
  4. 4Nova medição

    Repita o mesmo protocolo depois de mudanças grandes.

    Não mude nada no método
  5. 5Relatório

    Mostre o antes e o depois, tarefa por tarefa.

    "Sucesso 70% → 92%"

Repita depois de cada release grande: a última rodada vira a nova linha de base.

Um benchmark leve mede as mesmas tarefas principais com o mesmo método ao longo do tempo, para a mudança ficar visível.

Use quando

  • Você precisa de evidência de antes e depois de que um redesign ou a implantação de um design system melhorou um app.
  • A liderança pergunta como a qualidade de UX está evoluindo nos seus apps ao longo do ano.
  • Você quer uma linha de base nos primeiros meses, para poder mostrar o progresso depois.

Como usar

  1. Escolha as tarefas principais. Escolha as 5 tarefas principais de cada app importante, priorizadas por frequência × importância. Resultado: uma lista de tarefas por app, com critérios de sucesso.
  2. Meça a linha de base. Meça sucesso na tarefa, tempo na tarefa e SEQ em testes moderados ou não moderados com 5–8 usuários, mais analytics onde for permitido. Resultado: valores de linha de base por tarefa.
  3. Acrescente um questionário por app. Aplique um SUS ou um UMUX-Lite por app, uma ou duas vezes por ano. Resultado: uma nota de usabilidade por app.
  4. Registre o protocolo. Anote as tarefas, a redação dos cenários, os critérios, o perfil dos participantes e a configuração, para a próxima rodada repetir tudo exatamente. Resultado: um documento de protocolo.
  5. Meça de novo depois de mudanças grandes. Rode o mesmo protocolo depois de um release grande ou de um redesign. Resultado: um segundo conjunto de valores.
  6. Reporte antes e depois. Reporte por tarefa, por exemplo: "Tarefa X: sucesso 70% → 92%, tempo mediano 3:10 → 1:55." Dê as contagens além das porcentagens. Resultado: um relatório de benchmark de uma página.

Exemplo prático

Um benchmark do app de reservas numa plataforma interna de operações, antes e depois de um redesign do formulário (números ilustrativos).

Tarefa Sucesso antes → depois Tempo mediano antes → depois SEQ antes → depois
Criar uma reserva 70% → 92% 3:10 → 1:55 4,8 → 6,1
Corrigir um código alfandegário 5/8 → 7/8 2:30 → 1:40 3,9 → 5,4
Exportar um relatório mensal 7/8 → 7/8 1:20 → 1:15 5,1 → 5,3

A tarefa de exportação não mudou, o que era esperado: ela não fazia parte do redesign. Isso deixa as outras melhoras mais críveis.

Cuidado com

  • Mudar o método entre rodadas. Tarefas novas, redação nova ou outro grupo de participantes invalidam a comparação.
  • Tarefas demais. Fazer benchmark de todas as tarefas deixa as rodadas caras demais para repetir. Fique nas 5 principais.
  • Amostras pequenas lidas como precisas. Com 5–8 usuários, as diferenças são aproximadas. Reporte as contagens e tome cuidado com mudanças pequenas.
  • Uma rodada só. Uma linha de base sem nova medição não mostra nada. Planeje a segunda rodada quando planejar a primeira.

Modelo

Copie isto no seu plano de benchmark e mantenha igual em todas as rodadas.

App:                     Rodada:           Data:
Participantes (perfil, número):
Método: moderado / não moderado     Configuração:

| # | Tarefa (redação do cenário) | Critérios de sucesso | Sucesso | Tempo mediano | SEQ |
|---|-----------------------------|----------------------|---------|---------------|-----|
| 1 |                             |                      |         |               |     |
| 2 |                             |                      |         |               |     |
| 3 |                             |                      |         |               |     |
| 4 |                             |                      |         |               |     |
| 5 |                             |                      |         |               |     |

Questionário do app: SUS / UMUX-Lite    Nota:      Rodada anterior:
Mudanças desde a última rodada:

Os links "Ver na Amazon" são de afiliado: como associado, recebo por compras qualificadas, sem custo a mais para você.

Salvo só neste dispositivo.

↑ ↓ para mover · Enter para abrir · Esc para fechar