Fundamentos de UX · Passo 2 · 5 min de leitura
Definindo sucesso
Decida como você vai saber que um design funcionou antes de desenhá-lo. Resultados versus entregas, o framework HEART do Google e Objetivos, Sinais e Métricas, medidas simples que qualquer pessoa pode usar (sucesso na tarefa, tempo na tarefa, SUS), e como escrever critérios de sucesso num brief.
"A gente lançou" não é sucesso. Um redesign pode sair no prazo, ficar lindo e não mudar nada para as pessoas que o usam. Decidir de antemão como o sucesso se parece (menos gente desistindo, tarefas mais rápidas, menos chamados no suporte) mantém o time honesto, dá foco ao design e dá a você algo para mostrar depois do lançamento além de screenshots.
O que você vai conseguir fazer depois de ler:
- Diferenciar um resultado de uma entrega
- Usar o HEART e Objetivos, Sinais e Métricas para escolher medidas
- Medir sucesso na tarefa, tempo na tarefa e usabilidade percebida
- Escrever critérios de sucesso num brief de design
1. Resultados, não entregas
Uma entrega (output) é o que o time produz: uma funcionalidade, uma tela, uma versão. Um resultado (outcome) é uma mudança no que as pessoas fazem. O livro curto de Josh Seiden resume a ideia no subtítulo: "Why Customer Behavior Is the Key Metric for Business Success" (por que o comportamento do cliente é a métrica-chave do sucesso de um negócio) (Outcomes Over Output, 2019).
| Entrega | Resultado |
|---|---|
| Nova página de checkout | Mais compradores de primeira viagem concluem a compra |
| Redesign da central de ajuda | Menos pessoas procuram o suporte por causa de prazos de entrega |
| Tour de onboarding | Mais usuários novos concluem a primeira tarefa na primeira semana |
2. HEART, e Objetivos, Sinais e Métricas
Pesquisadores do Google propuseram o HEART: "Happiness, Engagement, Adoption, Retention, and Task success" (felicidade, engajamento, adoção, retenção e sucesso na tarefa), escolhidos por meio de um processo simples: primeiro os objetivos, depois os sinais, depois as métricas (Rodden, Hutchinson e Fu, CHI 2010).
O que as pessoas sentem.
Sinal: satisfação · Métrica: SUSQuanto e com que frequência usam.
Sinal: uso repetido · Métrica: dias ativos por semanaPessoas novas começando a usar.
Sinal: primeiro uso · Métrica: parte dos novos usuários que experimentamPessoas voltando.
Sinal: retorno · Métrica: parte ainda ativa depois de 30 diasPessoas conseguindo fazer.
Sinal: conclusão · Métrica: taxa de sucesso, tempo na tarefaRaramente você precisa das cinco. Escolha uma ou duas que combinem com a sua declaração de problema. Veja Framework HEART e Objetivos, sinais e métricas.
3. Medidas simples que qualquer pessoa pode usar
- Sucesso na tarefa: as pessoas concluíram a tarefa? Nielsen e Budiu chamam a taxa de sucesso de "the simplest usability metric" (a métrica de usabilidade mais simples) (NN/g, Success Rate). Veja Sucesso na tarefa e tempo na tarefa.
- Tempo na tarefa: quanto tempo levou, em comparação com o design antigo.
- Usabilidade percebida (SUS): um questionário de dez perguntas, com pontuação de 0 a 100. A NN/g observa que a pontuação não equivale a uma porcentagem ("not equivalent to a percentage"), e que a média fica em torno de 68 (NN/g, Beyond the NPS). Veja SUS.
- Comportamento depois do lançamento: abandono, uso recorrente, contatos com o suporte, a partir de dados de analytics ou do suporte.
A métrica Estrela do Norte (North Star), um único número em torno do qual todo um time de produto se mobiliza, é um termo comum no mercado; ela só ajuda se medir um resultado para os usuários.
4. Critérios de sucesso no brief
Escreva os critérios antes do design, ao lado da declaração de problema:
Problema: quem compra pela primeira vez pelo celular desiste na etapa
de entrega porque não consegue ver o custo total.
Sucesso: num teste com 5 pessoas comprando pela primeira vez, todas
conseguem dizer o total antes da etapa de entrega; depois do
lançamento, o abandono na entrega cai de 38% para menos de 25%
em seis semanas.
Específico, mensurável, com prazo e ligado ao problema.
5. Erros comuns
- Medir entregas ("lançamos 12 funcionalidades").
- Escolher as métricas depois do lançamento, de modo que qualquer resultado pareça bom.
- Métricas demais, nenhuma ligada ao problema.
- Tratar uma nota de satisfação como prova de que as pessoas conseguem de fato fazer a tarefa.
6. Vocabulário
| Termo | Significado |
|---|---|
| Entrega (output) | O que o time produz |
| Resultado (outcome) | Uma mudança no que as pessoas fazem |
| HEART | Happiness, Engagement, Adoption, Retention, Task success (felicidade, engajamento, adoção, retenção, sucesso na tarefa) |
| Objetivos, Sinais e Métricas (Goals, Signals, Metrics) | Do que você quer, para o que mostraria isso, para o que você vai contar |
| Taxa de sucesso na tarefa | A parcela de pessoas que concluem uma tarefa |
| SUS | System Usability Scale (escala de usabilidade do sistema): dez perguntas, uma pontuação de 0 a 100 |
7. Experimente (sem ferramentas)
- Pegue a declaração de problema que você escreveu em Declarações de problema e "Como poderíamos".
- Escreva um resultado que você quer, usando a categoria do HEART que melhor se encaixa.
- Escreva o sinal que mostraria esse resultado e a métrica que você contaria, com um número e uma data.
Perguntas para refletir: a sua métrica poderia subir enquanto os usuários ficam numa situação pior? O que você mediria num teste com cinco pessoas, antes de qualquer lançamento?
8. Se você já pratica
- Acrescente uma linha "como vamos saber" a cada ticket ou brief, e revise-a na retrospectiva depois do lançamento.
- Combine uma métrica de comportamento com uma de percepção (sucesso na tarefa com SUS), para que nenhuma engane sozinha.
- Quantifying the User Experience, de Sauro e Lewis, é o guia de referência de estatística em UX.
Checklist
Para saber mais
- Frameworks: Rodden, Hutchinson e Fu, Measuring the User Experience on a Large Scale (HEART) (CHI 2010)
- NN/g: Success Rate: The Simplest Usability Metric · Beyond the NPS: Measuring Perceived Usability with the SUS, NASA-TLX, and the Single Ease Question (2018)
- SUS: MeasuringU, Measuring Usability with the System Usability Scale
Livros, cursos e vídeos para ir mais fundo (em inglês)
- Outcomes Over OutputJosh SeidenLivro · Sense & Respond Press, 2019 (Amazon)
- Quantifying the User ExperienceJeff Sauro e James R. LewisLivro · 2ª edição, Morgan Kaufmann, 2016 (Amazon)
Os links dos livros são de afiliado da Amazon: como associado, recebo por compras qualificadas, sem custo a mais para você.
Relacionadas
Declarações de problema e "Como poderíamos" · Mapas de jornada · Framework HEART · Objetivos, sinais e métricas · Sucesso na tarefa e tempo na tarefa · SUS · Medindo recursos de IA