Marcus Andrey Estudo
Read in English Biblioteca

Fundamentos de UX · Passo 2 · 5 min de leitura

Definindo sucesso

Decida como você vai saber que um design funcionou antes de desenhá-lo. Resultados versus entregas, o framework HEART do Google e Objetivos, Sinais e Métricas, medidas simples que qualquer pessoa pode usar (sucesso na tarefa, tempo na tarefa, SUS), e como escrever critérios de sucesso num brief.

"A gente lançou" não é sucesso. Um redesign pode sair no prazo, ficar lindo e não mudar nada para as pessoas que o usam. Decidir de antemão como o sucesso se parece (menos gente desistindo, tarefas mais rápidas, menos chamados no suporte) mantém o time honesto, dá foco ao design e dá a você algo para mostrar depois do lançamento além de screenshots.

O que você vai conseguir fazer depois de ler:

  • Diferenciar um resultado de uma entrega
  • Usar o HEART e Objetivos, Sinais e Métricas para escolher medidas
  • Medir sucesso na tarefa, tempo na tarefa e usabilidade percebida
  • Escrever critérios de sucesso num brief de design

1. Resultados, não entregas

Uma entrega (output) é o que o time produz: uma funcionalidade, uma tela, uma versão. Um resultado (outcome) é uma mudança no que as pessoas fazem. O livro curto de Josh Seiden resume a ideia no subtítulo: "Why Customer Behavior Is the Key Metric for Business Success" (por que o comportamento do cliente é a métrica-chave do sucesso de um negócio) (Outcomes Over Output, 2019).

Entrega Resultado
Nova página de checkout Mais compradores de primeira viagem concluem a compra
Redesign da central de ajuda Menos pessoas procuram o suporte por causa de prazos de entrega
Tour de onboarding Mais usuários novos concluem a primeira tarefa na primeira semana
Uma trena verde com a fita amarela puxada para fora.
Decida o que vai medir antes de desenhar, não depois. Senão qualquer resultado parece sucesso. Foto: Evan-Amos, Wikimedia Commons, domínio público.

2. HEART, e Objetivos, Sinais e Métricas

Pesquisadores do Google propuseram o HEART: "Happiness, Engagement, Adoption, Retention, and Task success" (felicidade, engajamento, adoção, retenção e sucesso na tarefa), escolhidos por meio de um processo simples: primeiro os objetivos, depois os sinais, depois as métricas (Rodden, Hutchinson e Fu, CHI 2010).

HFelicidade (Happiness)

O que as pessoas sentem.

Sinal: satisfação · Métrica: SUS
EEngajamento

Quanto e com que frequência usam.

Sinal: uso repetido · Métrica: dias ativos por semana
AAdoção

Pessoas novas começando a usar.

Sinal: primeiro uso · Métrica: parte dos novos usuários que experimentam
RRetenção

Pessoas voltando.

Sinal: retorno · Métrica: parte ainda ativa depois de 30 dias
TSucesso na tarefa

Pessoas conseguindo fazer.

Sinal: conclusão · Métrica: taxa de sucesso, tempo na tarefa
HEART (Google, 2010): para cada categoria escolhida, vá do objetivo ao sinal e à métrica. Diagrama: Marcus Andrey, CC BY 4.0.

Raramente você precisa das cinco. Escolha uma ou duas que combinem com a sua declaração de problema. Veja Framework HEART e Objetivos, sinais e métricas.


3. Medidas simples que qualquer pessoa pode usar

  • Sucesso na tarefa: as pessoas concluíram a tarefa? Nielsen e Budiu chamam a taxa de sucesso de "the simplest usability metric" (a métrica de usabilidade mais simples) (NN/g, Success Rate). Veja Sucesso na tarefa e tempo na tarefa.
  • Tempo na tarefa: quanto tempo levou, em comparação com o design antigo.
  • Usabilidade percebida (SUS): um questionário de dez perguntas, com pontuação de 0 a 100. A NN/g observa que a pontuação não equivale a uma porcentagem ("not equivalent to a percentage"), e que a média fica em torno de 68 (NN/g, Beyond the NPS). Veja SUS.
  • Comportamento depois do lançamento: abandono, uso recorrente, contatos com o suporte, a partir de dados de analytics ou do suporte.

A métrica Estrela do Norte (North Star), um único número em torno do qual todo um time de produto se mobiliza, é um termo comum no mercado; ela só ajuda se medir um resultado para os usuários.


4. Critérios de sucesso no brief

Escreva os critérios antes do design, ao lado da declaração de problema:

Problema: quem compra pela primeira vez pelo celular desiste na etapa
          de entrega porque não consegue ver o custo total.
Sucesso:  num teste com 5 pessoas comprando pela primeira vez, todas
          conseguem dizer o total antes da etapa de entrega; depois do
          lançamento, o abandono na entrega cai de 38% para menos de 25%
          em seis semanas.

Específico, mensurável, com prazo e ligado ao problema.


5. Erros comuns

  • Medir entregas ("lançamos 12 funcionalidades").
  • Escolher as métricas depois do lançamento, de modo que qualquer resultado pareça bom.
  • Métricas demais, nenhuma ligada ao problema.
  • Tratar uma nota de satisfação como prova de que as pessoas conseguem de fato fazer a tarefa.

6. Vocabulário

Termo Significado
Entrega (output) O que o time produz
Resultado (outcome) Uma mudança no que as pessoas fazem
HEART Happiness, Engagement, Adoption, Retention, Task success (felicidade, engajamento, adoção, retenção, sucesso na tarefa)
Objetivos, Sinais e Métricas (Goals, Signals, Metrics) Do que você quer, para o que mostraria isso, para o que você vai contar
Taxa de sucesso na tarefa A parcela de pessoas que concluem uma tarefa
SUS System Usability Scale (escala de usabilidade do sistema): dez perguntas, uma pontuação de 0 a 100

7. Experimente (sem ferramentas)

  1. Pegue a declaração de problema que você escreveu em Declarações de problema e "Como poderíamos".
  2. Escreva um resultado que você quer, usando a categoria do HEART que melhor se encaixa.
  3. Escreva o sinal que mostraria esse resultado e a métrica que você contaria, com um número e uma data.

Perguntas para refletir: a sua métrica poderia subir enquanto os usuários ficam numa situação pior? O que você mediria num teste com cinco pessoas, antes de qualquer lançamento?


8. Se você já pratica

  • Acrescente uma linha "como vamos saber" a cada ticket ou brief, e revise-a na retrospectiva depois do lançamento.
  • Combine uma métrica de comportamento com uma de percepção (sucesso na tarefa com SUS), para que nenhuma engane sozinha.
  • Quantifying the User Experience, de Sauro e Lewis, é o guia de referência de estatística em UX.

Checklist

Para saber mais

Livros, cursos e vídeos para ir mais fundo (em inglês)

Os links dos livros são de afiliado da Amazon: como associado, recebo por compras qualificadas, sem custo a mais para você.

Relacionadas

Declarações de problema e "Como poderíamos" · Mapas de jornada · Framework HEART · Objetivos, sinais e métricas · Sucesso na tarefa e tempo na tarefa · SUS · Medindo recursos de IA

Salvo só neste dispositivo.

↑ ↓ para mover · Enter para abrir · Esc para fechar