Módulo 9 de 12 · 11 min de leitura
Maturidade e medição de UX
Como fazer a linha de base da maturidade de UX, escolher métricas a partir dos objetivos, medir dentro das regras de proteção de dados e mostrar o ROI de UX em aplicações internas.
Por que importa
"Uma prática de UX mais consistente e orientada por dados" é um dos objetivos mais comuns dados a novos UX leads (é o pilar UX orientado por evidências no modelo de prática de exemplo do curso). Sem evidências, as decisões de UX viram disputas de opinião, e ganha quem fala mais alto. Com evidências, você consegue priorizar, mostrar progresso e defender o trabalho do time.
Espere estas perguntas do seu gestor e dos stakeholders: "Qual é a maturidade do nosso UX? Que métricas devemos acompanhar? A gente pode mesmo medir o uso, com a proteção de dados?" Armadilhas comuns: medir tudo e não responder nada, medir indivíduos em vez do sistema e apresentar um número enorme de ROI em que ninguém acredita.
1. Modelo de maturidade de UX da NN/g (6 estágios)
| Estágio | Nome | Sinais |
|---|---|---|
| 1 | Absent (ausente) | UX ignorado ou inexistente |
| 2 | Limited (limitado) | UX esporádico e pouco confiável; depende de indivíduos |
| 3 | Emergent (emergente) | Funcional e promissor, mas inconsistente e ineficiente |
| 4 | Structured (estruturado) | Semissistemático, com eficácia que varia entre times |
| 5 | Integrated (integrado) | Abrangente, eficaz, presente em toda parte |
| 6 | User-driven (guiado pelo usuário) | UX dedicado em todos os níveis gera insights e resultados profundos |
A NN/g avalia a maturidade em quatro fatores:
- Estratégia. Liderança, planejamento, priorização, alocação de recursos.
- Cultura. Conhecimento, consciência e crescimento de UX na organização.
- Processo. Métodos, pesquisa, abordagens de design, sistematização.
- Resultados. Objetivos de UX, medição, impacto nas decisões.
Formule uma hipótese e confirme nos seus primeiros 30 dias. Por exemplo, numa organização fictícia em que os designers trabalham com ferramentas e bibliotecas modernas, mas variam por domínio, a medição não é sistemática e os designers muitas vezes trabalham isolados, uma hipótese inicial razoável seria Emergent–Structured (3–4). Trate isso como um palpite até a linha de base confirmar.
Fazendo uma linha de base de maturidade
- Use como ponto de partida o quiz gratuito de autoavaliação de maturidade de UX da NN/g (veja a Biblioteca).
- Peça para cada designer + um product manager por domínio responder.
- Acrescente 4–5 perguntas específicas da sua organização (por exemplo: "Existe um processo de pedidos para UX?", "Há métricas de uso disponíveis?").
- Visualize como um mapa de calor: domínios × fatores.
- Repita a cada 6–12 meses.
2. Escolhendo métricas: objetivos primeiro
Goals–Signals–Metrics (do artigo do HEART, do Google)
Objetivo: Operadores registram embarques com rapidez e sem erros
Sinal: Menos correções, conclusão mais rápida, menos registros abandonados
Métrica: Tempo mediano de registro; % de registros editados em até 24h; taxa de abandono
Framework HEART (Rodden, Hutchinson & Fu, Google, 2010)
| Dimensão | Adaptação para app interno | Exemplo de métrica |
|---|---|---|
| Happiness (satisfação) | Satisfação, facilidade percebida | Nota SUS / UMUX-Lite por app; SEQ depois das tarefas |
| Engagement (engajamento) | Profundidade de uso dos recursos (menos significativo em ferramentas obrigatórias) | % de usuários que usam edição em lote |
| Adoption (adoção) | Uso de recursos novos, substituição de ferramentas paralelas | % de usuários do novo filtro depois de 30 dias |
| Retention (retenção) | (Ferramentas obrigatórias) → use "evitar gambiarras" | % de tarefas feitas na ferramenta vs exportações para Excel |
| Task success (sucesso na tarefa) | A mais importante para apps internos | Taxa de conclusão, tempo na tarefa, taxa de erro |
Em ferramentas internas, Task Success e Happiness são as que mais importam. Os usuários são obrigados a usar a ferramenta, então engajamento e retenção dizem pouco.
Medidas padrão de UX
| Medida | O quê | Observações |
|---|---|---|
| Taxa de sucesso na tarefa | % de usuários que concluem uma tarefa | A mais simples e a mais poderosa |
| Tempo na tarefa | Duração das tarefas principais | Use a mediana; compare com benchmarks |
| Taxa de erro | Erros por tarefa / correções | Essencial para a qualidade dos dados operacionais |
| SEQ (Single Ease Question) | 1–7 "Quão fácil foi esta tarefa?" | Depois da tarefa, barato |
| SUS (System Usability Scale) | Questionário de 10 itens, 0–100 | ~68 = média; muito usado como benchmark |
| UMUX-Lite | Versão de 2 itens, correlaciona com o SUS | Ótimo para pesquisas dentro do app |
| Chamados de suporte | Volume/categoria por app | Muitas vezes já disponível, sem precisar de rastreamento |
3. Programa de benchmarking (leve)
- Escolha as 5 tarefas principais de cada app importante (por frequência × importância).
- Meça a linha de base: sucesso na tarefa, tempo, SEQ (testes moderados ou não moderados com 5–8 usuários, mais analytics onde for permitido).
- Acrescente uma pesquisa SUS/UMUX-Lite por app (uma ou duas vezes por ano).
- Meça de novo depois de mudanças grandes.
- Reporte no formato antes/depois, por exemplo: "Tarefa X: sucesso 70% → 92%, tempo mediano 3:10 → 1:55." (Números ilustrativos; reporte os seus.)
4. Analytics com proteção de dados (GDPR e conselhos de trabalhadores)
Em ferramentas internas, analytics normalmente significa rastrear funcionários. Na UE, vale a GDPR (o regulamento europeu de proteção de dados, parecido com a LGPD). Em alguns países, os conselhos de trabalhadores (works councils) também têm voz: na Alemanha, por exemplo, o conselho (Betriebsrat) tem direito de codecisão sobre ferramentas que poderiam monitorar o desempenho dos funcionários, o que em geral exige um acordo formal antes de rastrear qualquer coisa. Levantar essas restrições você mesmo, antes de qualquer outra pessoa, mostra maturidade de verdade.
Princípios
- Limitação de finalidade. Meça a usabilidade do sistema, não o desempenho das pessoas. Diga isso explicitamente aos stakeholders e ao conselho de trabalhadores.
- Minimização de dados. Colete só os eventos necessários para responder perguntas definidas.
- Anonimize/pseudonimize. Sem IDs de usuário onde não forem necessários; relatórios agregados; anonimização de IP.
- Hospedagem própria / na UE. Uma ferramenta de analytics hospedada internamente (o Matomo, por exemplo) mantém os dados em casa, uma escolha comum por causa da GDPR.
- Envolva cedo o encarregado de proteção de dados (DPO), o jurídico e o conselho de trabalhadores. Leve um plano de rastreamento claro: eventos, finalidade, retenção, acesso.
- Limites de retenção. Por exemplo, eventos brutos por 6–13 meses, dados agregados por mais tempo.
Modelo de plano de rastreamento
| Evento | Pergunta que responde | Propriedades (sem dados pessoais) | Retenção | Responsável |
|---|---|---|---|---|
| booking_started | Onde os registros começam? | app, screen, entry_point | 13 meses | UX |
| booking_completed | Taxa de conclusão e tempo | duration_bucket, steps_count | 13 meses | UX |
| validation_error_shown | Quais campos causam erros? | field_id, error_type | 13 meses | UX |
Quando analytics não for possível, use alternativas: testes de usabilidade moderados, estudos de diário, investigação contextual (acompanhar operadores no trabalho vale ouro em ferramentas operacionais), análise de chamados de suporte, pesquisas e logs de servidor agregados pela TI.
5. Quali + quanti: o equilíbrio
| O quanti mostra | O quali mostra |
|---|---|
| O quê e quanto | Por quê e como |
| Onde está o problema | Qual é o problema |
| Se uma mudança funcionou | Por que funcionou (ou não) |
6. ROI de UX em apps internos
- Produtividade: tempo economizado × usuários × frequência × custo por hora.
- Redução de erros: erros evitados × custo por erro (retrabalho, reclamações, multas).
- Treinamento: redução do tempo de onboarding × novas contratações.
- Suporte: chamados evitados × custo por chamado.
- Desenvolvimento: menos retrabalho por mudanças tardias, entrega mais rápida graças ao design system.
Seja conservador e transparente sobre as premissas. Credibilidade importa mais do que um número grande.
7. Medindo a própria prática de UX
| Área | Métrica |
|---|---|
| Maturidade | Nota da linha de base da NN/g por domínio (6–12 meses) |
| Cobertura | % de domínios com UX dedicado/compartilhado |
| Processo | % de projetos com pesquisa antes do desenvolvimento |
| Design system | % de adoção, taxa de detach |
| Saúde do time | Notas do health check (módulo 04) |
| Satisfação dos stakeholders | Pesquisa trimestral de 3 perguntas com os product managers |
Prática
Evidências para reunir
Guarde as provas no seu diário de liderança:
- Mapa de calor de maturidade (mesmo que estimado).
- Framework de métricas para um app principal.
- Qualquer número de antes/depois.
Ler / assistir
Biblioteca → Measurement: artigos e quiz de UX Maturity da NN/g, artigo do HEART, Measuring the User Experience (Tullis & Albert), Quantifying the User Experience (Sauro & Lewis), blog da MeasuringU, guia de GDPR do Matomo.
Como falar sobre isso
- "Qual é a maturidade do nosso UX?"
"Eu começaria com uma linha de base de maturidade nos quatro fatores da NN/g (estratégia, cultura, processo e resultados), por domínio, porque a maturidade provavelmente varia muito entre domínios. Depois escolheria um ou dois fatores para subir um estágio no primeiro ano, em vez de tentar consertar tudo."
- "Que métricas devemos acompanhar?" Comece pelos objetivos, não pelas ferramentas: um exemplo de Goals-Signals-Metrics para uma tarefa real convence mais do que uma lista de KPIs.
- Quali vs quanti:
"O analytics mostra onde os usuários têm dificuldade; a pesquisa explica por quê. Eu usaria o quanti para encontrar e priorizar problemas e para verificar melhorias, e o quali para entendê-los e resolvê-los. Em ferramentas internas, algumas horas acompanhando operadores muitas vezes ensinam mais do que meses de dados de clique."
- Com o DPO e o conselho de trabalhadores: comece pela limitação de finalidade. "Queremos medir a ferramenta, não as pessoas. Aqui está o plano de rastreamento, e aqui está o que nunca vamos coletar."
- Numa conversa de promoção ou contratação: separe com clareza o que você implementou, o que propôs e o que mediu. Um escopo honesto tem mais credibilidade do que um resultado inflado.
Teste o que aprendeu
Responda em voz alta e depois abra a seção para comparar.
- Cite os seis estágios de maturidade e os quatro fatores. → resposta
- Dê um exemplo de Goals-Signals-Metrics para uma ferramenta do seu escopo. → resposta
- O que o conselho de trabalhadores precisa ver antes de você rastrear o uso? → resposta
Conexões
← Módulo 8: Governança de design systems e padrões · Visão geral do curso · Módulo 10: Stakeholders, influência e mudança →
Relacionados
- Módulo 6: Estratégia e visão de UX: OKRs construídos sobre essas métricas
- Módulo 5: Aplicações enterprise e internas: métodos de pesquisa quando analytics não é permitido
- Módulo 8: Governança de design systems e padrões: métricas do design system
Hubs: Índice de frameworks · Projeto final