Marcus Andrey Estudo
Read in English Biblioteca

Pesquisa em UX · Passo 2 · 8 min de leitura

Escolher um método de pesquisa

Existem dezenas de métodos de pesquisa, e três perguntas reduzem a lista a dois ou três. O mapa que a NN/g usa (o que as pessoas dizem ou fazem, por quê ou quantos, e em que contexto), como as palavras de uma pergunta de pesquisa apontam para um método, e por que os melhores estudos combinam dois.

Um tabuleiro quadrado dividido em quatro casas. De trás para a frente, o que as pessoas dizem contra o que elas fazem; da esquerda para a direita, por quê contra quantos, por isso as casas da esquerda têm poucas peças redondas e grandes, e as da direita, muitas peças quadradas e pequenas. Aponte para uma casa e as peças dela sobem do tabuleiro. Este passo num gesto só: planejar começa por escolher que tipo de evidência a pergunta pede. Este passo tem cinco lições: como escolher um método de pesquisa, escrever um plano de pesquisa, recrutar participantes, questionários de triagem e amostragem, e dados de pesquisa e privacidade.Ilustração: Marcus Andrey, desenhada com Hairline (MIT, Lucas Marques).

O método vem por último. É a pergunta que escolhe. Os times costumam começar pelo método que conhecem: "Vamos fazer um questionário", "Vamos fazer umas entrevistas". Depois entortam a pergunta para caber. Inverta. Quando você sabe o que precisa aprender, três perguntas simples (você precisa do que as pessoas dizem ou do que elas fazem? de por quê, ou de quantos? em uso real, ou numa situação montada?) deixam só dois ou três métodos de pé, e geralmente um primeiro passo óbvio.

O que você vai conseguir fazer depois de ler:

  • Situar os métodos de pesquisa mais comuns no mapa da NN/g
  • Escolher um método a partir das palavras da sua pergunta de pesquisa
  • Combinar dois métodos para que um cubra o ponto cego do outro
  • Ajustar a escolha aos limites reais: tempo, orçamento, acesso e risco

1. Comece pela pergunta de pesquisa

Se você ainda não tem uma pergunta de pesquisa, volte a Perguntas de pesquisa que levam a decisões. Escolher um método sem ela é como escolher a lente antes de saber o que vai fotografar: você pode dar sorte, mas provavelmente vai levar a errada.

Com a pergunta na mão, o modelo da NN/g posiciona os métodos em três dimensões: atitudinal ou comportamental, qualitativo ou quantitativo, e o contexto de uso (Rohrer, When to Use Which User-Experience Research Methods, NN/g, 2022).


2. O mapa

O que as pessoas dizem, e por quê
  • Entrevistas
  • Estudos de diário
  • Grupos focais
  • Design participativo
Necessidades, motivos, modelos mentais, vocabulário
O que as pessoas fazem, e por quê
  • Testes de usabilidade
  • Estudos de campo
  • Investigação contextual
Onde um design falha, e o jeitinho que as pessoas dão
O que muita gente diz
  • Questionários
  • Card sorting
  • Notas de satisfação
Quão comum é uma atitude ou necessidade
O que muita gente faz
  • Analytics
  • Testes A/B
  • Benchmarks de usabilidade
  • Eye tracking
Com que frequência, em quanto tempo, qual versão ganha
Métodos comuns em dois dos três eixos que a NN/g usa: atitudinal ou comportamental (o que as pessoas dizem ou fazem), e qualitativo ou quantitativo (por quê, ou quantos). Em cima à esquerda, o que as pessoas dizem e por quê: entrevistas, estudos de diário, grupos focais, design participativo. Em cima à direita, o que as pessoas fazem e por quê: testes de usabilidade, estudos de campo, investigação contextual. Embaixo à esquerda, o que muita gente diz: questionários, card sorting, notas de satisfação. Embaixo à direita, o que muita gente faz: analytics, testes A/B, benchmarks de usabilidade, eye tracking. Testes de usabilidade e estudos de campo misturam os dois tipos de dado e ficam perto do meio. O terceiro eixo é o contexto: uso natural, uso roteirizado, uma versão limitada do produto ou nenhum produto.Diagrama: Marcus Andrey, CC BY 4.0. Simplificado de Christian Rohrer, When to Use Which User-Experience Research Methods (NN/g, 2022).

Dizer ou fazer. Métodos atitudinais capturam o que as pessoas dizem; os comportamentais, o que elas fazem. A NN/g recomenda que a maioria dos estudos de usabilidade "should rely on behavior", se apoie em comportamento, e observa que estudos de usabilidade e de campo ficam no meio, misturando os dois, com a recomendação de pender para o lado comportamental (mesma fonte).

Por quê ou quantos. Métodos qualitativos coletam o dado "directly", diretamente, observando ou ouvindo as pessoas, o que permite aprofundar e ajustar no caminho. Os quantitativos coletam "indirectly, through a measurement or an instrument such as a survey or an analytics tool", de forma indireta, por um instrumento como um questionário ou uma ferramenta de analytics. É por isso que os qualitativos são muito mais adequados para "why or how to fix a problem", por quê e como consertar, e os quantitativos para "how many and how much", quantos e quanto (mesma fonte). Repare no que isso significa: cinco entrevistas não dizem quão comum algo é, e dez mil eventos de analytics não dizem por quê.

Contexto. O terceiro eixo é como os participantes usam o produto durante o estudo: uso natural (estudos de campo, analytics), uso roteirizado (um teste de usabilidade com tarefas), uso limitado (um card sorting, um esboço de conceito) ou nenhum produto (uma entrevista sobre a vida da pessoa). O uso natural dá realismo com menos controle; o roteirizado dá controle com menos realismo.

O card Escolha do método de pesquisa reúne as três perguntas numa tela, com um modelo para cada pergunta de pesquisa.


3. Deixe a pergunta escolher

Se a pergunta de pesquisa começa com…Comece comPor que esteDepois confira com
"Como as pessoas… hoje?" "Por que elas…?"Entrevistas, ou uma visita de campoHistórias reais e contexto, antes de existir um designUm questionário, para ver quão comum é
"As pessoas conseguem… com este design?"Um teste de usabilidade, 5 por grupoVocê vê a falha e ouve o motivoAnalytics depois do lançamento
"O que acontece ao longo de dias ou semanas?"Um estudo de diárioA memória apaga; o diário registra perto do momentoUma entrevista de acompanhamento
"Quantas pessoas…?" "Com que frequência…?"Analytics, ou um questionárioContagem pede números, e muita genteEntrevistas, para entender o porquê
"Qual versão funciona melhor?"Um teste A/BComportamento real, com todo o resto igualUm teste de usabilidade, para entender por que ganhou
"Como as pessoas agrupam ou chamam estas coisas?"Um card sorting, depois um tree testingO modelo mental do conteúdo, e depois a prova de que funcionaUm teste de usabilidade da navegação
As palavras do começo de uma pergunta de pesquisa apontam para um método. A última coluna é o método do outro lado da matriz, que cobre o que o primeiro não enxerga.Diagrama: Marcus Andrey, CC BY 4.0. A partir da NN/g: Rohrer, When to Use Which UX Research Methods; Whitenton, Triangulation.

As primeiras palavras de uma pergunta de pesquisa são uma boa pista:

A dimensão do tempo, de Para que serve a pesquisa, acrescenta mais um filtro: no começo, métodos generativos; durante o design, formativos; depois do lançamento, somativos.


4. Combine dois métodos

Todo método tem um ponto cego. A resposta da NN/g é a triangulação: "the practice of using multiple sources of data or multiple approaches to analyzing data, to enhance the credibility of a research study", usar várias fontes de dados ou vários jeitos de analisar para dar mais credibilidade ao estudo (Whitenton, Triangulation, NN/g, 2021). O artigo é honesto sobre o motivo: estudos qualitativos pequenos não podem ser provados estatisticamente, e aos dados quantitativos falta contexto e significado.

Os pares mais úteis cruzam o mapa na diagonal:

  • Analytics + entrevistas: os números dizem onde as pessoas desistem; as entrevistas dizem por quê.
  • Entrevistas + questionário: as entrevistas encontram os temas; o questionário mede quão comuns eles são.
  • Teste de usabilidade + analytics: o teste mostra a falha; o analytics mostra quantas pessoas esbarram nela.

Não precisa ser na mesma semana. Muitas vezes o segundo método é um dado que você já tem.


5. Ajuste o método aos limites reais

O método ideal encontra a realidade. Quatro limites dão forma à escolha final:

  • Tempo. Entrevistas e testes de usabilidade cabem em uma ou duas semanas. Estudos de diário levam semanas por natureza. Testes A/B precisam de tráfego suficiente para chegar a um resultado.
  • Acesso. Você consegue chegar às pessoas certas? Usuários especialistas e B2B demoram mais; Recrutar participantes fala de prazos.
  • Orçamento. Incentivos, ferramentas e, em sessões presenciais, deslocamento e salas.
  • Risco para os participantes. Um tema sensível pode pedir um método mais gentil, como um diário em vez de uma entrevista cara a cara, ou uma pergunta mais leve.

Duas escolhas existem dentro de todo método:

  • Moderado ou não moderado. Com moderação, você aprofunda na hora; sem ela, alcança mais gente com menos esforço, mas as instruções precisam se sustentar sozinhas. A NN/g recomenda fazer um piloto de todo estudo não moderado, porque "no one will be there to answer questions", não vai ter ninguém ali para tirar dúvidas (Schade, Pilot Testing, NN/g, 2015).
  • Remoto ou presencial. O remoto é mais barato e alcança mais gente; o presencial mostra mais do contexto e da linguagem corporal.

6. Erros comuns

  • Escolher o método primeiro e entortar a pergunta para caber.
  • Usar um questionário para responder "por quê".
  • Usar cinco entrevistas para responder "quantos".
  • Fazer um grupo focal para testar usabilidade.
  • Nunca combinar métodos, e todo achado ter o mesmo ponto cego.

7. Vocabulário

Termo Significado
Método Um jeito de coletar dados: uma entrevista, um teste de usabilidade, um questionário
Triangulação Usar várias fontes ou métodos para que cada um cubra os limites de outro
Moderado Um pesquisador conduz a sessão ao vivo e pode aprofundar
Não moderado Os participantes seguem instruções escritas sozinhos, em geral por uma ferramenta
Contexto de uso Como o produto é usado no estudo: natural, roteirizado, limitado ou nenhum

8. Experimente (sem ferramentas)

  1. Pegue uma pergunta de pesquisa que você escreveu no Passo 1.
  2. Responda às três perguntas do mapa: dizer ou fazer? por quê ou quantos? natural ou roteirizado?
  3. Escreva o primeiro método que você usaria, e o segundo, do canto oposto do mapa.

Perguntas para refletir: a que método o seu time recorre por padrão? Que canto do mapa ele nunca visitou?


9. Se você já pratica

  • Ponha os estudos do ano passado no mapa. Se eles se amontoam num quadrante, o seu time tem um ponto cego com o formato exato dos quadrantes vazios.
  • Deixe a triangulação barata: saiba que dados de analytics, de suporte e de questionários já existem antes de cada estudo.
  • Quando apresentar um achado, diga de que método ele veio e o que esse método não enxerga.

Checklist

Para saber mais

Livros, cursos e vídeos para ir mais fundo

Os links dos livros são de afiliado da Amazon: como associado, recebo por compras qualificadas, sem custo a mais para você.

Relacionadas

Para que serve a pesquisa · Escrever um plano de pesquisa · Card sorting e tree testing · Teste de usabilidade com cinco pessoas · Investigação contextual e estudos de diário · Analytics e testes A/B para designers

Salvo só neste dispositivo.

↑ ↓ para mover · Enter para abrir · Esc para fechar