Design de questionários

Dois questionários com as mesmas perguntas podem produzir resultados diferentes - se diferirem na ordem, no layout ou no comprimento.

Design de questionários não tem a ver com fontes bonitas. Tem a ver com como cada decisão estrutural de uma pesquisa afeta se as pessoas respondem com honestidade, até o fim e da forma que você espera.

Definição

Design de questionários - o processo de projetar a estrutura, o conteúdo e o layout de uma pesquisa para obter dados precisos, confiáveis e completos. Abrange a escolha dos tipos de pergunta, sua ordem, a redação, as escalas, a apresentação visual e a lógica de ramificação. Um design ruim distorce sistematicamente as respostas mesmo quando a amostra está correta.

O design de questionários é um dos pontos em que a pesquisa mais perde qualidade. O viés de amostragem é visível; o viés decorrente de um design ruim quase nunca é. Uma pessoa respondeu "sim" não porque pensa assim, mas porque a pergunta era tendenciosa ou vinha logo depois de outra que estabeleceu um determinado contexto. Os dados foram coletados, mas não refletem a realidade.

O princípio do funil: do geral ao específico

Abrir um questionário com perguntas restritas ou sensíveis significa obter ou o abandono ou respostas cautelosas. O princípio de design clássico é o funil: primeiro perguntas amplas e neutras, depois cada vez mais específicas.

As primeiras 2-3 perguntas devem ser simples e neutras - para que a pessoa se envolva. As perguntas avaliativas específicas ficam no meio, quando a pessoa respondente já está engajada. As perguntas abertas e os dados demográficos ficam mais perto do fim: as abertas exigem esforço e os dados demográficos são percebidos como a parte menos interessante. As perguntas de triagem são a exceção - vêm primeiro, para descartar de imediato as pessoas não relevantes.

Uma pergunta - uma ideia

O erro de design mais comum é a pergunta de cano duplo: "Quão satisfeito você está com a rapidez e a qualidade da nossa entrega?" São duas perguntas em uma. Uma pessoa para quem entregam rápido, mas com danos, não sabe o que responder. Os dados se tornam ininterpretáveis.

A regra: cada pergunta mede exatamente uma variável. Se uma pergunta contém "e" ou "ou", quase com certeza precisa ser dividida. O mesmo vale para a redação com elementos tendenciosos: "Você concorda que nosso serviço melhorou?" já não é uma pergunta neutra - empurra para a concordância.

Ordem das perguntas e efeitos de contexto

A ordem das perguntas influencia as respostas mais do que parece. Se você primeiro pergunta sobre problemas específicos com o serviço e depois pede uma avaliação geral, essa avaliação geral será mais baixa do que se a ordem fosse inversa. É o efeito de contexto: a pergunta anterior ativa certas memórias e atitudes.

Algumas regras práticas de ordem:

• A avaliação geral - antes das perguntas detalhadas sobre os componentes, caso contrário os detalhes distorcerão a avaliação geral.
• As perguntas neutras - antes das avaliativas.
• As perguntas sobre um mesmo tema - agrupe-as juntas, não as misture com outras.
• A aleatorização da ordem das opções de resposta reduz os efeitos de primazia e de recência em listas longas.

Escalas e tipos de perguntas

Escolher uma escala faz parte do design. As principais decisões:

Número de pontos. Uma escala de 5 pontos versus uma de 7 versus uma de 10. Mais pontos significam mais capacidade de discriminação, mas também mais carga para a pessoa respondente. Para a maioria das tarefas, 5-7 pontos bastam. O NPS usa uma escala de 11 pontos de propósito - para obter uma distribuição em três grupos.

Escala par ou ímpar. Uma escala ímpar (5, 7 pontos) oferece um ponto médio neutro - as pessoas tendem a escolhê-lo quando não querem pensar. Uma escala par (4, 6 pontos) as obriga a tomar uma posição. Depende da tarefa: se uma opinião neutra é uma opção genuína, use ímpar; se você precisa polarizar, use par.

Rótulos verbais. O que está escrito nas extremidades da escala. "Discordo totalmente - Concordo totalmente" versus "Nunca - Sempre" versus "1 - 10". Os rótulos afetam a distribuição das respostas. Mais sobre isso no artigo sobre a escala Likert e os tipos de escalas.

Equilíbrio entre perguntas fechadas e abertas. As perguntas fechadas são mais fáceis de analisar, as abertas trazem profundidade. A proporção ideal para a maioria das pesquisas: 80% fechadas, 20% abertas. Mais sobre isso no artigo sobre as perguntas abertas.

Comprimento do questionário e fadiga da pessoa respondente

Cada pergunta a mais é um compromisso: mais dados versus menor qualidade das respostas e uma taxa de abandono mais alta. Os estudos mostram que, após 10-12 minutos de preenchimento, a qualidade das respostas cai e a proporção de respostas incompletas sobe. A fadiga de pesquisas se manifesta quando as pessoas começam a escolher a primeira opção que aparece ou a dar respostas idênticas em todas as linhas de uma pergunta de matriz.

Diretrizes práticas: até 10 minutos é um comprimento confortável para a maioria dos públicos. 5-8 perguntas para microssurveys e formulários disparados por gatilho. 15-20 é o máximo para um estudo detalhado com um público motivado. Tudo o que for mais longo exige um incentivo de peso.

Design visual e layout

A apresentação visual afeta o comportamento da pessoa respondente mesmo quando ela não tem consciência disso. Alguns princípios comprovados:

Uma pergunta por tela (em pesquisas on-line) - reduz a carga cognitiva e melhora a taxa de conclusão. Ver de uma vez toda uma lista longa de perguntas é psicologicamente desestimulante.

Um indicador de progresso - dá uma sensação de controle. É especialmente importante em questionários longos: quando a pessoa vê que já percorreu metade, é mais provável que chegue ao fim.

Design para celular - mais da metade das pesquisas é respondida pelo celular. Os botões devem ser grandes, o texto legível sem zoom e as perguntas de matriz devem se adaptar a uma tela estreita. Uma matriz de 8 colunas fica ilegível no celular.

Perguntas obrigatórias versus opcionais

Marcar todas as perguntas como obrigatórias é um reflexo comum. A lógica é clara: você quer dados completos. Mas forçar uma resposta a perguntas que não são relevantes para uma pessoa específica produz dados de lixo: a pessoa escolhe qualquer coisa só para avançar. Apenas as perguntas-chave - aquelas sem as quais o questionário perde o sentido - deveriam ser obrigatórias. As demais, opcionais e com um incentivo para responder.

Pilotagem: uma etapa obrigatória

Um bom questionário passa por uma execução piloto com 10-15 pessoas do público-alvo antes da coleta de dados completa. O objetivo não é testar hipóteses, mas encontrar problemas no próprio instrumento: redações pouco claras, erros técnicos nas ramificações, perguntas que as pessoas respondentes entendem de forma diferente da pretendida.

Após o piloto, observam-se o tempo de preenchimento, a proporção de respostas incompletas e a distribuição de respostas a cada pergunta. Se 90% respondem a alguma pergunta da mesma forma, a pergunta é ou trivial ou redigida de um modo que empurra para uma única resposta.

Design de questionários no SurveyNinja

O construtor do SurveyNinja oferece todos os elementos para um design sólido: um amplo conjunto de tipos de perguntas, saltos de lógica para cenários adaptativos e ajustes para a barra de progresso e a tela de boas-vindas. O estilo - fontes, cores, logotipo - é gerenciado pelos ajustes de design.

Os modelos de pesquisa prontos são um bom ponto de partida: já contêm uma estrutura comprovada para tarefas comuns (NPS, satisfação, pesquisas de RH). Você pode reutilizar um questionário que deu certo salvando-o em seus modelos personalizados.

Design de questionários não é decoração, mas a estrutura da coleta de dados. A ordem das perguntas, a redação, o comprimento das escalas, o comprimento da pesquisa - tudo isso afeta o que as pessoas respondem. Um bom design minimiza tanto o erro aleatório quanto o sistemático antes mesmo de a primeira pessoa respondente abrir o formulário.