Estudo de linha de base (medição de referência)

Um ano depois de redesenhar o site você realiza uma pesquisa de satisfação — NPS 42. Isso é bom ou ruim? Subiu ou caiu?

Você não sabe — porque ninguém mediu o "antes." Toda comparação posterior se torna especulativa: "parece que antes era pior." Um estudo de linha de base é uma pesquisa que registra o estado inicial antes de qualquer intervenção. Sem uma linha de base, cada métrica posterior fica no ar; com ela, transforma-se em uma mudança mensurável.

Definição

Estudo de linha de base (medição de referência) — pesquisa realizada para registrar o estado atual de uma variável medida antes de lançar uma intervenção, um programa ou uma mudança. Serve como ponto de referência para medições posteriores e permite quantificar o efeito das mudanças. Usado em pesquisa de produto, marketing, RH e social. É a base de qualquer avaliação correta de "antes e depois" e dos testes comparativos.

Por que você precisa de uma linha de base

Sem um estudo de linha de base você não consegue distinguir a mudança do acaso ou de "como sempre foi." As três funções críticas de uma linha de base:

Medir o efeito. "Satisfação de 42" por si só significa pouco. "A satisfação subiu de 35 para 42 após implementar o novo programa de treinamento" contém um efeito concreto de 7 pontos. Sem o primeiro número, a segunda afirmação é impossível.

Priorizar as mudanças. Uma linha de base mostra onde estão os seus problemas agora. Sem ela, as decisões sobre o que melhorar são tomadas por intuição ou por reclamações — que podem não refletir a realidade.

Comunicar os resultados. "Melhoramos o NPS em 8 pontos" é um resultado mensurável que você pode mostrar às partes interessadas. Sem uma linha de base você só pode falar de "melhorias qualitativas," o que é muito mais fraco quando você precisa justificar um investimento.

Quando realizar uma linha de base

A regra fundamental: a linha de base deve ser concluída antes de a intervenção começar. Depois de lançadas as mudanças, já é tarde para registrar o estado inicial — ele já se misturou com o efeito das mudanças.

Cenários típicos:

Antes do desenvolvimento de produto. Uma linha de base de satisfação, NPS e métricas de usabilidade antes de um grande lançamento ou redesenho. Após o lançamento — uma medição repetida na mesma amostra ou metodologia.

Antes de uma campanha de marketing. Meça o reconhecimento de marca, a notoriedade e as associações com a marca antes do lançamento. Ao terminar a campanha — uma medição repetida para avaliar o efeito.

Antes de um programa de RH. Uma linha de base de engajamento, satisfação e intenção de permanecer antes de implementar um novo programa (treinamento, benefícios, mudanças de processos). Depois — uma medição repetida e uma análise da diferença.

Antes de um monitoramento regular. A primeira onda de qualquer pesquisa recorrente (NPS trimestral, pesquisa anual de engajamento) torna-se automaticamente a linha de base para comparações posteriores.

Como construir um estudo de linha de base

1. Definir as variáveis-chave. Quais métricas são críticas para avaliar o efeito? A métrica principal (NPS, CSAT, conversão) mais variáveis contextuais (demografia, segmento, canal). Importante: a lista de métricas não deve mudar entre a linha de base e as ondas repetidas, ou a comparação será inválida.

2. Fixar a metodologia. Escalas, redação das perguntas, método de distribuição, tamanho da amostra, período de coleta. Tudo isso deve ser documentado e reproduzido nas ondas posteriores. Mudar a metodologia entre a linha de base e a repetição = impossibilidade de uma comparação correta.

3. Garantir uma amostra representativa. A linha de base deve descrever a mesma população com a qual você vai trabalhar depois. Se a linha de base for coletada apenas com usuários ativos e a medição repetida incluir também novos — os resultados não são comparáveis.

4. Um tamanho de amostra suficiente. A linha de base deve ter um tamanho de amostra suficiente para dar um intervalo de confiança estreito. Caso contrário, as comparações posteriores serão "borradas" — uma diferença de 5 pontos pode cair dentro da margem de erro.

5. Documentar o contexto. O que estava acontecendo no momento da linha de base? Quais eram as condições externas, a sazonalidade e os eventos? Isso permite interpretar corretamente as mudanças futuras e distingui-las do ruído dos fatores externos.

Exemplo: uma linha de base para implementar um novo CRM

Uma empresa planeja implementar um novo CRM e quer avaliar se isso melhorará a produtividade da equipe de vendas. Com antecedência, realizam um estudo de linha de base:

• Uma pesquisa com 40 gerentes de vendas: satisfação atual com as ferramentas (escala 1-10), tempo gasto em tarefas administrativas (horas por semana), a sensação de apoio dos sistemas
• Dados do CRM atual: número médio de dias por negócio, número de tarefas por gerente, porcentagem de entrada manual
• O eNPS do departamento

Resultados da linha de base:

• Satisfação com as ferramentas: 5,2/10
• Tempo em tarefas administrativas: 14 h/semana
• Tempo médio por negócio: 18 dias
• eNPS do departamento: 12

Seis meses após implementar o novo CRM — uma medição repetida nas mesmas métricas e amostra:

• Satisfação: 7,4/10 (+2,2)
• Tempo em tarefas administrativas: 9 h/semana (−5 h)
• Tempo médio por negócio: 15 dias (−3)
• eNPS do departamento: 28 (+16)

O efeito quantitativo é visível. Sem uma linha de base, a afirmação "o CRM melhorou o trabalho" seria indemonstrável — você só poderia dizer "os gerentes dizem que melhorou." Agora há números concretos para o relatório e para as decisões sobre escalar.

Linha de base vs benchmarking

Às vezes esses conceitos são confundidos, mas são diferentes:

• Linha de base — o seu próprio estado inicial em um momento fixo do tempo
• Benchmarking — comparação com referências externas: a indústria, os concorrentes, as melhores práticas

Eles se complementam. A linha de base diz para onde você está indo ("crescemos de 42 para 50"). O benchmarking diz onde você está em relação ao mercado ("o benchmark da indústria é 58, ainda estamos atrás"). O planejamento estratégico precisa de ambos.

Erros típicos com as linhas de base

Usar "dados antigos" como linha de base. Uma pesquisa realizada há um ano com outra metodologia não é uma linha de base. Uma redação diferente, escalas diferentes e um público diferente tornam a comparação inválida. É melhor realizar uma linha de base completa agora mesmo, mesmo que isso atrase o lançamento em 2-3 semanas.

Mudar as perguntas entre a linha de base e a medição repetida. "Melhoramos um pouco a redação da pergunta 5" soa inofensivo, mas pode deslocar as médias em 5-10%. Estritamente: as perguntas-chave para a comparação devem permanecer idênticas.

Comparar amostras diferentes. A linha de base é realizada com usuários ativos, a repetição com toda a base, incluindo os inativos. A diferença na média pode dever-se não à mudança, mas a uma composição diferente da amostra. A metodologia de distribuição da pesquisa deve ser a mesma.

Não levar em conta a sazonalidade. Se a linha de base for realizada em dezembro (alta temporada para o e-commerce) e a repetição em fevereiro, a mudança pode refletir a dinâmica sazonal e não o efeito do seu trabalho. Compare períodos comparáveis ou use grupos de controle.

Linha de base e desenho da pesquisa

Uma linha de base é parte de um desenho da pesquisa mais amplo. Para avaliar efeitos causais, é aconselhável complementar a linha de base com um grupo de controle (que não recebeu a intervenção) — este é o clássico desenho pré-pós-controle. Sem um grupo de controle você não consegue descartar que a mudança teria ocorrido mesmo sem a sua intervenção — por fatores externos, a evolução natural do produto ou uma mudança no público.

Para mudanças em larga escala (um redesenho, uma mudança de estratégia), é melhor complementar a linha de base com testes A/B nas primeiras etapas — isso dá uma estimativa do efeito mais limpa do que uma comparação com um ponto histórico.

Linha de base no SurveyNinja

Para estudos de linha de base no SurveyNinja você cria uma pesquisa com uma metodologia claramente fixada e a salva como modelo. As ondas posteriores são criadas copiando o modelo — isso garante perguntas, escalas e estrutura idênticas. Durante a análise é conveniente usar variáveis ocultas para marcar a onda do estudo: "linha de base," "onda 1," "onda 2" — isso permite separar as medições logo na exportação para a análise comparativa.

Um estudo de linha de base é um investimento na capacidade de medir o efeito das suas ações. Sem ele, qualquer afirmação sobre melhorias permanece no terreno das sensações; com ele, transforma-se em números mensuráveis para relatórios, decisões e investimentos. As condições-chave para uma linha de base correta: uma metodologia clara, uma amostra suficiente, um contexto documentado e uma metodologia sem mudanças nas ondas posteriores.

Perguntas frequentes

É possível realizar uma linha de base depois de lançar as mudanças?

Não — isso já não é uma linha de base. Depois de lançada a intervenção, o estado atual já reflete o efeito dessa intervenção. A única linha de base válida é uma medição feita antes de qualquer mudança. Se não houve oportunidade de realizar uma linha de base completa, você pode usar dados históricos como aproximação, mas a qualidade dessa comparação é significativamente menor.

Qual tamanho de amostra é necessário para uma linha de base?

Depende do efeito esperado. Se você espera uma melhoria de 5 pontos com um desvio padrão de 15, precisa de pelo menos 150-200 pessoas em cada onda. Para efeitos pequenos (1-2 pontos) — substancialmente mais. Para um cálculo preciso, use o MDE e a potência estatística necessária.

Com que frequência atualizar a linha de base?

Com mudanças significativas no público ou no produto — uma nova linha de base. Casos típicos: uma mudança de estratégia, a entrada em novos mercados, um redesenho do produto, uma mudança de público-alvo. Para um monitoramento regular, a linha de base é estabelecida uma vez ao iniciar o acompanhamento e é usada como ponto de referência para todas as ondas posteriores.

É necessária uma linha de base para campanhas curtas?

Sim, se você quer medir o efeito delas. Para uma campanha de 2-4 semanas, você pode realizar a linha de base uma semana antes do início — isso basta para registrar o estado inicial. Para programas longos (6+ meses) a linha de base deve ser mais minuciosa.

O que fazer se os resultados da linha de base forem piores do que o esperado?

É uma situação normal — uma linha de base muitas vezes mostra a realidade, que diverge das expectativas intuitivas da equipe. É importante documentar os resultados e não "ajustá-los" depois do fato. Uma linha de base honesta é a base de uma avaliação honesta do trabalho: é melhor ver o estado real e avançar a partir dele do que medir o efeito a partir de um ponto de partida inflado.