Sesgo de contexto

La pregunta "¿Qué tan satisfecho está con su vida?" aparece primero en el cuestionario: la respuesta media es 7,2.

La misma pregunta, pero colocada después del bloque "¿Tiene dificultades en el trabajo? ¿Problemas de salud? ¿Conflictos familiares?": la respuesta media es 5,8. Las respuestas cambiaron no porque los encuestados sean distintos, sino porque cambió el contexto. El sesgo de contexto es una distorsión en la que la respuesta depende no solo de la pregunta, sino también de lo que estaba junto a ella.

Definición

Sesgo de contexto — una distorsión sistemática de las respuestas de un encuestado bajo la influencia del entorno de la pregunta en una encuesta: preguntas anteriores, el orden de las opciones, la redacción, los ejemplos. Surge de los efectos cognitivos del priming (la activación de ciertas asociaciones), el anclaje y los efectos de orden. Se diferencia de otras formas de sesgo en que no se relaciona con el propio encuestado, sino con el diseño del cuestionario.

Mecanismos principales

Priming. Las preguntas anteriores activan ciertos pensamientos y predisponen al encuestado. Después de un bloque sobre problemas, una persona está en un estado de ánimo "problemático", y las valoraciones siguientes serán más bajas. Después de un bloque sobre aspectos positivos, serán más altas.

Anclaje. El primer número mencionado en el cuestionario se convierte en un punto de referencia para las estimaciones posteriores. La pregunta "cuánto está dispuesto a pagar por este servicio" después de una escala con un límite superior de 50 € dará respuestas distintas que la misma pregunta después de una escala de hasta 500 €.

Efecto de orden en las opciones. En una lista larga de opciones, las primeras ("primacy") y las últimas ("recency") tienen más probabilidades de ser elegidas que las intermedias. Esto sesga sistemáticamente las respuestas independientemente de las preferencias reales del encuestado.

Efecto de comparación. Valorar un objeto después de valorar otro depende de cuál fue el anterior. "Valorar un restaurante con un 7" después de valorar un restaurante mediocre con un 5 es fácil. Después de valorar un restaurante excelente con un 9, el mismo restaurante obtendrá un 6.

Cómo se manifiesta en encuestas reales

Una pregunta general después de preguntas específicas. Un ejemplo clásico: primero preguntamos sobre 5 aspectos concretos del trabajo, luego "¿Qué tan satisfecho está en general?". La valoración general se convierte en un promedio de las respuestas detalladas: el encuestado usa las respuestas ya elaboradas como base. La respuesta sin las preguntas previas habría sido distinta.

Preguntas específicas después de las generales. La secuencia inversa: primero la valoración general, luego el desglose. Ahora la valoración general crea un "halo" para las específicas (véase efecto halo): las valoraciones detalladas se ajustan a la actitud general ya expresada.

Un bloque con un tema negativo antes de una pregunta neutral. Después de una serie de preguntas sobre problemas con el producto, incluso las preguntas neutrales ("¿Con qué frecuencia lo usa?") reciben una redacción y unas valoraciones más pesimistas.

Un bloque demográfico al principio. Si empieza la encuesta con preguntas sobre edad, ingresos y educación, se activan los roles sociales y los estereotipos de respuesta asociados a ellos. Después de "soy un director de 45 años", las respuestas a preguntas sobre el ocio estarán sesgadas hacia lo que se espera socialmente para ese rol.

Ejemplo: sesgo de contexto en una encuesta de producto

Una empresa compara dos versiones de un cuestionario de satisfacción con una aplicación.

Versión A: 1) ¿Con qué frecuencia la usa? 2) ¿Qué funciones le gustan? 3) Valore la aplicación del 1 al 10.

Versión B: 1) Valore la aplicación del 1 al 10. 2) ¿Qué funciones le gustan? 3) ¿Qué le gustaría mejorar? 4) ¿Qué errores ha encontrado?

Cada versión se mostró a 500 usuarios aleatorios. La valoración media de la aplicación:

• Versión A (valoración al final, después de preguntas positivas): 7,8
• Versión B (valoración al principio, antes del bloque "mejorar / errores"): 6,9

Una diferencia de 0,9 puntos es sustancial, mientras que la audiencia es la misma y el producto es el mismo. La brecha se debe únicamente al contexto de la pregunta. En los informes es importante registrar en qué punto del cuestionario estaba cada pregunta: esto forma parte de la metodología y es una condición para la reproducibilidad de los datos.

Cómo minimizar el sesgo de contexto

Aleatorizar el orden de las preguntas. Un orden aleatorio de los bloques o de las preguntas individuales distribuye los efectos del contexto en toda la muestra: algunos encuestados reciben un contexto, otros reciben otro. A nivel del promedio el sesgo se compensa. Funciona para preguntas que se pueden reordenar lógicamente.

Coloque las preguntas clave de evaluación primero. Si necesita una valoración "limpia" de un producto o una marca, sin la influencia de preguntas detalladas, colóquela primero. Así hay menos probabilidades de que el contenido anterior tenga un efecto.

Separar los bloques temáticos. Entre bloques sustancialmente diferentes, añada pantallas de transición o preguntas neutrales de amortiguación. Esto restablece el efecto de priming del bloque anterior.

Aleatorizar las opciones de respuesta. El orden de las opciones en una lista también importa: la aleatorización elimina la ventaja sistemática de las primeras o las últimas posiciones. La excepción: las respuestas de escala (1-10, Likert), donde el orden es significativo.

Pruebas A/B del cuestionario en un piloto. Para estudios importantes, ejecute un piloto con dos órdenes de preguntas y compare las distribuciones. Si no hay diferencia, el orden no tiene efecto. Si la hay, debe fijar una versión o aleatorizar entre los encuestados.

Cuándo el sesgo de contexto es especialmente peligroso

Comparación con oleadas anteriores. Si este año cambió el orden o la redacción de las preguntas, la comparación con los datos del año pasado no es válida. Un cambio en una métrica puede deberse no a cambios reales en la audiencia, sino al nuevo contexto de la pregunta.

Tomar decisiones basadas en valores absolutos. Si una métrica está cerca de un umbral (por ejemplo, un NPS en torno a 0), un pequeño sesgo de contexto de 3-5 puntos puede moverla de negativa a positiva. Esos valores límite son especialmente vulnerables.

Comparación entre estudios de distintas organizaciones. El benchmarking con datos de otras empresas funciona solo si las metodologías de los cuestionarios son comparables. Un contexto de pregunta diferente hace que la comparación directa no sea válida.

El sesgo de contexto en SurveyNinja

Al diseñar encuestas en SurveyNinja, use las herramientas integradas para reducir el sesgo de contexto: la aleatorización del orden de las preguntas y las opciones se configura en las propiedades de cada bloque o pregunta. Para obtener valoraciones limpias de marca o producto, coloque las preguntas clave al principio del cuestionario, antes de los bloques detallados. Entre secciones temáticas, añada una pantalla de bienvenida o preguntas neutrales de amortiguación: esto ayuda a restablecer el efecto de priming y a estabilizar las respuestas.

El sesgo de contexto es cuando la respuesta depende no solo de la pregunta, sino también de sus vecinas. El orden de las preguntas, los bloques temáticos, la redacción: todo ello influye. La herramienta de protección más eficaz es la aleatorización, que distribuye las distorsiones por la muestra. La regla más importante es registrar la estructura del cuestionario para la reproducibilidad y la comparabilidad con futuras oleadas.

Preguntas frecuentes

¿En qué se diferencia el sesgo de contexto del efecto de orden?

El efecto de orden es un caso particular del sesgo de contexto que se relaciona específicamente con la posición de una pregunta o una opción en una secuencia. El sesgo de contexto es más amplio e incluye también los efectos del tema de las preguntas vecinas, la redacción, los ejemplos y los elementos visuales. Todo efecto de orden es un sesgo de contexto, pero no todo sesgo de contexto es un efecto de orden.

¿Cómo compruebo si hay sesgo de contexto en mis datos?

La forma más directa es ejecutar una prueba A/B del cuestionario con distintos órdenes de preguntas en un piloto. Si una métrica clave difiere entre versiones más allá del margen de error, el contexto tiene un efecto. Una forma menos precisa pero rápida: comparar la correlación de las preguntas que están una junto a otra con la correlación de las mismas preguntas separadas en el cuestionario por temas distintos. Un vínculo fuerte entre vecinas es una señal de influencia del contexto.

¿Se puede eliminar por completo el sesgo de contexto?

No: toda pregunta existe en algún contexto. La tarea no es eliminar el contexto, sino hacerlo consciente y manejable. La aleatorización, la estandarización del cuestionario entre oleadas y las pruebas A/B en un piloto son herramientas que hacen que el sesgo de contexto sea predecible y comparable, en lugar de eliminarlo.

¿El sesgo de contexto afecta más a las encuestas en línea que a las telefónicas?

En las encuestas en línea, los efectos de orden (primacy, recency) en las listas de opciones son más pronunciados, porque el encuestado ve todas las opciones a la vez. En las encuestas telefónicas el efecto recency es más fuerte, porque las últimas opciones pronunciadas se recuerdan mejor. La modalidad de la encuesta forma parte del contexto y hay que tenerla en cuenta en el análisis.

¿Cómo documento el contexto para la reproducibilidad de un estudio?

En la sección de metodología del informe, especifique: el orden exacto de los bloques y las preguntas, si fueron aleatorizados, la redacción y las escalas, la presencia de ejemplos o explicaciones, el método de distribución (el canal: email, widget, panel). Esto permite que otros investigadores reproduzcan las condiciones y comparen correctamente los resultados. Sin esta información, cualquier comparación es un riesgo de sesgo de contexto no controlado.