Pregunta de doble cañón

Imagina que un camarero en un restaurante pregunta: «¿Le gustaron la comida y el servicio?». La comida estaba excelente, pero el camarero confundía los pedidos. ¿Qué respondes? «Sí» es inexacto. «No» es injusto con el cocinero. «Cincuenta y cincuenta» no es una opción. Te quedas bloqueado, eliges algo al azar, y el restaurante termina con una respuesta que no significa absolutamente nada.

En los cuestionarios, esta construcción se llama pregunta de doble cañón. Y es uno de los errores más frecuentes al diseñar encuestas: tan frecuente que incluso los investigadores experimentados lo cometen.

Definición

Una pregunta de doble cañón es una pregunta que combina dos o más temas independientes en una sola formulación, a la vez que solicita una única respuesta compartida. El encuestado se ve obligado a responder «al por mayor» sobre algo que requiere una evaluación por separado.

El término doble cañón proviene de una metáfora de armas de fuego: un gatillo, dos disparos. En el contexto de las encuestas significa que una sola respuesta intenta cubrir dos aspectos distintos. Y como la opinión del encuestado sobre estos aspectos puede divergir drásticamente, la respuesta resultante acaba siendo un compromiso promediado que no refleja con precisión a ninguno de ellos.

Lo insidioso de este error es lo fácil que es pasarlo por alto. El autor del cuestionario combina dos aspectos no por mala intención, sino para ahorrar esfuerzo: parece que una pregunta en lugar de dos es más rápido tanto para el creador como para el encuestado. En la práctica, ese ahorro se convierte en una pérdida: tienes datos, pero no puedes sacar nada en claro de ellos.

En qué perjudica tus datos

El problema no es que vayas a obtener pocas respuestas. Al contrario: los encuestados responderán de buena gana. Pero interpretar sus respuestas será imposible. Veamos las consecuencias con más detalle.

Un resultado inseparable. Un cliente le dio a tu tienda en línea un 4 sobre 5 en la pregunta «¿Qué tan satisfecho está con nuestro surtido y nuestros precios?». ¿Qué significa eso? ¿El surtido un 5, los precios un 3? ¿Ambos en 4? ¿El surtido un 3, los precios un 5? Nunca lo sabrás. Y sin embargo, mejorar el surtido y ajustar la política de precios son iniciativas completamente distintas, con presupuestos, equipos y plazos diferentes. Sin la posibilidad de separar las puntuaciones, no sabes hacia dónde dirigir tus recursos.

Una falsa sensación de bienestar. Cuando dos parámetros están pegados, una valoración negativa de uno de ellos «se ahoga» en la valoración positiva del otro. La puntuación media parece aceptable y el problema pasa desapercibido. Esto es especialmente peligroso en encuestas de seguimiento periódicas —encuestas de pulso, mediciones trimestrales—, donde las decisiones se toman a partir de la tendencia de los indicadores medios. Si un parámetro sube mientras el otro baja, la pregunta fusionada mostrará estabilidad. Pensarás que todo va bien, mientras que bajo el capó una de las métricas se está deteriorando.

Irreproducibilidad. Si quieres repetir el estudio dentro de seis meses y comparar los resultados, una pregunta de doble cañón hará que la comparación carezca de sentido. Supongamos que la puntuación media subió de 3,8 a 4,1: ¿qué mejoró exactamente? No puedes saber si el aumento se debió a un cambio en el surtido, a una bajada de precios o a ambos. Sin ese conocimiento, no puedes repetir el éxito.

Segmentación destruida. Una de las capacidades más valiosas del análisis es comparar respuestas entre grupos: clientes nuevos frente a recurrentes, hombres frente a mujeres, regiones. Una pregunta de doble cañón vuelve inútil esa comparación. Si los clientes nuevos valoraron «el surtido y los precios» por debajo de los recurrentes, ¿es porque no están contentos con la selección? ¿O porque están acostumbrados a otro nivel de precios? Sin separar las preguntas, operas con conjeturas, no con datos.

Una pregunta de doble cañón produce datos que parecen completos pero que se resisten a ser descifrados. Eso es peor que un vacío: un vacío se ve de inmediato, mientras que un falso «promedio» se disfraza de valoración real.

Cómo lucen las preguntas de doble cañón: cinco patrones típicos

Reconocer una pregunta de doble cañón es más fácil si conoces las construcciones características. A continuación, los cinco patrones que aparecen con más frecuencia. Cada uno se desglosa con un ejemplo de «cómo no hacerlo», una explicación del problema y una alternativa neutral.

1. La conjunción «y» entre dos objetos de evaluación

De doble cañón: «¿Qué tan cómodas son la navegación y la búsqueda en nuestro sitio web?»

Por qué está mal: la navegación y la búsqueda son dos elementos de interfaz independientes, con mecánicas distintas y diferentes puntos de fallo. La navegación puede ser intuitiva —un menú lógico, categorías claras— mientras que la búsqueda no encuentra la mitad de los productos o devuelve resultados irrelevantes. Una sola respuesta para dos parámetros no le permite al equipo de UX entender qué hay que arreglar exactamente.

Versión corregida: dos preguntas: «¿Qué tan cómoda es la navegación en nuestro sitio web?» y «¿Qué tan eficaz es la búsqueda en nuestro sitio web?»

2. Una enumeración separada por comas

De doble cañón: «Valore la rapidez, la cortesía y la competencia de nuestro soporte.»

Por qué está mal: un agente puede responder con cortesía pero con lentitud. O con rapidez y al grano, pero de forma seca. Tres parámetros: tres aspectos del trabajo completamente distintos. Las empresas que, a partir de una pregunta así, implementan formación en cortesía pueden pasar por alto que el verdadero punto de dolor de los clientes es la velocidad de respuesta, mientras que con la cortesía justamente todo va bien.

Versión corregida: tres preguntas separadas o una pregunta de matriz, donde cada parámetro (rapidez, cortesía, competencia) se valora en su propia fila con la misma escala. Una matriz es visualmente compacta y no recarga el cuestionario.

3. Acción + emoción en una sola pregunta

De doble cañón: «¿Le resulta fácil y agradable usar nuestra aplicación?»

Por qué está mal: «fácil» tiene que ver con la funcionalidad, la UX, el lado técnico. «Agradable» tiene que ver con la estética, el diseño, la sensación general. Una aplicación puede ser funcional —todo está a dos clics— pero visualmente anticuada y dar ganas de cerrarla cuanto antes. O al revés: una interfaz bonita, pero para llegar a la función que necesitas hay que pasar por cinco pantallas.

Versión corregida: «¿Qué tan fácil es completar las tareas principales en nuestra aplicación?» y, por separado, «¿Cuánto le gusta el aspecto y el diseño de la aplicación?»

4. Pasado + futuro en una sola pregunta

De doble cañón: «¿Está satisfecho con nuestro producto y piensa seguir usándolo?»

Por qué está mal: la satisfacción es una valoración de la experiencia pasada; la intención de continuar es un pronóstico del comportamiento futuro. Estas cosas están relacionadas, pero distan mucho de ser idénticas. Una persona puede estar satisfecha con la versión actual y, aun así, planear cambiarse a un competidor por el precio. O al revés: insatisfecha con ciertos aspectos, pero le da pereza cambiar, está acostumbrada, ya migró todos sus datos. Al mezclar dos dimensiones, no obtienes ni una métrica de satisfacción limpia ni un indicador de retención fiable.

Versión corregida: «¿Qué tan satisfecho está con el producto en este momento?» y «¿Piensa seguir usándolo durante los próximos 6 meses?»: dos preguntas, dos indicadores, dos palancas de gestión.

5. Causa + efecto en una sola pregunta

De doble cañón: «¿Cree que nuestros precios están justificados y se corresponden con la calidad?»

Por qué está mal: «justificados» es una valoración subjetiva de la política de precios en su conjunto (puede depender de los ingresos del encuestado, de su nivel de precios habitual, de los precios de la competencia). «Se corresponden con la calidad» es una valoración más acotada: si un producto concreto vale lo que cuesta. Un cliente puede considerar el precio normal para el mercado y, aun así, esperar más por ese dinero precisamente de ti, porque te posicionas como premium.

Versión corregida: «¿Cómo valora la relación calidad-precio de nuestro producto?»: un solo foco, una sola escala, un resultado interpretable.

Cómo detectar las preguntas de doble cañón en tu propio cuestionario

Tres filtros rápidos que funcionan casi sin fallar.

La prueba de la «y». Relee cada pregunta y presta atención a las conjunciones «y», «así como», «o» y a las comas en las enumeraciones. Si a ambos lados de la conjunción hay objetos de evaluación distintos, tienes un candidato a dividir. No toda «y» indica un problema (la pregunta «Indique su nombre y apellido» está bien, es un único conjunto), pero cada «y» conviene revisarla.

La prueba de las respuestas distintas. Crea mentalmente dos encuestados con opiniones opuestas sobre cada parte de la pregunta. Si el primer encuestado está contento con el aspecto A pero descontento con el aspecto B, y el segundo al revés, y aun así ambos se ven obligados a dar la misma respuesta «promedio», la pregunta definitivamente hay que dividirla.

La prueba de la acción. Pregúntate: «Si la respuesta es baja, ¿qué voy a mejorar exactamente?». Si no puedes nombrar una acción concreta porque la pregunta cubre dos aspectos distintos y no está claro cuál «falló», entonces hay que dividirla en dos. Una buena pregunta siempre apunta a un área de responsabilidad concreta.

La opción ideal es la prueba piloto. Pide a 10–15 personas de tu público objetivo que completen el cuestionario y, después, pregúntales cómo entendieron cada pregunta. Si alguien dice «no sabía sobre qué estaba respondiendo, sobre una cosa o sobre la otra», es un marcador seguro de una construcción de doble cañón.

Cuándo es aceptable combinar

Para ser justos: no toda pregunta con una «y» es un error. Hay situaciones en las que la fusión está justificada.

Conceptos inseparables. «La comodidad de la ubicación y la accesibilidad en transporte de la oficina»: para la mayoría de los encuestados es una misma cosa. Una evaluación por separado no aportará información adicional, porque un parámetro prácticamente no existe sin el otro.

Un compromiso consciente en aras de la brevedad. Si el cuestionario ya es largo y dividir la pregunta añadiría otra pantalla más, a veces es aceptable mantener la formulación combinada, siempre que entiendas la limitación de antemano y no intentes interpretar la respuesta como una valoración de cada parámetro por separado. Es un compromiso «sucio» y conviene documentarlo en la descripción de la metodología.

Cribado y filtrado. La pregunta «¿Ha comprado electrodomésticos o electrónica en los últimos 3 meses?» combina dos categorías, pero aquí no es un problema: el objetivo es determinar si la persona tiene alguna experiencia de compra en una categoría amplia, no comparar electrodomésticos con electrónica. Para las preguntas de cribado, combinar suele ser incluso preferible a una serie de filtros estrechos, cada uno de los cuales descarta a parte del público.

Las preguntas de doble cañón y los errores afines

La pregunta de doble cañón se confunde a menudo con otros defectos de formulación. Así es como distinguirlos.

Doble cañón frente a pregunta tendenciosa. Una pregunta tendenciosa empuja hacia una respuesta concreta; una de doble cañón te obliga a responder dos preguntas a la vez. A veces los defectos se combinan: «¿Está de acuerdo en que nuestro cómodo sitio web y nuestro soporte profesional son nuestras principales ventajas?»: aquí se pegan dos sujetos y se incrusta una valoración en la formulación.

Doble cañón frente a pregunta compleja. Una pregunta compleja es la que cuesta entender por una formulación larga o enrevesada. Una pregunta de doble cañón puede ser simple y corta —«¿Está satisfecho con el producto y el servicio?»— y aun así contener dos objetos de evaluación. La brevedad no protege del doble cañón.

Doble cañón frente a doble negación. «¿No cree que nuestro servicio no necesita mejoras?» no es una pregunta de doble cañón, sino una pregunta con doble negación, que confunde al encuestado por otra razón: no logra entender qué significa «sí» y qué significa «no».

Cómo manejar esto en SurveyNinja

El editor de SurveyNinja no prohíbe crear preguntas de doble cañón: esa es la responsabilidad del autor. Pero la plataforma ofrece herramientas que hacen que el enfoque correcto sea más cómodo que el incorrecto.

Preguntas de matriz. Si necesitas valorar varios parámetros con una sola escala, la matriz es el reemplazo ideal de una serie de construcciones de doble cañón. Cada parámetro recibe su propia fila, el encuestado los valora de forma independiente y, visualmente, el cuestionario se mantiene compacto. Rapidez, cortesía, competencia del soporte: tres filas en una sola matriz en lugar de una única pregunta sin sentido, «Valore nuestro soporte en todos los parámetros».

Copiar preguntas. Dividir una pregunta en dos es cosa de treinta segundos: copias la pregunta, dejas el primer sujeto en el original y pones el segundo en la copia. Los ajustes de la escala, la obligatoriedad, el formato: todo se traslada automáticamente. La barrera para el enfoque «correcto» es mínima.

Saltos lógicos. Si uno de los dos aspectos solo es relevante para una parte de los encuestados, un salto lógico permite mostrar la pregunta aclaratoria únicamente a aquellos para quienes es relevante. Por ejemplo, la pregunta sobre la calidad de la entrega va solo a quienes eligieron entrega y no recogida.

Edición colaborativa. Suma a un colega al trabajo colaborativo sobre el cuestionario. Una mirada fresca es el detector más fiable de construcciones de doble cañón: lo que al autor le parece un único conjunto, visto desde fuera a menudo se desmorona en dos preguntas separadas.

La regla es simple: una pregunta, un objeto de evaluación. Si no puedes describir qué mide exactamente tu pregunta con un solo sustantivo, lo más probable es que dentro se escondan dos preguntas disfrazadas de una.