La encuesta que parece contundente y puede engañarte: 6 datos que cambian la lectura

Una encuesta se publica con un número grande y una diferencia clara, y de ahí sale el titular. Pero el número que se muestra es el resultado de un conjunto de decisiones —a quién se preguntó, cómo, cuándo y con qué palabras— que rara vez aparecen en el gráfico. Ninguna de esas decisiones es un truco: son parte del oficio. El problema es leer el número sin ellas. Estos son los seis datos que hay que buscar antes de creer que la encuesta describe a toda la población.

Los 6 datos antes de mirar el ganador

1. Quién la hizo y quién la pagó. El nombre de la consultora y el del comitente. No para descartar por el patrocinio, sino porque es información que cambia cómo se lee el énfasis de la presentación.

2. El universo. A qué población pretende representar: población general, mayores de 16, votantes probables de un distrito. Una encuesta nacional y una encuesta de la Ciudad no se comparan entre sí.

3. El tamaño y el tipo de muestra. Cuántos casos y cómo se seleccionaron. El tamaño define la precisión; el método define si la muestra puede representar al universo.

4. La técnica. Telefónica, presencial en domicilio, en la vía pública, panel en línea, mensajes automáticos. Cada una llega a personas distintas y deja afuera a otras.

5. La fecha de campo. Los días en que efectivamente se preguntó, no la fecha de publicación.

6. El margen de error y el tratamiento de indecisos. Cuánta incertidumbre tiene la estimación y qué se hizo con quienes no respondieron o no sabían.

Los seis integran lo que se llama ficha técnica. Una encuesta publicada sin ficha técnica no es verificable, y ese ya es un dato: los estándares internacionales de la actividad —los de las asociaciones profesionales de investigación de opinión— establecen que la difusión pública debe acompañarse de esa información mínima.

Muestra y método: a quién representa realmente

El corazón del asunto no es cuánta gente respondió, sino quiénes pudieron responder.

Una muestra probabilística —donde cada persona del universo tiene una probabilidad conocida de ser seleccionada— es la que habilita, en rigor estadístico, a proyectar los resultados al conjunto y a calcular un margen de error. Es cara y lenta. Muchas encuestas usan métodos no probabilísticos: paneles de voluntarios en línea, cuotas por edad y género, respondentes captados por redes. Pueden funcionar bien y ser informativos, pero el "margen de error" que se publica en esos casos es, hablando con propiedad, una analogía y no la misma medida.

La técnica determina el sesgo de cobertura. Una encuesta telefónica a líneas fijas sobrerrepresenta a los hogares que todavía tienen línea fija. Una en línea deja afuera a quien no usa internet con frecuencia. Una en la vía pública depende del lugar y el horario. Las consultoras corrigen esos desequilibrios mediante ponderación, ajustando el peso de cada grupo para que la muestra se parezca a la población según datos censales conocidos. Es una práctica legítima y necesaria, pero cuanto más pesada es la corrección, más depende el resultado del modelo del investigador.

Y un punto que suele pasarse por alto: la tasa de respuesta. Si de cada cien personas contactadas responden muy pocas, la pregunta relevante es si quienes aceptan responder se parecen a quienes no. No hay forma directa de saberlo, y es una de las razones por las que dos encuestas serias pueden diferir.

El corolario práctico: los subgrupos son mucho menos precisos que el total. Cuando una nota destaca qué opinan "los jóvenes del interior" a partir de una muestra nacional, ese dato puede apoyarse en unas pocas decenas de casos, con un margen de error mucho mayor que el que figura al pie.

Fecha, pregunta e indecisos que cambian el cuadro

La fecha de campo define de qué momento habla la encuesta. Un relevamiento hecho antes de un anuncio importante, un debate o un hecho de alto impacto describe un mundo anterior, aunque se publique después. Comparar dos encuestas con fechas de campo distintas y atribuir la diferencia a una tendencia es un error frecuente.

La redacción de la pregunta cambia las respuestas, y no marginalmente. Una pregunta que incluye el cargo y el nombre no rinde igual que una que sólo menciona el nombre; una que ofrece opciones cerradas no rinde igual que una abierta; una que menciona un argumento antes de preguntar arrastra la respuesta. Por eso los estándares piden publicar el texto literal de las preguntas cuyos resultados se difunden.

El orden también pesa: preguntar primero por la situación económica personal y después por la evaluación de gestión produce un resultado distinto que el orden inverso. No es manipulación necesariamente, es cómo funciona la atención de quien responde.

Y los indecisos son el ajuste que más silenciosamente altera el cuadro. Si un porcentaje relevante no sabe o no contesta, hay tres caminos: informarlos aparte, repartirlos proporcionalmente entre las opciones, o excluirlos y recalcular los porcentajes sobre los que sí respondieron. Los tres son legítimos y dan números diferentes. Cuando una encuesta muestra porcentajes que suman cien sin ninguna categoría de indecisos, casi siempre está mostrando el tercer camino, y conviene saberlo antes de comparar con otra que informa el primero.

Resultado, tendencia y pronóstico no son sinónimos

Tres cosas distintas que suelen mezclarse en la misma frase.

Un resultado es una estimación puntual con incertidumbre asociada: dice qué respondió una muestra en un momento dado. Cuando la diferencia entre dos opciones es menor que el margen de error, lo correcto es decir que están en empate técnico, no que una "encabeza".

Una tendencia requiere varias mediciones de la misma consultora y con la misma metodología. Comparar encuestas de distintas consultoras para afirmar que alguien "subió" mezcla diferencias metodológicas con cambios reales de opinión. Las series propias son mucho más informativas que el promedio de encuestas ajenas.

Un pronóstico es otra cosa: es un modelo que usa encuestas más supuestos sobre participación, distribución territorial y comportamiento del indeciso. Las encuestas alimentan pronósticos, pero no son pronósticos. Una encuesta preelectoral que acierta el orden y falla en las magnitudes hizo bien su trabajo; una que se lee como predicción exacta iba a decepcionar siempre.

Un último recordatorio, específico de Argentina: la difusión de encuestas en período electoral está sujeta a reglas —incluida la veda para publicarlas en los días previos— y los registros de encuestadoras que lleva la justicia electoral son una fuente para saber quién está inscripto.

En resumen: los seis datos que hay que revisar antes de creerle a una encuesta son quién la hizo y la financió, qué universo declara, qué muestra y qué técnica usó, cuándo fue el trabajo de campo, cómo estaban redactadas las preguntas y qué hizo con el margen de error y los indecisos. Con esos datos, una encuesta es una herramienta valiosa para entender un momento; sin ellos, es apenas un número al que cada quien le pone el relato que prefiere.