Pueden predecir las encuestas polticas el resultado de una eleccin?

Profesor David Kimber C. e-mail: dkimber@uandes.cl

Desde diciembre del 2005 a la fecha, Latinoamrica ha vivido una serie de elecciones presidenciales con diversos resultados, algunos esperables otros sorpresivos, transformando nuevamente, y como desde hace mucho tiempo, en protagonistas a las encuestas polticas que presentan los resultados probables de cada eleccin. En cada pas se dan las siguientes situaciones, por un lado los polticos de un bando u otro contratan los servicios de empresas de investigacin de mercados para hacer encuestas y evaluar las campaas y las tendencias electorales. Por otro lado, existen organizaciones o empresas de investigacin de mercados que llevan a cabo estudios por su cuenta con el mismo fin. El resultado final son diversos estudios que no siempre son coincidentes entre s, y entonces, somos testigos de discusiones y anlisis a favor o en contra respecto a los resultados expuestos por cada entidad. Finalmente, muchas personas se preguntan al ver este escenario si deben creerle a la encuesta, si estar sesgada de alguna manera, qu tan confiables son sus resultados, etc. El objetivo de esta nota es describir algunos factores que pueden afectar la precisin de las encuestas polticas y la diversidad de resultados entre diferentes entidades. Como veremos a continuacin, este problema puede ser abordado desde 3 perspectivas: el propsito del estudio y la metodologa utilizada, las fuentes de error no muestral y el comportamiento de los votantes.

Diversidad de propsitos y metodologas, diversidad de resultados. Cada vez que se analiza un estudio de mercado es necesario conocer sus objetivos y especificaciones tcnicas con el fin de evaluar los resultados a la luz de estos parmetros y poder comprender la similitud o la discrepancia de resultados. Dado que es diferente querer saber por quin votar la gente versus quin creen que ser el prximo presidente del pas, lo primero que es necesario conocer es el propsito del estudio. La mxima en este caso es diferentes propsitos implican diferentes resultados, debido a que es el propsito del estudio (llamado objetivo general para algunos) el que define la razn de ser del estudio, el qu queremos saber o estudiar. De acuerdo a esta declaracin, se definen objetivos especficos, segmento objetivo del estudio, metodologas de investigacin y mtodos de recoleccin de datos, formas de muestreo, preguntas de la encuesta, tipo de anlisis de datos, etc.; en pocas palabras todo. Entonces, diferentes propsitos pueden implicar diferentes metodologas y por ende resultados. Tras definir qu se quiere saber es necesario definir a quin preguntarle, segmento objetivo del estudio, y en este punto de la investigacin no siempre se encuesta a los

mismos individuos lo cual har variar los resultados. En Chile por ejemplo, hay encuestas que distinguen como segmento objetivo entre aquellos inscritos en los registros electorales y aquellos que no, de tal forma de considerarlos o no al momento de encuestar o analizar datos. De esta manera, si se hace una encuesta sin considerar esta variable, se podra estar asumiendo como resultados poblacionales las respuestas entregadas por personas que no votan por no estar inscritos y que no tienen intencin de inscribirse, sesgando los resultados y entregando informacin poco fidedigna al mercado. En lo que respecta a las metodologas, los diferentes tipos de encuestas tienen ventajas y desventajas asociadas las que hacen que un tipo u otro sean mejor en determinados casos. En el cuadro 1 aparecen las principales ventajas y desventajas de 3 tipos de encuestas comnmente utilizados. Cuadro 1 Ventajas y Desventajas de Encuestas Personales, Telefnicas y por Correo.
Encuestas Personales Puede despertar y mantener el inters, crear ambiente de confianza, efectivas en conseguir cooperacin Preguntas complejas se pueden apoyar con soportes visuales Permiten clarificar dudas Alto grado de flexibilidad (variedad de secuencias y observacin) Sondeo para respuestas ms completas Certero para preguntas neutrales Preferidas cuando se requiere gran cantidad de informacin (ms tiempo) Encuestas Telefnicas Se pueden realizar ms encuestas en un perodo de tiempo dado Se puede repetir llamadas a un bajo costo Mejor tasa de respuesta que por correo Intrusin del telfono Anonimato y disminucin sesgo del encuestador Encuestas por Correo Bajo Costo Tiempo ms corto de respuesta (los que responden lo hacen rpidamente) Permite mayor tiempo de reflexin Respuestas ms confiables debido a que no hay un intermediario inhibidor Permita tratar temas confidenciales o sensibles Permite alcanzar muestras ampliamente dispersas

Ventajas

Desventajas

Encuestas Personales Prejuicios del encuestador Prejuicios en las respuestas Costo alto por encuesta completa Tiempo de recoleccin ms largo que para alternativas Algunas muestras pueden ser ms accesibles a travs de otros medios (elites, estudiantes) Difcil de supervisar

Encuestas Telefnicas Imposibilidad de emplear apoyos visuales No puede ser ms largo que 510 minutos (aburrimiento) El monto de los datos recolectados es relativamente menor Falta de ambiente de confianza Menos apropiado para preguntas sensibles Sesgo en la muestra, no todos tienen telfono

Encuestas por Correo Quin responde no es controlado adecuadamente Problema si no entienden la pregunta (a quin le preguntan o que entienden) No hay control sobre el orden en que las preguntas son expuestas o respondidas Inefectivo para conseguir cooperacin Tasa de respuesta baja

En el caso chileno, las encuestas polticas son comnmente realizadas en forma personal o telefnica, siendo este ltimo medio el ms criticado debido a que un alto porcentaje de la poblacin chilena no posee telfono (48,5% segn el censo del 2002) lo que implica que tienen caractersticas diferentes a aquellos que si poseen, por ende existe una alta probabilidad que las respuestas difieran entre ambos grupos. Adems, se agrega el hecho que en Chile hay un mayor nmero de hogares con telfono en los estratos socioeconmicos ms altos que en los bajos, lo que aumenta la probabilidad de diferir en respuestas. Cabe destacar que con el crecimiento del nmero de telfonos mviles en el pas, probablemente el realizar encuestas por este medio sea la tendencia a futuro. Sin embargo, ser importante considerar el significado emocional que puede tener un telfono mvil para su dueo, el cul puede sentirse pasado a llevar en su intimidad al ser contactado por una empresa cualquiera para llevar a cabo una encuesta, por ende la disposicin a responder sea menor. Por otro lado, con la masificacin de estos telfonos es probable que en el futuro esta posible sensibilidad de los usuarios de telfonos mviles disminuya, es un tema a investigar profundamente. Otra variable metodolgica a analizar dice relacin con el mtodo de muestreo utilizado, probabilstico o no probabilstico. El utilizar un mtodo u otro implicar si los resultados pueden ser extrapolados a la poblacin con representacin estadstica o no, lo cual obviamente es sumamente relevante al responder la pregunta sobre qu tan representativos de la realidad son los resultados.

La principal diferencia entre un mtodo u otro es la forma en que se seleccionan los individuos que pertenecen a la muestra. En el caso de los mtodos probabilsticos, la seleccin es aleatoria (al azar) y todos los individuos de la poblacin tienen una probabilidad conocida y distinta de cero de pertenecer a la muestra. En el caso de los no probabilsticos, la seleccin se realiza generalmente por conveniencia, esto quiere decir individuos que perteneciendo a la poblacin estudiada han sido seleccionados por conveniencia para el investigador en cuanto a su cercana geogrfica, facilidad de contactarlos, etc.; de esta forma se agrega un sesgo a los resultados de este muestreo por el hecho de que los individuos pueden no representar en forma adecuada a la poblacin al no compartir todas las caractersticas de los miembros de la misma. La necesidad de representacin lleva a considerar los mtodos probabilsticos, pues con estos se puede saber claramente que porcentaje de la poblacin se representa y dentro de qu rangos se mueven los resultados en cuanto a confianza de los datos y error muestral, en el fondo que tan cerca de los datos reales se encuentra la estimacin obtenida a travs de la muestra. Sin embargo, no siempre las encuestas polticas son realizadas mediante muestreos probablisticos, ya sea completamente o en todas sus etapas, lo que implica cierto sesgo en los resultados al no ser capaces de aclarar el grado de representacin estadstica de los resultados, por ende no proporcionan informacin relevante a la hora de evaluar que tan bien representa la realidad la encuesta en cuestin. Por otro lado, no siempre es posible lograr la aleatoriedad requerida por los mtodos probabilsticos, ya que las bases de datos no contienen a todos los miembros de la poblacin (ejemplo: gua de telfonos), porque estn obsoletas o simplemente porque hay individuos que no quieren responder la encuesta y al reemplazarlos no siempre se siguen mtodos probabilsticos. En Chile, diversas instituciones utilizan distintos medios y mtodos de muestreo lo que en parte puede generar las diferencias entre los datos que entregan unas u otras. Por ejemplo, la encuesta realizada por el CEP es probabilstica en todas sus etapas a diferencia de la realizada por CERC que en su etapa final (en la que seleccionan al encuestado) se realiza mediante un mtodo no probabilstico1. Estas dos empresas continuamente realizan sus encuestas y evalan la evolucin de sus datos en el tiempo, sin embargo al comparar entre ellas los resultados difieren en forma importante. En el caso de la eleccin presidencial del 2005, la encuesta CEP de noviembre indicaba como intencin de voto un 39% a favor de Michelle Bachelet y un 3% para Toms Hirsch, mientras que la encuesta CERC, del mismo mes, indicaba un 44% y un 7% respectivamente. Para finalizar este punto es necesario comentar la diferencia en las preguntas, particularmente la forma de preguntar y el orden dentro del cuestionario. Mucho se ha investigado al respecto, llegando a la conclusin que ambos factores pueden afectar los resultados de una encuesta.

Situacin por la cual se le ha criticado anteriormente.

En el caso de la forma de preguntar, se hace referencia al tipo de preguntas que se hacen y la comparacin que se lleva a cabo entre diferentes instrumentos de medicin (encuestas). Por un lado, estas diferencias pueden venir por utilizar preguntas abiertas o cerradas. En el caso de utilizar preguntas abiertas se ha visto que la indecisin o la no respuesta puede ser mayor, pues las personas no tienen un parmetro para decir por quin votaran, no cuentan con informacin para evaluar a los candidatos como su nombre o afinidad poltica, es decir se tendr un porcentaje de respuestas no s debido a que las personas no recuerdan las alternativas o porque debido al formato de la pregunta les falta informacin para decidir. Por otro lado, la diferencia entre encuestas puede venir por preguntar lo mismo de diferente forma, esto lleva a que se produzcan errores de interpretacin sobre la materia en consulta debido a las palabras utilizadas, a los supuestos hechos o al contexto en que se hace la pregunta; este problema se acrecienta en la medida que las personas tienen menor educacin. En Chile, las principales empresas que hacen encuestas polticas utilizaron en la eleccin presidencial del ao 2005 la siguiente pregunta cerrada o una variacin de sta: Si las elecciones fueran el prximo domingo y los candidatos fueran Sebastin Piera, Joaqun Lavn, Michelle Bachelet y Toms Hirsch, Por quin votara Ud.? Sin embargo, al considerar elecciones de Senadores, Diputados, Alcaldes y Concejales probablemente los problemas enunciados surjan con mayor claridad. En el caso del orden, tambin se ha descubierto que implica cambios en las respuestas de las personas. Por ejemplo, el hacer preguntas previas de ndole poltico como adherencia o simpata partidista, disminuye el umbral relacionado a no decir por quin se votar. As mismo el orden de las alternativas en las preguntas puede implicar un cambio en los resultados, por ejemplo en las elecciones presidenciales del ao 2000 en Estados Unidos se descubri que en aquellas encuestas en que se preguntaba por quin votara y apareca el nombre de Al Gore como primera opcin era menor la diferencia porcentual a favor de George Bush, que en aquellos casos en que apareca el nombre de este ltimo como primera opcin.

Fuentes de error no muestral La utilidad de un estudio de mercado depende de la calidad total de ste, asociada a las etapas de diseo, implementacin y anlisis. Esta utilidad depende de que tan buen estimador de la realidad poblacional sea el estudio realizado, lo que depende del error total asociado al proyecto de investigacin. A su vez, el error total tiene dos grandes componentes: el error muestral y el no muestral.

El error muestral es el inherente a tomar una muestra, es la diferencia entre la medicin tomada de una muestra y la medicin que surgira de la poblacin total. ste disminuye a medida que la muestra aumenta de tamao. El error no muestral es el relacionado a las diferentes etapas de un estudio de mercado. ste aumenta a medida que la muestra aumenta de tamao. En esta seccin nos centraremos en analizar algunos de las razones que implican que haya error no muestral en un estudio y como influyen sobre los resultados. Errores asociados al encuestador Error de pregunta: surge cuando se direcciona la pregunta o se hace de una forma distinta a la del instrumento de medicin. En este caso la informacin recolectada difiere de lo que se buscaba, provocando un sesgo en los resultados. Generalmente, los encuestadores para facilitar a los encuestados la tarea cambian la pregunta o inducen respuestas de acuerdo a las respuestas que han escuchado previamente. Error de registro: Surge por un inapropiado registro de la pregunta, al mal interpretar o no escuchar correctamente la respuesta del encuestado. Error de interferencia: Surge cuando se interfiere o se falla en seguir los procedimientos de recoleccin de datos (inventar respuestas) En el caso de las encuestas polticas, el efecto inhibidor de un encuestador frente a un tema sensible como la simpata/afiliacin poltica o las preferencias de Presidente, puede llevar a que los encuestadores cometan los errores anteriormente descritos, ya sea por lograr un mayor nmero de respuestas a la encuesta, estar sesgados por su propia posicin poltica o terminar su labor rpidamente. Esto implica para las empresas de investigacin una labor especial en cuanto realizar una seleccin adecuada y una capacitacin profunda de los encuestadores, al mismo tiempo de tener mtodos de control que eviten o aminoren el efecto de estos errores. Error de Respuesta Otro error que frecuentemente sucede en las encuestas es el asociado a las respuestas de los encuestados. Este se produce principalmente porque casual o intencionalmente se da una respuesta que no es la que realmente se piensa. Entre las razones que llevan a que un encuestado genere este error se encuentran las siguientes: Preocupacin por la invasin a la privacidad Presin de tiempo y fatiga Distorsin de la respuesta por la bsqueda de prestigio y por la aceptacin social Sesgo de cortesa

Ignorancia, olvido o falta de habilidad para expresarse En pases con una alta participacin ciudadana en las elecciones, las personas tienden a responder en las encuestas que efectivamente votarn e indican intencin de voto por un candidato; sin embargo un porcentaje de estos finalmente no votar y ha respondido slo por un tema de aceptacin social. Por ejemplo, en las elecciones del 2005 en Chile entre primera y segunda vuelta hubo alrededor de 45 mil personas que no votaron, esta situacin no necesariamente era evidente en las encuestas previas, dado que probablemente es mal visto no votar por una razn no justificada los individuos no expresaban su comportamiento futuro en la encuesta. En este caso es ms difcil detectar el problema, razn por la cual es recomendable tener en el cuestionario preguntas filtro o preguntas validadoras de respuestas, de tal forma de identificar a aquellos que mienten u omiten por una u otra razn. En el caso de las encuestas polticas esto es ms importante an, debido a que se busca mostrar la intencin de voto en un momento del tiempo. Encuestas como las realizadas por MORI o el CEP incluyen preguntas que permiten un mejor anlisis de los datos, sin embargo an es necesaria una investigacin ms profunda al respecto. Error de No Respuesta Otra fuente de error muy comn en las encuestas es la no respuesta del cuestionario. Este se puede deber a tres razones: cuando algunos miembros de la muestra no son contactados, cuando algunos no terminan de responder la encuesta o en caso que simplemente no responden a la encuesta (rechazan ser encuestados). En estos casos y dado que se desea alcanzar cierto nmero de encuestas efectivamente realizadas2, los miembros de la muestra que generan este error suelen ser reemplazados por otros. El problema es que a menos que se cuente con informacin suficiente de los miembros de la muestra que nos permita realizar un reemplazo efectivo, probablemente aquellos que responden la encuesta difieran de aquellos que no estn dispuestos a responderla o no los contactamos3, por ende se introduce sesgo en la muestra al no poder ser lo suficientemente representativo de la poblacin. A pesar que con el pre-testeo de un cuestionario y la experiencia es factible estimar cierto nmero de no respuestas, no siempre es posible evaluar el impacto de este sesgo con lo que el problema persiste. En Estados Unidos se ha descubierto que los conservadores son menos propensos a responder encuestas o dar a conocer su intencin de voto. En Chile, se ha dicho que a la luz de los resultados de encuestas anteriores, los votantes de derecha no

2 3

Para tener cierto nivel de error muestral y confianza definidos a priori. Slo por el hecho de no responder se tiene una caracterstica que los diferencia del resto

responderan encuestas o no indicaran su intencin de voto4, sin embargo falta un anlisis ms profundo de este comportamiento para entender las races del problema y sus implicancias.

Comportamiento de los electores El ltimo punto a analizar se refiere al comportamiento de los electores frente a las encuestas polticas. La pregunta clave es como influyen las encuestas en el comportamiento de las personas que votan: influencian voto o no, incentivan a votar o no. Se ha analizado en diversos estudios la posibilidad de la existencia de dos efectos sobre los votantes al conocer los resultados de una encuesta poltica: efecto Bandwagon y efecto Underdog. El primero dice relacin con la posibilidad que las personas se vean influenciadas en su voto por los resultados de la encuesta de tal forma que voten por el que va ganando. El segundo caso es el inverso, ante la percepcin de debilidad de un candidato los votos se vuelcan hacia l como apoyo al ms dbil. El segundo caso ha sido ms difcil de establecer en las diferentes investigaciones realizadas, pero en el caso del efecto Bandwagon se han visto estudios que avalan la existencia de ste. De hecho, se ha analizado a travs de la teora de la consistencia cognitiva que aquellos individuos con actitudes ms dbiles (a favor o en contra) hacia los candidatos son ms afectados que aquellos que poseen una mayor consistencia y claridad en su actitud. El efecto que se produce es que aquellos individuos afectados tendern a cambiar su actitud, expectativas y preferencias en forma favorable hacia aquel candidato que lidere las encuestas, conformando un comportamiento consistente. En Chile se estima un voto duro para la derecha o la izquierda de alrededor de un 30% para cada uno, de esta forma queda un 40% en juego, del cual cierto porcentaje podra verse afectado por los resultados de las encuestas polticas. Es decir, aquellas personas indecisas en un momento del tiempo, menos informadas y con niveles de actitud bajos hacia cualquier candidato podran estar decidiendo su voto, entre otras variables, de acuerdo a los resultados de las encuestas. Por otro lado, las encuestas tambin ejercen un efecto sobre la motivacin de votar. Como se ha visto en estudios internacionales, en ocasiones al ver una eleccin muy cerrada las personas se motivan por ir a votar, en cambio en casos en que hay un ganador claro los votantes pueden verse influenciados a no votar. En Chile, existen ciertas condiciones definidas por la ley que excusan a una persona de no presentarse a una votacin, razn por la cual los niveles de votacin son altos; sin embargo, el esperar un claro ganador igualmente podra motivar a no votar por un sentimiento de que el voto no afectar los resultados, provocando un aumento de las excusas
4

Aprender a Leer las Encuestas, Temas Pblicos N 736, Agosto 2005, Instituto Libertad y Desarrollo

permitidas por la ley para no hacerlo (ejemplo: estar a ms de 200 kilmetros del lugar de votacin). Una posible razn para la cada en 45 mil votantes para la segunda vuelta del 2005 en Chile puede haber sido que algunos individuos sentan que no vala la pena votar pues el ganador estaba claro y su voto no cambiaba nada (a favor, en contra o nulo/blanco).

Conclusiones Para responder la pregunta sobre si las encuestas son capaces de predecir el resultado de una eleccin se debe concluir que: 1. Los resultados de las encuestas se mueven dentro de ciertos parmetros establecidos en las definiciones metodolgicas. Siempre es necesario conocer stas y el propsito del estudio en cuestin para poder leer los resultados, entender qu se buscaba y evaluar la mayor o menor certeza de lo expuesto en el estudio. 2. Existen muchos factores inherentes a las encuestas que pueden hacer diferir los resultados entre stas (propsito, metodologa, errores no muestrales, comportamiento de los electores, etc.); sin embargo, no se debe dejar de considerar que son un instrumento de medicin que mide la situacin en un momento del tiempo especfico y no predicen lo que pasar en el futuro (semanas, meses o aos despus). El futuro se ve afectado por diversos factores que no pueden ser considerados a priori y las encuestas no pueden ser consideradas dentro de la futurologa. 3. A pesar que las encuestas consideran cierto nivel de error muestral, existen otros factores relacionados al diseo, implementacin y anlisis de la investigacin que afectan los resultados, esto son los llamados errores no muestrales. Estos a pesar de tratar de ser controlados o considerados de alguna manera son muy difciles o imposibles de estimar o medir, por lo cual el error total de una encuesta es mayor al error muestral estimado. 4. Finalmente, un futuro cambio en el sistema electoral chileno debe considerar los efectos de las encuestas sobre el comportamiento de las personas de tal forma de velar por una participacin ciudadana representativa de la opinin nacional y que no incentive la no votacin.