{"id":30863240,"date":"2020-11-17T11:29:51","date_gmt":"2020-11-17T10:29:51","guid":{"rendered":"https:\/\/www.upo.es\/diario\/?p=30863240"},"modified":"2020-11-17T11:29:51","modified_gmt":"2020-11-17T10:29:51","slug":"encuestas-en-internet-cuidado-con-los-sesgos-y-margenes-de-error","status":"publish","type":"post","link":"https:\/\/www.upo.es\/diario\/theconversation\/2020\/11\/encuestas-en-internet-cuidado-con-los-sesgos-y-margenes-de-error\/","title":{"rendered":"Encuestas en Internet: cuidado con los sesgos y m\u00e1rgenes de error"},"content":{"rendered":"
\"pantalla<\/a>
Shutterstock \/ one photo<\/figcaption><\/figure>\n

Luis Navarro Ardoy<\/a>, Universidad Pablo de Olavide<\/a><\/em><\/p>\n

Las redes sociales han tra\u00eddo en cuesti\u00f3n de poco tiempo una profunda transformaci\u00f3n social que tambi\u00e9n ha impactado, y mucho, en la forma de hacer investigaci\u00f3n social basada en encuestas. Con su llegada se han modificado nuestros h\u00e1bitos de vida, de consumo y de compra, tres cuestiones cuyo an\u00e1lisis siempre ha interesado a las empresas demosc\u00f3picas.<\/p>\n

Cada vez hay m\u00e1s encuestas online<\/em>, especialmente las que se realizan a trav\u00e9s de las redes sociales. Pero la relativa facilidad para encontrar un amplio universo (n\u00famero de personas participantes) no debe hacernos olvidar otros muchos factores a tener en cuenta para valorar su precisi\u00f3n.<\/p>\n

Hay dos cuestiones capitales a la hora de valorar los resultados de una encuesta: el modo de preguntar y su ficha t\u00e9cnica. En cuando a lo primero, no es lo mismo hacer una pregunta de manera imparcial que hacerlo incitando a una determinada respuesta. En cuanto a lo segundo, no es lo mismo preguntar a 51 personas que a 10\u00a0000, ni que la muestra contenga un nivel de error despreciable o grueso como el culo de una botella.<\/p>\n

Es fundamental dar a conocer, siempre que se publiquen datos de una encuesta, la ficha t\u00e9cnica y el literal de la pregunta. Es un ejercicio indispensable de transparencia.<\/p>\n

El diablo est\u00e1 en la pregunta<\/h3>\n

El cuestionario es el instrumento de medida en los estudios basados en encuestas. En \u00e9l est\u00e1n las preguntas que se le hacen a la poblaci\u00f3n objeto de estudio para conocer su opini\u00f3n y comportamiento con respecto a distintas cuestiones, desde la valoraci\u00f3n de su estado de salud y de la pandemia actual a sus h\u00e1bitos de compra y consumo de alcohol, por ejemplo.<\/p>\n

Las preguntas suelen ser cortas y las opciones de respuesta cerradas. Esto \u00faltimo significa que hay que responder alguna de las opciones de respuesta que est\u00e1n prefijadas (s\u00ed, no, mucho, poco, nada) y que no hay espacio ni para la divagaci\u00f3n ni para explayarse.<\/p>\n

El problema mayor est\u00e1 en la formulaci\u00f3n de las preguntas. As\u00ed, por ejemplo, si hoy leo en un peri\u00f3dico que el 70% de ciudadanos valora bien la gesti\u00f3n del Gobierno de Espa\u00f1a sobre la pandemia, es justo reconocer que ese titular debe ir acompa\u00f1ado en alg\u00fan momento del literal de la pregunta (es decir, de la pregunta tal y como se formul\u00f3 a los encuestados) para saber c\u00f3mo se ha preguntado a la ciudadan\u00eda.<\/p>\n

Ejemplo 1. En general, \u00bfpodr\u00eda decirme c\u00f3mo valora la gesti\u00f3n del Gobierno en Espa\u00f1a con respecto a la pandemia actual? \u00bfMuy bien, bien, regular, mal o muy mal?<\/em><\/p>\n

Ejemplo 2. En general, sabiendo que estamos en una situaci\u00f3n muy complicada a nivel mundial, \u00bfcree que el Gobierno de Espa\u00f1a est\u00e1 gestionando bien la pandemia actual? \u00bfS\u00ed o No?<\/em><\/p>\n

Aunque en los dos ejemplos se trata de una pregunta de gesti\u00f3n del Gobierno, las respuestas ser\u00e1n distintas dependiendo de si utilizamos la pregunta del ejemplo 1 o de la 2. El a\u00f1adido al inicio del enunciado en la pregunta del ejemplo 2 aporta informaci\u00f3n extra con la intenci\u00f3n de obtener de la ciudadan\u00eda respuestas positivas a la buena gesti\u00f3n sobre la pandemia del Gobierno.<\/p>\n

\"\"<\/a>
Mar\u00eda Sabater<\/a>, Author provided<\/span><\/span><\/figcaption><\/figure>\n

La ficha t\u00e9cnica<\/h3>\n

En el entramado t\u00e9cnico de una encuesta se recoge lo que se conoce como \u201cficha t\u00e9cnica\u201d. Debe contener informaci\u00f3n b\u00e1sica acerca de c\u00f3mo ha sido dise\u00f1ada la encuesta, y sobre el trabajo de campo. Como m\u00ednimo, fechas de realizaci\u00f3n de la encuesta, nivel de error y tama\u00f1o de la muestra o n\u00famero de personas encuestadas. No solo es importante saber si se pregunt\u00f3 a 500 personas o a 1\u00a0000. Tambi\u00e9n es relevante si se hizo en horario de ma\u00f1ana o durante los fines de semana.<\/p>\n

De la misma manera que dudar\u00edamos a la hora de comprar un coche de segunda mano si el vendedor nos lo entrega sin su ficha t\u00e9cnica, o lo entrega sin informaci\u00f3n del n\u00famero de kil\u00f3metros ni de la fecha de compra, en el caso de una encuesta debemos dudar de los resultados si lo que se publica no va acompa\u00f1ado de su correspondiente ficha t\u00e9cnica.<\/p>\n

Cantidad no es calidad<\/h3>\n

Los estudios basados en encuestas online<\/em> suelen enviar de forma masiva los cuestionarios a trav\u00e9s de anuncios en p\u00e1ginas web y redes sociales o a trav\u00e9s de listas de direcciones electr\u00f3nicas, con un coste relativamente bajo. En ocasiones, esto permite obtener un amplio n\u00famero de respuestas, justificando con este \u00fanico criterio la calidad y la representatividad de los datos.<\/p>\n

Esto no deber\u00eda ser as\u00ed, y hay evidencias que lo demuestran. Como mencionan trabajos recientes<\/a> en este campo, esta estrategia puede conllevar un sesgo de selecci\u00f3n que comprometa notablemente los resultados obtenidos.<\/p>\n

Estos autores dise\u00f1aron un cuestionario y lo aplicaron en una encuesta online<\/em> y en otra telef\u00f3nica. Ambos cuestionarios eran id\u00e9nticos y el tema era la opini\u00f3n sobre la eutanasia y el suicidio asistido y su regulaci\u00f3n. El cuestionario pod\u00eda ser cumplimentado en la misma llamada telef\u00f3nica u online<\/em>.<\/p>\n

La primera gran diferencia fue que en la encuesta online<\/em>, el porcentaje de personas que finalmente respondi\u00f3 fue muy reducido, del 10,4%, frente al 87,8% en la encuesta telef\u00f3nica.<\/p>\n

La segunda diferencia fue que en la encuesta online<\/em>, frente a la telef\u00f3nica, se obtuvieron con mayor frecuencia opiniones en contra de la regulaci\u00f3n de la eutanasia. En concreto, hubo un 14,9% de personas que respondieron estar en contra de la regulaci\u00f3n de la eutanasia, frente al 10,1% que manifestaron esa opini\u00f3n en la encuesta telef\u00f3nica. Adem\u00e1s, la estrategia online<\/em> describe un menor porcentaje de personas que no se posiciona o no tiene una opini\u00f3n definida en el caso del suicidio asistido. En la encuesta telef\u00f3nica, el 5,4% manifiesta no saber o no tener una opini\u00f3n definida, frente al 1,9% en el caso online<\/em>.<\/p>\n

Este estudio muestra que la estrategia de muestreo online<\/em> puede generar sesgos en los resultados. En concreto, sobrestima el porcentaje de personas contrarias a la regulaci\u00f3n de la eutanasia, as\u00ed como el de personas con opiniones extremas. Por el contrario, infraestima el peso de las personas indecisas o con opiniones m\u00e1s intermedias.<\/p>\n

Este hecho puede atribuirse a que las personas con opiniones m\u00e1s definidas y extremas pueden mostrarse m\u00e1s proclives a contestar una encuesta online<\/em> que las personas con opiniones menos extremas o menos definidas, a las que el cuestionario online<\/em> puede generar menos inter\u00e9s.<\/p>\n

Los sesgos, malos compa\u00f1eros<\/h3>\n

Un ejemplo reciente lo tenemos el pasado 12 de octubre cuando se publicaron los resultados de una encuesta online<\/em> sobre la monarqu\u00eda en Espa\u00f1a financiada a trav\u00e9s de crowdfuding<\/em>. Un esfuerzo independiente por pulsar la opini\u00f3n p\u00fablica respecto a un asunto, la monarqu\u00eda en Espa\u00f1a, sobre el que el CIS dej\u00f3 de preguntar hace cinco a\u00f1os.<\/p>\n

En un bloque de \u201ccosas que la gente dice sobre la monarqu\u00eda\u201d se inclu\u00edan una serie de proposiciones sobre las que el encuestado deb\u00eda elegir una de estas tres opciones: \u201cNo lo s\u00e9\u201d, \u201cM\u00e1s bien de acuerdo\u201d o \u201cM\u00e1s bien en desacuerdo\u201d.<\/p>\n

Sin embargo, algunas de estas proposiciones ten\u00edan un sesgo: de la manera en que estaban formuladas, tend\u00edan a forzar respuestas positivas por parte de los encuestados. En estos casos, hacia el \u201cm\u00e1s bien de acuerdo\u201d:<\/p>\n

La monarqu\u00eda es una instituci\u00f3n de otros tiempos: no tiene sentido en una democracia.<\/em><\/p>\n

Para lo que aporta, el coste de la monarqu\u00eda es desproporcionado.<\/em><\/p>\n

Otras maneras de introducir sesgos pueden ser ocultar parte de las preguntas o presentar un dise\u00f1o incorrecto que no permite visualizar el texto en la pantalla del tel\u00e9fono m\u00f3vil.<\/p>\n

En suma, aunque es de agradecer el esfuerzo para contribuir en el an\u00e1lisis de cuestiones de actualidad, y desde un escrupuloso respeto, hay que advertir que, si se contin\u00faa con los usos inadecuados de medici\u00f3n, se va a producir una aut\u00e9ntica masacre<\/em> de quienes nos dedicamos a la investigaci\u00f3n mediante encuesta.<\/p>\n

Lamentablemente, los resultados de muchas encuestas online est\u00e1n basados en respuestas que no son representativas de la poblaci\u00f3n porque no han seguido ning\u00fan criterio para la selecci\u00f3n de las personas a encuestar. En ellas parece prevalecer la urgencia de datos y da igual si quienes responden representan o no a quienes tienen que hacerlo, que es a una muestra representativa de la poblaci\u00f3n objeto de estudio.<\/p>\n

Luis Navarro Ardoy<\/a>, Profesor de Sociolog\u00eda, Universidad Pablo de Olavide<\/a><\/em><\/p>\n

Este art\u00edculo fue publicado originalmente en The Conversation<\/a>. Lea el original<\/a>.
\n\"The<\/p>\n","protected":false},"excerpt":{"rendered":"

Luis Navarro Ardoy, Universidad Pablo de Olavide Las redes sociales han tra\u00eddo en cuesti\u00f3n de poco tiempo una profunda transformaci\u00f3n social que tambi\u00e9n ha impactado, y mucho, en la forma de hacer investigaci\u00f3n social basada en encuestas. Con su llegada se han modificado nuestros h\u00e1bitos de vida, de consumo y de compra, tres cuestiones cuyo an\u00e1lisis siempre ha interesado a[Read More…]<\/a><\/p>\n","protected":false},"author":6,"featured_media":30863241,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"footnotes":""},"categories":[5390],"tags":[1972,480,7066,104],"class_list":["post-30863240","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-theconversation","tag-encuestas","tag-internet","tag-luis-navarro-ardoy","tag-sociologia"],"_links":{"self":[{"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/posts\/30863240","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/users\/6"}],"replies":[{"embeddable":true,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/comments?post=30863240"}],"version-history":[{"count":4,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/posts\/30863240\/revisions"}],"predecessor-version":[{"id":30863245,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/posts\/30863240\/revisions\/30863245"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/media\/30863241"}],"wp:attachment":[{"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/media?parent=30863240"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/categories?post=30863240"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.upo.es\/diario\/wp-json\/wp\/v2\/tags?post=30863240"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}