Resumen

El uso de estudios basados en encuestas online se ha extendido de manera notable. A pesar de tener tasas de respuesta especialmente pequeñas, permiten obtener con facilidad un gran tamaño de muestra. Sin embargo, esta estrategia puede conllevar un sesgo de selección que comprometa notablemente los resultados. Se comparan los resultados de dos encuestas sobre la regulación de la eutanasia y el suicidio asistido, unaonlinecon muestra autoseleccionada y la otra con muestreo aleatorio, realizadas en 2018 entre los/las colegiados/as del Colegio de Médicos de Bizkaia. Las tasas de respuesta fueron del 10,4% (encuesta online) y del 87,8% (encuesta aleatoria). No se encontraron diferencias en las características sociodemográficas, aunque sí en las de opinión, de manera que el porcentaje de personas contrarias a la regulación de la eutanasia estaba sobrestimado. Los resultados de este estudio muestran que dicha estrategia de muestreo genera sesgos en los resultados, alguno de ellos difícilmente detectable y reparable.

Palabras clave:
Encuesta online; Tamaño muestral; Tasa de respuesta; Sesgo Eutanasia

Abstract

The use of studies based on online surveys has expanded significantly. Despite having particularly small response rates, they allow a large sample size to be easily obtained. However, this strategy may entail a selection bias that significantly compromises the results. The results of two surveys on the regulation of euthanasia and assisted suicide are compared. One is an online survey with a self-selected sample and the other a survey with random sampling, conducted in 2018 among the members of the Medical Association of Bizkaia. The response rates were 10.4% (online survey) and 87.8% (random survey). No differences were found in sociodemographic characteristics, although there were differences in the opinion variables, so that the percentage of people who opposed euthanasia regulation was overestimated. The results of this study show that this sampling strategy generates biases in the results, some of which are difficult both to detect and to repair.

Keywords:
Online survey; Sample size; Response rate; Bias; Euthanasia

Introducción

Los cambios tecnológicos y la amplia penetración de tecnologías como Internet han conllevado una profunda transformación social que también ha impactado notablemente en las formas y las metodologías de la investigación. En el caso de los estudios basados en encuestas, los cuestionarios online hacen posible obtener un amplio número de respuestas con un coste relativamente bajo, ya que permiten el envío masivo de cuestionarios a través de anuncios en páginas web o listas de direcciones electrónicas que en ocasiones pueden cubrir a toda la población objeto de estudio¹1. Díaz de Rada V. Ventajas e inconvenientes de la encuesta por internet. Pap Rev Sociol. 2012;97:193.^-22. Fricker S, Galesic M, Tourangeau R, et al. An experimental comparison of web and telephone surveys. Public Opinion Quarterly. 2005;69:370-92.. Así, su uso se ha popularizado porque, a pesar de tener tasas de respuesta especialmente pequeñas³3. Fan W, Yan Z. Factors affecting response rates of the web survey: a systematic review. Comput Human Behav. 2010;26:132-9., permiten obtener un tamaño de muestra elevado⁴4. Duffy B, Smith K, Terhanian G, et al. Comparing data from online and face-to-face surveys. Int J Mark Res. 2005;47:615-39.. En ocasiones, este último aspecto es el único considerado para evaluar la calidad y la representatividad de los datos obtenidos. Sin embargo, esta estrategia puede conllevar un sesgo de selección que comprometa notablemente los resultados obtenidos.

El objetivo del presente estudio es analizar los resultados de una encuesta realizada siguiendo esta estrategia frente a los resultados utilizando un muestreo aleatorio.

Método

Se comparan los resultados de dos encuestas realizadas entre octubre y noviembre de 2018 entre los/las colegiados/as del Colegio de Médicos de Bizkaia (N=7754). Las dos personas autoras del presente artículo colaboraron en el diseño del muestreo, pero no realizaron el trabajo de campo (que llevó a cabo el Colegio de Médicos de Bizkaia) ni tuvieron acceso a datos personales. En la primera encuesta, a toda la población objeto de estudio de la que se disponía de dirección (90%) se envió un correo electrónico invitando a participar en el estudio a través de un link, y las respuestas fueron recogidas a través de una página web. Se obtuvo una muestra de n=709 colegiados/as. En la segunda, se seleccionó mediante muestreo aleatorio simple una muestra de individuos, n=382, pertenecientes a la población objeto de estudio, con los que se contactó telefónicamente para realizar la encuesta. El error muestral fue de±5,0% (suponiendo p=q=0,5) y un margen de confianza del 95%. El cuestionario podía ser cumplimentado en la misma llamada telefónica u online. Ambos cuestionarios eran idénticos y el tema era la opinión sobre la eutanasia y el suicidio asistido y su regulación. Las variables de interés se han descrito a partir de la frecuencia absoluta y relativa (n, %), y según el tipo de encuesta. Los resultados se han comparado mediante la prueba estadística de ji al cuadrado, con un nivel de significación de 0,05, y a partir del análisis de los residuos ajustados estandarizados.

Resultados

Las tasas de respuesta fueron del 10,4% en la encuesta online y del 87,8% en la encuesta aleatoria. Las características sociodemográficas de ambas encuestas se presentan en la Tabla 1. No hay apenas diferencias entre las dos encuestas en las variables sociodemográficas; únicamente en la edad hay menos proporción de mayores de 71 años en la encuesta online, aunque las diferencias en esta variable no fueron estadísticamente significativas.

En la Tabla 2 se presenta la distribución de respuestas a las preguntas sobre la posible regulación de la eutanasia y del suicidio asistido. En este caso sí se encuentran diferencias significativas entre ambas estrategias muestrales, tanto si la pregunta se categoriza en cinco categorías como si se agrupa en tres. La estrategia online describe un mayor porcentaje en contra de la regulación de la eutanasia, en concreto 4,8 puntos mayor (un 47,5% más), así como un menor porcentaje que no se posiciona o no tiene una opinión definida en el caso del suicidio asistido. En el muestreo aleatorio, el 5,4% manifiesta no saber o no tener una opinión definida, frente al 1,9% en el caso del muestreo online. Además, aunque de manera no significativa, se detecta una mayor tendencia dentro del muestro online a las opiniones más extremas; en todos los casos, el porcentaje que manifestaba una opinión extrema (sí o no) era mayor en el muestro online, sobre todo a favor del suicidio asistido y en contra de la regulación de la eutanasia, donde la diferencia roza la significación estadística.

Conclusiones

El envío online masivo de cuestionarios ayuda a obtener una muestra amplia con pocos recursos. Sin embargo, los resultados de este estudio muestran que esta estrategia de muestreo genera sesgos en los resultados. En concreto, en nuestro caso, sobrestima el porcentaje de personas contrarias a la regulación de la eutanasia, así como el de personas con opiniones extremas. Por el contrario, infraestima el peso de las personas indecisas o con opiniones más intermedias. Este hecho puede atribuirse a que las personas con opiniones más definidas y extremas pueden mostrarse más proclives a contestar una encuesta que las personas con opiniones menos extremas o menos definidas, a las que el cuestionario puede generar menos interés.

Nuestros resultados coinciden con los señalados por otros autores²2. Fricker S, Galesic M, Tourangeau R, et al. An experimental comparison of web and telephone surveys. Public Opinion Quarterly. 2005;69:370-92. y tienen importantes implicaciones para la investigación debido a varios aspectos; en primer lugar, por la magnitud de las diferencias en los resultados de una y otra estrategia. En este punto hay que tener en cuenta que una de las principales limitaciones del estudio es trabajar con una muestra aleatoria pequeña, pero que a pesar de ello presenta diferencias significativas. Segundo, el hecho de que estos resultados se produzcan en una población muy homogénea en la que existe un acceso y un uso generalizado de las tecnologías. Así, las diferencias de magnitud podrían ser mayores en otras poblaciones en las que se uniría el sesgo provocado por errores de cobertura derivados del acceso a las tecnologías. Tercero, las diferencias en las variables resultado se producen a pesar de no haber obtenido diferencias en las variables socioeconómicas. Esto supone que sea un sesgo difícilmente detectable y también difícilmente reparable. Y es que si se comparan las características socioeconómicas de la muestra autoseleccionada con las de la población objeto de estudio no se perciben diferencias, lo que puede llevar a pensar que la muestra es representativa. Además, es difícilmente reparable, ya que la estrategia clásica de ponderación de la muestra según variables socioeconómicas para alcanzar la estructura de la población no solucionaría el sesgo en la distribución de las variables resultado.

Por último, se trata de un error poco considerado al diseñar la investigación y evaluar los posibles sesgos de la estrategia. A pesar de que los estudios por encuesta conllevan varios tipos de error⁵5. Wills G. Cognitive interviewing: a tool for improving questionnaire design. Thousand Oaks: Sage Publications; 2005.^-66. Martín U, González-Rábago Y. Metodología cualitativa para enfocar la mirada cuantitativa: la experiencia de los pretest cognitivos aplicados a la Encuesta de Salud del País Vasco. Empiria Rev Metodol Ciencias Soc. 2019;0:137-58., son los errores de muestreo, y en concreto los derivados de utilizar un determinado tamaño de muestra, los que se tienen más en cuenta, hasta el punto de ser considerada en ocasiones la única fuente de error⁷7. Castillo M. Utilidad de los métodos de pretest para la evaluación de los cuestionarios en la investigación mediante encuesta. 2009. Tesis doctoral. Granada: Universidad de Granada; 2009.. Por ello, al evaluar un estudio que sigue este tipo de estrategia de muestreo, a pesar del tamaño de la muestra, es necesario considerar otro tipo de errores.

Agradecimientos

Al Colegio de Médicos de Bizkaia por haber facilitado la realización del presente estudio.

Bibliografía

Fechas de Publicación

Histórico