cómo un adolescente interrumpió miles de estudios científicos con un solo video

Muchos investigadores tuvieron que desechar miles de datos recopilados en estudios científicos debido a un video de TikTok de 56 segundos hecho por una adolescente en julio. Cómo es posible ?

Hasta hace unos años, toda la investigación en ciencias sociales se realizaba en el laboratorio. Luego tuvo que traer miles de temas diferentes para enviar cuestionarios y otras encuestas. Este campo de estudio comenzó a evolucionar en 2005 con la plataforma de investigación Mechanical Turk, propiedad de Amazon, desarrollada originalmente para estudiar el trabajo de crowdsourcing en tareas repetitivas. Poco después de su lanzamiento, los científicos finalmente se dieron cuenta de su valor potencial para la investigación conductual en línea.

Desde entonces, han surgido otras plataformas de este tipo, incluido el sitio Prolific, en el que se basa el Behavioral Lab de la Universidad de Stanford. Es este sitio el que nos interesa hoy.

Desequilibrio demográfico

El video del 23 de julio dura menos de un minuto. El contenido comienza con Sarah Frank, una recién graduada de la escuela secundaria de Florida, sentada en su habitación frente a la cámara. ” Bienvenido a las actividades paralelas que recomiendo probar: primera parteElla dijo entonces, señalando a los usuarios al sitio web Prolific. “Básicamente, se trata de un montón de encuestas para diferentes cantidades de dinero y diferentes períodos de tiempo”..

Este video fue visto más de cuatro millones de veces en el mes posterior a su publicación y ha enviado a decenas de miles de nuevos usuarios al sitio. Problema: la plataforma no ofrecía herramientas específicas para garantizar que proporcionara a los investigadores muestras de población representativas en cada estudio.

Como resultado, los científicos acostumbrados a obtener una amplia gama de perfiles para sus estudios han visto sus encuestas inundado con respuestas de mujeres jóvenes de la edad de Sarah Frank. E inevitablemente, esto sesga los resultados.

En los días y semanas posteriores a la publicación de este video, los investigadores lucharon por comprender este desequilibrio.

“Hemos notado un gran salto en el número de participantes en la plataforma en el grupo estadounidense, de 40.000 a 80.000”., escribe en particular un miembro del Laboratorio de Conducta de Stanford. “Lo que es bueno, sin embargo, ahora muchos de nuestros estudios tienen un sesgo de género donde quizás el 85% de los participantes son mujeres. Además, la edad media ronda los 21 ”.

Fue Hannah Schechter, psicóloga de Wayne State, quien finalmente aisló la “fuente” de este desequilibrio en los datos: el video de Sarah Frank, confiando en particular en la viralidad y el momento de su publicación, y en el perfil de sus suscriptores. .

@sarahndom

¡¡Estoy emocionado por esta serie !! #sidehustles #sarahssidehustles #prolific #makingmoney #sidehustleideas

♬ sonido original – sarah 🙂

Miles de estudios comprometidos

Quienes se ofrecen a responder a los estudios ofrecidos por Prolific durante varios años se han quejado en Reddit de que el video de TikTok ha dificultado la búsqueda de encuestas pagadas en la plataforma. “Este es solo otro sitio de mierda en el que pasar horas y ganar dinero” , escribe un usuario en particular.

Frank, quien estimó que ganó alrededor de $ 80 tomando encuestas en Prolific antes de su video, dijo El bordeque ella también había notado una diferencia en la plataforma.“Recibí algunos comentarios realmente desagradables acusándome de arruinar el sitio por mi cuenta y de ser egoísta”..

Sarah Franck, obviamente, no tenía malas intenciones. También predice que muchos de sus suscriptores que se registraron después de ver su video se olvidarán de ella en cuestión de semanas. Mientras tanto, el cofundador y director técnico de la plataforma, Phelim Bradley, estima que aproximadamente 4.600 estudios se han visto comprometidos por este video de TikTok, o un tercio del total de estudios activos en el momento de su publicación.

Desde entonces, Prolific ha reembolsado a los investigadores cuyos estudios se vieron significativamente afectados por el aumento en el número de mujeres que participaron en las encuestas. El sitio también introdujo nuevas herramientas de evaluación demográfica y estableció un equipo de equilibrio para reconocer y responder más rápidamente a este tipo de problema en el futuro.


.