Investigando el 'giro' en revistas científicas
Un estudio reciente investigó el "giro" en los trabajos de investigación en psiquiatría y psicología. Los autores del estudio encontraron un giro en más de la mitad de los resúmenes que analizaron.¿Qué impacto podría tener esto en las decisiones de los médicos?
A medida que los medios de comunicación compiten por las vistas, a veces pueden exagerar los titulares y el contenido para atraer al lector.
Aunque muchos creen que las revistas científicas son algunas de las fuentes de información más confiables, no son inmunes al deseo de ser leídas y compartidas.
Un estudio reciente se propuso evaluar cuánto "giro" los autores usaban en los resúmenes de trabajos de investigación publicados en revistas de psicología y psiquiatría.
Eligieron mirar los resúmenes porque resumen todo el artículo, y los médicos a menudo los usan para ayudar a informar las decisiones médicas.
¿Qué es el giro?
En este estudio, los autores describen su definición de giro de la siguiente manera:
"[E] l uso de estrategias de informes específicas, por cualquier motivo, para resaltar que el tratamiento experimental es beneficioso, a pesar de una diferencia estadísticamente no significativa para el resultado primario, o para distraer al lector de resultados estadísticamente no significativos".
Los autores publicaron sus hallazgos en la revista Medicina basada en evidencia BMJ. Examinaron artículos de las seis principales revistas de psiquiatría y psicología de 2012 a 2017.
Las revistas incluidas Psiquiatría JAMA, la Revista estadounidense de psiquiatría, y el Revista británica de psiquiatría.
Específicamente, los investigadores se centraron en ensayos controlados aleatorios con "criterios de valoración primarios no significativos". El criterio de valoración principal de un estudio es el resultado principal del estudio, y "no significativo" en este contexto significa que, estadísticamente, el equipo no encontró suficiente evidencia para respaldar su teoría.
Spin viene en muchas formas, que incluyen:
- Informar de manera selectiva los resultados, en los que los autores solo mencionan ciertos resultados.
- P-hacking, en el que los investigadores ejecutan una serie de pruebas estadísticas pero solo publican las cifras de las pruebas que producen resultados significativos
- uso inapropiado o engañoso de medidas estadísticas
¿Qué tan común es el giro?
En total, analizaron los resúmenes de 116 artículos. De estos, el 56% mostró evidencia de giro. Esto incluyó el giro en el 2% de los títulos, el 21% de las secciones de resultados del resumen y el 49% en las secciones de conclusión del resumen. En el 15% de los artículos, el giro estuvo presente tanto en las secciones de resultados como en las de conclusión de los resúmenes.
Los investigadores también investigaron si la financiación de la industria estaba asociada con el giro. Quizás sorprendentemente, no encontraron evidencia de que tener el respaldo financiero de la industria aumentara la probabilidad de giro.
Los hallazgos son preocupantes. Aunque el giro en los medios de comunicación en general es preocupante en sí mismo, los médicos utilizan artículos de investigación para ayudar a orientar las decisiones clínicas. Como escriben los autores:
"Los investigadores tienen la obligación ética de informar de manera honesta y clara los resultados de su investigación". Sin embargo, en la sección de resúmenes, los autores pueden elegir los detalles que incluyen. A los autores del estudio actual les preocupa lo que esto podría significar para los médicos:
“Agregar un giro al resumen de un artículo puede inducir a error a los médicos que intentan sacar conclusiones sobre un tratamiento para pacientes. La mayoría de los médicos leen solo el resumen del artículo la mayor parte del tiempo ".
Las implicaciones
Aunque los investigadores no han investigado los efectos del giro en profundidad, los autores señalan un estudio que recalca su punto.
En él, los científicos recopilaron resúmenes del campo de la investigación del cáncer. Todos fueron ensayos controlados aleatorios con un resultado primario estadísticamente no significativo. Todos los resúmenes incluyen giro.
Los investigadores crearon segundas versiones de estos resúmenes en las que eliminaron el giro. Reclutaron a 300 oncólogos como participantes. Los investigadores dieron a la mitad de ellos un resumen original con giro, y le dieron a la otra mitad el resumen sin giro.
Es preocupante que los médicos que leyeron los resúmenes con giro calificaron la intervención cubierta en el documento como más beneficiosa.
Como escriben los autores del artículo de estudio reciente: “Aquellos que escriben manuscritos de ensayos clínicos saben que tienen una cantidad limitada de tiempo y espacio para captar la atención del lector. Es más probable que se publiquen resultados positivos, y muchos autores de manuscritos han recurrido a prácticas de informes cuestionables para embellecer sus resultados ".
Otro estudio, publicado en 2016, amplía el alcance de este tema. Investigaron cómo los revisores pares, científicos experimentados que examinan los artículos antes de su publicación, influyeron en el giro. Descubrieron que en el 15% de los casos, el revisor de pares les pidió a los autores que añadieran un giro.
El estudio actual tiene algunas limitaciones. Por ejemplo, estos hallazgos pueden no aplicarse a otras revistas o campos de investigación. También señalan que identificar el giro es un esfuerzo subjetivo y, aunque emplearon dos extractores de datos independientes, hay margen de error.
Aún está por verse el tamaño exacto del problema del giro en la investigación médica, pero los autores concluyen que “[a] os autores, editores de revistas y revisores deben seguir vigilando el giro para reducir el riesgo de informes sesgados de los resultados de los ensayos. "
