Fraude científico (y V). Resumen y conclusiones

Joaquín Sevilla

Figura 1. Resumen esquemático del modelo propuesto para analizar el fraude. Los comportamientos cuestionables forman un continuo sin fronteras definidas en el que hay un umbral aceptable. Ese umbral se puede empujar o saltar dando lugar a dos tipos de fraude. Las prácticas cuestionables masivas están en el entorno del umbral aceptable, quedando un número mucho más reducido de auténticas manzanas podridas.

Figura 1. Resumen esquemático del modelo propuesto para analizar el fraude. Los comportamientos cuestionables forman un continuo sin fronteras definidas en el que hay un umbral aceptable. Ese umbral se puede empujar o saltar dando lugar a dos tipos de fraude. Las prácticas cuestionables masivas están en el entorno del umbral aceptable, quedando un número mucho más reducido de auténticas manzanas podridas.

El fraude científico existe, existe desde siempre y hay casos entre los científicos más famosos. Desde Ptolomeo hasta la actualidad, pasando por Mendel, Galileo o el hombre de Pitdown, los casos son innumerables. Y no son algunos casos anecdóticos, según estudios realizados entre el 66% y el 72% de los científicos admite realizar algún tipo de malas prácticas y uno de cada 50 admite falsificar o inventar resultados. Lamentablemente no existe un método científico normativo ni ninguna otra característica que proporcione criterios de demarcación definidos entre lo que es científico y lo que no lo es.

La idea de que la mayoría de los científicos son honestos y hay unas pocas manzanas podridas es demasiado simplista. Es necesario un modelo más elaborado que comienza por mostrar todo un continuo de comportamientos inadecuados en el que no es fácil colocar un umbral que delimite las manzanas sanas de las podridas. De hecho, y siguiendo los trabajos de Dan Ariely, podemos establecer la existencia de un umbral de deshonestidad aceptable tanto por el individuo como por la comunidad.

Se pueden identificar dos tipos de fraude: el movido por el deseo de descubrimiento (tipo 1) y el derivado de la presión profesional (tipo 2). En el primero el científico empuja progresivamente el umbral de lo aceptable, manteniendo una autopercepción de honorabilidad mientras que en el segundo se salta el umbral a conciencia. Contribuyen al de tipo 2, menos interesante intelectualmente, presiones externas como la necesidad de publicación e internas como la vanidad. El de tipo 1, más consustancial al avance científico, se produce cuando se explora sin éxito los bordes del paradigma vigente (en términos de Kuhn) e incluye la ciencia patológica.

El modelo propuesto se resume gráficamente en la figura 1, y esquemáticamente en los puntos siguientes:

  • El estado “honesto” de partida incluye un umbral de fraude aceptable (Ariely)
  • Hay dos formas (fundamentales) de fraude:
    • Tipo 1.- Empujar el umbral en pos de probar una idea
    • Tipo 2.- Saltarse el umbral en pos de méritos profesionales
  • El fraude tipo 2 es intelectualmente menos interesante. Tiene que ver con el equilibrio psicológico del individuo y con presiones externas.
  • En el fraude C1 se incurre al salir del entorno seguro del paradigma de Kuhn en busca de hipótesis revolucionarias.

A la luz de este modelo podemos entender mejor los resultados de los estudios antes comentados. Las prácticas que aceptan llevar a cabo la mayoría de los científicos (recordemos, entre el 66% y el 72%) estarían en el entorno del umbral de lo aceptable. Cuando se pregunta por ellas expresamente se reconoce que no está bien, pero de alguna forma se asume que tampoco está tan mal y que “todo el mundo lo hace”, análogo a llevarse a casa un lápiz de la oficina. Las prácticas que son manifiestamente fraudulentas y conscientes, como inventar datos, afectan a números muy inferiores, compatibles con la idea de las (pocas) manzanas podridas.

La existencia de errores y fraudes en la investigación científica da lugar fundamentalmente a dos consecuencias: retracción de artículos e irreproducibilidad de resultados. El número de artículos retirados de las publicaciones, aunque es muy bajo, crece drásticamente desde el año 2000. Estudios recientes intentando reproducir resultados publicados, por ejemplo en psicología, muestran que en la gran mayoría de los casos los resultados no se consiguen reproducir. Este problema está lejos de ser anecdótico en bastantes disciplinas científicas.

Para el individuo que se dedica a ella, la ciencia es (o puede ser) una actitud vital y una profesión. Además, para la sociedad es un sector de actividad productiva, y en este último sentido la ciencia ha cambiado enormemente en las últimas décadas. En el período de 1996 a 2011 ha habido 20 millones de artículos escritos por 15 millones de autores (ref 1). La ciencia se ha convertido en una actividad de masas.

Las publicaciones científicas existen desde el siglo XVII, pero desde la generalización de internet se pueden consultar con una facilidad y en un número inimaginable hace tres décadas. Por otro lado, los distintos organismos financiadores de la investigación cada vez son más exigentes con los científicos a su servicio: con menos dinero hay que conseguir más publicaciones en menos tiempo. En mi opinión estas son las razones fundamentales que están detrás de la evolución al alza de las malas prácticas en ciencia que, como veíamos, están aflorando aceleradamente.

La presión por publicar la sufren, de manera angustiosa en ocasiones, todos los miembros de la profesión. Esto hace que el colectivo sea más indulgente ante tamaños muestrales escasos, análisis estadísticos pobres, descripciones de la metodología poco claras, conflictos de intereses, etc. En resumen, el umbral de las prácticas aceptables se ha desplazado alejándose de la pulcritud de forma exagerada, en algunos casos al menos. Por otro lado, esa disminución de la calidad de lo publicado no pasa desapercibida ante el escrutinio de un número tan vasto de científicos como el que hoy día rastrea las bases de datos a la caza de ideas para sus próximos trabajos.

La presión por publicar desplazó el acento de la calidad a la cantidad. La presión por el índice de impacto parecía una forma ingeniosa de recuperar el nivel de calidad sin reducir la presión, pero parece que eso está llevando a una disminución de la calidad global, aumentando la tolerancia de los científicos con prácticas dudosas y, en algunas disciplinas, llegando a poner en cuestión el propio avance científico de las mismas.

Un sistema que ha crecido de una forma tan explosiva probablemente tiene aún que encontrar una armonización adecuada de los distintos intereses que alberga. En este camino, la presión por la productividad se tendrá que ver atemperada por la relevancia y la calidad de dichos productos. Para conseguirlo habrá que tener en cuenta cuestiones tales como la incorporación de proyectos colaborativos a gran escala, la cultura de la replicación, el registro, el establecimiento de buenas prácticas de reproducibilidad, la mejora de métodos estadísticos, la estandarización de definiciones y análisis, etc. (recomendaciones tomadas de ref 1). El umbral de lo aceptable se ha desplazado hasta límites que en realidad no queríamos aceptar y es necesario trabajar para devolverlo a un lugar más razonable.

Referencias:

(ref 1) Ioannidis JPA (2014) How to Make More Published Research True. PLoS Med 11(10): e1001747. doi: 10.1371/journal.pmed.1001747

Sobre el autor: Joaquín Sevilla es doctor en ciencias físicas y profesor titular de tecnología electrónica en la Universidad Pública de Navarra donde, además, se encarga de enseñar sobre aspectos básicos de investigación en el máster en ingeniería de telecomunicación.

————————————-

Nota:

La serie “Fraude científico” tiene su origen en una lección que impartió Joaquín Sevilla en el curso de verano “Los demonios de la ciencia: Educando en (con)ciencia” organizado por Ikerbasque y la Cátedra de Cultura Científica dentro del programa de 2015 de los Cursos de Verano de la UPV/EHU en San Sebastián.

La serie está compuesta por las siguientes cinco anotaciones:

(I). Una primera aproximación.

(II). La difusa frontera de la deshonestidad.

(III). Profundizando en los dos tipos de fraude.

(IV). Algunas consecuencias.

(y V). Resumen y conclusiones.

11 Comentarios

Deja un comentario

Jon IrazustaJon Irazusta

Muy buena serie. Enhorabuena al autor y a la Cátedra!

Fraude científico | Enchufa2

[…] Fraude científico (y V). Resumen y conclusiones […]

Ilustración MédicaIlustración Médica

Gran serie de artículos sobre un tema tan importante y sensible. A la ciencia patológica se podría añadir otro azote, el de la ciencia irrelevante. Por ciencia irrelevante me refiero es esas comunicaciones de valor escaso o nulo que abundan en congresos científicos y revistas de bajo perfil. Es otra salida para los que tiran del “publicar o morir” o “presentar o morir”. Así, se acude a un congreso con cientos de comunicaciones y tras varios días se regresa con la sensación de pérdida de tiempo absoluta.

AngelesAngeles

Buena apreciación!
Y excelentes artículos.

MarioMario

Muy interesante esta serie de artículos. Felicitaciones al autor.

Fraude científico: Resumen y conclusiones (Parte 5) |  Boletín BoCES

[…] Fraude científico: Resumen y conclusiones (Parte 5) Por Joaquín Sevilla en Cuaderno de Cultura Científica […]

Fraude científico (y V). Resumen y concl...

[…] Joaquín Sevilla Figura 1. Resumen esquemático del modelo propuesto para analizar el fraude. Los comportamientos cuestionables forman un continuo sin fronteras definidas en el que hay un umbral aceptable. Ese umbral se puede empujar o  […]

JoaquínJoaquín

Muchas gracias por todos los comentarios elogiosos.

IñakiIñaki

Enhorabuena por vuestro trabajo divulgativo. Opino que en divulgación es necesaria la presencia de dos actores. 1) un divulgador que divulga un conocimiento y 2) Un lector que trata de convertir su ignorancia en conocimiento (mi caso).
Tras la lectura de estos trabajos me cabe una pregunta. Cuando leo algo sobre alguna rama del conocimiento de la que soy ignorante (casi todas) ¿Como puedo distinguir si me están metiendo gato por liebre?
Desde esta perspectiva ¿Hay alguna forma de distinguir a la ciencia de sus demonios?
Saludos y gracias por vuestro trabajo.

Deja un comentario

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>