arXiv (un archivo de investigación de preediciones de renombre en campos como la informática, las matemáticas y la física) está intensificando las medidas para limitar el abuso de la inteligencia artificial (IA) en los artículos científicos.
El nuevo movimiento surge en un contexto de crecientes preocupaciones sobre la calidad de la investigación creada o apoyada en exceso por el Modelo de Lengua Mayor (LLM).
arXiv es originalmente una plataforma popular para que los científicos publiquen investigaciones antes de su aprobación oficial, y también se ha convertido en una fuente de datos importante que refleja las tendencias de investigación globales.
Según Thomas Dietterich, presidente de la división de informática de arXiv, si un artículo muestra que el autor no revisa el contenido creado por la IA, la plataforma aplicará medidas de manejo estrictas.
Estas pruebas pueden incluir referencias no existentes debido a la "ilusión" de la IA, diálogos con chatbots insertados erróneamente en el artículo o errores que muestren que el contenido se copia directamente del modelo lingüístico sin verificación.
Según las nuevas regulaciones, los autores infractores pueden ser prohibidos de publicar en arXiv durante un año. Después de este tiempo, cualquier investigación posterior que desee aparecer en la plataforma debe ser aceptada previamente por un foro de revisión de reputación.
Sin embargo, arXiv enfatiza que esta no es una prohibición del uso de la IA en la investigación científica. Según Dietterich, los científicos aún pueden usar modelos lingüísticos grandes como herramientas de apoyo, pero deben ser "totalmente responsables" del contenido publicado, independientemente de cómo se cree ese contenido.
Esto significa que si el autor copia directamente los párrafos defectuosos, el contenido sesgado, las referencias incorrectas o la información engañosa de la IA, todavía tiene que asumir la responsabilidad como con cualquier otro error académico.
El Sr. Dietterich también dijo que, antes de emitir una sentencia, los coordinadores de arXiv deben informar sobre el incidente y el presidente especializado debe confirmar la evidencia de la violación. El autor procesado todavía tiene derecho a apelar la decisión.
En los últimos años, el número de artículos de baja calidad que aparecen en arXiv ha tendido a aumentar considerablemente junto con la popularidad de las herramientas generadoras de IA. Para limitar esta situación, la plataforma ha requerido que los titulares de artículos por primera vez sean confirmados por un autor de renombre en la comunidad de investigación.
Después de más de 20 años bajo la administración de la Universidad de Cornell, arXiv también se está transformando actualmente en una organización sin fines de lucro independiente para movilizar más recursos para mejorar el sistema de censura y mantener la calidad académica.
Algunos estudios de revisión recientes muestran que las citas falsas en el campo de la biomedicina están aumentando, probablemente relacionadas con el abuso de modelos de IA para crear texto. Esto genera preocupación de que la IA pueda reducir la credibilidad de los trabajos científicos si no se controla estrictamente.
