Un servidor de prepublicaciones que aloja millones de artículos científicos ha trazado una línea clara. arXiv ahora está prohibiendo los envíos que contienen referencias alucinadas por herramientas de IA. La política apunta a un problema específico y creciente: sistemas de IA que generan citas de aspecto plausible hacia fuentes que no existen. La decisión, informada por Nature, llega en un momento en el que la comunidad científica aún no se ha puesto de acuerdo sobre si tales citas constituyen mala conducta en la investigación.
Ese debate no resuelto es precisamente lo que hace que esto merezca un examen detenido.
Qué es en Realidad una Cita Alucinada
Para entender por qué esto importa, ayuda ser preciso sobre cómo se ve una alucinación de IA en un contexto de investigación. Los LLM generan texto prediciendo qué viene a continuación basándose en patrones en los datos de entrenamiento. Cuando se les pide que produzcan una bibliografía, no recuperan fuentes reales de una base de datos. Generan texto que parece una cita: nombres de autores, títulos de revistas, números de volumen, rangos de páginas, años de publicación. El resultado puede ser completamente convincente y completamente ficticio.
Esto no es un error en el sentido tradicional. Es una característica estructural de cómo funcionan estos sistemas. Están optimizados para producir resultados fluidos y coherentes, no para verificar que las fuentes que nombran realmente existan. Un investigador que pega texto generado por IA en un manuscrito sin verificar cada referencia puede enviar un documento que contiene citas de revistas que nunca publicaron esos artículos, o de artículos que nunca fueron escritos.
La respuesta de arXiv es tratar esto como motivo de rechazo. La política no requiere prueba de intencionalidad. Una referencia alucinada es una referencia alucinada, independientemente de si el autor sabía que era fabricada.
La Pregunta de Mala Conducta Que la Ciencia No Ha Resuelto
Esto es lo que la mayor parte de la cobertura de esta historia pasa por alto: la prohibición de arXiv es una respuesta institucional a una pregunta que la comunidad científica en general no ha respondido. Nature ha informado que los investigadores continúan debatiendo si las citas alucinadas por la IA constituyen mala conducta en la investigación.
Ese debate no es trivial. La mala conducta en la investigación es una designación grave con consecuencias profesionales. Típicamente cubre la fabricación, la falsificación y el plagio. Una cita alucinada es, en cierto sentido, una fuente fabricada. Pero la persona que la incluyó puede haberlo hecho sin darse cuenta de que era falsa, confiando en una herramienta de IA en la que confiaba para ayudar con una tarea rutinaria.
La distinción entre negligencia y fabricación importa enormemente en la cultura académica. La negligencia es una falla de proceso. La fabricación es una violación ética. Ambas tienen un peso diferente en la revisión institucional, en las consecuencias profesionales y en cómo la comunidad entiende qué salió mal.
La política de arXiv elude esta distinción centrándose en el resultado en lugar de la intención. Un artículo con referencias alucinadas no pertenece al servidor, punto final. Si el autor actuó de mala fe es una pregunta separada, una que arXiv no está en posición de adjudicar. Lo que el servidor puede controlar es lo que aloja.
Por Qué Esto Se Extiende Mucho Más Allá de un Servidor de Prepublicaciones
La decisión de arXiv y el debate de Nature en torno a ella apuntan a algo más grande que una actualización de política. Señalan que la integración de herramientas de IA en los flujos de trabajo científicos ha superado las normas diseñadas para regir esos flujos de trabajo.
La revisión por pares, los estándares de citación y los marcos de integridad de la investigación se construyeron alrededor de autores humanos que, en principio, habían leído las fuentes que citaban. La suposición era que una referencia en una bibliografía representaba una afirmación: esta fuente existe, dice lo que implico que dice y respalda el punto que estoy haciendo. Las herramientas de IA rompen esa suposición al nivel de la mecánica básica.
Esto crea una carga de verificación que antes no existía a escala. Los editores, revisores y lectores ahora se enfrentan a la posibilidad de que cualquier cita dada en cualquier artículo pueda ser una ficción plausible. Verificar cada referencia en cada envío no es una expectativa realista para los revisores por pares voluntarios. Sin embargo, la integridad del registro científico depende de que las citas sean reales.
La implicación más amplia es que las instituciones de investigación, las revistas y los servidores de prepublicaciones necesitarán desarrollar nueva infraestructura, ya sean herramientas técnicas para la verificación de citas o requisitos de envío actualizados, para manejar un problema que no existía antes de que la asistencia de escritura de IA se volviera generalizada. La prohibición de arXiv es una respuesta temprana. No será la última.
Lo que este momento revela es que las herramientas de IA, cuando se utilizan sin la verificación adecuada, no solo ayudan a la investigación. Pueden corromper silenciosamente el tejido conectivo de la ciencia: las referencias que vinculan un hallazgo con otro, que permiten a los lectores rastrear las afirmaciones hasta la evidencia y que dan a la literatura científica su estructura acumulativa.
En Breve
arXiv está prohibiendo los artículos con citas alucinadas por IA, lo que significa referencias a fuentes que no existen, generadas por herramientas de IA. La comunidad científica aún no se ha puesto de acuerdo sobre si esto constituye mala conducta en la investigación. El debate importa porque se encuentra en la intersección de cómo funcionan las herramientas de IA, cómo se define la integridad de la investigación y quién asume la responsabilidad cuando una máquina produce una falsedad convincente. El problema más profundo es que las normas de citación construidas para autores humanos no están equipadas para un mundo donde la IA puede generar bibliografías que parecen reales pero no lo son.
Basado en información de Nature.