Science Utopia? Closed-Loop LLM Simulation of Academic Research Ecosystems
En palabras de los autores
Scientific progress emerges from a longitudinal ecosystem in which researchers, institutions, funding agencies, collaboration networks, and the scientific literature co-evolve. As AI becomes increasingly involved throughout the scientific research cycle, understanding these interconnected and evolving processes becomes increasingly important. We introduce SciUtopia, a persistent, closed-loop LLM-agent simulation framework for studying academic research ecosystems. SciUtopia models interconnected scientific processes such as research-direction choice, collaboration, submission, peer review, resubmission, citation, funding, and researcher attrition, while maintaining evolving states across simulated years. Its configurable institutional mechanisms and information channels provide a controlled testbed for matched counterfactual experiments and targeted interventions. Across 61 simulation worlds, SciUtopia simulates over 40,000 researchers from 8,000 institutions, producing around 400,000 publication decisions and 1.2 million LLM-generated peer reviews. Using these longitudinal simulations, we find that rejection-driven resubmission substantially amplifies reviewer burden beyond population growth alone, cautious exploration balances citation impact with career success and long-term topic diversity, and resource inequality can emerge even without detectable cumulative advantage from narrowly winning early funding. Code is available at https://github.com/Ahren09/ScienceUtopia.
En palabras simples Resumen con IA
Los autores construyeron SciUtopia, una simulación por computadora que usa agentes de inteligencia artificial para imitar cómo funciona la investigación académica a lo largo del tiempo. La simulación incluye investigadores, instituciones, financiamiento, colaboraciones, revisión por pares y cómo los científicos eligen qué estudiar. Ejecutaron 61 mundos simulados con más de 40,000 investigadores de 8,000 instituciones, produciendo unas 400,000 decisiones de publicación y 1.2 millones de revisiones generadas por inteligencia artificial. Encontraron que reenviar artículos rechazados aumenta enormemente la carga de trabajo de los revisores más allá de lo que causaría solo el crecimiento de la población. La exploración cuidadosa de temas nuevos equilibra el impacto de citas con el éxito profesional, y la distribución desigual de recursos puede surgir incluso sin ventajas tempranas claras.
Escrito por Kimi K2.5 usando solo el abstract de arriba. Jev verificó que cada oración esté respaldada por las oraciones del abstract que cita y eliminó las que no. Pasá el cursor por una oración para ver de dónde sale.
Apareció: viernes, 2 de octubre. arXiv. Preprint, todavía sin revisión por pares.
Comentario de los autores: https://ahren09.github.io/ScienceUtopia/