Más de 30% de arXiv parece escrito por IA

Un nuevo análisis sobre arXiv está encendiendo una alarma que va más allá de la curiosidad técnica: más de 30% de las nuevas entregas ya suenan como si las hubiera redactado una IA. No estamos hablando de una impresión vaga o de una percepción aislada. La investigación detrás de esta señal usa patrones lingüísticos para detectar texto con huellas típicas de modelos generativos, y el resultado apunta a un cambio real en cómo se están escribiendo muchos papers.

Eso importa porque arXiv no es un rincón menor de internet. Es uno de los lugares donde se publican borradores, avances y preprints que luego influyen en revisiones, citas, discusiones y decisiones de investigación. Si una parte creciente del material nuevo llega con estilo de IA, la pregunta ya no es solo quién escribió el texto, sino qué tan confiable es, qué tanto aporta y cuánto trabajo extra le deja a quien revisa.

Qué encontró el análisis sobre arXiv

El estudio publicado en unslop.run parte de una idea simple: si un texto académico fue asistido por IA, suele dejar señales en el estilo. No hablamos de detectar una frase suelta, sino de mirar rasgos agregados en miles de documentos. El resultado más fuerte es que, en la muestra analizada, más de 30% de las nuevas submissions de arXiv ya se leen como si hubieran sido generadas o fuertemente asistidas por modelos de lenguaje.

La cifra no significa que 30% de los autores hayan copiado y pegado un paper completo desde ChatGPT. Tampoco prueba fraude en todos los casos. Lo que sí muestra es que el lenguaje de muchos trabajos se parece cada vez más al estilo de salida de un modelo: frases muy pulidas, estructura repetitiva, generalidades bien ordenadas y poca fricción humana visible. Eso puede ocurrir en un abstract, en una introducción o en secciones completas.

La señal preocupa por dos motivos. Primero, porque arXiv funciona como termómetro temprano de lo que está pasando en la producción científica. Segundo, porque el texto académico no solo comunica resultados; también ayuda a evaluar seriedad, rigor y aporte. Si el estilo se homogeneiza demasiado, revisar contenido real se vuelve más difícil.

Cómo se mide que un texto “suena” a IA

La investigación no se basa en una intuición tipo “esto parece raro”. Usa modelos de detección y comparación de patrones para estimar probabilidad de que un texto haya sido generado por IA. Eso incluye rasgos como repetición de estructuras, densidad de ciertas construcciones, uso muy uniforme de conectores y una tendencia a producir prosa demasiado simétrica.

En términos prácticos, un detector no ve intención, ve huellas. Por eso hay que leer estos resultados con cuidado. Un paper muy bien editado por un humano puede parecer artificial, y un texto generado por IA puede pasar desapercibido si fue bastante retocado. Aun así, cuando el porcentaje agregado sube tanto, la tendencia ya no se puede ignorar.

La fuente del análisis está aquí: https://unslop.run/blog/measuring-ai-writing-on-arxiv. Si quieres revisar el enfoque, vale la pena leerlo con calma y pensar en qué parte del proceso académico se está colando la IA: redacción, edición, resumen o incluso traducción.

Por qué esto importa para academia y desarrollo

El problema no es que una herramienta ayude a escribir. El problema es qué pasa cuando el texto deja de ser un vehículo claro del pensamiento y se convierte en un producto optimizado para sonar correcto. En academia, eso puede afectar desde la revisión por pares hasta la lectura rápida que hacen investigadores que necesitan decidir si un paper merece tiempo.

Si tú trabajas en producto, data o ingeniería, esto también te toca. Mucha investigación aplicada, benchmarks, comparativas de modelos y revisiones técnicas nacen o se difunden desde arXiv. Si el volumen de texto asistido por IA crece sin control, se vuelve más difícil distinguir entre una contribución sólida y un documento bien armado pero pobre en sustancia.

Además, el costo de revisión sube. Un revisor ya no solo tiene que evaluar metodología, resultados y consistencia interna. También debe filtrar un estilo que puede estar demasiado pulido para ocultar vacíos. Eso consume tiempo y puede dejar pasar errores que antes eran más fáciles de detectar.

Revisión por pares más lenta y menos confiable

La revisión por pares ya arrastra problemas conocidos: carga de trabajo alta, sesgos, tiempos largos y calidad desigual. Si el texto que llega está optimizado por IA para sonar convincente, el revisor puede dedicar más esfuerzo a desenredar la redacción que a validar el aporte real.

Eso no quiere decir que la IA siempre empeore la revisión. Puede ayudar a ordenar ideas, corregir gramática o resumir literatura. Pero cuando el uso se vuelve masivo y poco transparente, se rompe algo básico: la confianza en que el estilo refleja el nivel de trabajo detrás del manuscrito.

Menos señal, más ruido

En ciencia, una parte importante del valor está en la señal. Un paper bueno suele mostrar claridad, precisión y decisiones metodológicas que se notan en la escritura. Si muchos textos empiezan a sonar parecidos, la lectura comparativa se vuelve más difícil.

Piensa en esto como revisar 20 propuestas de proyecto donde 12 tienen la misma voz, el mismo orden de ideas y el mismo tono seguro. No necesitas que todas sean malas para que el proceso sea peor. Basta con que el ruido suba y la discriminación entre calidad real y apariencia se vuelva más costosa.

Qué patrones delatan a un texto generado por IA

No hace falta ser detector profesional para notar algunos rasgos típicos. Los modelos de lenguaje tienden a producir textos muy fluidos, pero esa fluidez a veces viene con costos: menos especificidad, menos riesgo retórico y más frases que podrían pertenecer a cualquier paper del mismo tema.

En papers académicos, esto suele verse en introducciones que prometen mucho pero dicen poco, conclusiones que repiten el resumen sin aportar nada nuevo y transiciones demasiado limpias entre ideas que en la práctica no están tan conectadas. También aparece en el abuso de términos genéricos como “novel”, “robust” o “significant” sin evidencia concreta en el cuerpo del texto.

Señales frecuentes en papers asistidos por IA

• Repetición de la misma estructura de párrafos en varias secciones.
• Explicaciones largas que evitan números, datasets o decisiones metodológicas precisas.
• Referencias a trabajos previos de forma genérica, sin contraste real.
• Conclusiones que suenan correctas pero no responden a un hallazgo específico.
• Tono seguro incluso cuando el contenido debería mostrar límites o incertidumbre.

Estas señales no prueban nada por sí solas. Un autor humano también puede escribir así, sobre todo si está apurado, traduciendo desde otro idioma o siguiendo una plantilla rígida. Pero cuando se combinan varias de estas pistas, el texto empieza a parecer más una salida de modelo que una pieza de investigación con voz propia.

Qué pueden hacer universidades, revistas y equipos técnicos

La respuesta no debería ser prohibir todo uso de IA. Eso sería poco realista y, en muchos casos, inútil. La pregunta útil es cómo reducir el riesgo de papers inflados, opacos o difíciles de auditar. Ahí hay varias medidas concretas que sí puedes aplicar.

Una de las más obvias es pedir más transparencia. Si un autor usó IA para editar, resumir o estructurar, debería declararlo de forma explícita. No para castigar por defecto, sino para que revisores y lectores sepan qué parte del texto fue asistida. También ayuda exigir más detalle metodológico y más evidencia verificable, no solo mejor redacción.

Otra medida es fortalecer la revisión de contenido, no solo de forma. Cuando una submission se ve demasiado pulida, conviene revisar si los números cierran, si el experimento es reproducible y si el aporte realmente está ahí. La buena prosa no debe reemplazar el criterio técnico.

Acciones prácticas para equipos editoriales

1. Pedir declaración de uso de IA en redacción, edición o traducción.
2. Exigir datos, código o anexos cuando el tipo de trabajo lo permita.
3. Revisar consistencia entre abstract, resultados y conclusiones.
4. Detectar referencias vagas o bibliografía que no conversa con el argumento.
5. Entrenar revisores para reconocer texto excesivamente genérico.
6. Priorizar reproducibilidad sobre estilo.

Si trabajas en una universidad o en un laboratorio, también conviene definir una política interna. No hace falta un documento de 40 páginas. Basta con reglas claras sobre qué usos están permitidos, cuáles deben declararse y cuáles no se aceptan. La ambigüedad, en este tema, solo favorece a quien quiere esconder el proceso.

Dónde sí puede ayudar la IA

La IA no es el enemigo automático. Puede servir para corregir gramática, ordenar un borrador o ayudar a un investigador que escribe en un segundo idioma. En América Latina eso es especialmente útil, porque muchas veces el cuello de botella no es la idea sino la redacción en inglés académico.

El punto es separar asistencia de autoría opaca. Si un modelo ayuda a que una persona comunique mejor su trabajo, bien. Si termina fabricando un texto que aparenta profundidad sin aportar sustancia, el sistema entero pierde.

Qué significa para LatAm y Ecuador

En Latinoamérica, esta discusión tiene una capa extra. Muchas universidades y centros de investigación trabajan con menos recursos, menos tiempo de revisión y menos acceso a soporte editorial. En ese contexto, la tentación de usar IA para acelerar entregas es alta. No es un juicio moral; es una realidad operativa.

Pero justamente por eso el riesgo puede ser mayor. Si los equipos ya están bajo presión para publicar, una herramienta que produce prosa convincente puede esconder debilidades metodológicas hasta que el paper llegue a un lector más exigente. Para Ecuador y la región, donde la visibilidad internacional depende mucho de la calidad y la credibilidad, eso puede salir caro.

También hay un efecto de reputación colectiva. Si crece la percepción de que los preprints están inflados por IA, los revisores y editores pueden volverse más desconfiados con trabajos de toda la región, aunque estén bien hechos. Por eso el tema no es solo técnico; también es estratégico para la producción científica latinoamericana.

Tabla resumen

Qué deberías mirar desde ahora

Si lees papers con frecuencia, hay una nueva habilidad que conviene desarrollar: no quedarte solo con la superficie del texto. Un paper bien escrito ya no garantiza que esté bien pensado. Y un texto algo tosco tampoco necesariamente es malo. Lo que importa es si los datos, la metodología y las conclusiones sostienen lo que promete la redacción.

Como lector, puedes empezar por revisar tres cosas: si el abstract dice algo concreto, si los resultados muestran evidencia verificable y si la discusión realmente responde a esos resultados. Si una de esas piezas falla, el problema no es el estilo, sino la sustancia.

Como institución o equipo técnico, la mejor defensa es la transparencia. Pedir claridad sobre el uso de IA, fortalecer la revisión de evidencia y premiar la reproducibilidad ayuda más que perseguir detectores perfectos. Porque esos detectores, por ahora, no son infalibles.

La señal de arXiv no significa que la academia esté perdida. Sí significa que el costo de confiar en la prosa como proxy de calidad ya subió. Y cuando eso pasa, toca ajustar procesos antes de que el ruido se vuelva norma.

Tabla resumen