arXiv limita gli invii a due al mese mentre dilagano gli articoli assistiti dall'IA

A partire dal 1° ottobre, arXiv limita ogni autore a due articoli per mese di calendario e a tre invii attivi in qualsiasi momento. Il limite si applica a tutte le discipline, non solo all'informatica, e la piattaforma lo definisce una misura transitoria. È un tetto al ritmo di pubblicazione sul più grande server di preprint ad accesso aperto al mondo, e il motivo è un numero: a settembre arXiv ha ricevuto 40.363 invii, il totale mensile più alto della sua storia.

La tendenza dietro quel dato è più ripida di quanto suggerisca il titolo. A settembre 2016 arXiv aveva ricevuto 9.869 invii. A settembre 2024 erano 20.569. Due anni dopo erano raddoppiati di nuovo, arrivando a 40.363. Nello stesso periodo i ticket di assistenza indirizzati allo staff di arXiv e ai moderatori volontari sono saliti a quasi 9.000. La sola categoria cs.AI è cresciuta di oltre sei volte in due anni, mentre le altre categorie sono più o meno raddoppiate. L'IA generativa ha reso molto più semplice scrivere un articolo, strutturarlo e produrre un gran volume di materiale di ricerca dall'aspetto plausibile, e il modello di moderazione costruito attorno alla revisione umana sta sentendo il peso.

La forma del problema, non solo la sua dimensione

arXiv non ha vietato l'IA. La sua policy consente agli autori di usare l'IA come ausilio alla ricerca, purché l'uso sia dichiarato e l'articolo soddisfi i suoi standard di valore scientifico, originalità e qualità. Ciò che ha spinto la piattaforma ad agire è un cambiamento in ciò che viene inviato.

I moderatori descrivono tre schemi. Ci sono articoli di ambito ristretto e dai contenuti scarni. Ci sono i paper "salami", in cui un singolo studio viene affettato in più invii separati. E ci sono manoscritti ricchi di testo che suonano come generati da una macchina. Thomas Dietterich, che presiede il comitato editoriale consultivo di arXiv, ha detto che un piccolo numero di autori che invia grandi volumi di materiale di bassa qualità consuma una quota sproporzionata del tempo dei volontari, e che il risultato sono ritardi da giorni a settimane per gli articoli che meriterebbero una revisione.

Quest'ultimo punto è quello che conta di più. I moderatori di arXiv non sono personale a tempo pieno. Sono ricercatori che revisionano gli invii gratuitamente. Quando una minoranza di autori molto prolifici riempie la coda, il costo ricade su tutti gli altri, e gli articoli che subiscono ritardi sono proprio quelli che sarebbero passati rapidamente.

Perché un limite alla frequenza, e perché è uno strumento brusco

Un tetto rigido è uno strumento grezzo. Due articoli al mese sono generosi per la maggior parte dei ricercatori e restrittivi per pochi, e non fanno nulla per distinguere un autore davvero prolifico da chi inonda il sistema. arXiv ne è consapevole e presenta il limite come un tampone che guadagna tempo per migliorare i propri strumenti e processi di revisione. In precedenza la piattaforma lasciava ai moderatori la possibilità di limitare gli autori ad alta frequenza caso per caso; dal 1° ottobre quella discrezionalità è standardizzata in una regola.

Il segnale più chiaro dell'intera vicenda è ciò che arXiv non ha fatto. Non ha imposto il rilevamento dell'IA, non ha modificato i propri obblighi di dichiarazione e non ha limitato la categoria cs.AI. Ha colpito il volume, perché il volume è la parte facile da misurare e difficile da contestare. Se questo risolva il problema di fondo è una questione separata. Un malintenzionato determinato può comunque inviare due articoli di bassa qualità al mese, e il vero controllo sulla qualità resta il moderatore umano che li legge.

Cosa può e cosa non può fare un limite alla frequenza

Vale la pena essere precisi su quale problema affronti il tetto. Rallenta il ritmo di invio per tutti. Non alza la qualità di ciò che viene inviato e non migliora la capacità di arXiv di distinguere un buon lavoro da riempitivo generato da una macchina. Un tetto è un controllo di volume, e la questione della qualità resta esattamente dov'era.

Restano due possibilità. O l'ondata era soprattutto opportunismo, nel qual caso un limite al ritmo scoraggia il ricambio occasionale e la coda si riprende; oppure l'ondata riflette un cambiamento duraturo nella quantità di produzione scientifica, nel qual caso il tetto si limita a distribuire lo stesso volume su più mesi. La formulazione stessa di arXiv, che definisce il limite transitorio, suggerisce che si aspetti il primo scenario. La risposta onesta è che nessuno lo sa ancora, e i dati sugli invii dei prossimi mesi saranno la prima prova in un senso o nell'altro.

C'è un effetto più sottile che potrebbe contare più di quello diretto. Un limite alla frequenza cambia gli incentivi per l'autore marginale. Se puoi pubblicare due articoli al mese, hai un motivo per unire le fette di salame in un unico articolo, che è esattamente ciò che i revisori volevano fin dall'inizio. Uno strumento brusco può comunque indirizzare i comportamenti in una direzione utile, anche quando non risolve il problema di capacità di fondo.

Il quadro più ampio

arXiv è l'istanza più visibile di un problema che si sta diffondendo in tutto il web aperto e nei sistemi che da esso dipendono. Le pipeline di filtraggio ora lo misurano direttamente: nei dati da giugno ad agosto alla base di uno dei principali corpus di testo web, la quota di token generati dall'IA è salita dal 27 al 31 per cento dopo il filtraggio. Si stima ora che circa un terzo del testo pulito sul web aperto sia generato da macchine, e quella quota continua a crescere.

La conseguenza è una lenta erosione dei segnali che le persone usano per giudicare la qualità. Un numero di citazioni conta meno quando produrre articoli costa poco. Un risultato di ricerca conta meno quando un terzo del corpus è generato. Una coda di revisione conta meno quando il volume degli invii supera quello dei revisori. Ogni sistema costruito sul presupposto che produrre testo sia costoso deve essere ricostruito per un mondo in cui è quasi gratuito.

C'è un'obiezione legittima, e merita di essere espressa. La scrittura assistita dall'IA non è automaticamente scrittura scadente. Molti ricercatori usano questi strumenti per rendere più asciutta la prosa, tradurre o organizzare una rassegna della letteratura, e il risultato è un articolo più chiaro. La policy di arXiv stessa lo accetta. Il problema non è lo strumento, è il volume, e gli strumenti rendono il volume facile.

Cosa segnala il limite

Letto a livello di policy, il tetto di arXiv è un silenzioso riconoscimento che la piattaforma non può scalare la propria revisione umana alla stessa velocità con cui l'IA generativa può scalare gli invii. È un disallineamento strutturale, e nessun limite alla frequenza lo risolve. Il massimo che può fare è rallentare l'ondata abbastanza perché i volontari riescano a stare al passo.

Due cose definiranno ciò che accadrà dopo. La prima è se altri server di preprint e riviste seguiranno con limiti propri, il che frammenterebbe il modo in cui la ricerca viene condivisa. La seconda è se gli strumenti di revisione riusciranno a stare al passo, perché un tetto alla frequenza serve proprio a guadagnare tempo per questo. Se gli strumenti arriveranno, il tetto è temporaneo, come dice arXiv. Se non arriveranno, il limite diventa permanente, e il modello ad accesso aperto assorbe un vincolo che non aveva mai avuto prima. In ogni caso, l'era del tutti-contro-tutti negli invii dei preprint è finita il 1° ottobre, ed è finita perché produrre un articolo è diventato troppo facile per essere un filtro.