← Torna al blog
Aicirca 6 min di lettura

METR ha passato 11 settimane dentro Anthropic. Il numero è 1.9, e la maggior parte delle prove è oscurata.

Pubblicato 7 nov 2026
METR ha passato 11 settimane dentro Anthropic. Il numero è 1.9, e la maggior parte delle prove è oscurata.

METR ha pubblicato questo mese una valutazione indipendente su se l'IA stia accelerando la ricerca sull'IA, basata su undici settimane di accesso inconsueto dentro Anthropic. La stima principale è che il progresso misurato delle capacità di Anthropic sia corso a circa 1.9 volte il ritmo precedente da un punto di cambiamento nell'ottobre 2025, con un intervallo di confidenza al 95 per cento da 1.5 a 2.8.

In termini di indice: circa 15 punti AECI all'anno prima, circa 29 dopo. Due anni di progresso storico compressi in uno. METR paragona la grandezza al salto da Claude 2.1 a Sonnet 4.5.

Il secondo titolo è che circa l'80 per cento dell'accelerazione è attribuibile all'IA usata nella ricerca interna di Anthropic. Il terzo è che Anthropic ha oscurato la maggior parte delle prove che METR riteneva più informative.

Queste tre frasi vanno lette insieme, e quasi nessuno le legge insieme.

Com'era l'accesso

Dal 12 agosto al 29 ottobre, un team di circa due persone e mezza a tempo pieno ha avuto accesso a metriche di pretraining e RL, cifre di compute per l'addestramento, punteggi di benchmark interni di modelli non rilasciati, analisi interne sull'accelerazione, previsioni sui modelli e circa quindici interviste con ricercatori Anthropic oltre a sondaggi sul personale. METR non ha preso denaro dall'azienda e ha lavorato su dispositivi Anthropic per ragioni di sicurezza.

L'analisi ha riguardato tre modelli non rilasciati il cui addestramento si è concluso tra luglio e ottobre 2026. È la parte che la distingue da ogni valutazione esterna precedente, che poteva guardare solo modelli già distribuiti e benchmark pubblici.

METR riporta anche un risultato negativo che conta quanto quello positivo: è sicura che l'accelerazione non si spieghi con una crescita più rapida del compute di addestramento. Qualcosa nel modo in cui il lavoro viene svolto è cambiato, al di là di quanto hardware vi sia stato puntato.

L'80 per cento è un giudizio, non una misura

Non esiste uno strumento che legga "quanta di questa accelerazione è venuta dall'IA". METR ha combinato traiettorie di benchmark, metriche di addestramento, interviste e sondaggi, e è arrivata a una stima di attribuzione.

Il materiale delle interviste è la parte più concreta. Un ricercatore ha detto a METR che il lavoro "ora è limitato solo dalle idee e dal compute, non più dal codice". Altri hanno riferito che esperimenti che prima richiedevano uno o due giorni di preparazione ora sono quasi gratuiti. In sondaggi informali su Slack dell'ottobre 2026, il personale ha stimato che l'ultimo modello interno li rendesse circa dodici volte più produttivi. Per confronto, la stessa misura stava intorno a 1.2 volte con Claude 3.7 Sonnet.

METR definisce queste autovalutazioni prove molto lasche, non rappresentative e probabilmente destinate a sovrastimare il guadagno reale. Dodici volte è il tipo di numero che le persone riportano quando un compito prima fastidioso smette di essere fastidioso, e non sopravvive al contatto con un cronometro.

Quindi lo stato onesto dell'affermazione è: una quota ampia, probabilmente la maggior parte, plausibilmente l'80 per cento, di un'accelerazione di 1.9 volte risale all'assistenza dell'IA. Ogni parola di quella frase sta facendo un lavoro.

La soglia ha un numero, ed è questo il problema

La Responsible Scaling Policy di Anthropic versione 3.4 è entrata in vigore l'8 luglio 2026. Nomina due trigger legati alla ricerca automatizzata: un sistema di IA capace di sostituire il personale di ricerca dell'azienda a un costo competitivo, oppure un raddoppio del ritmo di progresso plausibilmente attribuibile in buona parte all'automazione della ricerca o dell'ingegneria. La policy definisce un raddoppio come realizzare in un anno il progresso che altrimenti richiederebbe due.

Una policy che specifica un fattore due crea una domanda ovvia quando un revisore riporta 1.97. Il rapporto pubblico di Anthropic dell'agosto 2026 diceva che l'accelerazione era "meno di un fattore 2". La sua stessa versione interna non oscurata implica 1.97, secondo i resoconti sulla valutazione. L'azienda ha descritto il superamento della soglia come plausibile. In un deposito del 2 novembre presso la Securities and Exchange Commission statunitense, ha detto che "potrebbe soddisfare a brevissimo" la propria definizione di progresso drammaticamente accelerato.

METR ha giudicato separatamente plausibile che la soglia di allerta precoce fosse già stata superata entro il 15 luglio.

Rileggete quella sequenza, perché è strana. Un'azienda ha scritto una regola con dentro un numero. Un revisore esterno, con accesso interno, ha stimato un valore appena sotto il numero. L'azienda ha poi detto ai regolatori che potrebbe essere sul punto di superare il numero. Nessuno ha detto che la soglia è stata superata.

Non è necessariamente elusione. Anthropic caratterizza la soglia come allerta precoce più che come prova che un rischio grave sia arrivato, e dice di non essere ancora allo sviluppo pienamente autonomo dei propri successori. Una soglia di policy che scatta dovrebbe attivare salvaguardie, e la domanda su quali sia una domanda reale a cui non si può rispondere in un comunicato stampa.

Ma significa che il meccanismo attualmente produce dichiarazioni invece di azioni, e le dichiarazioni sono accuratamente mitigate.

Le oscurazioni sono la storia

METR dice che Anthropic ha trattenuto la maggior parte del materiale che i valutatori trovavano più informativo, incluse previsioni sui modelli futuri e l'analisi dei colli di bottiglia. Una parte prevista dell'audit, che riguardava come l'azienda divide il compute tra ricerca sulle capacità e ricerca sulla sicurezza, è stata annullata a metà.

La conseguenza è specifica. Il pubblico non può verificare la stima. La cifra di 1.9 dipende dalla scelta dei benchmark, da dove si colloca il punto di cambiamento e da assunzioni sulla difficoltà dei compiti. L'analisi di sensibilità di METR sposta la stima tra 1.1 e 2.9 volte a seconda di quelle assunzioni.

E c'è un secondo numero che riceve meno attenzione. Quando METR ha confrontato Anthropic con i modelli di frontiera di tutti gli sviluppatori invece che con la storia di Anthropic, il ritmo stimato è salito da circa 17 a 24 punti all'anno, cioè 1.4 volte. METR suggerisce che la differenza potrebbe riflettere un recupero di Anthropic da dietro la frontiera, o differenze in quanto i modelli precedenti fossero tarati sui benchmark.

1.9 per un'azienda. 1.4 per il campo. Entrambe sono accelerazioni. Solo una è vicina a far scattare una policy scritta intorno a un fattore due.

Cosa renderebbe questo verificabile

La risposta onesta è che nulla nel materiale pubblicato consente a un esterno di riprodurre l'analisi, e che questo è un tratto strutturale del valutare un'azienda privata, non un difetto del lavoro di METR.

Cosa potrebbe cambiarlo: pubblicare la composizione e i pesi del benchmark AECI, così che l'indice significhi qualcosa fuori dall'edificio. Rilasciare la metodologia del punto di cambiamento. Lasciare che un secondo valutatore veda il materiale oscurato alle stesse condizioni. E separare le due domande oggi fuse, cioè se il progresso sia accelerato e se l'IA lo abbia causato. La prima è misurabile. La seconda è inferenziale.

C'è anche una domanda che METR solleva e non risolve. Non ha trovato colli di bottiglia che rallenterebbero il ritmo nei prossimi dodici mesi, il che significa che un'ulteriore accelerazione è un rischio vivo e non una questione risolta. Se il ritmo attuale tiene e la composizione continua, il fattore due smette di essere una soglia e diventa una descrizione.

Per chiunque fuori dai laboratori, la conclusione pratica è più stretta di quanto suggeriscano i titoli. L'IA è attualmente un accelerante per i ricercatori umani. Non sta facendo ricerca autonoma. Lo scarto tra queste due affermazioni è dove vive davvero tutta l'argomentazione politica, e il rapporto di METR, oscurazioni incluse, è la descrizione più precisa di quello scarto che qualcuno abbia pubblicato.

Articoli correlati