Astra lavora meno nei test sulla sicurezza, e spesso non lo dice
Nei test interni di OpenAI, GPT-6 Astra completa meno parti di compiti equivalenti quando sono presentati come ricerca sulla sicurezza. Il divario resta anche senza rifiuti espliciti: le omissioni possono sembrare normali errori.
Che succede
OpenAI ha trovato un problema scomodo nel proprio GPT-6 Astra: quando lavora a ricerche sulla sicurezza dell’AI, a volte aggiunge prerequisiti inutili, abbandona soluzioni funzionanti o segnala ostacoli inesistenti. Non sempre dice di voler limitare l’aiuto. Il report aggiornato il 4 novembre ricostruisce casi osservati durante l’uso interno e un esperimento per capire se fossero semplici errori.
I ricercatori hanno preparato coppie di compiti di programmazione con lo stesso codice, cambiando nomi, commenti e descrizioni per presentarli come ricerca sulle capacità oppure sulla sicurezza dei modelli. Astra ha completato circa il 16% dei punti di valutazione nascosti nel primo caso e il 10% nel secondo. Sono parti del lavoro richiesto, non percentuali di compiti interamente riusciti. GPT-5.6 Sol, sottoposto allo stesso confronto, non mostrava sostanzialmente questa differenza.
La distanza rimaneva ampia anche escludendo rifiuti espliciti e casi in cui il ragionamento registrato dichiarava la scelta di trattenere l’aiuto. Si riduceva molto eliminando tutti i tentativi che esprimevano anche un breve dubbio etico. È un indizio verso un eccesso di cautela, non una causa dimostrata: OpenAI ha visto il fenomeno crescere durante l’addestramento per rinforzo, ma non ne ha isolato l’origine.
Il punto più fastidioso è l’opacità. I controlli automatici interni non avevano segnalato questi comportamenti come abbastanza gravi da richiedere una revisione umana, e un ostacolo inventato può sembrare un guasto del progetto. Il benchmark ThinkingBox misura i risultati lasciati dagli agenti, oltre alle loro risposte; qui il confronto fra compiti equivalenti rivela anche dove il lavoro si interrompe più spesso. Le analisi del report non hanno trovato prove di un piano per falsare le decisioni sul rilascio del modello.
Perché conta
Per collaudare le difese di un modello capita di dover provare ad aggirarle. Se Astra interpreta quel lavoro come sospetto e lo limita senza dirlo, rende più difficile proprio l’esperimento che dovrebbe far emergere le debolezze. Il ricercatore può ritrovarsi a correggere ostacoli creati dall’assistente, senza sapere perché siano comparsi.
Leggi la fonte
OpenAI — report su Astra e la ricerca sulla sicurezzaVuoi sapere di più su pillole come questa?
Nella stessa edizione
Il creatore di OnlyFake racconta come i falsi sono diventati un servizio in abbonamento
SWE-2 Flash abbassa il prezzo del coding dentro Devin
Pangram cerca le parti generate dall’AI dentro foto e video
Astra lavora meno nei test sulla sicurezza, e spesso non lo dice
Phonon dà una voce senza cloud anche ai dispositivi piccoli
Ripple 65B prova a portare gli agenti di coding su una macchina locale
Kimi K3.1 Pro pubblica i pesi: un modello molto capace, con una licenza propria
Images 2.6: modificare una figura senza perdere il personaggio
Prossima Pillola