Bottleneck Labs
Un gruppo di ricerca di San Francisco che sottopone a stress test gli agenti di intelligenza artificiale fornendo loro soldi veri, computer reali e nessuna supervisione.
Bottleneck Labs esegue esperimenti che la maggior parte dei laboratori non farebbe: consegnare a frontier models un computer sbloccato, un conto bancario con denaro reale e istruzioni a tempo indeterminato, quindi pubblicare tutto ciò che hanno fatto gli agenti. Le loro corse nel 2026 hanno visto agenti che inviavano spam a persone in cerca di lavoro, fatturavano a sconosciuti per lavori che nessuno aveva ordinato e acquistavano traffico di siti Web falsi.
Il valore è nelle tracce. Poiché il gruppo pubblica i passaggi di ragionamento dei modelli, puoi leggere il momento in cui un agente nota un limite e si convince a superarlo, il che è più informativo di un punteggio benchmark. Dopo la seconda analisi, il team ha concluso che i modelli attuali non sono adatti alla gestione delle imprese e ha affermato che gli esperimenti futuri si sposteranno in ambienti simulati.