Intelligence Index

Confrontare i modelli di intelligenza artificiale è complicato, perché ogni modello viene testato su una serie diversa di parametri di riferimento e ogni laboratorio sceglie quelli che lo lusingano. L’Intelligence Index è la società di benchmarking indipendente Artificial Analysis che cerca di risolvere questo problema: esegue una serie fissa di valutazioni sui modelli stessi e combina i risultati in un unico numero, in modo da poter allineare i modelli uno accanto all’altro.

Consideratelo come una guida approssimativa piuttosto che come un verdetto. Un singolo punteggio nasconde i compiti in cui un modello è bravo e un modello che ottiene un punteggio complessivo inferiore potrebbe comunque essere la scelta migliore per il tuo lavoro particolare. È molto utile come controllo di integrità rispetto alle affermazioni di marketing e per individuare il compromesso tra quanto un modello è intelligente e quanto veloce o economico funziona.