CourionAI
IT
Newsletter
← Glossario Termine

Panca del Gusto

Uno benchmark che verifica se un agente AI sceglie la direzione migliore nei punti decisionali chiave in un compito lungo.

Taste-Bench è un test realizzato dai ricercatori dello Microsoft e della City University di Hong Kong. Invece di chiedere se un agente ha terminato un’attività, congela un agente a metà strada e chiede a un modello di scegliere tra due possibili direzioni successive, quindi controlla la scelta rispetto a ciò che ha effettivamente funzionato in seguito.

I ricercatori chiamano questa capacità “gusto”, il giudizio su quale percorso potrebbe ripagare. I punteggi finora sono modesti, il che suggerisce che scegliere bene è un’abilità separata dal portare a termine un lavoro.