CourionAI
IT
Newsletter
← Glossario Termine

GDPval

Un punto di riferimento OpenAI per un lavoro d'ufficio realistico invece di puzzle astratti.

Gli assegni GDPval retribuiscono il lavoro quotidiano: progettazione di documenti, modifica di tabelle, ricerca e risoluzione di attività in più fasi con voci disordinate. OpenAI lo ha sviluppato come controparte delle domande d’esame che premiano solo una forma ristretta di intelligenza.

I risultati sono espressi in punti Elo anziché in percentuale; Ciò che è importante è la distanza tra i modelli, non il numero assoluto. Poiché OpenAI ha creato il benchmark allo stesso tempo e vi compete, dovrebbe essere solo uno dei tanti segnali decisionali.