Intelligence Index

Comparar modelos de IA es complicado, porque cada modelo se prueba en una pila diferente de puntos de referencia y cada laboratorio elige los que lo favorecen. The Intelligence Index es la firma independiente de evaluación comparativa Artificial Analysis que intenta solucionar este problema: ejecutan un conjunto fijo de evaluaciones en todos los modelos y combinan los resultados en un número, para que pueda alinear los modelos uno al lado del otro.

Trátelo como una guía aproximada y no como un veredicto. Una sola puntuación oculta en qué tareas es bueno un modelo, y un modelo con una puntuación general más baja puede seguir siendo la mejor opción para su trabajo en particular. Es muy útil para comprobar la cordura de las afirmaciones de marketing y para detectar el equilibrio entre lo inteligente que es un modelo y lo rápido o barato que funciona.