apprendimento in contesto
Quando un modello acquisisce una nuova abilità dagli esempi inseriti nel prompt, senza alcuna modifica al modello stesso.
Esistono due modi per insegnare a un modello qualcosa di nuovo. Puoi riqualificarlo, il che modifica i numeri interni del modello e costa tempo e denaro. Oppure puoi inserire un paio di esempi direttamente nel prompt e lasciare che il modello elabori lo schema da solo. Il secondo è l’apprendimento contestuale, ed è la ragione per cui “ecco tre esempi del formato che desidero” funziona così bene come abitudine di suggerimento.
In realtà non si impara nulla in senso permanente: chiudi la conversazione e l’abilità scompare, perché è sempre vissuta solo nella finestra del contesto. Questa è una limitazione e una caratteristica allo stesso tempo. Non costa nulla, è istantaneo e ora si sta diffondendo oltre il testo. GEN-1.5 di Generalist AI fa lo stesso trucco con i robot, caricando un breve video dimostrativo nella finestra del contesto invece di riqualificarsi su ore di riprese.