probabilmente hai visto il consiglio che circola in giro: dì all’IA di comportarsi come un esperto in un campo e otterrai risposte migliori. È un consiglio popolare e, a volte, funziona. Tuttavia, a suggerisce un nuovo studio che l’uso dei personaggi AI potrebbe non essere così efficace come pensavamo.
I ricercatori dell’Università della California hanno testato 12 personaggi diversi attraverso sei modelli linguistici. I personaggi andavano da esperti di matematica e programmazione a scrittori creativi e osservatori della sicurezza. L’obiettivo period scoprire quanto bene si comporta l’intelligenza artificiale quando viene incaricata di agire come un esperto.
I risultati sono stati contrastanti. L’adozione di un personaggio ha reso l’IA più professionale e ha seguito meglio le regole. Ma ha anche peggiorato l’intelligenza artificiale nel ricordare i fatti. Secondo lo studio, l’utilizzo di un personaggio AI lo trasforma in una modalità che segue le istruzioni piuttosto che in una modalità di recupero della conoscenza, e questo compromesso costa in termini di precisione.
Qual è la soluzione?
Per risolvere questo problema, i ricercatori hanno sviluppato PRISM, che sta per Persona Routing tramite Intent-based Self-Modeling. Invece di usare sempre una persona o non usarla mai, PRISM insegna all’intelligenza artificiale a decidere cosa è meglio per se stessa.
Quando fai una domanda, PRISM genera due risposte: una dalla sua modalità predefinita e una dalla sua persona. Quindi confronta i due e fornisce la risposta che funziona meglio per una question specifica.
La risposta dell’esperto non viene scartata anche quando vince la risposta predefinita. Invece, lo stile di ragionamento viene salvato in un componente leggero chiamato adattatore LoRA, da cui l’intelligenza artificiale può attingere in seguito quando necessario. La soluzione sembra semplice, eppure è efficace.
Come si è comportato PRISM?
PRISM ha aumentato il punteggio complessivo dell’IA di uno o due punti sull’MT-Bench, un take a look at che misura quanto bene un’intelligenza artificiale segue le istruzioni e rimane utile. Per le attività di scrittura e di sicurezza, i personaggi hanno aiutato. Per le domande di conoscenza grezza, saltare la persona si è rivelata l’opzione migliore.
IL i ricercatori intendono testare PRISM con più personaggi e affinare la sua capacità di fornire risposte migliori. Siamo agli inizi, ma questo potrebbe cambiare definitivamente il modo in cui stimoliamo l’intelligenza artificiale.
