Hai mai pensato a come l’intelligenza artificiale è paragonabile a un medico umano in un contesto diagnostico di emergenza? Una nuova ricerca pubblicata giovedì potrebbe farti riflettere su questa domanda.
Lo studio, pubblicato in la rivista Scienzahanno scoperto che un modello linguistico di grandi dimensioni all’avanguardia ha sovraperformato i medici umani in una serie di compiti clinici comuni. Utilizzando dati reali del pronto soccorso e centinaia di confronti tra medici, il modello ha eguagliato o addirittura superato le prestazioni dei medici umani nelle scelte diagnostiche, nel triage di emergenza e nella determinazione dei passaggi successivi nella gestione.
Gli autori dello studio hanno affermato che questi risultati non significano che i modelli di intelligenza artificiale siano pronti a sostituire i medici umani. Invece, i risultati indicano che i professionisti del settore necessitano di commonplace più rapidi e rigorosi per la valutazione e di regole per l’utilizzo dell’IA in medicina.
I ricercatori hanno testato il modello linguistico di grandi dimensioni della serie o1 di OpenAI, rilasciato nel 2024, attraverso sei esperimenti che hanno combinato casi clinici standardizzati con un campione reale di pazienti del pronto soccorso selezionati casualmente in un centro medico nel Massachusetts.
Il vantaggio del modello è risultato più evidente nella fase iniziale del triage, quando le decisioni devono essere prese con poche informazioni. Sia i medici umani che il modello di intelligenza artificiale sono migliorati man mano che sono diventati disponibili più dati, ma lo studio ha rilevato che il LLM ha gestito l’incertezza molto meglio, utilizzando dati sanitari e be aware frammentati o non strutturati in modo più efficace.
Questi risultati si basano su decenni di utilizzo di casi diagnostici difficili per valutare i sistemi informatici medici. I precedenti LLM avevano già sovraperformato i vecchi approcci algoritmici, ma ciò che distingue questo studio è la scala e il confronto testa a testa tra un medico umano e l’intelligenza artificiale in uno situation clinico reale.
Gli autori hanno sottolineato che dovremmo rimanere scettici riguardo a questi risultati. Il vero lavoro clinico negli ospedali e nei pronto soccorso spesso si basa su segnali visivi e uditivi – piuttosto che su ragionamenti basati su testo – che l’intelligenza artificiale non può interpretare in modo completo e accurato. “È necessario un lavoro futuro per valutare come gli esseri umani e le macchine possano collaborare efficacemente nell’uso di segnali non testuali”, osserva lo studio.
Quando si considera l’assistenza medica assistita dall’intelligenza artificiale, è anche fondamentale valutare se sarà sicura, equa ed economicamente vantaggiosa, aspetti che non sono stati testati in questo studio.
Leggi anche: Se arriveranno consigli sanitari sull’intelligenza artificiale da Apple, voglio essere pronto
“Per farla breve, il modello ha sovraperformato il nostro ampio riferimento di medici. Lo vedrete in dettaglio, ma questo embrace medici certificati, che praticano attivamente e casi reali disordinati”, ha detto Arjun Manrai, un assistente professore di Informatica Biomedica presso la Harvard Medical Faculty, durante una conferenza stampa virtuale.
“Non credo che i nostri risultati significhino che l’intelligenza artificiale sostituirà i medici, nonostante ciò che alcune aziende potrebbero dire e il modo in cui probabilmente utilizzeranno questi risultati”, ha detto Manrai. “Penso che ciò significhi che stiamo assistendo a un cambiamento davvero profondo nella tecnologia che rimodellerà la medicina, e che dobbiamo valutare questa tecnologia ora e condurre rigorosamente studi clinici prospettici.”
Gli enti regolatori, gli ospedali e gli operatori sanitari dovrebbero collaborare per testare a fondo questi strumenti prima che vengano implementati per garantire sicurezza ed equità a tutti i pazienti.
In un commento pubblicato giovedì su Science, Ashley M. Hopkins ed Eric Cornelisse, ricercatori della Flinders College in Australia, hanno scritto che lo studio è un passo verso una migliore valutazione dei sistemi di intelligenza artificiale nel settore sanitario, ma che la medicina è un campo complesso che richiede una supervisione rigorosa per garantire che i pazienti ricevano la migliore assistenza possibile.
“Non permettiamo ai medici di esercitare la professione senza supervisione e valutazione, e l’intelligenza artificiale dovrebbe essere mantenuta a typical comparabili”, ha affermato Cornelisse in una nota.
Leggi anche: I chatbot con intelligenza artificiale perdono più della metà delle diagnosi mediche, risultati di studi
