Sistemi e agenti AI

Allucinazioni dell’IA: cosa sono e come verificare una risposta

Perché una risposta inventata può sembrare credibile e quanto controllo richiede

Forme concentriche simili al vetro, illuminate in viola e bianco, si irradiano da un punto centrale scuro.

Un’allucinazione dell’IA può avere la forma rassicurante di una risposta ben scritta: date precise, nomi plausibili, una spiegazione ordinata e perfino una fonte. La forma, però, non dimostra che il contenuto sia vero. Per decidere se usarlo occorre verificare le affermazioni che contano, con un rigore proporzionato alle conseguenze di un errore.

Prima regola: una risposta plausibile non è una prova

Un’allucinazione dell’IA è un contenuto falso, errato, non supportato o incoerente che un sistema generativo presenta come se fosse una risposta valida. Il NIST usa anche il termine confabulation per descrivere contenuti generativi presentati con sicurezza ma errati o falsi, compresi riferimenti e ragionamenti inventati.

La definizione va mantenuta stretta. Qui parliamo soprattutto di modelli linguistici e altri sistemi generativi, non di ogni tecnologia chiamata “IA”. Inoltre, non ogni risposta sbagliata nasce da un’allucinazione.

La prima mossa non è chiedere al chatbot se è sicuro. È separare la risposta in affermazioni controllabili e domandarsi: quale di queste cambierebbe una decisione, una pubblicazione o un’azione? Quelle affermazioni richiedono prove esterne.

Non ogni risposta sbagliata è un’allucinazione

Un risultato può essere errato perché i dati sono obsoleti, una richiesta è ambigua, un calcolo è stato eseguito male, uno strumento ha restituito un valore sbagliato oppure un passaggio del workflow non ha funzionato. In questi casi, chiamare tutto “allucinazione” nasconde la causa utile da correggere.

Se non sai da dove proviene l’errore, descrivi ciò che osservi: “la fonte non esiste”, “il totale non è riproducibile”, “la risposta contraddice il documento fornito” o “il dato non è aggiornato”. Per la mappa più ampia delle cause, consulta Perché l’intelligenza artificiale sbaglia.

Questa distinzione conta anche operativamente. Una fonte inventata richiede un controllo sull’output generato; un dato obsoleto richiede una base informativa aggiornata; un errore di strumento richiede test di integrazione e log. La stessa etichetta non conduce alla stessa soluzione.

Perché un’allucinazione può sembrare vera

Un modello linguistico produce sequenze di testo coerenti a partire da schemi appresi. La sua capacità di completare una risposta plausibile non equivale a un controllo automatico di verità su ogni frase.

La credibilità percepita aumenta quando l’output contiene:

  • una struttura familiare, come un rapporto o una risposta enciclopedica;
  • dettagli specifici, date e nomi propri;
  • un tono uniforme e privo di esitazioni;
  • spiegazioni causali che collegano bene le frasi;
  • citazioni con la forma corretta di un titolo, un autore o un DOI.

Secondo una ricerca pubblicata da OpenAI, alcuni meccanismi di addestramento e valutazione possono premiare il tentativo di indovinare più dell’astensione. È una spiegazione proposta dagli autori, non l’unica causa universale. Il punto pratico resta: lo stile della risposta non misura la qualità delle prove.

Come si presenta un’allucinazione

Non sempre appare come un’assurdità evidente. Può essere:

  • un fatto, una data o un’entità inventata;
  • una citazione attribuita a una persona che non l’ha pronunciata;
  • un articolo, una sentenza o uno studio inesistente;
  • una fonte reale che non sostiene la frase associata;
  • un dettaglio aggiunto oltre ciò che il documento fornito consente di dire;
  • una risposta che si contraddice internamente o contraddice il contesto disponibile.

La forma più insidiosa è spesso il mismatch tra fonte e affermazione. Il link esiste, il dominio è autorevole e il titolo sembra pertinente, ma il passaggio citato non dimostra la conclusione. Per questo trovare la pagina non conclude la verifica.

Una fonte citata non è ancora una prova

Tratta ogni citazione generata come un’altra affermazione da controllare. Verifica almeno cinque elementi:

  1. Esistenza: il documento, l’autore e l’editore esistono?
  2. Accessibilità: puoi aprire la fonte originale o soltanto riferimenti che si copiano a vicenda?
  3. Data: la fonte è corrente per la decisione?
  4. Autorità: è una fonte primaria o competente per quella specifica affermazione?
  5. Supporto esatto: il testo sostiene davvero la formulazione, la popolazione, l’intervallo temporale e la conclusione?

Chiedere allo stesso modello “sei sicuro?” o “dammi altre fonti” può aiutare a esplorare, ma non è una verifica indipendente. Il modello può ripetere, correggere o sostituire il contenuto senza offrirti una prova esterna.

Web e RAG possono aiutare, senza garantire la verità

La ricerca sul web e la retrieval-augmented generation possono fornire al modello un contesto più pertinente. Questo può ridurre alcuni errori, ma non rende automaticamente supportata ogni frase.

Una ricerca presentata a ICLR 2025 distingue due problemi: il contesto recuperato può essere insufficiente per rispondere, oppure il modello può rispondere male o non astenersi anche quando il contesto non basta. Il risultato dipende dal compito, dal sistema e dai documenti: non esiste una percentuale universale trasferibile a ogni implementazione.

Anche in un ambiente aziendale privato, accesso controllato e protezione dei dati non provano l’accuratezza. L’IA privata per le aziende risponde a domande su esposizione e controllo delle informazioni; la verifica fattuale resta un lavoro distinto.

Quanto devi verificare? Dipende dalle conseguenze

La scala seguente è una sintesi editoriale M4TIC, non uno standard formale. Considera conseguenza, reversibilità e accesso alle prove.

INS-0007 · SCALA DI VERIFICA BASATA SULLE CONSEGUENZEQuanto devi verificare una risposta dell’IA?

Più grave o difficile da annullare è la conseguenza di un errore, più la verifica deve essere indipendente, documentata e qualificata.

  1. Bassa conseguenza e reversibile

    Controllo di base

    Uso tipico

    Idee iniziali o una bozza interna non fattuale.

    Verifica minima

    Controlla la plausibilità e indica chiaramente che il contenuto non è verificato.

    Fermati o passa al livello 2

    Se compaiono fatti, persone, citazioni, statistiche o fonti che influenzano il risultato.

  2. Rilevante ma reversibile

    Controllo diretto delle prove

    Uso tipico

    Appunti di ricerca, testo per un cliente o analisi interna correggibile.

    Verifica minima

    Apri la fonte primaria, verifica supporto, data e contesto; riproduci calcoli o risultati degli strumenti.

    Fermati o passa al livello 3

    Se la fonte non è accessibile, è superata, non sostiene l’affermazione o le prove sono in conflitto.

  3. Alta conseguenza o difficile da annullare

    Verifica indipendente e qualificata

    Uso tipico

    Decisioni su salute, diritti, finanza, sicurezza, lavoro o ambiti regolamentati.

    Verifica minima

    Ottieni prove autorevoli indipendenti e la revisione di una persona qualificata e responsabile.

    Fermati e coinvolgi un esperto

    Non procedere se mancano prove adeguate, procedure applicabili o una revisione umana qualificata.

Chiedere di nuovo allo stesso modello è una ripetizione, non una verifica indipendente.

Sintesi editoriale M4TIC. La scala indica un livello minimo di controllo: non assegna un punteggio di fiducia e non garantisce che una risposta sia vera.

Il livello descrive il minimo. Anche un uso leggero deve salire quando introduce un’affermazione materiale.

Esempio pratico: una citazione che sembra reale

Immagina che un chatbot scriva: “Lo studio Operational Cognition Index 2024 di Elena Valli dimostra che l’automazione conversazionale riduce i tempi decisionali nelle PMI”, aggiungendo il riferimento 10.48100/oci.2024.117.

Lo scenario è interamente fittizio. Serve a mostrare il metodo:

  1. isola l’affermazione: esistenza dello studio, autrice, anno, risultato e popolazione;
  2. cerca direttamente nel registro DOI, nel sito dell’editore o in una banca dati autorevole;
  3. se il lavoro esiste, apri abstract e testo per verificare la conclusione esatta;
  4. controlla che il campione riguardi davvero PMI e che “riduce” non sostituisca una semplice correlazione;
  5. se la decisione è materiale, cerca conferma indipendente.

La classificazione finale può essere supportata, contraddetta, non verificabile oppure fuori perimetro. “Il chatbot ha ripetuto la stessa risposta” non è una quinta categoria.

Quando non usare la risposta

Non usare l’output come base fattuale quando la fonte primaria non è accessibile, le fonti si contraddicono senza una risoluzione competente, il testo supera ciò che la fonte consente di dire o la decisione ha conseguenze elevate senza una revisione qualificata.

Non basta aggiungere una formula come “potrebbe contenere errori” a valle. Se il contenuto alimenta un processo, bisogna definire quali affermazioni richiedono prova, chi può approvarle e cosa accade quando la prova manca.

Quando la verifica passa dalla singola risposta a un sistema operativo, servono casi di prova, limiti, escalation e recupero. La guida Come testare un agente AI prima del lancio mostra come impostare quel controllo a livello di workflow.

Lascia che siano le prove a determinare la fiducia

Un’allucinazione non è facile da riconoscere soltanto dal tono. La risposta più professionale non è diffidare di tutto né credere alla forma: è applicare un controllo adeguato alla conseguenza.

Usa l’IA per esplorare, strutturare e accelerare. Prima di pubblicare, decidere o agire, porta le affermazioni materiali fuori dalla conversazione e dentro un processo di verifica indipendente. Quando le prove non bastano, l’azione corretta è fermarsi.

Fonti e approfondimenti

Indicazioni primarie dietro questo articolo.

  1. Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile — NIST AI 600-1NIST

    Profilo del luglio 2024 su confabulation, contenuti falsi, contraddizioni e citazioni inventate.

  2. Siren’s Song in the AI Ocean: A Survey on Hallucination in Large Language ModelsComputational Linguistics / ACL Anthology

    Rassegna peer-reviewed del 2025 su definizioni, tassonomie, rilevamento e mitigazione.

  3. Why language models hallucinateOpenAI

    Ricerca del provider su previsione del testo, incertezza, astensione e incentivi a indovinare.

  4. Sufficient Context: A New Lens on Retrieval Augmented Generation SystemsGoogle Research / ICLR 2025

    Ricerca su contesto recuperato insufficiente, correttezza e capacità di astenersi.

  5. AI RMF — Valid and Reliable / Context of UseNIST AI Resource Center

    Inquadramento del rischio e dell’affidabilità in funzione del contesto d’uso.