Quando le fonti fanno inventare l'AI: il ruolo del retrieval nei sistemi RAG
Può succedere che aggiungere fonti renda un assistente più incline a inventare. Nei sistemi retrieval-augmented (RAG) un retriever cerca passaggi rilevanti in una base di documenti e un generatore usa quei passaggi per comporre la risposta. Quando il retriever fallisce o porta testi parzialmente fuori tema, il generatore può comunque condensare quei segnali in affermazioni plausibili ma non supportate.
Come funziona il problema
L'architettura RAG combina un modulo di retrieval (che seleziona passaggi) e un generatore che produce la risposta a partire da quei passaggi. La qualità del retriever, cioè quanto i documenti recuperati sono davvero rilevanti, condiziona direttamente l'accuratezza delle risposte: passaggi non pertinenti possono indurre il generatore a formulare informazioni non supportate dai documenti.
Aspetti chiave da comprendere
- Qualità del retrieval: è il fattore determinante per l'accuratezza finale in sistemi RAG.
- Rischio di risposte plausibili ma non fondate: il generatore può integrare segnali fuorvianti e produrre affermazioni apparentemente convincenti.
- Migliorare il retrieval riduce errori: valutazioni e implementazioni pratiche mostrano che retriever più efficaci e ranking migliore riducono gli errori attribuibili al recupero.
Come verificare rapidamente una risposta
- Chiedere all'assistente di mostrare i passaggi esatti (quote) e la fonte precisa prima di fidarsi di una risposta.
- Se possibile, ripetere la domanda senza retrieval o con un insieme diverso di documenti per vedere se la risposta cambia.
Limiti e cautele
Il comportamento descritto dipende dall'implementazione concreta: non tutti gli assistenti espongono il retriever né permettono di cambiare l'indice. Le evidenze provengono da ricerche e prototipi; l'impatto pratico varia in base alla qualità dell'insieme di documenti e al training del generatore.
Conclusione
Quindi, l'aggiunta di fonti aiuta solo se il retriever trova passaggi davvero rilevanti.


