La domanda non è se un’AI sbaglierà mai. È se lo scoprirai prima del cliente.

Carichi un nuovo listino. Da quel momento l’agente risponde diversamente - e non sai a quali domande finché qualcuno non si lamenta. È la proprietà più scomoda dei modelli linguistici: cambiano in silenzio.

Per questo Leeeds sa salvare le domande che ricevi più spesso e rieseguirle dopo ogni cambio di materiale. Il risultato non dice solo «passato / non passato»: dice soprattutto che queste tre risposte si sono mosse dall’ultima volta.

Accanto c’è l’estratto di audit: una riga per ogni risposta inviata, con che cosa rispondeva, da quali fonti, se una persona l’ha riscritta prima dell’invio e chi l’ha approvata.

Leggere tutte le risposte funziona per una settimana. Con venti conversazioni al giorno non lo fa nessuno, il controllo si spegne in silenzio - ed è esattamente allora che cambia il listino.

Nemmeno confrontare i testi basta. Il modello riformula la frase a ogni esecuzione, quindi un confronto carattere per carattere segnalerebbe una modifica ogni volta. Quel rapporto, dopo la seconda settimana, non lo apre più nessuno.

Si confronta perciò la sostanza: i numeri della risposta e le fonti su cui si appoggia. «Il prezzo è 1.490 EUR» e «Il nostro prezzo ammonta a 1.490 EUR» sono la stessa cosa. 1.990, oppure lo stesso prezzo improvvisamente da un altro documento, è una modifica.

Prima di cambiare il listino. Esegui la serie, cambi il listino, esegui di nuovo. La differenza è un elenco di risposte che si sono mosse - cinque minuti di lettura al posto di duecento conversazioni.

All’avvio di un nuovo agente. Venti domande tra quelle che ricevi più spesso sono il modo più economico per scoprire se la base è pronta, senza provarlo sui clienti.

Per clienti più grandi e regolati. L’estratto di audit risponde al «come siete arrivati a quella risposta» che un ufficio legale prima o poi pone. La colonna «riscritto» sta a parte, perché è la prima cosa che cerca un revisore.

In caso di contestazione. Quando l’agente sbaglia per la prima volta, la differenza tra un’azienda che sa da che cosa e per mano di chi e una che non lo sa è decisiva.

Un’IA di cui fidarsi non è un’IA che non sbaglia mai. È un’IA per cui sai quando, dove e perché - e ce l’hai nero su bianco.

Salva le venti domande che ricevi più spesso. È mezz’ora di lavoro, e da quel momento sai di ogni modifica.