Conoscenze datate ed eccesso di sicurezza
Individuate una risposta fondata su conoscenze vecchie e neutralizzate la tendenza del modello a darvi ragione.
ObiettivoAlla fine di questa lezione saprete individuare una risposta fondata su conoscenze vecchie e formulare le vostre domande per ottenere la critica invece della conferma.
Un modello è addestrato su testi fino a una certa data. Dopo non impara più nulla da solo. Le leggi cambiano, i prezzi evolvono, le imprese si fondono, le raccomandazioni si aggiornano. Senza uno strumento di ricerca, il modello risponde con lo stato del mondo alla sua data di addestramento, senza necessariamente segnalarlo.
Individuare una conoscenza datata
- La risposta non cita alcuna fonte pur riguardando un tema che evolve.
- La sequenza delle tappe non mostra alcuna ricerca.
- Gli esempi sembrano vecchi o le cifre troppo tonde.
- Il modello descrive al presente una situazione che può essere cambiata.
La data di una fonte conta quanto il suo contenuto. Una pagina ufficiale di cinque anni fa può descrivere una regola che non esiste più. Chiedete sempre la data, soprattutto per il diritto, le tariffe e le raccomandazioni.
L’eccesso di sicurezza
Il secondo difetto è più sottile. Un modello scrive con lo stesso tono sicuro, che abbia ragione o torto. Raramente sfuma da sé e tende ad assecondare la domanda. Se chiedete perché un metodo è il migliore, spiegherà perché, anche se non lo è.
Perché il nostro piano di formazione è buono?
Ecco il nostro piano di formazione. Individua i suoi tre punti più deboli e ciò che uno sguardo esterno esigente criticherebbe. Sii diretto.
Chiedete la critica invece della conferma, il che neutralizza la tendenza del modello a darvi ragione.
Learnya risponde con il contraddittorio. Per i compiti importanti, un agente dedicato cerca ciò che contraddice la conclusione. Le sue obiezioni vi danno ciò che il modello non dà spontaneamente: i limiti della risposta e le ragioni per dubitarne.