Documentare i modelli e i dati
Schede del modello e schede dei dati: i due documenti da richiedere prima di introdurre un sistema.
ObiettivoSapere che cosa contengono una scheda del modello e una scheda del set di dati, e che cosa cercarvi.
Nel 2019 alcuni ricercatori propongono le schede del modello, o model cards. Sono documenti brevi che descrivono l’uso previsto di un modello, le sue prestazioni misurate per gruppo, i suoi limiti noti e gli usi sconsigliati. Le schede dei dati, o datasheets, fanno lo stesso per un set di dati: provenienza, composizione, raccolta, consenso e aggiornamenti.
Che cosa cercarvi
- L’uso previsto, e soprattutto gli usi per cui il modello non è stato valutato.
- I risultati suddivisi per gruppo, non solo una media.
- La data e la provenienza dei dati.
- I limiti che il fornitore stesso riconosce.
Riferimenti
- Mitchell, Wu, Zaldivar et al. (2019). Model Cards for Model Reporting. Proceedings of FAT* 2019, p. 220–229. doi.org/10.1145/3287560.3287596
- Gebru, Morgenstern, Vecchione et al. (2021). Datasheets for Datasets. Communications of the ACM 64(12), p. 86–92. doi.org/10.1145/3458723