1) Comprendere il contesto educativo<\/h3>\n
Le prime due fasi sono molto complicate, poich\u00e9 ci\u00f2 che \u00e8 possibile fare dipende anche dai dati disponibili2<\/sup>. Inoltre, la progettazione di strumenti educativi \u00e8 soggetta a leggi che impongono restrizioni sull'uso dei dati e sui tipi di algoritmi che possono essere utilizzati.<\/p>\n\n Una volta identificati gli obiettivi e i fattori che vi contribuiscono, l'attenzione si sposta sui dati necessari, sulle modalit\u00e0 di approvvigionamento e di etichettatura, sulla gestione della privacy e sulla misurazione della qualit\u00e0 dei dati3<\/sup>. Affinch\u00e9 un'applicazione di apprendimento automatico abbia successo, i dataset devono essere sufficientemente grandi, diversificati e ben etichettati.<\/p>\n\n\n[caption id=\"attachment_279\" align=\"alignright\" width=\"367\"] L'apprendimento automatico (ML) richiede dati per addestrare il modello e dati su cui lavorare o fare previsioni. Per alcuni compiti di ML, come il riconoscimento dei volti e degli oggetti, sono gi\u00e0 disponibili molti database pubblici e privati per l'addestramento.<\/p>\n Se non sono gi\u00e0 disponibili in forma utilizzabile, \u00e8 possibile che i dataset esistenti debbano essere aggiunti o rietichettati per adattarsi alle esigenze del progetto. In caso contrario, potrebbe essere necessario creare ed etichettare da zero set di dati dedicati. Anche le tracce digitali generate dallo studente durante l'utilizzo di un'applicazione potrebbero essere utilizzate come una delle fonti di dati.<\/p>\n In ogni caso, i dati e le caratteristiche rilevanti per il problema devono essere accuratamente identificati2<\/sup>. Le caratteristiche irrilevanti o ridondanti possono spingere un algoritmo a trovare falsi modelli e influenzare le prestazioni del sistema2<\/sup>. Poich\u00e9 la macchina pu\u00f2 trovare modelli solo nei dati che le vengono forniti, la sceltadel dataset definisce implicitamente anche il problema4<\/sup>. Se sono disponibili molti dati, \u00e8 necessario selezionarne un sottoinsieme con l'aiuto di tecniche statistiche e verificare i dati per evitare errori e distorsioni.<\/p>\n Come esempio di dati di addestramento errati, in una vicenda risalente agli albori della computer vision, un modello fu addestrato a discriminare tra immagini di carri armati russi e americani. Si scopr\u00ec in seguito che la sua elevata precisione era dovuta al fatto che i carri armati russi erano stati fotografati in una giornata nuvolosa e quelli americani in una giornata di sole4<\/sup>.<\/p>\n Pertanto, il dataset scelto deve essere verificato per la sua qualit\u00e0, tenendo conto del motivo per cui \u00e8 stato creato, cosa contiene, quali sono i processi utilizzati per la raccolta, la pulizia e l'etichettatura, la distribuzione e la manutenzione4<\/sup>. Le domande chiave da porre sono I dataset sono adatti agli scopi per cui sono stati concepiti?<\/em>\u00a0e\u00a0I dataset contengono rischi nascosti che possono rendere i modelli distorti o discriminatori<\/em>3<\/sup>?\n La preparazione dei dati comporta la creazione di dataset unendo i dati disponibili in luoghi diversi, correggendo le incongruenze (per esempio, alcuni punteggi dei test potrebbero essere su una scala da 1 a 10, mentre altri sono dati in percentuale) e cercando valori mancanti o estremi. Si possono poi eseguire test automatizzati per verificare la qualit\u00e0 dei dataset. Ci\u00f2 include il controllo di eventuali fughe di notizie sulla privacy e di correlazioni o stereotipi imprevisti2<\/sup>. In questa fase, i dataset possono anche essere suddivisi in dataset di allenamento e di test. Il primo viene utilizzato per addestrare il modello e il secondo per verificarne le prestazioni. Eseguire un test sul dataset di addestramento sarebbe come distribuire il foglio d'esame il giorno prima per i compiti a casa: la prestazione dello studente all'esame non indicher\u00e0 la sua comprensione2<\/sup>.\n Nella maggior parte dei progetti, i modelli iniziali rivelano problemi nei dati che richiedono un passaggio continuo tra le fasi 2 e 32<\/sup>. Finch\u00e9 esiste una forte correlazione tra le caratteristiche dei dati e il valore di uscita, \u00e8 molto probabile che un algoritmo di apprendimento automatico generi buone previsioni.<\/p>\n Questi algoritmi utilizzano tecniche statistiche e di calcolo avanzate per elaborare i dati. I programmatori devono regolare le impostazioni e provare diversi algoritmi per ottenere i risultati migliori. Prendiamo un'applicazione che rileva gli imbrogli. Un falso positivo si ha quando viene segnalato uno studente che non ha imbrogliato. Un falso negativo \u00e8 quando uno studente che imbroglia non viene segnalato. I progettisti del sistema possono mettere a punto il modello per ridurre al minimo i falsi positivi, in cui alcuni comportamenti di imbroglio potrebbero essere ignorati, o i falsi negativi, in cui anche i casi dubbi vengono segnalati.5 <\/sup>La messa a punto (tuning) dipende quindi da ci\u00f2 che vogliamo che il sistema faccia.<\/p>\n\n Anche se viene dato come passo finale, l'intero processo \u00e8 iterativo. Dopo l'implementazione, il modello deve essere rivisto regolarmente per verificare se \u00e8 ancora pertinente al contesto. Le esigenze, i processi o le modalit\u00e0 di acquisizione dei dati potrebbero cambiare, influenzando l'output del sistema. Pertanto, l'applicazione deve essere rivista e aggiornata quando necessario. Il sistema deve essere monitorato costantemente per verificarne l'impatto sull'apprendimento, l'insegnamento e la valutazione.6\n<\/sup> Nota:<\/strong> Sia le fasi qui elencate che l'illustrazione sono adattate alle fasi e ai compiti di CRISP-DM Datascience (basati sulla figura 3 di Chapman, Clinton, Kerber, et al. 1999) come descritto in2.<\/sup><\/p>\n\n\n 1 <\/sup>Du Boulay, B., Poulovasillis, A., Holmes, W., Mavrikis, M., Artificial Intelligence And Big Data Technologies To Close The Achievement Gap,<\/em>in Luckin, R., ed. Enhancing Learning and Teaching with Technology, London: UCL Institute of Education Press, pp. 256\u2013285, 2018.<\/p>\n 2<\/sup> Kelleher, J.D, Tierney, B, Data Science<\/em>, London, 2018.<\/p>\n 3 <\/sup>Hutchinson, B., Smart, A., Hanna, A., Denton, E., Greer, C., Kjartansson, O., Barnes, P., Mitchell, M., Towards Accountability for Machine Learning Datasets: Practices from Software Engineering and Infrastructure<\/a><\/em>, Proceedings of the 2021 ACM Conference on Fairness, Accountability, and Transparency, Association for Computing Machinery, New York, 2021.<\/p>\n 4 <\/sup>Barocas, S.,\u00a0 Hardt, M., Narayanan, A., Fairness and machine learning Limitations and Opportunities<\/a>, <\/em>2022.<\/p>\n 5 <\/sup>Schneier, B., Data and Goliath: The Hidden Battles to Capture Your Data and Control Your World, <\/em>W. W. Norton & Company, 2015.<\/p>\n 6 <\/sup>Ethical guidelines on the use of artificial intelligence and data in teaching and learning for educators<\/a><\/em>, European Commission, October 2022.<\/p>","rendered":" La progettazione e l’implementazione di un progetto incentrato sui dati potrebbe essere suddivisa in 6 fasi. Le fasi si susseguono e l’intero processo pu\u00f2 essere ripetuto pi\u00f9 volte per ottenere il risultato desiderato.<\/p>\n Per essere efficaci in classe, i team multidisciplinari con insegnanti, esperti pedagogici e informatici dovrebbero essere coinvolti in ogni fase del processo1<\/sup>. Gli esperti umani sono necessari per identificare l’esigenza e progettare il processo, progettare e preparare i dati, selezionare gli algoritmi di ML, interpretare criticamente i risultati e pianificare l’utilizzo dell’applicazione2<\/sup>.<\/p>\n Le prime due fasi sono molto complicate, poich\u00e9 ci\u00f2 che \u00e8 possibile fare dipende anche dai dati disponibili2<\/sup>. Inoltre, la progettazione di strumenti educativi \u00e8 soggetta a leggi che impongono restrizioni sull’uso dei dati e sui tipi di algoritmi che possono essere utilizzati.<\/p>\n Una volta identificati gli obiettivi e i fattori che vi contribuiscono, l’attenzione si sposta sui dati necessari, sulle modalit\u00e0 di approvvigionamento e di etichettatura, sulla gestione della privacy e sulla misurazione della qualit\u00e0 dei dati3<\/sup>. Affinch\u00e9 un’applicazione di apprendimento automatico abbia successo, i dataset devono essere sufficientemente grandi, diversificati e ben etichettati.<\/p>\n L’apprendimento automatico (ML) richiede dati per addestrare il modello e dati su cui lavorare o fare previsioni. Per alcuni compiti di ML, come il riconoscimento dei volti e degli oggetti, sono gi\u00e0 disponibili molti database pubblici e privati per l’addestramento.<\/p>\n Se non sono gi\u00e0 disponibili in forma utilizzabile, \u00e8 possibile che i dataset esistenti debbano essere aggiunti o rietichettati per adattarsi alle esigenze del progetto. In caso contrario, potrebbe essere necessario creare ed etichettare da zero set di dati dedicati. Anche le tracce digitali generate dallo studente durante l’utilizzo di un’applicazione potrebbero essere utilizzate come una delle fonti di dati.<\/p>\n In ogni caso, i dati e le caratteristiche rilevanti per il problema devono essere accuratamente identificati2<\/sup>. Le caratteristiche irrilevanti o ridondanti possono spingere un algoritmo a trovare falsi modelli e influenzare le prestazioni del sistema2<\/sup>. Poich\u00e9 la macchina pu\u00f2 trovare modelli solo nei dati che le vengono forniti, la sceltadel dataset definisce implicitamente anche il problema4<\/sup>. Se sono disponibili molti dati, \u00e8 necessario selezionarne un sottoinsieme con l’aiuto di tecniche statistiche e verificare i dati per evitare errori e distorsioni.<\/p>\n Come esempio di dati di addestramento errati, in una vicenda risalente agli albori della computer vision, un modello fu addestrato a discriminare tra immagini di carri armati russi e americani. Si scopr\u00ec in seguito che la sua elevata precisione era dovuta al fatto che i carri armati russi erano stati fotografati in una giornata nuvolosa e quelli americani in una giornata di sole4<\/sup>.<\/p>\n Pertanto, il dataset scelto deve essere verificato per la sua qualit\u00e0, tenendo conto del motivo per cui \u00e8 stato creato, cosa contiene, quali sono i processi utilizzati per la raccolta, la pulizia e l’etichettatura, la distribuzione e la manutenzione4<\/sup>. Le domande chiave da porre sono I dataset sono adatti agli scopi per cui sono stati concepiti?<\/em>\u00a0e\u00a0I dataset contengono rischi nascosti che possono rendere i modelli distorti o discriminatori<\/em>3<\/sup>? La preparazione dei dati comporta la creazione di dataset unendo i dati disponibili in luoghi diversi, correggendo le incongruenze (per esempio, alcuni punteggi dei test potrebbero essere su una scala da 1 a 10, mentre altri sono dati in percentuale) e cercando valori mancanti o estremi. Si possono poi eseguire test automatizzati per verificare la qualit\u00e0 dei dataset. Ci\u00f2 include il controllo di eventuali fughe di notizie sulla privacy e di correlazioni o stereotipi imprevisti2<\/sup>. In questa fase, i dataset possono anche essere suddivisi in dataset di allenamento e di test. Il primo viene utilizzato per addestrare il modello e il secondo per verificarne le prestazioni. Eseguire un test sul dataset di addestramento sarebbe come distribuire il foglio d’esame il giorno prima per i compiti a casa: la prestazione dello studente all’esame non indicher\u00e0 la sua comprensione2<\/sup>. Nella maggior parte dei progetti, i modelli iniziali rivelano problemi nei dati che richiedono un passaggio continuo tra le fasi 2 e 32<\/sup>. Finch\u00e9 esiste una forte correlazione tra le caratteristiche dei dati e il valore di uscita, \u00e8 molto probabile che un algoritmo di apprendimento automatico generi buone previsioni.<\/p>\n Questi algoritmi utilizzano tecniche statistiche e di calcolo avanzate per elaborare i dati. I programmatori devono regolare le impostazioni e provare diversi algoritmi per ottenere i risultati migliori. Prendiamo un’applicazione che rileva gli imbrogli. Un falso positivo si ha quando viene segnalato uno studente che non ha imbrogliato. Un falso negativo \u00e8 quando uno studente che imbroglia non viene segnalato. I progettisti del sistema possono mettere a punto il modello per ridurre al minimo i falsi positivi, in cui alcuni comportamenti di imbroglio potrebbero essere ignorati, o i falsi negativi, in cui anche i casi dubbi vengono segnalati.5 <\/sup>La messa a punto (tuning) dipende quindi da ci\u00f2 che vogliamo che il sistema faccia.<\/p>\n Anche se viene dato come passo finale, l’intero processo \u00e8 iterativo. Dopo l’implementazione, il modello deve essere rivisto regolarmente per verificare se \u00e8 ancora pertinente al contesto. Le esigenze, i processi o le modalit\u00e0 di acquisizione dei dati potrebbero cambiare, influenzando l’output del sistema. Pertanto, l’applicazione deve essere rivista e aggiornata quando necessario. Il sistema deve essere monitorato costantemente per verificarne l’impatto sull’apprendimento, l’insegnamento e la valutazione.6 Nota:<\/strong> Sia le fasi qui elencate che l’illustrazione sono adattate alle fasi e ai compiti di CRISP-DM Datascience (basati sulla figura 3 di Chapman, Clinton, Kerber, et al. 1999) come descritto in2.<\/sup><\/p>\n 1 <\/sup>Du Boulay, B., Poulovasillis, A., Holmes, W., Mavrikis, M., Artificial Intelligence And Big Data Technologies To Close The Achievement Gap,<\/em>in Luckin, R., ed. Enhancing Learning and Teaching with Technology, London: UCL Institute of Education Press, pp. 256\u2013285, 2018.<\/p>\n 2<\/sup> Kelleher, J.D, Tierney, B, Data Science<\/em>, London, 2018.<\/p>\n 3 <\/sup>Hutchinson, B., Smart, A., Hanna, A., Denton, E., Greer, C., Kjartansson, O., Barnes, P., Mitchell, M., Towards Accountability for Machine Learning Datasets: Practices from Software Engineering and Infrastructure<\/a><\/em>, Proceedings of the 2021 ACM Conference on Fairness, Accountability, and Transparency, Association for Computing Machinery, New York, 2021.<\/p>\n 4 <\/sup>Barocas, S.,\u00a0 Hardt, M., Narayanan, A., Fairness and machine learning Limitations and Opportunities<\/a>, <\/em>2022.<\/p>\n![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step1-683x1024-1.png\")
Il primo passo nella progettazione di uno strumento AIED \u00e8 la comprensione delle esigenze della classe. Una volta fissati gli obiettivi, bisogna capire come raggiungerli: quali fattori considerare e quali ignorare. Qualsiasi soluzione basata sui dati \u00e8 orientata verso fenomeni che possono essere facilmente calcolati e standardizzati3<\/sup>. Pertanto, ogni decisione deve essere discussa dagli insegnanti che utilizzeranno lo strumento, dagli esperti di pedagogia che possono garantire che tutte le decisioni siano fondate su una teoria comprovata e dagli informatici che comprendono il funzionamento degli algoritmi.<\/p>\n2) Comprendere i dati<\/h3>\n
![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-MNIST-e1697986859822-1024x946-1.png\")
Adattato da \"File:MnistExamples.png\" di Josef Steppan pubblicato con licenza CC BY-SA 4.0. Per visualizzare una copia di questa licenza, visitare https:\/\/creativecommons.org\/licenses\/by-sa\/4.0\/?ref=openverse<\/a>[\/caption]\n![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step2.png\")
<\/p>\n\n3) Preparare i dati<\/h3>\n
![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step3.png\")
<\/p>\n\n4) Modellazione<\/h3>\n
![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step4.png\")
In questa fase, gli algoritmi vengono utilizzati per estrarre schemi dai dati<\/a> e creare modelli<\/a>. Di solito vengono testati diversi algoritmi per vedere quale funziona meglio. Questi modelli possono poi essere utilizzati per fare previsioni su nuovi dati.<\/p>\n5) Valutazione<\/h3>\n
![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step5.png\")
Durante la fase di modellazione, ogni modello pu\u00f2 essere messo a punto per l'accuratezza della previsione sul dataset di addestramento. I modelli vengono poi testati sul dataset di prova e viene scelto un modello da utilizzare. Questo modello viene valutato anche in base a come risponde alle esigenze educative: gli obiettivi stabiliti nella fase 1 sono stati raggiunti? Ci sono problemi imprevisti? La qualit\u00e0 \u00e8 buona? Si pu\u00f2 migliorare o fare qualcosa in un altro modo? \u00c8 necessaria una riprogettazione? L'obiettivo principale \u00e8 decidere se l'applicazione pu\u00f2 essere utilizzata nelle scuole. In caso contrario, si ricomincia l'intero processo.2<\/sup><\/p>\n\n6) Implementazione (deployment)<\/h3>\n
![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch3-page-4-step6.png\")
La fase finale di questo processo consiste nel vedere come integrare l'applicazione basata sui dati con il sistema scolastico per ottenere i massimi benefici, sia per quanto riguarda l'infrastruttura tecnica che le pratiche didattiche.<\/p>\n![\"\"](\"http:\/\/aiopentext.itd.cnr.it\/wp-content\/uploads\/sites\/12\/2023\/11\/ch1-page-4-ethical-guidelines-1024x724-1.png\")
<\/sup>\nLe Linee guida etiche sull'uso dell'IA e dei dati per gli educatori sottolineano che la scuola dovrebbe essere in contatto con il fornitore di servizi di IA per tutto il ciclo di vita del sistema di IA, anche prima dell'implementazione. Dovrebbe richiedere una documentazione tecnica chiara e chiedere chiarimenti sui punti poco chiari. \u00c8 necessario stipulare un accordo per l'assistenza e la manutenzione e accertarsi che il fornitore abbia rispettato tutti gli obblighi di legge6<\/sup>.<\/p>\n
\n1) Comprendere il contesto educativo<\/h3>\n
Il primo passo nella progettazione di uno strumento AIED \u00e8 la comprensione delle esigenze della classe. Una volta fissati gli obiettivi, bisogna capire come raggiungerli: quali fattori considerare e quali ignorare. Qualsiasi soluzione basata sui dati \u00e8 orientata verso fenomeni che possono essere facilmente calcolati e standardizzati3<\/sup>. Pertanto, ogni decisione deve essere discussa dagli insegnanti che utilizzeranno lo strumento, dagli esperti di pedagogia che possono garantire che tutte le decisioni siano fondate su una teoria comprovata e dagli informatici che comprendono il funzionamento degli algoritmi.<\/p>\n2) Comprendere i dati<\/h3>\n
\n<\/p>\n3) Preparare i dati<\/h3>\n
\n<\/p>\n4) Modellazione<\/h3>\n
In questa fase, gli algoritmi vengono utilizzati per estrarre schemi dai dati<\/a> e creare modelli<\/a>. Di solito vengono testati diversi algoritmi per vedere quale funziona meglio. Questi modelli possono poi essere utilizzati per fare previsioni su nuovi dati.<\/p>\n5) Valutazione<\/h3>\n
Durante la fase di modellazione, ogni modello pu\u00f2 essere messo a punto per l’accuratezza della previsione sul dataset di addestramento. I modelli vengono poi testati sul dataset di prova e viene scelto un modello da utilizzare. Questo modello viene valutato anche in base a come risponde alle esigenze educative: gli obiettivi stabiliti nella fase 1 sono stati raggiunti? Ci sono problemi imprevisti? La qualit\u00e0 \u00e8 buona? Si pu\u00f2 migliorare o fare qualcosa in un altro modo? \u00c8 necessaria una riprogettazione? L’obiettivo principale \u00e8 decidere se l’applicazione pu\u00f2 essere utilizzata nelle scuole. In caso contrario, si ricomincia l’intero processo.2<\/sup><\/p>\n6) Implementazione (deployment)<\/h3>\n
La fase finale di questo processo consiste nel vedere come integrare l’applicazione basata sui dati con il sistema scolastico per ottenere i massimi benefici, sia per quanto riguarda l’infrastruttura tecnica che le pratiche didattiche.<\/p>\n
\n<\/sup><\/sup>
\nLe Linee guida etiche sull’uso dell’IA e dei dati per gli educatori sottolineano che la scuola dovrebbe essere in contatto con il fornitore di servizi di IA per tutto il ciclo di vita del sistema di IA, anche prima dell’implementazione. Dovrebbe richiedere una documentazione tecnica chiara e chiedere chiarimenti sui punti poco chiari. \u00c8 necessario stipulare un accordo per l’assistenza e la manutenzione e accertarsi che il fornitore abbia rispettato tutti gli obblighi di legge6<\/sup>.<\/p>\n
\n