Capitolo 3 Le prove standardizzate di geografia

3.1 Modello di competenza in Geografia

Come illustrato nel capitolo precedente, il primo passo per la realizzazione delle prove standardizzate è la definizione da parte degli esperti disciplinari dei contenuti da testare. Questi partono dai contenuti del Piano di studio della scuola dell’obbligo ticinese (Divisione della scuola, 2022). La scelta dei contenuti deve essere funzionale sia al processo di valutazione sia al funzionamento del sistema scuola nel suo insieme. Anche per quanto riguarda le prove standardizzate di geografia, gli esercizi proposti trovano fondamento nel modello di competenza descritto nella sezione disciplinare del Piano di studio per la scuola media recentemente perfezionato. Essi sono distribuiti nei diversi ambiti di competenza indicati nella figura 3.1. Con riferimento ai processi disciplinari di competenza, si è per contro concentrata l’attenzione sullo sviluppo della capacità di “suddividere” un territorio (cf. figura 3.1).

Figura 3.1: Modello di competenza

Modello di competenza

3.2 Campi e aspetti della ricerca

Attraverso il processo “suddividere” si apprende a riconoscere e definire trame geografiche: qualificando elementi geografici, localizzandoli, delimitandoli come insiemi omogenei, mettendoli in relazione reciproca. La competenza implica un insieme di operazioni percettive e cognitive attinenti all’osservazione basata su criteri prestabiliti. Nella formazione disciplinare di allieve e allievi della scuola media ogni processo di competenza comporta operazioni di spazializzazione più specifiche che complessivamente permettono di inquadrare ed esaminare l’azione territoriale delle società in prospettiva geografica. Tali abilità andrebbero curate e alimentate con continuità e progressività nel corso di tutto il terzo ciclo. L’immagine seguente (cf. 3.2) fa riferimento a quelle in relazione con il processo prescelto.

Figura 3.2: Operazioni di spazializzazione del processo suddividere

Operazioni di spazializzazione del processo suddividere

In seguito al lavoro degli esperti disciplinari, rispetto alla selezione del processo di competenza oggetto della prova, nel corso dell’anno scolastico 2021-2022 è avvenuto, presso un campione di 7 sedi di scuola media del cantone, il pre-test (test pilota) delle prove di geografia.

3.3 Il test pilota (pre-test)

Una volta prodotti gli item e sottoposti a verifica di contenuto con l’assistenza degli esperti, si è proceduto alla preparazione della prova per il pre-test. Questa prova ha lo scopo di valutare la pertinenza degli item e di individuare quelli più efficaci a misurare e a discriminare. Nella presentazione agli allievi gli item saranno ordinati per difficoltà crescente. In questo modo si dovrebbe trovare un numero inizialmente molto elevato di allievi che risponderà correttamente e questo numero dovrebbe ridursi al crescere della difficoltà degli item stessi. Nell’analizzare gli item, ad esempio, se uno riceverà un numero di risposte corrette elevato ma solo dagli allievi meno abili, questo sarà scartato, parimenti saranno eliminati gli item non discriminanti, quelli cioè ai quali tutti o nessuno avranno risposto in modo corretto.

Queste procedure hanno lo scopo di costruire delle scale valide non in termini astratti ma all’interno delle popolazioni reali. Gli item costruiti sono infatti coerenti con i contenuti presentati nel Piano di studio della scuola dell’obbligo ticinese e la loro difficoltà è valutata rispetto agli allievi presenti nello stesso sistema scolastico. Questo permette una valutazione concreta degli allievi all’interno del loro contesto di riferimento e dei contenuti presenti nella pratica quotidiana delle classi.

Complessivamente, nell’anno scolastico 2021-22, sono state testate 168 domande in 34 classi di 7 sedi di scuola media del canton Ticino (i.e., Barbengo, Bedigliora, Cadenazzo, Caslano, Gordola, Gravesano, Viganello). Le domande sono state suddivise in 5 fascicoli informatizzati somministrati agli allievi utilizzando la piattaforma Moodle. Ogni allievo ha risposto a due fascicoli in due sessioni ognuna di due unità didattiche, tra una somministrazione e la successiva vi è stato un intervallo di tempo di una settimana circa. La distanza di una settimana è stata ritenuta quella minima per poter ritenere l’effetto di apprendimento residuale.

La somministrazione è stata curata da personale appositamente formato, il quale si è occupato di far eseguire il lavoro agli allievi su supporto informatico presente in sede. Si sono adottate alcune accortezze per evitare la divulgazione dei materiali (es. chiusura dei test online dopo la conclusione della prova). Questo aspetto è estremamente rilevante in quanto gli esercizi proposti in questa fase dei lavori non hanno ancora subito alcun processo di validazione e non possono essere ritenuti efficaci alla valutazione delle competenze specifiche, non essendovi infatti valori che ne indichino la validità o la difficoltà in alcun modo. Si deve anche sottolineare come un esercizio diffuso anticipatamente alla prova e/o in maniera non corretta (ad esempio tramite fotocopie del materiale) potrebbe rendere l’attività di valutazione non valida, in quanto introdurrebbe una condizione di non equità di fronte alla prova. Un problema più ampio legato alla disponibilità degli esercizi è quello definito in letteratura “teaching for testing” (Flukiger, 2004) che riguarda la possibilità di una distorsione nell’attività didattica legata al desiderio di far raggiungere valori più elevati ai propri allievi. Il materiale utilizzato in una prova standardizzata, inoltre, non corrisponde per modalità e struttura a quello usato nella pratica quotidiana ed incentivarne la diffusione, anche solo ad uso di confronto, potrebbe essere fuorviante.

Le risposte degli allievi alla prova di geografia sono poi state inserite in un archivio al fine di poter valutare la bontà metrica degli esercizi. I singoli esercizi, le scale e l’insieme degli esercizi sono stati quindi valutati utilizzando il modello di Rasch (1960), al fine di capire come costruire le successive prove e quali esercizi conservare. Queste analisi hanno permesso di identificare gli items (i.e., domande) da utilizzare per il test che possedevano le caratteristiche metriche desiderate.

L’analisi dei dati raccolti ha permesso di selezionare 84 domande tra le 168 (items) inizialmente create dal gruppo di disciplina e che trovano fondamento nel modello di competenza descritto nel Piano di studio per la scuola media. Tutte le domande vertevano sul processo disciplinare suddividere ed erano così ripartite tra le diverse dimensioni di abilità:

\(~\)

  1. Datare - 13 items

  2. Delimitare - 15 items

  3. Dimensionare / Quantificare - 11 items

  4. Disporre - 15 items

  5. Nominare - 15 items

  6. Qualificare - 15 items

3.4 La prova definitiva somministrata

Gli 84 items selezionati sono stati utilizzati per la concezione della prova definitiva. Questa è stata somministrata agli allievi di quarta media nel corso dei mesi di marzo e aprile 2023 tramite supporto informatico usando la piattaforma Moodle. Hanno partecipato alla prova tutti gli allievi delle classi di quarta media del canton Ticino, ed in totale sono state analizzate le risposte di 3090 allievi. Alcune sedi scolastiche non fanno uso della piattaforma Moodle, ed in questi casi si è proceduto ad una trasposizione cartacea della prova (all’incirca 150 allievi hanno svolto la prova su supporto cartaceo). Utilizzare una piattaforma mai usata avrebbe infatti potuto rappresentare un aggravio di difficoltà per gli allievi. Le modalità di risposta delle domande sono state adattate leggermente in questo caso all’impossibilità di disporre di uno strumento informatizzato per la realizzazione della prova. Considerando quanto esplicitato più sopra relativamente alla necessità di identità delle procedure di somministrazione si è ritenuto opportuno attuare delle verifiche rispetto alle differenti performance dei gruppi di allievi che hanno usato il supporto informatico o cartaceo. Le performance degli allievi sono state quindi confrontate anche in relazione all’uso del supporto cartaceo versus informatico, nel prosieguo del rapporto saranno presentati i risultati.

Tutti gli allievi sono stati confrontati ad un unico fascicolo contenente gli 84 items di geografia e una decina di domande supplementari relative agli obiettivi o motivazioni di apprendimento degli allievi. Va sottolineato come all’interno dell’unico fascicolo gli items fossero ordinati per difficoltà crescente (dati ottenuti tramite il pre-test) al fine di permettere “un’ entrata in materia” rispetto al test agevole e per non confrontare sin dall’inizio allievi con competenze disciplinari meno strutturate con domande potenzialmente molto difficili per il loro specifico livello di competenza. Questo potrebbe avere come risultato una demotivazione dell’allievo a rispondere e di conseguenza un abbandono precoce della prova (Doğan et al., 2018). Come per la fase di pre-test si è deciso di far svolgere le attività di somministrazione esclusivamente a personale formato specificatamente, ciò anche per non portare un aggravio di lavoro supplementare agli insegnanti e per garantire una procedura standard di somministrazione della prova.