Simple Science

Scienza all'avanguardia spiegata semplicemente

# Informatica# Interazione uomo-macchina

L'impatto della valutazione tra pari nell'apprendimento online

Esaminare come le relazioni tra studenti influenzano l'accuratezza della valutazione tra pari.

― 7 leggere min


Valutazione tra pari neiValutazione tra pari neicorsi onlinedi valutazione degli studenti.Esplorare le dinamiche delle pratiche
Indice

La Valutazione tra pari è diventata una modalità popolare nell'istruzione per valutare gli studenti. Aiuta a ridurre il carico per gli insegnanti e offre agli studenti l'opportunità di imparare gli uni dagli altri. Anche se ricerche precedenti mostrano buoni risultati in termini di Accuratezza e Equità, c'è ancora bisogno di esplorare come le amicizie tra studenti influenzano i voti che danno nei corsi online.

Recentemente, è stato creato un plugin di Moodle per abilitare la valutazione tra pari nei forum. Questo è stato testato in un corso di Master. I risultati hanno mostrato che le valutazioni tra pari sono generalmente affidabili e giuste, soprattutto quando vengono fatte almeno tre valutazioni. Tuttavia, gli studenti tendevano a dare voti leggermente più alti. In particolare, gli studenti che non gradivano un compagno tendevano a dare punteggi più bassi rispetto a quelli che avevano un rapporto positivo con la persona che stavano valutando. Fortunatamente, questo ha avuto poco effetto sul voto finale calcolato dalle valutazioni tra pari.

Questi risultati supportano l'idea che la valutazione tra pari potrebbe sostituire efficacemente la valutazione tradizionale nei corsi online dove gli studenti si conoscono bene.

L'Ascesa della Valutazione tra Pari

La valutazione tra pari sta guadagnando popolarità come alternativa al processo di revisione convenzionale per gli studenti. Studi precedenti hanno dimostrato che questo metodo può fornire risultati simili a quelli degli insegnanti in termini di accuratezza e equità nella valutazione. Con l'aumento dei corsi online, specialmente i corsi online aperti massivi (MOOC), la valutazione tra pari è diventata sempre più diffusa. Il metodo tradizionale di valutazione, in cui gli insegnanti valutano ogni compito, è spesso poco pratico in classi più grandi a causa del tempo necessario.

Nella maggior parte dei corsi online, gli studenti non hanno modo di conoscersi. Tuttavia, il passaggio all'apprendimento online durante la pandemia di COVID-19 ha permesso ad alcuni studenti di interagire al di fuori dell'aula, dando vita a valutazioni tra pari in questi nuovi ambienti. I ricercatori devono considerare come le Dinamiche Sociali tra gli studenti possono influenzare i voti dati durante le valutazioni tra pari, specialmente quando gli studenti hanno già delle relazioni precedenti.

La valutazione tra pari è intrinsecamente un'attività sociale che richiede fiducia tra i partecipanti. Alcuni sostengono che fare le valutazioni in modo anonimo, sia unilaterale che bilaterale, può aiutare a ridurre il bias derivante dalle dinamiche di amicizia. Tuttavia, gli studi sull'anonimato hanno prodotto risultati variabili.

La ricerca indica che l'anonimato può incoraggiare feedback più onesti e ridurre la pressione avvertita dagli studenti. D'altro canto, alcune meta-analisi suggeriscono che sapere chi sta valutando può portare a valutazioni più accurate rispetto a quelle degli insegnanti. Questi risultati misti mostrano quanto sia complessa la valutazione tra pari e potrebbe non essere sempre vantaggioso nascondere le identità in queste situazioni.

Un'altra prospettiva suggerisce che fornire criteri chiari e formazione per la valutazione tra pari potrebbe aiutare a ridurre i bias derivanti dalle relazioni tra studenti. Anche se alcuni studi hanno esaminato l'impatto dei legami sociali sulla valutazione, non ci sono ancora abbastanza evidenze solide per dimostrare se fornire agli studenti strumenti come rubriche e formazione possa aiutare con questo problema.

Metodologia di Ricerca

Per esplorare come le relazioni personali tra studenti influenzano le valutazioni tra pari, è stato usato un metodo usando un corso chiamato Produzione di Contenuti Multimediali (MCP). Questo corso fa parte di un programma di Master in Sistemi Informativi e Ingegneria Informatica e usa Moodle come ambiente di apprendimento virtuale. Gli studenti possono accedere a tutto il materiale necessario del corso, discutere argomenti e inviare compiti per la valutazione.

In un semestre tipico, gli studenti partecipano a lezioni e laboratori, anche se il corso è stato condotto online durante la pandemia. Gli studenti lavorano su vari progetti multimediali durante il semestre. Invia queste progettazioni per la valutazione da parte dei professori e per le valutazioni tra pari. L'obiettivo era vedere come la valutazione tra pari regge rispetto ai metodi tradizionali.

Per l'attività di valutazione tra pari, gli studenti sono stati chiesti di identificare i compagni che gradivano e quelli che non gradivano. Queste informazioni hanno aiutato a determinare chi avrebbe valutato il lavoro di ogni studente. Il sistema era progettato in modo che gli studenti valutassero lavori sia di amici che di compagni neutrali, fornendo una prospettiva bilanciata.

Prima di valutare il lavoro degli altri, gli studenti dovevano seguire una formazione che spiegava come valutare le sottomissioni utilizzando i criteri forniti. Questo ha garantito che tutti gli studenti partissero dalla stessa base di conoscenze al momento della valutazione.

Una volta assegnata una valutazione tra pari, gli studenti avevano un intervallo di 48 ore per valutare il lavoro dei loro compagni. Anche i professori hanno esaminato le sottomissioni e fornito feedback.

I dati sono stati raccolti durante il semestre, compresi i pareri sul processo di valutazione tra pari. Gli studenti hanno valutato diversi aspetti dell'esercizio di valutazione tra pari, inclusa la sua equità e utilità, mentre indicavano anche qualsiasi impatto che sentivano le loro relazioni avessero sui voti assegnati.

Analisi dei Dati e Risultati

Sono stati analizzati diversi aspetti chiave per misurare l'efficacia della valutazione tra pari. Un focus principale era sull'equità, che si riferisce a quanto costantemente gli studenti davano punteggi valutando lo stesso lavoro. Esaminando l'accordo tra gli studenti, la ricerca mirava a stabilire l'affidabilità nel processo di valutazione.

L'analisi ha indicato che l'equità migliorava con il numero di valutazioni tra pari. Idealmente, avere tre o più valutazioni fornisce un voto finale più affidabile rispetto a fare affidamento su uno o due.

L'accuratezza della valutazione tra pari è stata valutata confrontando i voti tra pari con quelli assegnati dai professori. Questo confronto è importante perché valida se i voti assegnati dai compagni riflettono lavori di qualità. I risultati hanno indicato una correlazione positiva tra i voti tra pari e quelli dati dai professori, suggerendo che gli studenti potevano valutare efficacemente il lavoro dei loro compagni.

Inoltre, è stato scoperto che gli studenti tendevano a dare voti più alti rispetto ai professori. Questa tendenza era particolarmente evidente per i post con punteggi più bassi, dove gli studenti tendevano a dare valutazioni più positive del previsto. In generale, gli studenti erano più d'accordo con i professori quando le sottomissioni venivano valutate positivamente.

La ricerca sulle relazioni tra studenti ha mostrato che quelli che avevano connessioni amichevoli con la persona valutata tendevano a dare voti più alti. Tuttavia, le differenze erano minime e non influenzavano significativamente il processo di valutazione finale.

Feedback degli Studenti

Alla fine del semestre, agli studenti è stata data l'opportunità di condividere i loro pensieri sul processo di valutazione tra pari. Il loro feedback è stato prezioso per capire come vedevano l'efficacia della valutazione tra pari e come le loro relazioni sociali influenzassero le loro attività di valutazione.

Molti studenti hanno indicato di aver trovato le valutazioni tra pari una buona esperienza di apprendimento. Hanno apprezzato il feedback ricevuto dai coetanei e hanno sentito che li ha aiutati a migliorare il loro lavoro. Anche se alcuni hanno notato che le loro relazioni con i compagni influenzavano leggermente la valutazione, credevano generalmente che il processo di valutazione tra pari fosse equo.

Implicazioni per il Lavoro Futura

Sulla base dei risultati di questa ricerca, ci sono alcune indicazioni per migliorare i sistemi di valutazione tra pari:

  1. L'Anonimato Potrebbe Non Essere Necessario: La necessità di valutazioni anonime è discutibile. Anche quando l'anonimato è implementato, potrebbero comunque sorgere bias quando gli studenti si conoscono.

  2. La Formazione è Fondamentale: Fornire agli studenti formazione e risorse prima di partecipare alla valutazione tra pari può migliorare la qualità e l'equità delle valutazioni. Aiuta gli studenti a comprendere i criteri di valutazione e costruisce fiducia nella loro capacità di valutare i compagni.

In sintesi, la valutazione tra pari può sostituire efficacemente la valutazione tradizionale in un contesto di apprendimento online. Anche se le relazioni personali possono influenzare la valutazione tra pari, il loro impatto complessivo sui punteggi finali sembra essere minimo. La valutazione tra pari offre agli studenti l'opportunità di imparare gli uni dagli altri mentre consente una flessibilità che benefica l'istruzione in un mondo digitale.

Fonte originale

Titolo: Impact of Social Relationships on Peer Assessment in E-Learning

Estratto: Peer assessment has been widely studied as a replacement for traditional evaluation, not only by reducing the professors' workload but mainly by benefiting students' engagement and learning. Although several works successfully validate its accuracy and fairness, more research must be done on how students' pre-existing social relationships affect the grades they give their peers in an e-learning course. We developed a Moodle plugin to provide the platform with peer assessment capabilities in forums and used it on an MSc course. The plugin curated the reviewer set for a post based on the author's relationships and included rubrics to counter the possible interpersonal effects of peer assessment. Results confirm that peer assessment is reliable and accurate for works with at least three peer assessments, although students' grades are slightly higher. The impact of social relationships is noticeable when students who do not like another peer grade their work consistently lower than students who have a positive connection. However, this has little influence on the final aggregate peer grade. Our findings show that peer assessment can replace traditional evaluation in an e-learning environment where students are familiar with each other.

Autori: Francisco Sousa, Tomás Alves, Sandra Gama, Joaquim Jorge, Daniel Gonçalves

Ultimo aggiornamento: 2024-07-01 00:00:00

Lingua: English

URL di origine: https://arxiv.org/abs/2407.01077

Fonte PDF: https://arxiv.org/pdf/2407.01077

Licenza: https://creativecommons.org/licenses/by/4.0/

Modifiche: Questa sintesi è stata creata con l'assistenza di AI e potrebbe presentare delle imprecisioni. Per informazioni accurate, consultare i documenti originali collegati qui.

Si ringrazia arxiv per l'utilizzo della sua interoperabilità ad accesso aperto.

Altro dagli autori

Articoli simili