Simple Science

La science de pointe expliquée simplement

# Informatique# Interaction homme-machine

L'impact de l'évaluation par les pairs dans l'apprentissage en ligne

Examiner comment les relations entre étudiants influencent la précision de la notation par les pairs.

― 8 min lire


Évaluation par les pairsÉvaluation par les pairsdans les cours en lignede notation des étudiants.Explorer les dynamiques des pratiques
Table des matières

L’évaluation par les pairs est devenue une méthode populaire dans l'éducation pour évaluer les étudiants. Ça aide à alléger la charge pour les profs et donne aux étudiants une chance d'apprendre les uns des autres. Bien que des recherches antérieures montrent de bons résultats en termes de Précision et d'Équité, il faut encore explorer comment les amitiés entre étudiants influencent les notes qu'ils attribuent dans les cours en ligne.

Récemment, un plugin Moodle a été créé pour permettre l'évaluation par les pairs dans les forums. Ça a été testé dans un cours de Master. Les résultats ont montré que les évaluations par les pairs sont généralement fiables et justes, surtout quand au moins trois évaluations sont faites. Cependant, les étudiants avaient tendance à donner des notes un peu plus élevées. Notamment, les étudiants qui n’aimaient pas un pair avaient souvent des notes plus basses que ceux qui avaient une bonne relation avec la personne qu'ils évaluaient. Heureusement, cela avait peu d'impact sur la note finale calculée à partir des évaluations par les pairs.

Ces découvertes soutiennent l'idée que l'évaluation par les pairs pourrait remplacer efficacement la notation traditionnelle dans les cours en ligne où les étudiants se connaissent bien.

L'essor de l'évaluation par les pairs

L'évaluation par les pairs gagne en popularité comme alternative au processus de révision classique pour les étudiants. Des études précédentes ont montré que cette méthode peut donner des résultats similaires à ceux des profs en termes de précision et d'équité. À mesure que les cours en ligne, surtout les MOOC, se sont répandus, l'évaluation par les pairs a également pris de l'ampleur. La méthode traditionnelle de notation, où les profs évaluent chaque devoir, est souvent impraticable dans les grandes classes à cause du temps que ça prend.

Dans la plupart des cours en ligne, les étudiants n'ont pas la chance de se connaître. Cependant, le passage à l'apprentissage en ligne pendant la pandémie de COVID-19 a permis à certains étudiants d'interagir en dehors de la classe, donnant lieu à l'évaluation par les pairs dans ces nouveaux environnements. Les chercheurs doivent considérer comment les Dynamiques sociales entre étudiants peuvent influencer les notes données lors des évaluations par les pairs, surtout quand les étudiants ont déjà des relations préalables.

L'évaluation par les pairs est avant tout une activité sociale qui nécessite de la confiance entre les participants. Certains soutiennent que rendre les évaluations anonymes, que ce soit unilatéral ou bilatéral, peut aider à réduire le biais qui vient des dynamiques d'amitié. Cependant, les études sur l'anonymat ont produit des résultats variés.

Les recherches indiquent que l'anonymat peut encourager un retour d'information plus honnête et diminuer la pression ressentie par les étudiants. À l'inverse, certaines méta-analyses suggèrent que savoir qui évalue peut mener à des évaluations plus précises par rapport aux évaluations des profs. Ces résultats mitigés montrent à quel point l'évaluation par les pairs est complexe et il n'est pas toujours bénéfique de cacher les identités dans ces situations.

Une autre perspective suggère que fournir des critères clairs et une formation pour l'évaluation par les pairs pourrait aider à réduire les biais découlant des relations entre étudiants. Bien que certaines études aient examiné l'impact des liens sociaux sur la notation, il n’y a pas encore assez de preuves solides pour montrer si donner aux étudiants des outils comme des rubriques et une formation peut aider à ce problème.

Méthodologie de recherche

Pour explorer comment les relations personnelles entre étudiants affectent les évaluations par les pairs, une méthode a été employée dans un cours appelé Production de Contenu Multimédia (MCP). Ce cours fait partie d'un programme de Master en Systèmes d'Information et Génie Informatique et utilise Moodle comme environnement d'apprentissage virtuel. Les étudiants peuvent accéder à tout le matériel nécessaire, discuter des sujets et soumettre des devoirs pour notation.

Dans un semestre typique, les étudiants assistent à des cours magistraux et des labs, bien que le cours ait été dispensé en ligne pendant la pandémie. Les étudiants travaillent sur divers projets multimédias tout au long du trimestre. Ils soumettent ces projets pour notation par des profs et des évaluations par les pairs. L'objectif était de voir comment l'évaluation par les pairs se compare aux méthodes traditionnelles.

Pour l'activité d'évaluation par les pairs, on a demandé aux étudiants d'identifier les pairs qu'ils aimaient et ceux qu'ils n'aimaient pas. Ces infos ont aidé à déterminer qui évaluerait le travail de chaque étudiant. Le système était conçu pour que les étudiants évaluent le travail aussi bien d'amis que de pairs neutres, offrant une perspective équilibrée.

Avant de noter le travail des autres, les étudiants devaient passer par une formation qui expliquait comment évaluer les soumissions en utilisant les critères fournis. Cela a assuré que tous les étudiants partaient du même niveau de connaissance en matière de notation.

Une fois qu'une évaluation par les pairs était assignée, les étudiants avaient une fenêtre de 48 heures pour évaluer le travail de leurs pairs. Les profs examinaient également les soumissions et fournissaient des retours.

Des données ont été collectées tout au long du semestre, y compris des avis sur le processus d'évaluation par les pairs. Les étudiants ont noté différents aspects de l'exercice de notation par les pairs, y compris son équité et son utilité, en signalant aussi tout impact qu'ils ressentaient que leurs relations avaient sur les notes attribuées.

Analyse des données et résultats

Plusieurs aspects clés ont été analysés pour mesurer l’efficacité de l'évaluation par les pairs. Un des principaux points était l'équité, qui fait référence à la manière dont les étudiants attribuaient des notes de manière cohérente en évaluant le même travail. En examinant l'accord entre les étudiants, la recherche visait à établir la fiabilité du processus de notation.

L'analyse a indiqué que l'équité s'améliorait avec le nombre d'évaluations par les pairs. Idéalement, avoir trois évaluations ou plus fournit une note finale plus fiable que de se fier simplement à une ou deux.

La précision de l'évaluation par les pairs a été évaluée en comparant les notes des pairs à celles données par les profs. Cette comparaison est importante car elle valide si les notes attribuées par les pairs reflètent réellement la qualité du travail. Les résultats ont indiqué une corrélation positive entre les notes des pairs et celles données par les profs, suggérant que les étudiants pouvaient évaluer efficacement le travail de leurs pairs.

De plus, il a été constaté que les étudiants attribuaient généralement des notes plus élevées comparées à celles des profs. Cette tendance était particulièrement notable pour les publications avec des scores plus bas, où les étudiants avaient tendance à donner des évaluations plus positives que prévu. Globalement, les étudiants étaient plus en accord avec les profs lorsque les soumissions étaient notées positivement.

Les recherches sur les relations entre étudiants ont montré que ceux qui avaient des connexions amicales avec la personne évaluée avaient souvent tendance à donner des notes plus élevées. Cependant, les différences étaient mineures et n'affectaient pas de manière significative le processus de notation dans son ensemble.

Retours des étudiants

À la fin du semestre, les étudiants ont eu l'occasion de partager leurs pensées sur le processus d'évaluation par les pairs. Leurs retours étaient précieux pour comprendre comment ils percevaient l'efficacité de l'évaluation par les pairs et comment leurs relations sociales influençaient leurs activités de notation.

Beaucoup d'étudiants ont indiqué qu'ils trouvaient que les évaluations par les pairs étaient une bonne expérience d'apprentissage. Ils ont apprécié les retours qu'ils ont reçus de leurs pairs et ont senti que cela les aidait à améliorer leur travail. Bien que certains aient remarqué que leurs relations avec leurs pairs avaient un léger impact sur la notation, ils croyaient généralement que le processus d'évaluation par les pairs était équitable.

Implications pour les travaux futurs

Sur la base des conclusions de cette recherche, plusieurs suggestions peuvent améliorer les systèmes d'évaluation par les pairs :

  1. L'anonymat n'est peut-être pas nécessaire : La nécessité d'évaluations anonymes est discutable. Même quand l'anonymat est mis en place, des biais peuvent encore survenir lorsque les étudiants se connaissent.

  2. La formation est clé : Fournir aux étudiants une formation et des ressources avant de participer à l'évaluation par les pairs peut améliorer la qualité et l'équité des évaluations. Cela aide les étudiants à comprendre les critères de notation et renforce leur confiance en leur capacité à évaluer leurs pairs.

En résumé, l'évaluation par les pairs peut efficacement remplacer la notation traditionnelle dans un contexte d'apprentissage en ligne. Bien que les relations personnelles puissent influencer la notation par les pairs, leur impact global sur les notes finales semble minime. L'évaluation par les pairs offre aux étudiants une chance d'apprendre les uns des autres tout en permettant une flexibilité qui profite à l'éducation dans un monde numérique.

Source originale

Titre: Impact of Social Relationships on Peer Assessment in E-Learning

Résumé: Peer assessment has been widely studied as a replacement for traditional evaluation, not only by reducing the professors' workload but mainly by benefiting students' engagement and learning. Although several works successfully validate its accuracy and fairness, more research must be done on how students' pre-existing social relationships affect the grades they give their peers in an e-learning course. We developed a Moodle plugin to provide the platform with peer assessment capabilities in forums and used it on an MSc course. The plugin curated the reviewer set for a post based on the author's relationships and included rubrics to counter the possible interpersonal effects of peer assessment. Results confirm that peer assessment is reliable and accurate for works with at least three peer assessments, although students' grades are slightly higher. The impact of social relationships is noticeable when students who do not like another peer grade their work consistently lower than students who have a positive connection. However, this has little influence on the final aggregate peer grade. Our findings show that peer assessment can replace traditional evaluation in an e-learning environment where students are familiar with each other.

Auteurs: Francisco Sousa, Tomás Alves, Sandra Gama, Joaquim Jorge, Daniel Gonçalves

Dernière mise à jour: 2024-07-01 00:00:00

Langue: English

Source URL: https://arxiv.org/abs/2407.01077

Source PDF: https://arxiv.org/pdf/2407.01077

Licence: https://creativecommons.org/licenses/by/4.0/

Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.

Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.

Plus d'auteurs

Articles similaires