Simple Science

最先端の科学をわかりやすく解説

# コンピューターサイエンス# ヒューマンコンピュータインタラクション

オンライン学習におけるピアアセスメントの影響

学生同士の関係がピアグレーディングの正確さにどんな影響を与えるかを調べてる。

― 1 分で読む


オンラインコースのピア評価オンラインコースのピア評価学生の成績評価の仕組みを探る。
目次

ピアアセスメントは学生を評価する新しい方法として人気が出てきてるよ。これにより、先生たちの負担が軽くなって、学生同士で学び合う機会も増えるんだ。以前の研究では精度や公正さで良い結果が出てるけど、学生同士の友情がオンラインコースでの成績に与える影響についてはもっと探求が必要なんだ。

最近、Moodleのプラグインが作られてフォーラムでピアアセスメントができるようになったよ。これが修士課程でテストされたんだ。結果は、ピアアセスメントは一般的に信頼できて公正だっていうもので、特に少なくとも3回の評価があれば良い傾向が見られた。ただ、学生たちはやや高めの点数をつける傾向があったよ。特に、ある学生が他の学生を嫌っている場合、その評価は低くなることが多かったけど、全体の成績にはあまり影響がなかったみたい。

この結果は、ピアアセスメントが学生同士の関係が深いオンラインコースでは伝統的な採点方法の代わりになり得ることを支持してるんだ。

ピアアセスメントの台頭

ピアアセスメントは、従来の学生評価プロセスの代替として注目されているよ。過去の研究でも、この方法は教師による評価と同等の結果をもたらすことが示されている。特に、大規模オープンオンラインコース(MOOCs)が一般的になるにつれて、ピアアセスメントの人気が高まってるんだ。従来の評価方法は、各課題を教師が評価するので、大きなクラスでは時間がかかって実用的じゃないことが多い。

ほとんどのオンラインコースでは学生がお互いを知る機会がないけど、COVID-19パンデミック中のオンライン学習の推進で、学生同士が教室の外でも交流する機会が生まれて、こうした新しい環境でのピアアセスメントができるようになったんだ。研究者は、学生間の社会的ダイナミクスがピアアセスメント中の成績にどう影響するかを考慮する必要があるね。

ピアアセスメントは本質的には参加者間の信頼が必要な社会的な活動なんだ。一部の人は、片方だけの匿名や両方の匿名にすることで友達関係からくるバイアスを減らせるって主張してるけど、匿名性に関する研究はさまざまな結果が出てるよ。

研究によると、匿名性があるとより正直なフィードバックを促し、学生が感じるプレッシャーを軽減できることがあるんだ。一方で、いくつかのメタアナリシスでは、誰が評価しているかが分かると、教師の評価と比べてより正確な評価ができる場合もあることが示されている。こういった混在した結果は、ピアアセスメントがどれだけ複雑かを示していて、こういった状況での身元を隠すことが常に良いとは限らないんだ。

別の視点では、ピアアセスメントのために明確な基準やトレーニングを提供することで、学生の関係からくるバイアスを減らせる可能性があると言われている。いくつかの研究では、社会的つながりが評価に与える影響を調べているけど、学生にルーブリックやトレーニングのようなツールを提供することでこの問題が解決するかどうかについての確固たる証拠はまだ足りてないんだ。

研究方法

学生同士の人間関係がピアアセスメントにどう影響するかを探るために、「マルチメディアコンテンツ制作(MCP)」というコースを使った方法が採用されたよ。このコースは情報システムとコンピュータ工学の修士課程の一部で、Moodleを仮想学習環境として使ってる。学生は必要な教材にアクセスしたり、トピックを話し合ったり、課題を提出して評価してもらうことができるんだ。

通常の学期では、学生は講義やラボに出席するけど、今回のコースはパンデミック中にオンラインで行われたよ。学生は学期を通してさまざまなマルチメディアプロジェクトに取り組む。これらのプロジェクトを教授とピアアセスメントで評価してもらうんだ。目的は、ピアアセスメントが従来の評価方法に対してどうなのかを確認することだったんだ。

ピアアセスメントの活動では、学生に好きな仲間と嫌いな仲間を特定してもらった。この情報を基に、誰が各学生の作品を評価するかが決まったんだ。システムは、学生が友達とニュートラルな仲間の両方の作品を評価するように設計されていて、バランスの取れた視点を提供してる。

互いの作品を評価する前に、学生は与えられた基準を使って提出物を評価する方法について説明されたトレーニングを受ける必要があった。これにより、すべての学生が評価する際に同じ知識の基盤からスタートできるようになってるんだ。

ピアアセスメントが割り当てられたら、学生は48時間のウィンドウを与えられて仲間の作品を評価するんだ。教授も提出物をレビューしてフィードバックを提供するよ。

データは学期中に収集され、ピアアセスメントプロセスに関する意見も含まれてる。学生はピアグレーディングの様々な側面を評価し、公正さや有用性について評価しつつ、自分の人間関係が成績に与えた影響を指摘してたよ。

データ分析と結果

ピアアセスメントの効果を測るために、いくつかの重要な側面が分析されたよ。大きな焦点の一つは、公正さで、これは学生が同じ作品を評価する際にどれだけ一貫して点数をつけたかを指してる。学生間の合意を調べることで、評価プロセスの信頼性を確立することを目指してたんだ。

分析の結果、公正さはピアアセスメントの回数が増えるほど改善することがわかった。理想的には、3回以上の評価があれば、1回や2回の評価に比べてより信頼性のある最終成績が得られるんだ。

ピアアセスメントの精度は、ピアの評価と教授の評価を比較することで評価された。この比較は、ピアが割り当てた成績が質の高い作品を反映しているかどうかを確認するために重要なんだ。結果は、ピアの評価と教授の評価の間に正の相関があることを示していて、学生が自分の仲間の作品を効果的に評価できていることを示唆してる。

さらに、学生は一般的に教授に比べて高い成績をつける傾向があったよ。この傾向は、特に低得点の投稿において目立っていて、学生は予想以上にポジティブな評価をつけることが多かったんだ。全体的に、学生は提出物が高く評価されるときに教授とより一致した意見を持ってたよ。

学生の間の関係性に関する研究では、評価される相手と友好的な関係がある学生はしばしば高い成績をつけることがわかった。でも、違いは小さくて、全体の評価プロセスには大きな影響はなかったみたい。

学生のフィードバック

学期の終わりに、学生たちはピアアセスメントプロセスについて自分の考えを共有する機会が与えられた。彼らのフィードバックは、ピアアセスメントの効果と人間関係が評価活動に与える影響を理解するために貴重なものだったよ。

多くの学生が、ピアアセスメントは良い学びの経験だと思っていると示した。彼らは仲間からのフィードバックを評価していて、それが自分の作品を改善する助けになったと感じているんだ。友達との関係が評価に少し影響したと感じる学生もいたけど、一般的にはピアアセスメントプロセスは公正だと信じているみたい。

今後の研究への影響

この研究の結果に基づいて、以下のような提案がピアアセスメントシステムを向上させるかもしれないよ:

  1. 匿名性は必ずしも必要じゃないかも: 匿名での評価の必要性は議論の余地がある。たとえ匿名が実施されても、学生がお互いを知っている場合にはバイアスが生じることがある。

  2. トレーニングが重要: ピアアセスメントに参加する前に学生にトレーニングとリソースを提供することで、評価の質と公正さが向上する可能性がある。それは、学生が評価基準を理解し、自分の仲間を評価する能力に自信を持つのを助けるんだ。

要するに、ピアアセスメントはオンライン学習の文脈で伝統的な評価の代わりとして効果的に機能することができるよ。個人的な関係がピアグレーディングに影響を与えることはあるものの、最終的なスコアへの全体的な影響は最小限に見えるんだ。ピアアセスメントは、学生同士で学び合う機会を提供し、デジタルの世界で教育に利益をもたらす柔軟さを持っているんだ。

オリジナルソース

タイトル: Impact of Social Relationships on Peer Assessment in E-Learning

概要: Peer assessment has been widely studied as a replacement for traditional evaluation, not only by reducing the professors' workload but mainly by benefiting students' engagement and learning. Although several works successfully validate its accuracy and fairness, more research must be done on how students' pre-existing social relationships affect the grades they give their peers in an e-learning course. We developed a Moodle plugin to provide the platform with peer assessment capabilities in forums and used it on an MSc course. The plugin curated the reviewer set for a post based on the author's relationships and included rubrics to counter the possible interpersonal effects of peer assessment. Results confirm that peer assessment is reliable and accurate for works with at least three peer assessments, although students' grades are slightly higher. The impact of social relationships is noticeable when students who do not like another peer grade their work consistently lower than students who have a positive connection. However, this has little influence on the final aggregate peer grade. Our findings show that peer assessment can replace traditional evaluation in an e-learning environment where students are familiar with each other.

著者: Francisco Sousa, Tomás Alves, Sandra Gama, Joaquim Jorge, Daniel Gonçalves

最終更新: 2024-07-01 00:00:00

言語: English

ソースURL: https://arxiv.org/abs/2407.01077

ソースPDF: https://arxiv.org/pdf/2407.01077

ライセンス: https://creativecommons.org/licenses/by/4.0/

変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。

オープンアクセスの相互運用性を利用させていただいた arxiv に感謝します。

著者たちからもっと読む

類似の記事