AIに対する信頼と頼りにすること、誤情報に対抗するために
この研究は、AIがSNSでの偽情報と戦うのにどう役立つかを調べてるよ。
― 1 分で読む
ソーシャルメディア、特にTwitterでは、誤情報が大きな問題になってるよね。同じ情報がいろんなソースから繰り返し発信されると、人々はその繰り返しだけで「これって本当なんじゃ?」って思っちゃうことがある。これをコンセンサスの錯覚って呼ぶんだ。私たちは、誤情報について考えるのを助けるためにデザインされた賢いAIエージェントが、この問題にどう対処できるかを調べてるよ。
このAIシステムは、どのソーシャルメディアの投稿が誤解を招くかについて理由を示してくれるんだ。これによって、ユーザーがより良い判断をできるようにするのが目的。私たちの研究は、信頼と依存という2つの重要なアイデアに焦点を当ててるよ。信頼は、AIエージェントの信頼性についての人々の気持ち、つまりそのエージェントが自分を助けてくれると信じるかどうかってこと。一方、依存は実際の行動に関することで、AIのアドバイスをどれだけ信じて実行するかってことなんだ。
信頼と依存の役割
AIシステムへの信頼って、特に不確実な状況のときにそのシステムが自分の目標達成を助けてくれると信じることを意味してる。研究者たちは、信頼を感情(態度)と行動の両方として見てきたんだ。人々がAIをどれだけ信頼してると言っても、実際にはそのアドバイスに従うかどうかにギャップがあることが多い。
私たちの研究では、この2つのアイデア(信頼と依存)がコンセンサスに基づく説明の文脈でどう展開されるかを見たかったんだ。私たちの主な質問は次の2つ:
- AIが誤情報についてコンセンサスに基づいた説明をすると、信頼と依存は増えるのか?
- 人々がコンセンサスの錯覚を体験すると、AIへの信頼と依存にどう影響するのか?
この質問に答えるために、Twitterのライブ設定でAIエージェントを試してみたよ。一般ユーザーに誤解を招く主張について説明を提供したんだ。
情報におけるコンセンサスの理解
日常生活では、いろんな情報ソースの間で合意を探して、意思決定を助けてもらおうとするよね。でも、時には「合意」が実際には単一のソースがいろんなメディアによって繰り返されてるだけってこともある。これが誤った自信につながることも。複数のアカウントが同じ主張を報じてるのを見ると、それがより信頼できると思い込んじゃうかもしれない。
以前の研究では、人々が真のコンセンサス(異なるソースが同じ情報を提供すること)と偽のコンセンサス(同じソースが複数のメディアで参照されること)の違いを見るのに苦労することが示されてる。これによって誤った意思決定につながることがある。
AIエージェント:エレミ
私たちは、Twitter上の誤情報に取り組むために「エレミ」という新しいAIエージェントを使ったよ。特にCOVID-19について。誤解を招くツイートを検出すると、エレミはそのツイートにバナーを追加して、そのツイートが不正確かもしれない理由を説明するんだ。さらに、他のツイートや情報源へのリンクも提供して、自分の主張を裏付けるんだ。
エレミが情報を提示する方法は3つあるよ:
- 真のコンセンサス:異なるソースを参照するツイートが3つ。
- 偽のコンセンサス:同じソースを参照するツイートが3つ。
- コンセンサスなし:1つのツイートのみが提示される。
研究アプローチ
私たちの研究では、Twitterを日常的に使う参加者を集めて、日本語が流暢な人たちに参加してもらったよ。事実と誤解を招くツイートが混ざったコントロールされたTwitterタイムラインを見せたんだ。参加者はまずエレミの助けなしでツイートを評価し、その後、AIの説明を受けて同じプロセスを繰り返した。
目的は、コンセンサスに基づく説明のタイプが、エレミへの信頼と依存にどのように影響するかを測ることだったんだ。
主な発見
私たちの分析からいくつかの興味深い結果が明らかになったよ:
依存と信頼:真のコンセンサスの説明はエレミへの依存を増やしたけど、AIへの信頼はあまり高まらなかった。これは、真のコンセンサスがあるときに人々がAIのアドバイスに従いやすくなる一方で、必ずしもそのことが信頼に結びつくわけではないことを示唆してるんだ。
コンセンサスの錯覚:参加者はエレミが明確な説明を提供したとき、コンセンサスの錯覚に騙されなかった。AIが異なるソースを独立したものとして強調すると、ユーザーはその提供情報に自信を持つことができたんだ。
個々のソースの重要性:多くの参加者が、同じ情報を発信してる数よりも、個々のソースの信頼性に注目していることに言及してた。これは、信頼できるソースのバリエーションを示すことが重要だってことを示してるね。
AIへの高い信頼:全体的に、参加者はエレミに対して高い信頼感を報告したよ。彼らはAIの機能が誤解を招く情報を特定するのに役立つと感じ、これが依存が強くなくても信頼を維持する助けになったかもしれない。
将来のAI設計への示唆
この研究から得た教訓は、透明性を考慮したAIシステムの設計が重要だってことを強調してるよ。AIエージェントが決定に対して明確で関連性のある理由を提供すると、ユーザーはそれに頼ることにより安心感を持てるんだ。
将来の研究では、信頼や依存に対する人々の見方に影響を与える個人的な要因を探ることが重要だね。異なるバックグラウンド、経験、さらには性格特性が、ユーザーがAIシステムにどう関わるかに影響を与えるかもしれない。
さらに、ソーシャルメディアが急速に変化するため、こうしたスピード感のある環境で情報を一貫して信頼できるものに保つ方法を考慮するのが重要なんだ。長期的な研究が、信頼と依存が時間と共にどう進化するかについての洞察を提供できるかもしれない。
結論
要するに、私たちの研究は、エレミのようなAIシステムが明確でコンセンサスに基づく説明を示すと、アドバイスへの依存に影響を与えられることを初めて証明するものだよ。しかし、信頼は安定したままで、ユーザーが情報源を個人的に評価することに依存し続けるかもしれない。さらに、データソース間の関係について透明性を確保することで、真のコンセンサスが何かに関する誤解を防ぐのに役立つんだ。この理解は、ソーシャルメディア上の誤情報と闘うためのより良いAIシステムの開発をサポートするかもしれないね。
タイトル: Trust and Reliance in Consensus-Based Explanations from an Anti-Misinformation Agent
概要: The illusion of consensus occurs when people believe there is consensus across multiple sources, but the sources are the same and thus there is no "true" consensus. We explore this phenomenon in the context of an AI-based intelligent agent designed to augment metacognition on social media. Misinformation, especially on platforms like Twitter, is a global problem for which there is currently no good solution. As an explainable AI (XAI) system, the agent provides explanations for its decisions on the misinformed nature of social media content. In this late-breaking study, we explored the roles of trust (attitude) and reliance (behaviour) as key elements of XAI user experience (UX) and whether these influenced the illusion of consensus. Findings show no effect of trust, but an effect of reliance on consensus-based explanations. This work may guide the design of anti-misinformation systems that use XAI, especially the user-centred design of explanations.
著者: Takane Ueno, Yeongdae Kim, Hiroki Oura, Katie Seaborn
最終更新: 2023-04-21 00:00:00
言語: English
ソースURL: https://arxiv.org/abs/2304.11279
ソースPDF: https://arxiv.org/pdf/2304.11279
ライセンス: https://creativecommons.org/licenses/by-nc-sa/4.0/
変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。
オープンアクセスの相互運用性を利用させていただいた arxiv に感謝します。