共同検索:会話型システムでグループのやり取りを向上させる
研究は、会話システムがグループ検索タスクをどう改善できるかを探っている。
― 1 分で読む
近年、会話検索というアイデアが人気になってきてるよ。これは、ユーザーが自然な会話を使って技術とやりとりできるシステムを作ることを意味してる。ほとんどの研究は、一度に一人を助けることに焦点を当ててきたけど、実際には人々が一緒に情報を探すことが多いから、どうやってみんなが一緒に検索できるシステムを作れるかが問題になってるんだ。
この論文では、Slackみたいなメッセージツールを使って協力してる人たちをどう助けられるかを見てるよ。参加者がペアになって3つの異なるタスクに取り組むスタディを実施したんだけど、ここではサーチボットは実際にはシステムのように振る舞う図書館員だったんだ。このシステムがグループ検索をどうサポートできるかを見るのが目的だったの。
背景
協力検索
協力検索は、検索に関連するプロジェクトで複数の人が一緒に作業するのを助ける技術の開発に関するもの。従来のシステムは通常、検索用の別々のインターフェースと、みんなが何をしているかを追うためのコミュニケーションツールがあったんだけど、これらのシステムはあまり広まってない。多くの人は依然としてウェブ検索エンジンやメールのような基本ツールを使ってる。将来のシステムは、Slackのような人々がすでに使っているコミュニケーションプラットフォームに組み込まれるべきだという考えがあるんだ。
会話検索
会話検索は、ユーザーが対話を使ってやりとりできるシステムを作ることを目指している。ほとんどの研究は、一人用に設計されたシステムを見てきたけど、これらのシステムが一緒に協力するグループでどう機能するかを探る必要がある。重要なアイデアは、会話検索システムがユーザーと混合イニシアチブの会話を行うべきだということ。つまり、システムが目的を達成するために会話をリードすることができるってこと。
混合イニシアチブインタラクション
混合イニシアチブインタラクションの概念は、必要に応じてシステムが会話を制御できることを指す。これには、リクエストを明確にするための質問をする対話レベルと、会話に関与している人たちの目標に影響を与えるタスクレベルという二つのイニシアチブが含まれる。
スタディ概要
ウィザード・オブ・オズ手法
このスタディでは「ウィザード・オブ・オズ」手法を使ったんだ。つまり、人間が検索システムのふりをして、参加者は実際のボットとやりとりしてると思ってた。ここでは図書館員がサーチボットの役割を果たした。27組の参加者がSlackを使って3つの協力検索タスクを完了したんだけど、各参加者は情報を集めるために他の人と密に作業する必要があったよ。
タスク条件
スタディは、サーチボットがどれだけのイニシアチブを取れるかに関する3つの異なる条件で構成されてた:
- 全くイニシアチブなし
- 対話レベルのイニシアチブのみ(ボットが明確化の質問をすることができる)
- 対話レベルとタスクレベルの両方のイニシアチブ(ボットが明確化の質問をするだけでなく、タスクの提案もできる)
研究質問
このスタディは主に二つの質問に答えることを目的としている:
- 図書館員(ウィザード)が検索中に介入する動機は何だったのか?
- 図書館員が特定のタイミングで介入が適切だと判断した理由は何か?
方法論
参加者
このスタディは、互いに知っている27人の学部生を対象にした。参加者は様々な選択肢を考慮し、共同で選択を行う3つの意思決定タスクを完了した。
スタディプロトコル
各セッションの最初に、参加者にスタディが紹介された。タスクの前にサーチボットとその能力について説明され、タスクはウィザードがいない状態で参加者に読み上げられた。各セッションには、参加者とウィザードを導くための主要なファシリテーターと副ファシリテーターがいた。
スタディデザイン
デザインは3つのタスク条件が含まれていて、各ペアの参加者は全ての条件を経験するように構成されて、条件の順序からくるバイアスを避けるようにしていた。
結果
介入の動機
分析から、図書館員の介入にはいくつかの動機があることが明らかになった:
問題空間の理解:ウィザードは参加者の目標や制約についての明確さを取り戻すためによく行動した。最初の検索リクエストが曖昧な時に特にそうだった。
曖昧さの明確化:リクエストが十分な詳細を提供しない時、ウィザードは質問をすることがあった。
共通理解の追求:ウィザードは参加者のニーズについての共有理解を確立しようとして、明確化の質問を使って必要な情報を集めた。
タスク管理のサポート:参加者が圧倒されたり、次のステップが不明な場合、ウィザードはタスクを小さな部分に分けることを提案した。
ガイダンスの提供:ウィザードは、参加者が考えなかった有用な情報や選択肢へ導く提案を行った。
介入のタイミング
ウィザードの介入のタイミングも慎重に考慮されてた。結果からは以下が示された:
緊急性の感覚:問題が即座の対応を必要とする時、ウィザードはすぐに行動を起こさなければならないと感じた。参加者が混乱したり、情報を待ちすぎている場合が含まれる。
検索リクエストへの近さ:検索リクエストの直後に介入することで、参加者の集中力を保てると感じた。
会話の変化を検出:会話が鈍ったり、話題が逸れたりした場合、ウィザードはそれが介入して参加者を再-engageさせる良いタイミングだと認識した。
参加者の反応
参加者はウィザードの介入について様々な感情を表現した。中にはガイダンスやサポートを感謝する人もいれば、圧倒されてウィザードの存在が協力に干渉したと感じる人もいた。
討論と示唆
このスタディは、協力をサポートする会話検索システムのための重要なデザイン要素を強調している。以下は主なポイント:
文脈の理解:エージェントが問題の文脈を把握するのが重要。これにより、タスクの初めに質問をして参加者のニーズをより理解できるようになる。
タイミングのナビゲート:将来のシステムは、会話の合図や構造に基づいて介入が適切なときに認識できるようにするべき。
役割の明確化:システムと人間の参加者の役割を明確にすることで、フラストレーションを減らせるかもしれない。システムの能力を理解することで、より良い協力の結果につながる。
介入のバランス:システムは、必要なサポートを提供することと、参加者にリードさせることのバランスを学ぶべき。
共同作業者のニーズのモニタリング:参加者の感情や反応に注意を払うことで、システムは圧倒することなく意味のある文脈的サポートを提供できる。
結論
結論として、この研究は会話検索システムが協力的な検索タスクをより良くサポートできる方法を示している。将来のデザインは、グループインタラクションにおいていつ介入するべきかの理解から利益を得ることができる。会話システムは、効果的な協力検索体験を作るために、反応性と自律性のバランスを取る必要があることを強調している。
これらの要素を認識することで、システムのデザインを改善し、ユーザーの協力的な検索体験を向上させることができるよ。
タイトル: Why and When: Understanding System Initiative during Conversational Collaborative Search
概要: In the last decade, conversational search has attracted considerable attention. However, most research has focused on systems that can support a \emph{single} searcher. In this paper, we explore how systems can support \emph{multiple} searchers collaborating over an instant messaging platform (i.e., Slack). We present a ``Wizard of Oz'' study in which 27 participant pairs collaborated on three information-seeking tasks over Slack. Participants were unable to search on their own and had to gather information by interacting with a \emph{searchbot} directly from the Slack channel. The role of the searchbot was played by a reference librarian. Conversational search systems must be capable of engaging in \emph{mixed-initiative} interaction by taking and relinquishing control of the conversation to fulfill different objectives. Discourse analysis research suggests that conversational agents can take \emph{two} levels of initiative: dialog- and task-level initiative. Agents take dialog-level initiative to establish mutual belief between agents and task-level initiative to influence the goals of the other agents. During the study, participants were exposed to three experimental conditions in which the searchbot could take different levels of initiative: (1) no initiative, (2) only dialog-level initiative, and (3) both dialog- and task-level initiative. In this paper, we focus on understanding the Wizard's actions. Specifically, we focus on understanding the Wizard's motivations for taking initiative and their rationale for the timing of each intervention. To gain insights about the Wizard's actions, we conducted a stimulated recall interview with the Wizard. We present findings from a qualitative analysis of this interview data and discuss implications for designing conversational search systems to support collaborative search.
著者: Sandeep Avula, Bogeum Choi, Jaime Arguello
最終更新: 2023-03-23 00:00:00
言語: English
ソースURL: https://arxiv.org/abs/2303.13484
ソースPDF: https://arxiv.org/pdf/2303.13484
ライセンス: https://creativecommons.org/licenses/by/4.0/
変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。
オープンアクセスの相互運用性を利用させていただいた arxiv に感謝します。