二人とも「話が通じた」と思っているのに、実は別のものを指している。こうした誤解は、自由会話を録音するだけでは狙って集めにくく、起きたとしても発生地点や解消過程を特定しにくい現象です。
HCRC Map Task Corpusは、少しずつ異なる地図を二人に渡し、会話だけで同じ経路を再現してもらう課題によって、参照のずれ、聞き返し、確認、言い直しを引き出した英語対話コーパスです。この記事では、元のコーパスがどのように収録されたかに加え、2026年の研究が話し手と聞き手の理解をどう分けて注釈したかを見ていきます。
本記事は公開コーパス、原論文、公式配布情報を紹介するものです。株式会社イングクラウドが当該研究やコーパス制作に関与したことを示すものではありません。
64人が4回ずつ参加した128対話・約18時間のコーパス
HCRC Map Task Corpus公式ページによると、コーパスには録音・書き起こし・複数層のアノテーションが付いた128対話が収録されています。Linguistic Data Consortiumの配布情報では、収録時間は約18時間、参加者はグラスゴー大学の学生64人で、成人の女性32人・男性32人、各人が4会話へ参加したとされています。多くはスコットランド英語の母語話者でした。
元のコーパスは、単に誤解だけを集めるためのものではありません。1991年の原論文では、自然発話を複数の水準から研究できるよう、話者同士が友人か初対面か、互いの顔が見えるか、地図上の目印が一致するか、対照強勢を置く機会があるか、目印名にどのような音韻的特徴があるかを操作したと説明されています。友人/初対面、顔が見える/見えない条件は、それぞれ半数ずつになるよう均衡化されました。
経路を知る人と、線を引く人に情報を分ける
各対話では、一人が経路の描かれた地図を持つ「指示役(giver)」、もう一人が経路のない地図を持つ「作業役(follower)」になります。作業役は、指示役の説明を聞いて自分の地図へ経路を描きます。相手の地図は見えず、完全な経路と終点を知っているのは指示役だけです。
地図にはおよそ12個の名前付きの目印が置かれています。ただし、二人の地図は似ていても同一ではありません。2026年のGrounded Misunderstandings in Asymmetric Dialogueは、地図のずれを主に三つへ整理しています。
- 名称のずれ:同じ位置・同じ図柄でも、「cliffs」と「sandstone cliffs」のように名前が異なる
- 存在のずれ:片方の地図にだけ目印がある
- 個数のずれ:指示役の地図には同名の目印が二つ、作業役の地図には一つだけある
この設計の要点は、参加者に誤解するよう演技させることではありません。双方にとって自分の地図は自然であり、協力して課題を終えるには会話するしかない一方、相手も同じものを見ているという思い込みが、ときに成立しない状況を作っています。完成した経路も残るため、会話上の了解と作業結果を照合できます。
相づちがあっても、同じ対象を見ているとは限らない
個数のずれは、表面上は成功した会話の中へ誤解を埋め込みます。たとえば、指示役の地図に「parked van」が二つあり、作業役の地図には一つしかないとします。指示役が二つのうち一方を意図して「the parked van」と言っても、作業役には候補が一つしかないため、迷わず別の位置の車を選べます。返事や復唱があれば会話は成立したように聞こえますが、二人が頭に置いた対象は一致していません。
ずれは、その場で必ず発覚するわけではありません。後続する方向や距離の説明と合わなくなったとき、聞き返しや位置の言い換えが起こり、過去の参照が修正されます。誤解を研究するには、問題が起きた一発話だけでなく、最初の参照から、了解、矛盾の発覚、確認、再解釈までを連続して見る必要があります。
元データには音声、書き起こし、地図、対話行為がそろう
公式ページで案内されているNITE XML Toolkit形式には、書き起こし、アノテーション、各対話のステレオWAV音声、地図が含まれます。元のCD-ROM版は、16ビット・20kHz・会話ごとに2チャンネルの波形データ、SGML形式の書き起こし、地図画像、実験手順書を収録していました。参加者が会話で使う主要語彙を読んだ単語リスト音声もあります。
2026年研究は、このうち単語単位で時刻同期された書き起こし、目印IDに結び付いた参照表現、発話の機能を表すmoveタグ、地点間のやり取りをまとめたtransactionを利用しました。収録時には映像も撮影されましたが、公式ページによると、参加者のプライバシー保護のため動画は自由ダウンロードの対象ではありません。
話し手の意図と聞き手の解釈を別々に記録する
2026年研究の中心は、各参照表現について「話し手がどの目印を意図したか」と「聞き手がどの目印として受け取ったか」を別々に記録することです。同名の目印が複数ある場合も区別できるよう、地図、目印名、地図上の個体番号、指示役側/作業役側を組み合わせた新しいIDを設計しました。
さらに、次の五つの属性を順番に判定しています。
- 存在確認か:特定の対象を指すのではなく、「○○はありますか」のように存在を尋ねているか
- 反応を確認できるか:聞き手がその参照表現を受け取ったと判断できる応答があるか
- 受理されたか:聞き返しや聞き違いの表明がなく、表現を処理できたか
- 対象へ結び付いたか:聞き手が具体的な目印へ対応付けたか
- 見えない目印を補ったか:自分の地図にない目印を、説明から想定したか
この順序によって、「応答がない」「言葉を聞き取れない」「表現は理解したが該当物がない」「具体的な対象へ結び付けたが話し手とは別物だった」を分けられます。最後の状態こそ、双方が理解できたと思いながら対象がずれている誤解です。
13,077件はGPT-5で注釈し、504件を人手で検証した
全128対話への追加アノテーションは、人手による全件作業ではありません。研究チームは、会話冒頭から当該transactionの終わりまでの書き起こし、対話行為、参照表現、両方の地図にある目印候補をプロンプトへ入れ、GPT-5にJSON Schema準拠の出力を求めました。これにより13,077件の参照表現へ注釈しています。なお、入力に存在した4件をモデルが出力しなかったことも論文に明記されています。
品質評価では、3対話に含まれる504件を、著者の一人である経験者1人が同じ指針で検証し、曖昧な事例は共著者と協議しました。504件中28件では少なくとも一属性に誤りがあり、参照表現単位の正解率は94.4%でした。五属性の正解率は96.20〜100%で、最も誤りが多かったのは、暗黙の確認や過去の表現の再利用から「対象へ結び付いた」と推定する判定でした。
これは高い一致を示す一方、複数の人手作業者による一致度ではありません。単一のLLM、単一条件、主に一人が作った人手ゴールドによる評価であるため、異なるモデルや作業者へそのまま一般化はできません。
同じ名前の目印が複数ある条件で誤解が増えた
名称の異なる同一目印を統合した後、13,077件のうち239件、1.82%が「話し手と聞き手が異なる目印へ結び付けた誤解」と分類されました。特に個数のずれがある目印では、956参照中115件、12.0%が誤解でした。全体平均の約6倍で、全誤解239件の48.5%を占めます。
研究チームはさらに、同じ目印を繰り返し指す参照表現を1,665本のチェーンにまとめました。そのうち1,334本は最終的に理解が一致しました。ただし、いったん一致した後も、同名の別の目印が再び話題になると不一致へ戻る例があります。「誤解は解消済み」という会話全体のラベルでは、この往復を捉えられません。
日本語で再現するなら、発話だけでなく各参加者の見え方を保存する
この課題設計を日本語対話へ応用する場合も、誤解を演じてもらうのではなく、参加者ごとに異なる情報を持たせ、共同成果物を完成させる構造が基本になります。地図に限らず、配置図、組立図、商品一覧、画面操作、予定表などでも設計できます。
- 「あれ」「そっち」「上のほう」などを、各参加者が見ていた対象へ別々に対応付ける
- 相づちだけを理解成立の証拠にせず、後続発話や操作結果まで確認する
- 発話音声、画面・資料、描画やクリックの操作ログ、完成物を同じ時刻軸へそろえる
- 同名対象を複数置く条件と、片方にしかない対象を置く条件を分けて設計する
- 注釈者には片方だけの視点ではなく、両者の資料と会話履歴を提示する
日本語特有の指示語や省略は検討事項になりますが、「話し手の意図」と「聞き手の解釈」を分けること自体は言語を問わない設計原則です。収録仕様では、何を日本語固有の現象として扱い、何を共同作業対話に共通する現象として扱うかを区別する必要があります。
テキストだけでは韻律や視線による修復を捉えきれない
2026年研究の追加注釈は、地図と書き起こしを用いたテキスト中心の分析です。元の対話では韻律が利用され、半数の会話では相手の顔を見ることもできました。「mmhmm」のような応答が了解なのか疑問なのかはイントネーションで変わり得るため、テキストだけでは判断できない場合があります。
また、追加注釈が対象とするのは目印への参照です。経路選択、方向表現の曖昧さ、目印間の細かな空間関係までは注釈していません。収録目的が誤解の検出だけでなく、どの手がかりで修復したかの分析にあるなら、音声、視線、ジェスチャー、操作ログを含めたマルチモーダルな記録と、それぞれの限界を踏まえた検品が必要です。
RESEARCH DATA SUPPORT
情報差を用いた共同作業対話の設計・収録・アノテーションをご相談いただけます
株式会社イングクラウドでは、参加者ごとに異なる資料を用いる課題設計、参加者募集、対話収録、操作ログとの同期、参照対象・理解状態・確認・修復のアノテーションと検品を支援しています。研究上の問いを、収集条件や参加者への作業指示、判定基準へ落とし込む段階からご相談いただけます。
