2026年10月2日
3〜4人の会話で全員の動きをどう追う?8台で記録したMPIIGroupInteraction
四人で話しているとき、一人が発言しても、残る三人が同じように聞いているとは限りません。発言者を見る人、別の人を見る人、短い相づちを入れる人がいます。次に誰が話すかを調べるにも、今の発言者だけを撮っていては、ほかの人の動きが欠けます。 MPIIGroupInteractionは、初対面の三人・四人による議論を、全員の顔と身体が追える複数の視点と音声で記録したデ…
2026年10月2日
四人で話しているとき、一人が発言しても、残る三人が同じように聞いているとは限りません。発言者を見る人、別の人を見る人、短い相づちを入れる人がいます。次に誰が話すかを調べるにも、今の発言者だけを撮っていては、ほかの人の動きが欠けます。 MPIIGroupInteractionは、初対面の三人・四人による議論を、全員の顔と身体が追える複数の視点と音声で記録したデ…
2026年9月21日
俳優に「怒り」を指定して一文を読んでもらう方法なら、感情名と台詞をそろえられます。しかし、相手の言葉に反応したり、話すうちに気持ちが変わったりする過程は残りにくくなります。感情のある対話を集めるなら、研究者は台詞まで決めるべきでしょうか。それとも、場面だけを渡して俳優に任せるべきでしょうか。 IEMOCAPは、男女二人の俳優に戯曲を演じてもらう収録と、架空の…
2026年9月18日
「この制度を利用できますか」と聞かれても、年齢、居住地、就労状況など必要な条件が分からなければ、規則を読んだだけでは答えられません。足りない情報を見つけ、利用者へ確認し、その回答と規則を照合する必要があります。 ShARC(Shaping Answers with Rules through Conversation)は、規則文、利用者の質問と状況、これまで…
2026年9月18日
「今夜、食事に行きませんか」と聞かれて、「明日は朝が早いんです」と返されたら、多くの人は断りに近いと受け取るでしょう。しかし、返答には「いいえ」も「行きません」も含まれていません。反対に、「近くに予約できそうな店があります」は、明示的な「はい」がなくても肯定に見えます。 CIRCAは、Yes・Noで答えられる質問と、Yes・Noを直接使わない英語の回答を組み…
2026年9月18日
二人が「同僚」だと分かっても、その会話が対等で親しいとは限りません。上司と部下でありながら私生活では友人かもしれず、親子でも、その場では子ども側が判断を主導することがあります。関係名だけでは、会話に現れる距離感や力関係を表し切れません。 SCRIPTSは、英語と韓国語の映画脚本から1,147件の会話を集め、友人・恋人・親子といった関係候補に加え、親密さ、形式…
2026年9月18日
発話を「喜び」「怒り」「悲しみ」と分類できても、なぜその感情になったかまで分かるとは限りません。原因は本人の発話内にあることも、相手が何ターンも前に話した出来事にあることもあります。感情語そのものを、原因と取り違える場合もあります。 RECCON(Recognizing Emotion Cause in CONversations)は、感情ラベルが付いた英語…
2026年9月18日
「適当にまとめて」「少し短くして」「いつものように処理して」。人間同士では通じることがあっても、必要な条件が言葉にされていない指示です。 AIが足りない情報を勝手に補えば、軽微な好みの違いで済む場合もあれば、安全や金額に関わる事故になる場合もあります。重要なのは、何でも質問することではなく、確認が必要な曖昧さを見分けることです。 曖昧さには種類がある 種類例…
2026年9月18日
日本語の「大丈夫です」は、承諾にも断りにもなります。「検討します」が文字どおりの検討を意味する場合もあれば、直接断らないための表現になる場合もあります。 人が「空気を読む」と呼ぶ働きは、一つの能力ではありません。場面、関係性、感情、直前の出来事、社会規範を組み合わせ、表面に書かれていない意図を推測することです。 文章だけでは答えが決まらない 「もういいよ」と…
2026年9月18日
「あとで話そう」という一言は、親しい友人同士なら軽い約束でも、上司から部下へ向けられれば緊張を生むかもしれません。会話の意味は、言葉だけでなく、誰と誰が話しているかによって変わります。 AIが会話を適切に解釈するには、話者の関係性、親密さ、上下関係、場面を理解する必要があります。しかし、人間関係は名札のように会話へ書かれているわけではありません。 関係性は会…
2026年9月18日
人は「最高だね」という一言を、心からの称賛にも、失敗への皮肉にも使います。冗談を真顔で言うこともあれば、本当の話が冗談のように聞こえることもあります。 AIが嘘や冗談を理解するには、単語の意味だけでなく、直前の出来事、話者の意図、声の調子、表情、聞き手の反応まで見る必要があります。本記事では、言葉どおりではない発話を研究する際、どのようなデータが使われるのか…
2026年9月18日
会話では、話し手が理由をすべて言葉にするとは限りません。「今日はマクドナルドにしよう」という発言だけを見ても、空腹なのか、時間がないのか、安く済ませたいのかは決められません。前後の発言と日常的な常識を合わせて、初めてもっともらしい理由を考えられます。 CICERO(Contextualized Commonsense Inference in Dialogu…
2026年9月18日
同じ「はい」でも、上司への返答と親しい友人への返答では、言葉遣いも距離感も異なります。しかし短い会話だけでは、二人が恋人、友人、同僚のどれかを一つに決められないことがあります。 SCRIPTSは、その曖昧さを残してLLMの関係推論を評価するため、英語と韓国語の映画脚本を対話単位へ切り出し、複数の関係候補を付けたベンチマークです。 SCRIPTSの正解は、映画…
2026年9月18日
「悲しい」という感情を文章から分類することと、悲しんでいる相手へ適切に応答することは、同じ能力ではありません。感情を正しく推定できても、返答が唐突だったり、相手の気持ちを無視してすぐ助言したりすれば、共感的な会話にはならないからです。 それでは、相手の感情を理解し、それに配慮して応答する対話AIを作るには、どのような会話を集めればよいのでしょうか。 Empa…
2026年9月17日
「今日も早いですね」という言葉は、出勤が早い人への感心かもしれません。しかし、遅刻してきた人へ向けられたなら、反対の意味を持つ皮肉かもしれません。 「検討します」「少し難しいかもしれません」「大丈夫です」といった表現も、文字どおりの意味だけでは判断できません。話者同士の関係、直前の会話、声の調子、共有している知識によって、承諾、保留、断りなどに意味が変わりま…
2026年9月17日
AIに感情を覚えさせる、相手の気持ちを理解させる、会話の空気を読ませる。このような研究が進んでいると聞くと、AIが人間と同じように喜んだり悲しんだりする姿を想像するかもしれません。 しかし、現在の研究で行われているのは、AIの内側に人間と同じ感情を生み出すこととは少し異なります。 人が会話を見たり聞いたりして、「この発話は怒りを表している」「この出来事が悲し…
2026年9月17日
AI学習データの収集といっても、画像、音声、一人語り、複数人対話では、必要な運営が大きく異なります。同じ100人でも、一人で写真を提出する案件と、四人一組で会話を収録する案件では、日程と管理工数が違います。 画像収集は撮影条件と対象物が中心になる 画像収集では、端末、解像度、向き、距離、照明、背景、対象物の状態を決めます。参加者が撮影対象へアクセスできるか、…
2026年9月17日
AIや機械学習の研究では、どのようなデータを使うかが研究結果を大きく左右します。研究テーマを決め、必要なデータを想定し、研究費を確保してから、収集を依頼する会社を探す。このような順番で進めることも多いでしょう。 しかし、データ収集について相談を受けた時点で、すでに予定どおりの実施が難しくなっていることがあります。 必要な属性の参加者がほとんどいない。指定され…
2026年9月14日
日本語の対話音声を書き起こし、発話ごとに時間情報を付ける作業では、普段からELANを使っています。大学や研究機関からELAN形式を指定されることもあり、対話データのアノテーションではまず名前が挙がるツールです。 では、ELAN以外にはどのようなツールがあるのでしょうか。調べてみると、音声学で使われるPraat、会話分析向けのEXMARaLDA、大人数での作業…