2026年9月18日
子ども同士と子ども・ロボットの遊びをどう記録する？PInSoRo
子どもが誰かと遊ぶとき、会話だけが起きているわけではありません。同じものを見る、相手の動きをまねる、順番を譲る、一緒に絵を描く、ときには相手を無視する。社会的な関係は、声、視線、身体の動き、物の操作が重なりながら変化します。 こうした行動をAIに学習させるには、短い指示課題だけでは足りません。一方で、「自由に遊んでください」と依頼するだけでは、参加者ごとに状…
マルチモーダル
-
-
2026年9月18日
うなずきや相づちは文化でどう違う？日本語・中国語を加えたNoXi+J
会話への関心は、発言内容だけに表れるわけではありません。相手の話を聞きながらうなずく、短く相づちを打つ、視線を向ける、表情を変える。私たちは複数の手がかりを組み合わせて、「この人は話に参加している」「少し関心が離れている」と判断しています。 ところが、うなずきや相づちの使い方は、言語や文化によって同じとは限りません。ある言語圏で関心の表れとして機能する動作を…
-
2026年9月18日
同時発話と割り込みをどう記録する？AMI Meeting Corpus
複数人の会話では、一人が話し終わってから次の人が話すとは限りません。短い相づちが重なり、二人が同時に話し始め、一方が続けたり譲ったりします。 書き起こしで発話を一列に並べると、こうした会話の構造は消えてしまいます。 本記事は公開コーパスの紹介です。株式会社イングクラウドが当該コーパスの構築へ関与したことを示すものではありません。 今回取り上げるコーパス AM…
-
2026年9月18日
視線から次に話す人を予測できるか――HCRC Map Task Corpusの視線研究
人は会話中、言葉だけで発話の順番を調整しているわけではありません。相手を見る、資料へ視線を戻す、顔を上げるといった動きも、話し続けるのか、相手へ順番を渡すのかを示します。 本記事は公開論文と公開コーパスの紹介です。株式会社イングクラウドが当該研究へ関与したことを示すものではありません。 今回取り上げる研究 Gaze Behaviour & Conve…
-
2026年9月18日
笑い声は感情か相づちか――会話中の笑いを記録したDUEL
笑い声は、いつも「楽しい」という感情だけを表すわけではありません。照れ、緊張、気まずさの緩和、相手への同意、発話順の調整にも使われます。 DUELは、会話中の笑い、言いよどみ、感嘆表現を、音声・映像・身体動作と一緒に記録した多言語対話コーパスです。 本記事は公開論文と公開コーパスの紹介です。株式会社イングクラウドが当該研究へ関与したことを示すものではありませ…
-
2026年9月18日
会話の途中で感情が変わる様子を記録したMELD
「Okay」「Yeah」のような短い返事だけを読んでも、話者が納得しているのか、怒っているのか、諦めているのかは分かりません。直前の会話、声の調子、表情を見ることで、初めて感情を推測できることがあります。 MELDは、一つの文章だけでは判断しにくい会話中の感情を、テキスト、音声、映像とともに記録したデータセットです。 本記事は公開論文と公開データセットの紹介…
-
2026年9月18日
AIは嘘や冗談をどう見分けるのか｜言葉どおりではない発話を学ぶデータ
人は「最高だね」という一言を、心からの称賛にも、失敗への皮肉にも使います。冗談を真顔で言うこともあれば、本当の話が冗談のように聞こえることもあります。 AIが嘘や冗談を理解するには、単語の意味だけでなく、直前の出来事、話者の意図、声の調子、表情、聞き手の反応まで見る必要があります。本記事では、言葉どおりではない発話を研究する際、どのようなデータが使われるのか…
-
2026年9月18日
AIは「うん」「なるほど」をいつ返す？MM-F2Fの発話交替データ
会話AIが返答内容を理解していても、話し始めるタイミングが早ければ人の発話を遮り、遅ければ不自然な沈黙になります。「うん」「なるほど」といった相づちも、内容だけでなくタイミングが重要です。 本記事は公開論文と公開データセットの紹介です。株式会社イングクラウドが当該研究へ関与したことを示すものではありません。 今回取り上げる論文 Predicting Turn…
-
2026年9月18日
皮肉は文字・声・表情のどこに現れる？MUStARD
「さすがですね」という文字だけでは、称賛なのか皮肉なのか分かりません。声の調子、表情、直前の失敗を知れば、意味が変わることがあります。 MUStARDは、文章だけでなく映像・音声・前後の会話を使って皮肉を判定するためのデータセットです。 本記事は公開論文とデータセットの紹介です。映像作品をデータ化する場合は、著作権と利用条件を別途確認する必要があります。 今…
-
2026年9月17日
AIは人の感情や会話の文脈をどう学ぶ？公開論文から学習データを読み解く
AIに感情を覚えさせる、相手の気持ちを理解させる、会話の空気を読ませる。このような研究が進んでいると聞くと、AIが人間と同じように喜んだり悲しんだりする姿を想像するかもしれません。 しかし、現在の研究で行われているのは、AIの内側に人間と同じ感情を生み出すこととは少し異なります。 人が会話を見たり聞いたりして、「この発話は怒りを表している」「この出来事が悲し…