2026年9月18日
標準語だけでAIを評価してよいのか？DIALECTBENCH
標準語のテストで高い性能を示すAIが、方言や地域変種でも同じように動くとは限りません。利用者の言葉を「誤った表現」として扱えば、特定地域だけサービス品質が低くなる可能性があります。 本記事は公開論文と公開ベンチマークの紹介です。「方言」「言語変種」「近縁言語」の区分は、言語学的・社会的背景によって異なります。 今回取り上げる論文 DIALECTBENCH:…
公平性
-
-
2026年9月17日
学習用データの偏りは収集現場で生まれる｜集めやすい人だけに偏らない設計
AI学習データの偏りというと、モデルやアルゴリズムの問題を思い浮かべるかもしれません。しかし、偏りはデータを集める段階ですでに生まれています。 オンライン募集へ反応しやすい人、撮影しやすい環境を持つ人、指定端末を使う人から先にデータが集まります。総数だけを目標にすると、集めやすい人のデータが多数を占めます。 募集媒体によって参加者が偏る クラウドソーシング、…