2026年9月18日
既存の方言データを比較可能にするDIALECTBENCH
標準語のテストで高い性能を示すAIが、方言や地域変種でも同じように動くとは限りません。ただし、その差を横断的に調べるには、方言文を新しく集めるだけでなく、形式も粒度も異なる既存データを比較できる単位へ整理する必要があります。 DIALECTBENCHは、一つの新規データセットではありません。既存の方言・地域変種・社会変種・近縁言語のデータを集め、言語クラスタ…
2026年9月18日
標準語のテストで高い性能を示すAIが、方言や地域変種でも同じように動くとは限りません。ただし、その差を横断的に調べるには、方言文を新しく集めるだけでなく、形式も粒度も異なる既存データを比較できる単位へ整理する必要があります。 DIALECTBENCHは、一つの新規データセットではありません。既存の方言・地域変種・社会変種・近縁言語のデータを集め、言語クラスタ…