2026年10月1日
「良い回答」をどう採点する?LLM評価ルーブリックの作り方
「良い回答を5点満点で評価してください」と評価者に依頼しても、何を良いとするかが人によって違えば点数は比較できません。社内規程の回答なら根拠と適用条件、要約なら原文の内容を保った短縮、顧客対応なら質問への対応と禁止事項、アイデア生成なら条件への適合や発想の幅が重要になります。 ルーブリックは、こうした利用場面ごとに「何を見て、どの状態なら何点か」を定める採点…
2026年10月1日
「良い回答を5点満点で評価してください」と評価者に依頼しても、何を良いとするかが人によって違えば点数は比較できません。社内規程の回答なら根拠と適用条件、要約なら原文の内容を保った短縮、顧客対応なら質問への対応と禁止事項、アイデア生成なら条件への適合や発想の幅が重要になります。 ルーブリックは、こうした利用場面ごとに「何を見て、どの状態なら何点か」を定める採点…