RAG の資料と精度テスト表
Kaizen
社内文書を AI に読ませる仕組みの答えの質は、入れる資料と、確かめ方で決まります。古い版や重複、スキャンした PDF、個人情報を含む資料をそのまま入れると、もっともらしい間違いや情報の漏れにつながります。
この資料でできること
- 資料ごとに、入れる・直してから入れる・入れないと、直すことが出る
- 社員が実際に聞く質問で、正答率・誤答率・答えない率を分類ごとに測れる
- 合格ラインと誤答の上限を決めて、使い始めてよいかを判断できる
こんな方に
- 社内の規程や手順書を AI に読ませて、社員の質問に答えさせたい方
- RAG を作った(作ってもらった)が、答えの精度をどう確かめればよいか分からない方
シートの構成
- 使い方
- 資料の棚卸し(50資料)
- 質問集と判定(60問)
- 集計と合格ライン
- 判定の基準
- 記入例(資料・質問・集計)
内容の確認日:2026.11.11