https://zenn.dev/knowledgesense/articles/1d513cbf06d582

RAGを評価するサンプルQ&Aを爆速で生成

RAGのソースにするドキュメントに対して、Q&Aデータを自動で生成できる手法「ExpertGenQA」について解説。

RAGを評価するためのデータセットの作成は大変ですが、この手法で人間が作成した数件の例だけで、そのパターンを踏襲したQ&Aデータを自動生成できます。

大企業のドキュメントのような専門性が高い内容に対して精度を上げるための工夫が実装されたRAGを開発する際に便利な手法です。