シルバーセットとは
SILVER SET
読み: シルバーセット
シルバーセットとは、AIが自動生成した暫定的な正解データセット
読み: シルバーセット
人手で作成するゴールデンセットに対し、精度は劣るが量とスピードで開発の初期段階を支える役割を持つ
かんたんに言うと
ゴールデンセットが「先生の模範解答」なら、シルバーセットは「優秀な先輩の過去問解答集」。100%正解とは限らないが練習には十分。
LLM-as-a-Judgeによるデータ生成
ゴールデンセットを手本にAIがバリエーションを大量生成。高性能モデルで評価し高スコアのみ抽出する。人間が数週間かかる作業をAIは数分で完了する。
ノイズのリスクと使い分け
シルバーセットにはノイズが含まれる。ファインチューニングに使うとAIの「癖」まで学習する。開発中の試行錯誤にはシルバーセット、リリース判断にはゴールデンセットという使い分けが実務の定番。
当社の見解
当社はOpenAI APIを完全廃止し、EmbeddingもLLMも全てローカルで稼働させている（2026年4月時点）。これにより月額のAPI費用がゼロになっただけでなく、機密情報や顧客データを外部に送信せずにAI処理できるようになった。クライアントのログデータをマスキングなしでそのまま分析に回せるのは、ローカルLLMだからこそ実現できる。2026年4月にはOllama常駐実行（CPU 25%、GPU 30%を常時占有）を廃止し、FastEmbed（ONNX Runtime）による非常駐型推論に移行。処理が必要な瞬間だけプロセスを起動し、完了後に即座に終了する設計で、アイドル時のリソース消費をゼロにした。あえて一般的なデスクトップPC環境で複数のローカルLLMを実機検証した経験から言えることは、ベンチマークスコアと実務での使い勝手、そして常駐時のリソース消費は全て別の指標だということだ。