LLM評価のプロンプトはどう書くか、LLM-as-a-judgeの判定がブレる原因と3つの対処

Источник данных

То, что RADAR обнаружил и классифицировал для этой возможности. Это опубликованный источником текст, а не подтверждение, что предложение ещё действует.

• Qiita AI TagНаблюдение: 2 окт. 2026 г.Надёжность источника: 60%

  LLM評価のプロンプトはどう書くか、LLM-as-a-judgeの判定がブレる原因と3つの対処. LLMの出力を別のLLMに評価させる、いわゆるLLM-as-a-judgeを評価の仕組みに組み込んでいる。評価を自動化する記事では全体の構成を書いたが、実際にやってみると判定プロンプトの書き方で結果が大きく変わる。今回はそこに絞って書く。 自分の運用では、判定基準の曖昧さを...

  Открыть источник