LINEヤフー大阪オフィスで生成AIに関するLTに登壇

LLM-as-a-judgeの考え方と実践を紹介

登壇では、LLMの出力を別のLLMで評価する「LLM-as-a-judge」を取り上げました。評価に使う観点や運用時の注意点について、最新論文と実践事例を交えて紹介しました。

生成AIを業務で使うには、出力を作る仕組みだけでなく、品質を確かめる方法も必要です。CosmoSketchは、検証と評価を含めた業務設計に取り組んでいます。