LLM-as-a-Judge
prometheus-llm-as-a-judge-v1repro-efficient-inference-for-noisy-llm-as-a-judge-evaluation-traces
Agent traces
Agent sessions published from a Trackio Logbook.
dentaku-llm-as-a-judge(English part follows Japanese one.)
team-dentaku/dentaku-llm-as-a-judge
FT-LLM2026チューニングコンペティション (数学タスク) におけるチームdentakuの提出システム構築に利用したデータセットです。
本リポジトリでは正誤判定予測モデルの学習に利用したデータセットを公開しています。
各列名 (キー名) とその内容については以下の通りです
question: 入力となる数学問題
code: questionに対する解法として期待されるコード
decision: codeが与えられた数学の問題文の解答として妥当であると考えられる場合True,妥当でない場合はFalse.
rationale: 最終判断 (decision) に至る理由を説明するテキスト
thinking: 推論過程
正誤判定予測モデルの学習時には入力に入力プロンプトテンプレートを用い,出力に
出力プロンプトテンプレートを利用しています。… See the full description on the dataset page: https://huggingface.co/datasets/team-dentaku/dentaku-llm-as-a-judge.Qwen3-8B-customerservice-LLM-as-a-judge-dataGPT-4.1-customerservice-LLM-as-a-judge-dataQwen3-1.7B-customerservice-LLM-as-a-judge-data
