CoolFace
Datasetpublic

topsky2222/glass-rag-eval

Glass Manufacturing & Furnace Technology RAG Eval v0.1 玻璃制造与炉窑技术领域的中文检索与有据问答评测基准。语料为 111 篇玻璃制造、熔窑、浮法、钢化、能源、排放与过程控制方向的英文科研论文(结构化解析产物);评测集为 100 道中文题(80 道可回答 + 20 道语料范围外),每题附英文 gold 证据块、gold 文档/章节标注与中文参考答案。 评测集构成 总量:100 题(开发集 25 / 测试集 75) 可回答题 80 道:概念/机理 30、数字/表格 20、方法与控制 15、技术比较 10、多文献综合 5 范围外题 20 道:用于检验检索拒答与幻觉抑制 证据:gold 证据块 ID 对齐到切块索引;gold 文档以规范化小写 DOI 标识 金标准质量(双人盲审,2026-08-20) 评测集经两名未参与构建的评审人双人独立盲审(随机乱序、隐藏生成来源): 维度 一致率 Cohen's Kappa… See the full description on the dataset page: https://huggingface.co/datasets/topsky2222/glass-rag-eval.

sourceHugging Faceotherupdated 1mo agoView on Hugging Face
0likes11downloads
2 commits on main
76bb0001mo ago

Release v0.1: eval set with human/LLM kappas, cross-retriever metrics, judge rubric, and leakage audit

topsky2222
831e40e1mo ago

initial commit

topsky2222