Datasetpublic

cy-330/UPBench-Error-verified

UPBench-Error-verified 人工核验过的 LCZZZZ/UPBench-Error → generation_error 子集。保留其中看不出明显低级生成缺陷的样本。这是怎么筛出来的从原数据集 5,761 条 generation_error 样本出发：步骤剩余原始样本 5,761 剔除 is_gui=true（GUI-World / egoproactive 屏幕录制） 3,390 逐条人工过目 error_clip.mp4 3,390 全部看完判定为无明显生成缺陷（good） 1,420 判定为有缺陷（bad） 1,970 内容 metadata/manifest-verified.jsonl 1,420 条，原 manifest 字段逐字保留，另加 human_verification 字段… See the full description on the dataset page: https://huggingface.co/datasets/cy-330/UPBench-Error-verified.

sourceHugging Faceotherupdated 1mo agoView on Hugging Face

0likes74downloads

Dataset Card

UPBench-Error-verified

人工核验过的 LCZZZZ/UPBench-Error → generation_error 子集。保留其中看不出明显低级生成缺陷的样本。

这是怎么筛出来的

从原数据集 5,761 条 generation_error 样本出发：

步骤	剩余
原始样本	5,761
剔除 `is_gui=true`（GUI-World / egoproactive 屏幕录制）	3,390
逐条人工过目 `error_clip.mp4`	3,390 全部看完
判定为无明显生成缺陷（good）	1,420
判定为有缺陷（bad）	1,970

内容

metadata/manifest-verified.jsonl   1,420 条，原 manifest 字段逐字保留，
                                   另加 human_verification 字段
metadata/human_labels_all.csv      3,390 条全量标注（含 bad），可复现筛选
metadata/summary.json              统计摘要
videos/<sample_id>/
    error_clip.mp4                 AI 生成的错误片段
    error_context.mp4              完整上下文：真实前段 + 尾部生成段
    correct_clip.mp4               配对的正确片段（真实拍摄）
    correct_context.mp4            配对的完整上下文（全程真实）

每个样本四个视频齐全，与原数据集 generation_error 的结构一致。

human_verification 字段：

json

{"label": "good",
 "meaning": "no obvious low-level generation artifact",
 "reviewer": "...", "reviewed_at": "...", "note": ""}

其余所有字段（error_type / correct_step / error_step / expected_correction / failure_mechanism / audit / pair …）均与原数据集逐字一致，未做任何改写或翻译。

good 子集构成

error_type	数量
wrong_execution	820
substitution	600

上游数据集	数量
EgoExo4D	643
EgoExoLearn	528
ENIGMA-360	50
EgoLife	37
egoproactive	36
其余 10 个来源	126

许可

沿用原数据集的 source-dataset-terms。素材来自 EgoExo4D、EgoExoLearn、 ENIGMA-360、HoloAssist 等上游数据集，各自的使用协议依然适用。使用前请确认你已获得相应上游数据集的授权。