datasets
Training and evaluation data, with the modality, task and licence stated up front. Listed live from the Hugging Face Hub.
agentbenchAgentBenchKo-AgentBench
🇰🇷 Ko-AgentBench v1
"한국 에이전트 벤치마크 프로젝트"
English | 한국어
⚠️ 벤치마크 평가를 진행하시려면 GitHub Repository를 방문해주세요.
이 데이터셋은 벤치마크 태스크 정보만 포함하고 있습니다. 실제 평가 코드, API 도구, 평가 메트릭 등은 GitHub에서 확인하실 수 있습니다.
AI 에이전트의 능력이 고도화되면서, 그 성능을 실제 환경과 유사한 조건에서 정밀하게 측정하는 것이 중요해졌습니다. 하지만 대부분의 벤치마크는 영어권 환경을 기준으로 설계되어, 한국의 특수한 사용 맥락을 반영하는 데 한계가 있었습니다.
이러한 문제를 해결하기 위해, 한국 실사용 환경에 특화된 고품질 에이전트 벤치마크를 개발하였습니다.
Ko-AgentBench 핵심 특징 ✨
1. 단계별 태스크 설계
단순 도구 호출부터 장기적 맥락 능력, 강건성 처리 능력까지 에이전트의 능력을 7단계로… See the full description on the dataset page: https://huggingface.co/datasets/huggingface-KREW/Ko-AgentBench.Simia-AgentBench-SFT-15k
🐒 Simia-AgentBench-SFT-15k:
Simia-AgentBench-SFT-15k is the fully synthetic tool-agent dataset, designed to advance tool use for AgentBench (webshop, mind2web, Operating System). It comprises nearly 15k synthesized trajectories from Agenttuning (webshop, mind2web, Operating System). Models fine-tuned on this dataset outperform much larger closed-source counterparts on AgentBench (webshop, mind2web, Operating System).
📄 Technical Report - Discover the methodology and technical… See the full description on the dataset page: https://huggingface.co/datasets/Simia-Agent/Simia-AgentBench-SFT-15k.Ko-AgentBench
🇰🇷 Ko-AgentBench v1
"한국 에이전트 벤치마크 프로젝트"
English | 한국어
⚠️ 벤치마크 평가를 진행하시려면 GitHub Repository를 방문해주세요.
이 데이터셋은 벤치마크 태스크 정보만 포함하고 있습니다. 실제 평가 코드, API 도구, 평가 메트릭 등은 GitHub에서 확인하실 수 있습니다.
AI 에이전트의 능력이 고도화되면서, 그 성능을 실제 환경과 유사한 조건에서 정밀하게 측정하는 것이 중요해졌습니다. 하지만 대부분의 벤치마크는 영어권 환경을 기준으로 설계되어, 한국의 특수한 사용 맥락을 반영하는 데 한계가 있었습니다.
이러한 문제를 해결하기 위해, 한국 실사용 환경에 특화된 고품질 에이전트 벤치마크를 개발하였습니다.
Ko-AgentBench 핵심 특징 ✨
1. 단계별 태스크 설계
단순 도구 호출부터 장기적 맥락 능력, 강건성 처리 능력까지 에이전트의 능력을 7단계로… See the full description on the dataset page: https://huggingface.co/datasets/xiaoluodeng/Ko-AgentBench.dbbench_cleaned_for_agentbench
DBBench Cleaned for AgentBench
u-10bei/dbbench_sft_dataset_react_v4(1,200 件)に対してクレンジング処理を施したデータセット。
AgentBench DBBench 評価用の SFT 訓練データとしてそのまま使用可能。
混合利用を想定: 本データセットは mark-22/dbbench-spider-3500(1,697 件)と混合し、合計 2,897 件 の SFT データとして使用することを想定しています。
Dataset Summary
Metric
Value
Total rows
1,200
Source
u-10bei/dbbench_sft_dataset_react_v4
Avg messages per item
6.7
Items with Final Answer1,200 / 1,200 (100%)
Columns
id, messages, metadata… See the full description on the dataset page: https://huggingface.co/datasets/mark-22/dbbench_cleaned_for_agentbench.mixed_agentbench_v3alfworld_cleaned_for_agentbench_v5AgentBenchInstruct_d1mixed_agentbench_v2alfworld_cleaned_for_agentbench_v4mixed_agentbench_v1agentbench-db-alfw-merged-362agentbench_mix_alf3_db1_v1agentbench_sft_mix_alfworld_dbbench_v1
AgentBench SFT Mix (ALFWorld + DBBench)
This dataset is a mixed SFT dataset created by concatenating and shuffling:
u-10bei/sft_alfworld_trajectory_dataset_v5
u-10bei/dbbench_sft_dataset_react_v4
Fields
messages: multi-turn chat messages (role/content)
tools: optional tool schemas (if present)
Credits
This dataset is a mixed and reformatted version of the original datasets listed above.
Please refer to each source dataset for their respective licenses and… See the full description on the dataset page: https://huggingface.co/datasets/tussiiiii/agentbench_sft_mix_alfworld_dbbench_v1.agentbench-sft-v6-success-onlysft_agentbench_combined_preprocessedKo-AgentBench
Ko-AgentBench
한국어 에이전트 벤치마크 데이터셋
데이터 로드
from datasets import load_dataset
# 특정 레벨 로드
dataset = load_dataset("Hugging-Face-KREW/Ko-AgentBench", data_files="L1.json")
# 또는 모든 레벨 로드
dataset = load_dataset("Hugging-Face-KREW/Ko-AgentBench", data_files="*.json")
레벨
L1: Single Tool
L2: Tool Retrieval & Selection
L3: Multiple Tools
L4: Complex Tool Chaining
L5: Conditional Logic
L6: State Management
L7: Multi-step Planning
