RWKV
Datasets
All datasets matching “RWKV”lm-eval-data
LM Eval data
This repository, represents a giant collection of various lm-eval results built using the github scripts found here
The goal at the point of creation, was to collect as much LM-eval results for as many relevent model for the RWKV paper. For analysis.
Cloning the repo, without the jsonl dump
export GIT_LFS_SKIP_SMUDGE=1
git clone https://huggingface.co/datasets/rwkv-x-dev/lm-eval-data.git
Cloning the repo, with the archives (large)
# Clone with… See the full description on the dataset page: https://huggingface.co/datasets/rwkv-x-dev/lm-eval-data.rwkv-chatRWKV-Chat
RWKV-LM_pile_binidx_datasetRWKV-7-ArithmeticRWKV-7-Arithmetic-0.1B 加减法运算模型的训练和测试数据集。
该模型实现基础加减法运算和加减法方程求解功能，能够处理整数部分为 1-12 位、小数部分为 0-6 位的数值，支持中英文数字、全半角格式以及大小写字符的多种表示形式，可实现基础加减法运算和加减法方程求解功能。
训练数据集说明
以下是我们使用的加减法训练数据类型，共包含 30000587 33000147 条单轮加减法 QA 数据，约 1B（1014434168） token。
数据文件名
数据条数
数据说明
示例
ADD_4M
3997733
1. 使用‘全角’、‘中文数字’、‘大写中文数字’随机替换整个数字2. 运算符附近有 1~2 个随机空格3. 含简单自然语言描述/自然语言噪声
{"text": "User: 249476576 减 796580834 还剩多少？\n\nAssistant: -547104258"}
ADD_2M
1999673
1. 使用‘全角’、‘中文数字’、‘大写中文数字’随机替换整个数字2. 运算符附近有 1~2… See the full description on the dataset page: https://huggingface.co/datasets/shoumenchougou/RWKV-7-Arithmetic.blinkdl-rwkv-indonesia