datasets
Training and evaluation data, with the modality, task and licence stated up front. Listed live from the Hugging Face Hub.
Bluemoon_Top50MB_Sorted_Fixed_ja
Bluemoon_Top50MB_Sorted_Fixed_ja
SicariusSicariiStuff/Bluemoon_Top50MB_Sorted_Fixedを、GENIAC-Team-Ozaki/karakuri-lm-8x7b-chat-v0.1-awqを用いて日本語に翻訳したロールプレイ学習用データセットです。
LLMの推論にはDeepInfraというサービスを使いました。
翻訳の詳細
3-shots promptingでの翻訳
mistralのtokenizerで出力が8000トークンを超えるまで翻訳
元データセットにある非常に長い対話は上記条件で途中のターンで翻訳を終了しています。
LLM特有の同じ出力が繰り返される現象に遭遇した場合、その時点で該当レコードの翻訳を終了
この結果1ターン未満となったレコード(157件)を削除… See the full description on the dataset page: https://huggingface.co/datasets/Aratako/Bluemoon_Top50MB_Sorted_Fixed_ja.batch_test_fixed
Qwen Continuation Dataset
Generated with qwen_continuation_dataset.
Statistics
Shards
6
Examples
52
Shard size
10
Updated
2026-07-13 10:07 UTC
Usage
from datasets import load_dataset
ds = load_dataset("TeoStarshine/batch_test_fixed")
ds = load_dataset("TeoStarshine/batch_test_fixed", streaming=True)
Fields
Field
Description
source_id
source document ID
source_name
source dataset (fineweb / math)… See the full description on the dataset page: https://huggingface.co/datasets/TeoStarshine/batch_test_fixed.nobatched_test_fixed
Qwen Continuation Dataset
Generated with qwen_continuation_dataset.
Statistics
Shards
5
Examples
50
Shard size
10
Updated
2026-07-13 10:26 UTC
Usage
from datasets import load_dataset
ds = load_dataset("TeoStarshine/nobatched_test_fixed")
ds = load_dataset("TeoStarshine/nobatched_test_fixed", streaming=True)
Fields
Field
Description
source_id
source document ID
source_name
source dataset (fineweb… See the full description on the dataset page: https://huggingface.co/datasets/TeoStarshine/nobatched_test_fixed.batch_test_fixed8
Qwen Continuation Dataset
Generated with qwen_continuation_dataset.
Statistics
Shards
5
Examples
50
Shard size
10
Updated
2026-07-13 10:40 UTC
Usage
from datasets import load_dataset
ds = load_dataset("TeoStarshine/batch_test_fixed8")
ds = load_dataset("TeoStarshine/batch_test_fixed8", streaming=True)
Fields
Field
Description
source_id
source document ID
source_name
source dataset (fineweb /… See the full description on the dataset page: https://huggingface.co/datasets/TeoStarshine/batch_test_fixed8.
