hcnote/Spark-X2.5-4B-Writing-EP1
116
Spark-X2.5-4B-Writing-EP1(第一轮训练存档版)
⚠️ 18+ 内容声明:本模型对成人向文学创作内容不做拒绝,仅限已成年用户在合法场景下使用。
这是 SparkMuse-4B / 星火缪斯 项目第一轮训练(EP1)的存档版本,模型权重保持上传时原样、不再更新。
👉 正式版请使用主仓库:[hcnote/SparkMuse-4B](https://modelscope.cn/models/hcnote/SparkMuse-4B)(完整两轮训练,含完整模型卡:训练过程、评测对比、采样参数建议、已知不足与致谢)。
本版本说明
- 基座:XHToken/Spark-X2.5-4B(4.112B,Apache-2.0),全参数微调第 1 轮(649 步)checkpoint
- 数据:hcnote.cn 授权内容(脱敏),五域 12,540 条对话 → 16K packing,约 0.85 亿 token/轮
- 验证集 PPL:创意写作 6.99→3.88、角色扮演 12.87→8.22、成人向 6.19→3.40、社交模拟 7.76→4.57、通用 4.19→2.96(相对基座 -29%~-45%)
- 使用方法、采样参数(务必 repetition_penalty≥1.1)、长上下文说明、量化版本矩阵,请见主仓库模型卡
使用(快速)
import torch
from transformers import AutoModelForCausalLM, AutoTokenizer
m = AutoModelForCausalLM.from_pretrained("hcnote/Spark-X2.5-4B-Writing-EP1",
dtype=torch.bfloat16, device_map="auto", trust_remote_code=True)
tok = AutoTokenizer.from_pretrained("hcnote/Spark-X2.5-4B-Writing-EP1", trust_remote_code=True)需要 transformers >= 4.57 与 trust_remote_code=True。
联系我们
- 官网 https://hcnote.cn · 公益安全网关 https://api.hcnsec.cn/ · QQ 群 253193620
新疆幻城网安科技有限责任公司 × 新疆文影智创大学生创业团队(负责人:常惠荣) 联合出品
