File size: 1,103 Bytes
aeeee3e 13d4427 aeeee3e d1b4f6f 1727d99 5f54d9d d1b4f6f 5f54d9d d1b4f6f |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 |
---
license: mit
language:
- zh
---
### 模型说明
最新的基于RWKV5.2进行Lora微调的roleplay模型
效果如下
![image/png](https://cdn-uploads.huggingface.co/production/uploads/6417b108b03817ada6444bb8/TnrV8AfIaUrL-H2zk9hQD.png)
在RWKV中使用如下格式和参数进行更好的角色扮演
![image/png](https://cdn-uploads.huggingface.co/production/uploads/6417b108b03817ada6444bb8/wfFNNlqUedO7ZfIqdp3oF.png)
![image/png](https://cdn-uploads.huggingface.co/production/uploads/6417b108b03817ada6444bb8/7Ct4mShJRFlRnlRsuN4jP.png)
### 补充说明
此模型使用自制的100M版本数据集,数据集为全中文数据,数据结构如下
| 数据类型 | 占比 |
|---|---|
|TRPG跑团|5%|
|NSFW词汇补充知识|1%|
|NSFW小说创作|15%|
|小说续写|10%|
|指令角色扮演(将指令集重塑为角色扮演集的特殊指令集)|3%|
|优质roleplay角色扮演集|66%|
使用如下参数在RWKV-Runner中进行Lora微调了两个epoch得到的模型
![image/png](https://cdn-uploads.huggingface.co/production/uploads/6417b108b03817ada6444bb8/lL1UrxDeEUYczm55p8R7K.png)
|