File size: 274 Bytes
3195f2d
 
4e319c5
 
 
 
3195f2d
4e319c5
 
75aff25
4e319c5
75aff25
4e319c5
75aff25
4e319c5
75aff25
f54e633
75aff25
f54e633
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
---
license: apache-2.0
language:
- en
- ja
- zh
---

使用ehartford/based與JosephusCheung/GuanacoDataset等數據集微調

目前只有0.4B的rwkv-world模型

有合併lora的權重

未合併的lora權重

loss值=5

在1.39gb的多數據集混和的數據集上微調