Update README.md
Browse files
README.md
CHANGED
|
@@ -1,8 +1,6 @@
|
|
| 1 |
|
| 2 |
Mistral擴充詞表只包含與教育部常用4808字的交集
|
| 3 |
|
| 4 |
-
~~後面補了25個dummy token,補到64的倍數可以增加訓練效率~~
|
| 5 |
-
~~未來可以作為special token的預留空間~~
|
| 6 |
- 移除dummy token
|
| 7 |
- 增加`<|func_start|>`, `<|func_end|>`
|
| 8 |
|
|
|
|
| 1 |
|
| 2 |
Mistral擴充詞表只包含與教育部常用4808字的交集
|
| 3 |
|
|
|
|
|
|
|
| 4 |
- 移除dummy token
|
| 5 |
- 增加`<|func_start|>`, `<|func_end|>`
|
| 6 |
|