File size: 527 Bytes
2cd4ff6
 
 
 
 
 
 
5887e8e
26c35ea
 
 
 
 
 
 
 
2cd4ff6
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
---
language:
- ja
metrics:
- accuracy
- f1
---
# multilingual-sentimentsデータセットをbertベースのモデルでfinetuningしたもの

- ベースモデル:cl-tohoku/bert-base-japanese-whole-word-masking
- データセット:tyqiangz/multilingual-sentiments
- 学習率スケジュールタイプ(lr_scheduler_type): constant
- 学習率(learning rate): 2e-5
- 勾配累積ステップ(gradient_accumulation_steps): なし
- 正則化(weight_decay): なし
- Epoch: 100
- EarlyStopping: early_stopping_patience=3