roberta-large-ner-ghtk-cs-rule-3090-3Aug-4

This model is a fine-tuned version of FacebookAI/xlm-roberta-large on the None dataset. It achieves the following results on the evaluation set:

• Loss: 0.4946
• Tk: {'precision': 0.654320987654321, 'recall': 0.45689655172413796, 'f1': 0.5380710659898478, 'number': 116}
• A: {'precision': 0.9577464788732394, 'recall': 0.9760765550239234, 'f1': 0.9668246445497631, 'number': 418}
• Gày: {'precision': 0.675, 'recall': 0.8181818181818182, 'f1': 0.7397260273972603, 'number': 33}
• Gày trừu tượng: {'precision': 0.8893528183716075, 'recall': 0.9122055674518201, 'f1': 0.9006342494714588, 'number': 467}
• Gân hàng: {'precision': 0.9090909090909091, 'recall': 0.8571428571428571, 'f1': 0.8823529411764706, 'number': 35}
• Hương thức thanh toán: {'precision': 0.9655172413793104, 'recall': 0.9333333333333333, 'f1': 0.9491525423728815, 'number': 30}
• Hối lượng: {'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 12}
• Iền: {'precision': 0.75, 'recall': 0.8461538461538461, 'f1': 0.7951807228915662, 'number': 39}
• Iờ: {'precision': 0.6842105263157895, 'recall': 0.6842105263157895, 'f1': 0.6842105263157895, 'number': 38}
• Mail: {'precision': 1.0, 'recall': 0.9013605442176871, 'f1': 0.9481216457960644, 'number': 294}
• Ã đơn: {'precision': 0.8028846153846154, 'recall': 0.8391959798994975, 'f1': 0.8206388206388207, 'number': 199}
• Ên người: {'precision': 0.6206896551724138, 'recall': 0.6, 'f1': 0.6101694915254238, 'number': 30}
• Đt trừu tượng: {'precision': 0.8290598290598291, 'recall': 0.9065420560747663, 'f1': 0.8660714285714286, 'number': 214}
• Ơn vị đo: {'precision': 0.6470588235294118, 'recall': 0.7857142857142857, 'f1': 0.7096774193548386, 'number': 28}
• Ản phẩm cụ thể: {'precision': 0.8625, 'recall': 0.5476190476190477, 'f1': 0.6699029126213593, 'number': 126}
• Ản phẩm trừu tượng: {'precision': 0.6829268292682927, 'recall': 0.6829268292682927, 'f1': 0.6829268292682927, 'number': 41}
• Ịa chỉ cụ thể: {'precision': 0.6417910447761194, 'recall': 0.5733333333333334, 'f1': 0.6056338028169014, 'number': 75}
• Ịa chỉ trừu tượng: {'precision': 0.7903225806451613, 'recall': 0.6533333333333333, 'f1': 0.7153284671532847, 'number': 75}
• Overall Precision: 0.8599
• Overall Recall: 0.8326
• Overall F1: 0.8460
• Overall Accuracy: 0.9475

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

• learning_rate: 2.5e-05
• train_batch_size: 4
• eval_batch_size: 4
• seed: 42
• optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
• lr_scheduler_type: linear
• num_epochs: 25

Training results

Training Loss	Epoch	Step	Validation Loss	Tk	A	Gày	Gày trừu tượng	Gân hàng	Hương thức thanh toán	Hối lượng	Iền	Iờ	Mail	à đơn	Ên người	Đt trừu tượng	Ơn vị đo	Ản phẩm cụ thể	Ản phẩm trừu tượng	Ịa chỉ cụ thể	Ịa chỉ trừu tượng	Overall Precision	Overall Recall	Overall F1	Overall Accuracy
0.2625	1.0	1470	0.2970	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 116}	{'precision': 0.9675810473815462, 'recall': 0.9282296650717703, 'f1': 0.9474969474969476, 'number': 418}	{'precision': 0.5625, 'recall': 0.5454545454545454, 'f1': 0.5538461538461538, 'number': 33}	{'precision': 0.8482905982905983, 'recall': 0.8501070663811563, 'f1': 0.849197860962567, 'number': 467}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 35}	{'precision': 0.8571428571428571, 'recall': 0.6, 'f1': 0.7058823529411764, 'number': 30}	{'precision': 0.391304347826087, 'recall': 0.75, 'f1': 0.5142857142857143, 'number': 12}	{'precision': 0.5303030303030303, 'recall': 0.8974358974358975, 'f1': 0.6666666666666667, 'number': 39}	{'precision': 0.5254237288135594, 'recall': 0.8157894736842105, 'f1': 0.6391752577319588, 'number': 38}	{'precision': 0.7480916030534351, 'recall': 1.0, 'f1': 0.8558951965065502, 'number': 294}	{'precision': 0.6526717557251909, 'recall': 0.8592964824120602, 'f1': 0.7418655097613882, 'number': 199}	{'precision': 0.36363636363636365, 'recall': 0.13333333333333333, 'f1': 0.1951219512195122, 'number': 30}	{'precision': 0.879746835443038, 'recall': 0.6495327102803738, 'f1': 0.7473118279569894, 'number': 214}	{'precision': 0.5483870967741935, 'recall': 0.6071428571428571, 'f1': 0.5762711864406779, 'number': 28}	{'precision': 0.7532467532467533, 'recall': 0.4603174603174603, 'f1': 0.5714285714285714, 'number': 126}	{'precision': 0.5454545454545454, 'recall': 0.2926829268292683, 'f1': 0.3809523809523809, 'number': 41}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 75}	{'precision': 0.84, 'recall': 0.56, 'f1': 0.6720000000000002, 'number': 75}	0.7851	0.7194	0.7508	0.9123
0.1955	2.0	2940	0.2836	{'precision': 0.5421686746987951, 'recall': 0.3879310344827586, 'f1': 0.45226130653266333, 'number': 116}	{'precision': 0.9336384439359268, 'recall': 0.9760765550239234, 'f1': 0.9543859649122807, 'number': 418}	{'precision': 0.6363636363636364, 'recall': 0.21212121212121213, 'f1': 0.3181818181818182, 'number': 33}	{'precision': 0.902676399026764, 'recall': 0.7944325481798715, 'f1': 0.8451025056947609, 'number': 467}	{'precision': 0.7567567567567568, 'recall': 0.8, 'f1': 0.7777777777777778, 'number': 35}	{'precision': 0.7142857142857143, 'recall': 0.8333333333333334, 'f1': 0.7692307692307692, 'number': 30}	{'precision': 0.3333333333333333, 'recall': 0.5, 'f1': 0.4, 'number': 12}	{'precision': 0.6, 'recall': 0.6153846153846154, 'f1': 0.6075949367088608, 'number': 39}	{'precision': 0.4583333333333333, 'recall': 0.868421052631579, 'f1': 0.6, 'number': 38}	{'precision': 0.9819819819819819, 'recall': 0.7414965986394558, 'f1': 0.8449612403100776, 'number': 294}	{'precision': 0.5165745856353591, 'recall': 0.9396984924623115, 'f1': 0.6666666666666667, 'number': 199}	{'precision': 0.46153846153846156, 'recall': 0.4, 'f1': 0.42857142857142855, 'number': 30}	{'precision': 0.6416382252559727, 'recall': 0.8785046728971962, 'f1': 0.7416173570019724, 'number': 214}	{'precision': 1.0, 'recall': 0.03571428571428571, 'f1': 0.0689655172413793, 'number': 28}	{'precision': 0.5144508670520231, 'recall': 0.7063492063492064, 'f1': 0.5953177257525083, 'number': 126}	{'precision': 0.42424242424242425, 'recall': 0.34146341463414637, 'f1': 0.37837837837837834, 'number': 41}	{'precision': 0.15328467153284672, 'recall': 0.28, 'f1': 0.1981132075471698, 'number': 75}	{'precision': 0.9130434782608695, 'recall': 0.56, 'f1': 0.6942148760330579, 'number': 75}	0.7054	0.7573	0.7304	0.9047
0.1473	3.0	4410	0.2315	{'precision': 0.6056338028169014, 'recall': 0.3706896551724138, 'f1': 0.45989304812834225, 'number': 116}	{'precision': 0.9351851851851852, 'recall': 0.9665071770334929, 'f1': 0.9505882352941176, 'number': 418}	{'precision': 0.6923076923076923, 'recall': 0.8181818181818182, 'f1': 0.7500000000000001, 'number': 33}	{'precision': 0.8511904761904762, 'recall': 0.9186295503211992, 'f1': 0.8836251287332647, 'number': 467}	{'precision': 0.76, 'recall': 0.5428571428571428, 'f1': 0.6333333333333332, 'number': 35}	{'precision': 0.7096774193548387, 'recall': 0.7333333333333333, 'f1': 0.7213114754098361, 'number': 30}	{'precision': 0.7142857142857143, 'recall': 0.4166666666666667, 'f1': 0.5263157894736842, 'number': 12}	{'precision': 0.9090909090909091, 'recall': 0.5128205128205128, 'f1': 0.6557377049180326, 'number': 39}	{'precision': 0.6666666666666666, 'recall': 0.6842105263157895, 'f1': 0.6753246753246753, 'number': 38}	{'precision': 0.8918032786885246, 'recall': 0.9251700680272109, 'f1': 0.9081803005008346, 'number': 294}	{'precision': 0.8263157894736842, 'recall': 0.7889447236180904, 'f1': 0.8071979434447301, 'number': 199}	{'precision': 0.2727272727272727, 'recall': 0.1, 'f1': 0.14634146341463417, 'number': 30}	{'precision': 0.7155172413793104, 'recall': 0.7757009345794392, 'f1': 0.7443946188340808, 'number': 214}	{'precision': 0.5652173913043478, 'recall': 0.4642857142857143, 'f1': 0.5098039215686274, 'number': 28}	{'precision': 0.8125, 'recall': 0.6190476190476191, 'f1': 0.7027027027027026, 'number': 126}	{'precision': 0.5, 'recall': 0.2926829268292683, 'f1': 0.3692307692307692, 'number': 41}	{'precision': 0.24074074074074073, 'recall': 0.17333333333333334, 'f1': 0.20155038759689925, 'number': 75}	{'precision': 0.7377049180327869, 'recall': 0.6, 'f1': 0.6617647058823529, 'number': 75}	0.8098	0.7727	0.7908	0.9320
0.1254	4.0	5880	0.2107	{'precision': 0.6976744186046512, 'recall': 0.25862068965517243, 'f1': 0.3773584905660377, 'number': 116}	{'precision': 0.9594272076372315, 'recall': 0.9617224880382775, 'f1': 0.960573476702509, 'number': 418}	{'precision': 0.7096774193548387, 'recall': 0.6666666666666666, 'f1': 0.6875, 'number': 33}	{'precision': 0.9049676025917927, 'recall': 0.8972162740899358, 'f1': 0.9010752688172042, 'number': 467}	{'precision': 0.8, 'recall': 0.6857142857142857, 'f1': 0.7384615384615385, 'number': 35}	{'precision': 0.7407407407407407, 'recall': 0.6666666666666666, 'f1': 0.7017543859649122, 'number': 30}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 12}	{'precision': 0.7380952380952381, 'recall': 0.7948717948717948, 'f1': 0.7654320987654322, 'number': 39}	{'precision': 0.5769230769230769, 'recall': 0.7894736842105263, 'f1': 0.6666666666666666, 'number': 38}	{'precision': 0.8915254237288136, 'recall': 0.8945578231292517, 'f1': 0.8930390492359933, 'number': 294}	{'precision': 0.7076271186440678, 'recall': 0.8391959798994975, 'f1': 0.767816091954023, 'number': 199}	{'precision': 0.47058823529411764, 'recall': 0.5333333333333333, 'f1': 0.5, 'number': 30}	{'precision': 0.7175572519083969, 'recall': 0.8785046728971962, 'f1': 0.7899159663865546, 'number': 214}	{'precision': 0.6896551724137931, 'recall': 0.7142857142857143, 'f1': 0.7017543859649122, 'number': 28}	{'precision': 0.8235294117647058, 'recall': 0.6666666666666666, 'f1': 0.7368421052631577, 'number': 126}	{'precision': 0.5531914893617021, 'recall': 0.6341463414634146, 'f1': 0.5909090909090909, 'number': 41}	{'precision': 0.36363636363636365, 'recall': 0.21333333333333335, 'f1': 0.26890756302521013, 'number': 75}	{'precision': 0.6, 'recall': 0.56, 'f1': 0.5793103448275861, 'number': 75}	0.8083	0.7930	0.8005	0.9338
0.1198	5.0	7350	0.2649	{'precision': 0.5178571428571429, 'recall': 0.5, 'f1': 0.5087719298245614, 'number': 116}	{'precision': 0.9794344473007712, 'recall': 0.9114832535885168, 'f1': 0.9442379182156135, 'number': 418}	{'precision': 0.574468085106383, 'recall': 0.8181818181818182, 'f1': 0.675, 'number': 33}	{'precision': 0.9066666666666666, 'recall': 0.8736616702355461, 'f1': 0.8898582333696838, 'number': 467}	{'precision': 0.8125, 'recall': 0.7428571428571429, 'f1': 0.7761194029850748, 'number': 35}	{'precision': 0.8709677419354839, 'recall': 0.9, 'f1': 0.8852459016393444, 'number': 30}	{'precision': 0.42857142857142855, 'recall': 0.25, 'f1': 0.3157894736842105, 'number': 12}	{'precision': 0.8333333333333334, 'recall': 0.8974358974358975, 'f1': 0.8641975308641975, 'number': 39}	{'precision': 0.5192307692307693, 'recall': 0.7105263157894737, 'f1': 0.6, 'number': 38}	{'precision': 0.8909090909090909, 'recall': 1.0, 'f1': 0.9423076923076923, 'number': 294}	{'precision': 0.7799043062200957, 'recall': 0.8190954773869347, 'f1': 0.7990196078431372, 'number': 199}	{'precision': 0.5517241379310345, 'recall': 0.5333333333333333, 'f1': 0.5423728813559322, 'number': 30}	{'precision': 0.8926829268292683, 'recall': 0.8551401869158879, 'f1': 0.873508353221957, 'number': 214}	{'precision': 0.6666666666666666, 'recall': 0.7857142857142857, 'f1': 0.721311475409836, 'number': 28}	{'precision': 0.7872340425531915, 'recall': 0.5873015873015873, 'f1': 0.6727272727272727, 'number': 126}	{'precision': 0.65, 'recall': 0.6341463414634146, 'f1': 0.6419753086419754, 'number': 41}	{'precision': 0.5, 'recall': 0.18666666666666668, 'f1': 0.2718446601941748, 'number': 75}	{'precision': 0.7377049180327869, 'recall': 0.6, 'f1': 0.6617647058823529, 'number': 75}	0.8348	0.8057	0.8200	0.9374
0.0964	6.0	8820	0.2191	{'precision': 0.5234375, 'recall': 0.5775862068965517, 'f1': 0.5491803278688525, 'number': 116}	{'precision': 0.9657701711491442, 'recall': 0.9449760765550239, 'f1': 0.9552599758162031, 'number': 418}	{'precision': 0.6666666666666666, 'recall': 0.7272727272727273, 'f1': 0.6956521739130435, 'number': 33}	{'precision': 0.8914405010438413, 'recall': 0.9143468950749465, 'f1': 0.9027484143763214, 'number': 467}	{'precision': 0.7631578947368421, 'recall': 0.8285714285714286, 'f1': 0.7945205479452055, 'number': 35}	{'precision': 0.8620689655172413, 'recall': 0.8333333333333334, 'f1': 0.847457627118644, 'number': 30}	{'precision': 0.4666666666666667, 'recall': 0.5833333333333334, 'f1': 0.5185185185185186, 'number': 12}	{'precision': 0.7291666666666666, 'recall': 0.8974358974358975, 'f1': 0.8045977011494253, 'number': 39}	{'precision': 0.5849056603773585, 'recall': 0.8157894736842105, 'f1': 0.6813186813186812, 'number': 38}	{'precision': 0.9006211180124224, 'recall': 0.9863945578231292, 'f1': 0.9415584415584415, 'number': 294}	{'precision': 0.8342541436464088, 'recall': 0.7587939698492462, 'f1': 0.7947368421052631, 'number': 199}	{'precision': 0.45, 'recall': 0.6, 'f1': 0.5142857142857143, 'number': 30}	{'precision': 0.753731343283582, 'recall': 0.9439252336448598, 'f1': 0.8381742738589212, 'number': 214}	{'precision': 0.6, 'recall': 0.5357142857142857, 'f1': 0.5660377358490566, 'number': 28}	{'precision': 0.8, 'recall': 0.6984126984126984, 'f1': 0.7457627118644068, 'number': 126}	{'precision': 0.6170212765957447, 'recall': 0.7073170731707317, 'f1': 0.6590909090909092, 'number': 41}	{'precision': 0.3235294117647059, 'recall': 0.29333333333333333, 'f1': 0.30769230769230765, 'number': 75}	{'precision': 0.7377049180327869, 'recall': 0.6, 'f1': 0.6617647058823529, 'number': 75}	0.8061	0.8370	0.8213	0.9409
0.0666	7.0	10290	0.2820	{'precision': 0.56, 'recall': 0.7241379310344828, 'f1': 0.6315789473684211, 'number': 116}	{'precision': 0.9706601466992665, 'recall': 0.9497607655502392, 'f1': 0.9600967351874243, 'number': 418}	{'precision': 0.4915254237288136, 'recall': 0.8787878787878788, 'f1': 0.6304347826086957, 'number': 33}	{'precision': 0.8870292887029289, 'recall': 0.9079229122055674, 'f1': 0.8973544973544972, 'number': 467}	{'precision': 0.625, 'recall': 0.8571428571428571, 'f1': 0.7228915662650602, 'number': 35}	{'precision': 0.8235294117647058, 'recall': 0.9333333333333333, 'f1': 0.8749999999999999, 'number': 30}	{'precision': 0.36363636363636365, 'recall': 0.6666666666666666, 'f1': 0.4705882352941177, 'number': 12}	{'precision': 0.6981132075471698, 'recall': 0.9487179487179487, 'f1': 0.8043478260869565, 'number': 39}	{'precision': 0.6808510638297872, 'recall': 0.8421052631578947, 'f1': 0.7529411764705882, 'number': 38}	{'precision': 1.0, 'recall': 0.7074829931972789, 'f1': 0.8286852589641435, 'number': 294}	{'precision': 0.7231404958677686, 'recall': 0.8793969849246231, 'f1': 0.7936507936507937, 'number': 199}	{'precision': 0.4146341463414634, 'recall': 0.5666666666666667, 'f1': 0.47887323943661975, 'number': 30}	{'precision': 0.7546468401486989, 'recall': 0.9485981308411215, 'f1': 0.8405797101449276, 'number': 214}	{'precision': 0.6176470588235294, 'recall': 0.75, 'f1': 0.6774193548387097, 'number': 28}	{'precision': 0.7672413793103449, 'recall': 0.7063492063492064, 'f1': 0.7355371900826447, 'number': 126}	{'precision': 0.6666666666666666, 'recall': 0.7317073170731707, 'f1': 0.6976744186046511, 'number': 41}	{'precision': 0.40350877192982454, 'recall': 0.30666666666666664, 'f1': 0.3484848484848485, 'number': 75}	{'precision': 0.6455696202531646, 'recall': 0.68, 'f1': 0.6623376623376623, 'number': 75}	0.7888	0.8308	0.8093	0.9382
0.069	8.0	11760	0.2813	{'precision': 0.5333333333333333, 'recall': 0.6206896551724138, 'f1': 0.5737051792828685, 'number': 116}	{'precision': 0.9685230024213075, 'recall': 0.9569377990430622, 'f1': 0.9626955475330927, 'number': 418}	{'precision': 0.56, 'recall': 0.8484848484848485, 'f1': 0.6746987951807228, 'number': 33}	{'precision': 0.9266666666666666, 'recall': 0.892933618843683, 'f1': 0.9094874591057797, 'number': 467}	{'precision': 0.8235294117647058, 'recall': 0.8, 'f1': 0.8115942028985507, 'number': 35}	{'precision': 0.9310344827586207, 'recall': 0.9, 'f1': 0.9152542372881356, 'number': 30}	{'precision': 0.5, 'recall': 0.25, 'f1': 0.3333333333333333, 'number': 12}	{'precision': 0.7708333333333334, 'recall': 0.9487179487179487, 'f1': 0.8505747126436781, 'number': 39}	{'precision': 0.6226415094339622, 'recall': 0.868421052631579, 'f1': 0.7252747252747254, 'number': 38}	{'precision': 0.9721254355400697, 'recall': 0.9489795918367347, 'f1': 0.9604130808950087, 'number': 294}	{'precision': 0.8282828282828283, 'recall': 0.8241206030150754, 'f1': 0.8261964735516374, 'number': 199}	{'precision': 0.48717948717948717, 'recall': 0.6333333333333333, 'f1': 0.5507246376811593, 'number': 30}	{'precision': 0.765625, 'recall': 0.9158878504672897, 'f1': 0.8340425531914893, 'number': 214}	{'precision': 0.6571428571428571, 'recall': 0.8214285714285714, 'f1': 0.73015873015873, 'number': 28}	{'precision': 0.7959183673469388, 'recall': 0.6190476190476191, 'f1': 0.6964285714285715, 'number': 126}	{'precision': 0.5625, 'recall': 0.6585365853658537, 'f1': 0.6067415730337078, 'number': 41}	{'precision': 0.4107142857142857, 'recall': 0.30666666666666664, 'f1': 0.3511450381679389, 'number': 75}	{'precision': 0.8392857142857143, 'recall': 0.6266666666666667, 'f1': 0.7175572519083969, 'number': 75}	0.8298	0.8374	0.8336	0.9462
0.0424	9.0	13230	0.3062	{'precision': 0.5176470588235295, 'recall': 0.3793103448275862, 'f1': 0.43781094527363185, 'number': 116}	{'precision': 0.9596199524940617, 'recall': 0.9665071770334929, 'f1': 0.9630512514898688, 'number': 418}	{'precision': 0.6136363636363636, 'recall': 0.8181818181818182, 'f1': 0.7012987012987013, 'number': 33}	{'precision': 0.9166666666666666, 'recall': 0.8479657387580299, 'f1': 0.8809788654060067, 'number': 467}	{'precision': 0.775, 'recall': 0.8857142857142857, 'f1': 0.8266666666666667, 'number': 35}	{'precision': 1.0, 'recall': 0.8666666666666667, 'f1': 0.9285714285714286, 'number': 30}	{'precision': 0.5384615384615384, 'recall': 0.5833333333333334, 'f1': 0.5599999999999999, 'number': 12}	{'precision': 0.84375, 'recall': 0.6923076923076923, 'f1': 0.7605633802816902, 'number': 39}	{'precision': 0.65, 'recall': 0.6842105263157895, 'f1': 0.6666666666666667, 'number': 38}	{'precision': 0.9791666666666666, 'recall': 0.9591836734693877, 'f1': 0.9690721649484536, 'number': 294}	{'precision': 0.7649769585253456, 'recall': 0.8341708542713567, 'f1': 0.7980769230769231, 'number': 199}	{'precision': 0.5517241379310345, 'recall': 0.5333333333333333, 'f1': 0.5423728813559322, 'number': 30}	{'precision': 0.76, 'recall': 0.8878504672897196, 'f1': 0.8189655172413793, 'number': 214}	{'precision': 0.72, 'recall': 0.6428571428571429, 'f1': 0.6792452830188679, 'number': 28}	{'precision': 0.7628865979381443, 'recall': 0.5873015873015873, 'f1': 0.6636771300448431, 'number': 126}	{'precision': 0.631578947368421, 'recall': 0.5853658536585366, 'f1': 0.6075949367088608, 'number': 41}	{'precision': 0.43283582089552236, 'recall': 0.38666666666666666, 'f1': 0.40845070422535207, 'number': 75}	{'precision': 0.49, 'recall': 0.6533333333333333, 'f1': 0.5599999999999999, 'number': 75}	0.8182	0.8088	0.8135	0.9397
0.0399	10.0	14700	0.3482	{'precision': 0.6046511627906976, 'recall': 0.4482758620689655, 'f1': 0.5148514851485148, 'number': 116}	{'precision': 0.9574468085106383, 'recall': 0.9688995215311005, 'f1': 0.9631391200951249, 'number': 418}	{'precision': 0.6756756756756757, 'recall': 0.7575757575757576, 'f1': 0.7142857142857142, 'number': 33}	{'precision': 0.9025974025974026, 'recall': 0.892933618843683, 'f1': 0.8977395048439182, 'number': 467}	{'precision': 0.875, 'recall': 0.8, 'f1': 0.8358208955223881, 'number': 35}	{'precision': 0.9310344827586207, 'recall': 0.9, 'f1': 0.9152542372881356, 'number': 30}	{'precision': 0.4444444444444444, 'recall': 0.3333333333333333, 'f1': 0.380952380952381, 'number': 12}	{'precision': 0.8, 'recall': 0.9230769230769231, 'f1': 0.8571428571428571, 'number': 39}	{'precision': 0.6136363636363636, 'recall': 0.7105263157894737, 'f1': 0.6585365853658537, 'number': 38}	{'precision': 0.9621993127147767, 'recall': 0.9523809523809523, 'f1': 0.9572649572649573, 'number': 294}	{'precision': 0.7521739130434782, 'recall': 0.8693467336683417, 'f1': 0.8065268065268065, 'number': 199}	{'precision': 0.59375, 'recall': 0.6333333333333333, 'f1': 0.6129032258064516, 'number': 30}	{'precision': 0.8189300411522634, 'recall': 0.9299065420560748, 'f1': 0.8708971553610504, 'number': 214}	{'precision': 0.84, 'recall': 0.75, 'f1': 0.7924528301886793, 'number': 28}	{'precision': 0.7685185185185185, 'recall': 0.6587301587301587, 'f1': 0.7094017094017093, 'number': 126}	{'precision': 0.6511627906976745, 'recall': 0.6829268292682927, 'f1': 0.6666666666666667, 'number': 41}	{'precision': 0.36538461538461536, 'recall': 0.25333333333333335, 'f1': 0.2992125984251969, 'number': 75}	{'precision': 0.8103448275862069, 'recall': 0.6266666666666667, 'f1': 0.706766917293233, 'number': 75}	0.8404	0.8326	0.8365	0.9445
0.0374	11.0	16170	0.3451	{'precision': 0.5609756097560976, 'recall': 0.5948275862068966, 'f1': 0.5774058577405858, 'number': 116}	{'precision': 0.9591346153846154, 'recall': 0.9545454545454546, 'f1': 0.9568345323741008, 'number': 418}	{'precision': 0.5918367346938775, 'recall': 0.8787878787878788, 'f1': 0.7073170731707316, 'number': 33}	{'precision': 0.8654618473895582, 'recall': 0.9229122055674518, 'f1': 0.8932642487046631, 'number': 467}	{'precision': 0.8205128205128205, 'recall': 0.9142857142857143, 'f1': 0.8648648648648648, 'number': 35}	{'precision': 0.9354838709677419, 'recall': 0.9666666666666667, 'f1': 0.9508196721311476, 'number': 30}	{'precision': 0.5714285714285714, 'recall': 0.6666666666666666, 'f1': 0.6153846153846153, 'number': 12}	{'precision': 0.775, 'recall': 0.7948717948717948, 'f1': 0.7848101265822786, 'number': 39}	{'precision': 0.6818181818181818, 'recall': 0.7894736842105263, 'f1': 0.7317073170731707, 'number': 38}	{'precision': 1.0, 'recall': 0.8571428571428571, 'f1': 0.923076923076923, 'number': 294}	{'precision': 0.6730038022813688, 'recall': 0.8894472361809045, 'f1': 0.7662337662337663, 'number': 199}	{'precision': 0.6129032258064516, 'recall': 0.6333333333333333, 'f1': 0.6229508196721313, 'number': 30}	{'precision': 0.7836734693877551, 'recall': 0.897196261682243, 'f1': 0.8366013071895425, 'number': 214}	{'precision': 0.6785714285714286, 'recall': 0.6785714285714286, 'f1': 0.6785714285714286, 'number': 28}	{'precision': 0.7572815533980582, 'recall': 0.6190476190476191, 'f1': 0.6812227074235807, 'number': 126}	{'precision': 0.6444444444444445, 'recall': 0.7073170731707317, 'f1': 0.6744186046511628, 'number': 41}	{'precision': 0.5, 'recall': 0.37333333333333335, 'f1': 0.4274809160305344, 'number': 75}	{'precision': 0.7246376811594203, 'recall': 0.6666666666666666, 'f1': 0.6944444444444444, 'number': 75}	0.8107	0.8379	0.8241	0.9412
0.0287	12.0	17640	0.3828	{'precision': 0.6785714285714286, 'recall': 0.49137931034482757, 'f1': 0.57, 'number': 116}	{'precision': 0.95, 'recall': 0.9545454545454546, 'f1': 0.9522673031026253, 'number': 418}	{'precision': 0.6222222222222222, 'recall': 0.8484848484848485, 'f1': 0.7179487179487178, 'number': 33}	{'precision': 0.9049676025917927, 'recall': 0.8972162740899358, 'f1': 0.9010752688172042, 'number': 467}	{'precision': 0.8205128205128205, 'recall': 0.9142857142857143, 'f1': 0.8648648648648648, 'number': 35}	{'precision': 0.8709677419354839, 'recall': 0.9, 'f1': 0.8852459016393444, 'number': 30}	{'precision': 0.4, 'recall': 0.3333333333333333, 'f1': 0.3636363636363636, 'number': 12}	{'precision': 0.7333333333333333, 'recall': 0.8461538461538461, 'f1': 0.7857142857142856, 'number': 39}	{'precision': 0.5945945945945946, 'recall': 0.5789473684210527, 'f1': 0.5866666666666667, 'number': 38}	{'precision': 1.0, 'recall': 0.8877551020408163, 'f1': 0.9405405405405405, 'number': 294}	{'precision': 0.8092783505154639, 'recall': 0.7889447236180904, 'f1': 0.7989821882951654, 'number': 199}	{'precision': 0.53125, 'recall': 0.5666666666666667, 'f1': 0.5483870967741935, 'number': 30}	{'precision': 0.8054298642533937, 'recall': 0.8317757009345794, 'f1': 0.8183908045977011, 'number': 214}	{'precision': 0.6296296296296297, 'recall': 0.6071428571428571, 'f1': 0.6181818181818182, 'number': 28}	{'precision': 0.7610619469026548, 'recall': 0.6825396825396826, 'f1': 0.7196652719665271, 'number': 126}	{'precision': 0.5882352941176471, 'recall': 0.7317073170731707, 'f1': 0.6521739130434783, 'number': 41}	{'precision': 0.5, 'recall': 0.37333333333333335, 'f1': 0.4274809160305344, 'number': 75}	{'precision': 0.7285714285714285, 'recall': 0.68, 'f1': 0.7034482758620689, 'number': 75}	0.8395	0.8132	0.8261	0.9415
0.0265	13.0	19110	0.4030	{'precision': 0.4909090909090909, 'recall': 0.23275862068965517, 'f1': 0.3157894736842105, 'number': 116}	{'precision': 0.950354609929078, 'recall': 0.9617224880382775, 'f1': 0.9560047562425684, 'number': 418}	{'precision': 0.6410256410256411, 'recall': 0.7575757575757576, 'f1': 0.6944444444444444, 'number': 33}	{'precision': 0.920814479638009, 'recall': 0.8715203426124197, 'f1': 0.8954895489548954, 'number': 467}	{'precision': 0.8333333333333334, 'recall': 0.8571428571428571, 'f1': 0.8450704225352113, 'number': 35}	{'precision': 0.9333333333333333, 'recall': 0.9333333333333333, 'f1': 0.9333333333333333, 'number': 30}	{'precision': 0.5714285714285714, 'recall': 0.3333333333333333, 'f1': 0.4210526315789474, 'number': 12}	{'precision': 0.7021276595744681, 'recall': 0.8461538461538461, 'f1': 0.7674418604651163, 'number': 39}	{'precision': 0.75, 'recall': 0.5526315789473685, 'f1': 0.6363636363636364, 'number': 38}	{'precision': 0.9616724738675958, 'recall': 0.9387755102040817, 'f1': 0.9500860585197934, 'number': 294}	{'precision': 0.8306010928961749, 'recall': 0.7638190954773869, 'f1': 0.7958115183246073, 'number': 199}	{'precision': 0.5, 'recall': 0.6333333333333333, 'f1': 0.5588235294117647, 'number': 30}	{'precision': 0.8026315789473685, 'recall': 0.8551401869158879, 'f1': 0.828054298642534, 'number': 214}	{'precision': 0.8235294117647058, 'recall': 0.5, 'f1': 0.6222222222222222, 'number': 28}	{'precision': 0.7931034482758621, 'recall': 0.5476190476190477, 'f1': 0.647887323943662, 'number': 126}	{'precision': 0.7297297297297297, 'recall': 0.6585365853658537, 'f1': 0.6923076923076923, 'number': 41}	{'precision': 0.5, 'recall': 0.41333333333333333, 'f1': 0.45255474452554745, 'number': 75}	{'precision': 0.8225806451612904, 'recall': 0.68, 'f1': 0.7445255474452556, 'number': 75}	0.8534	0.7925	0.8218	0.9452
0.0182	14.0	20580	0.4247	{'precision': 0.5818181818181818, 'recall': 0.27586206896551724, 'f1': 0.3742690058479532, 'number': 116}	{'precision': 0.9570405727923628, 'recall': 0.9593301435406698, 'f1': 0.9581839904420549, 'number': 418}	{'precision': 0.6511627906976745, 'recall': 0.8484848484848485, 'f1': 0.736842105263158, 'number': 33}	{'precision': 0.8942917547568711, 'recall': 0.9057815845824411, 'f1': 0.9, 'number': 467}	{'precision': 0.8857142857142857, 'recall': 0.8857142857142857, 'f1': 0.8857142857142857, 'number': 35}	{'precision': 0.9, 'recall': 0.9, 'f1': 0.9, 'number': 30}	{'precision': 0.42857142857142855, 'recall': 0.25, 'f1': 0.3157894736842105, 'number': 12}	{'precision': 0.7291666666666666, 'recall': 0.8974358974358975, 'f1': 0.8045977011494253, 'number': 39}	{'precision': 0.6578947368421053, 'recall': 0.6578947368421053, 'f1': 0.6578947368421053, 'number': 38}	{'precision': 0.9686411149825784, 'recall': 0.9455782312925171, 'f1': 0.9569707401032703, 'number': 294}	{'precision': 0.8, 'recall': 0.7839195979899497, 'f1': 0.7918781725888324, 'number': 199}	{'precision': 0.56, 'recall': 0.4666666666666667, 'f1': 0.509090909090909, 'number': 30}	{'precision': 0.7480916030534351, 'recall': 0.9158878504672897, 'f1': 0.823529411764706, 'number': 214}	{'precision': 0.8148148148148148, 'recall': 0.7857142857142857, 'f1': 0.7999999999999999, 'number': 28}	{'precision': 0.8080808080808081, 'recall': 0.6349206349206349, 'f1': 0.7111111111111112, 'number': 126}	{'precision': 0.7, 'recall': 0.6829268292682927, 'f1': 0.6913580246913581, 'number': 41}	{'precision': 0.5178571428571429, 'recall': 0.38666666666666666, 'f1': 0.44274809160305345, 'number': 75}	{'precision': 0.7936507936507936, 'recall': 0.6666666666666666, 'f1': 0.7246376811594203, 'number': 75}	0.8438	0.8185	0.8309	0.9426
0.0104	15.0	22050	0.4451	{'precision': 0.6095238095238096, 'recall': 0.5517241379310345, 'f1': 0.5791855203619909, 'number': 116}	{'precision': 0.9529411764705882, 'recall': 0.9688995215311005, 'f1': 0.9608540925266904, 'number': 418}	{'precision': 0.6666666666666666, 'recall': 0.8484848484848485, 'f1': 0.7466666666666666, 'number': 33}	{'precision': 0.8926315789473684, 'recall': 0.9079229122055674, 'f1': 0.9002123142250531, 'number': 467}	{'precision': 0.9117647058823529, 'recall': 0.8857142857142857, 'f1': 0.8985507246376812, 'number': 35}	{'precision': 0.9090909090909091, 'recall': 1.0, 'f1': 0.9523809523809523, 'number': 30}	{'precision': 0.25, 'recall': 0.16666666666666666, 'f1': 0.2, 'number': 12}	{'precision': 0.7727272727272727, 'recall': 0.8717948717948718, 'f1': 0.8192771084337349, 'number': 39}	{'precision': 0.574468085106383, 'recall': 0.7105263157894737, 'f1': 0.6352941176470589, 'number': 38}	{'precision': 0.9681978798586572, 'recall': 0.9319727891156463, 'f1': 0.949740034662045, 'number': 294}	{'precision': 0.7878787878787878, 'recall': 0.7839195979899497, 'f1': 0.7858942065491182, 'number': 199}	{'precision': 0.5882352941176471, 'recall': 0.6666666666666666, 'f1': 0.625, 'number': 30}	{'precision': 0.7575757575757576, 'recall': 0.9345794392523364, 'f1': 0.8368200836820084, 'number': 214}	{'precision': 0.6060606060606061, 'recall': 0.7142857142857143, 'f1': 0.6557377049180327, 'number': 28}	{'precision': 0.8433734939759037, 'recall': 0.5555555555555556, 'f1': 0.6698564593301436, 'number': 126}	{'precision': 0.6511627906976745, 'recall': 0.6829268292682927, 'f1': 0.6666666666666667, 'number': 41}	{'precision': 0.4626865671641791, 'recall': 0.41333333333333333, 'f1': 0.43661971830985913, 'number': 75}	{'precision': 0.8214285714285714, 'recall': 0.6133333333333333, 'f1': 0.7022900763358778, 'number': 75}	0.8311	0.8326	0.8319	0.9426
0.0102	16.0	23520	0.4211	{'precision': 0.5454545454545454, 'recall': 0.25862068965517243, 'f1': 0.3508771929824561, 'number': 116}	{'precision': 0.964200477326969, 'recall': 0.9665071770334929, 'f1': 0.965352449223417, 'number': 418}	{'precision': 0.6341463414634146, 'recall': 0.7878787878787878, 'f1': 0.7027027027027027, 'number': 33}	{'precision': 0.912472647702407, 'recall': 0.892933618843683, 'f1': 0.9025974025974025, 'number': 467}	{'precision': 0.8055555555555556, 'recall': 0.8285714285714286, 'f1': 0.8169014084507044, 'number': 35}	{'precision': 0.9354838709677419, 'recall': 0.9666666666666667, 'f1': 0.9508196721311476, 'number': 30}	{'precision': 0.5, 'recall': 0.25, 'f1': 0.3333333333333333, 'number': 12}	{'precision': 0.7446808510638298, 'recall': 0.8974358974358975, 'f1': 0.813953488372093, 'number': 39}	{'precision': 0.7419354838709677, 'recall': 0.6052631578947368, 'f1': 0.6666666666666666, 'number': 38}	{'precision': 0.9278688524590164, 'recall': 0.9625850340136054, 'f1': 0.9449081803005007, 'number': 294}	{'precision': 0.7706422018348624, 'recall': 0.8442211055276382, 'f1': 0.8057553956834533, 'number': 199}	{'precision': 0.6428571428571429, 'recall': 0.6, 'f1': 0.6206896551724138, 'number': 30}	{'precision': 0.8177777777777778, 'recall': 0.8598130841121495, 'f1': 0.8382687927107062, 'number': 214}	{'precision': 0.8, 'recall': 0.5714285714285714, 'f1': 0.6666666666666666, 'number': 28}	{'precision': 0.8513513513513513, 'recall': 0.5, 'f1': 0.63, 'number': 126}	{'precision': 0.7073170731707317, 'recall': 0.7073170731707317, 'f1': 0.7073170731707317, 'number': 41}	{'precision': 0.4927536231884058, 'recall': 0.4533333333333333, 'f1': 0.4722222222222222, 'number': 75}	{'precision': 0.8620689655172413, 'recall': 0.6666666666666666, 'f1': 0.7518796992481203, 'number': 75}	0.8519	0.8110	0.8310	0.9436
0.0056	17.0	24990	0.4413	{'precision': 0.6923076923076923, 'recall': 0.5431034482758621, 'f1': 0.6086956521739131, 'number': 116}	{'precision': 0.9551886792452831, 'recall': 0.9688995215311005, 'f1': 0.9619952494061759, 'number': 418}	{'precision': 0.6, 'recall': 0.8181818181818182, 'f1': 0.6923076923076923, 'number': 33}	{'precision': 0.8794178794178794, 'recall': 0.9057815845824411, 'f1': 0.8924050632911393, 'number': 467}	{'precision': 0.8611111111111112, 'recall': 0.8857142857142857, 'f1': 0.8732394366197184, 'number': 35}	{'precision': 0.9, 'recall': 0.9, 'f1': 0.9, 'number': 30}	{'precision': 0.3333333333333333, 'recall': 0.25, 'f1': 0.28571428571428575, 'number': 12}	{'precision': 0.7446808510638298, 'recall': 0.8974358974358975, 'f1': 0.813953488372093, 'number': 39}	{'precision': 0.6666666666666666, 'recall': 0.6842105263157895, 'f1': 0.6753246753246753, 'number': 38}	{'precision': 0.9691780821917808, 'recall': 0.9625850340136054, 'f1': 0.9658703071672354, 'number': 294}	{'precision': 0.7660550458715596, 'recall': 0.8391959798994975, 'f1': 0.8009592326139089, 'number': 199}	{'precision': 0.6060606060606061, 'recall': 0.6666666666666666, 'f1': 0.6349206349206349, 'number': 30}	{'precision': 0.7299270072992701, 'recall': 0.9345794392523364, 'f1': 0.8196721311475409, 'number': 214}	{'precision': 0.6451612903225806, 'recall': 0.7142857142857143, 'f1': 0.6779661016949152, 'number': 28}	{'precision': 0.8555555555555555, 'recall': 0.6111111111111112, 'f1': 0.7129629629629629, 'number': 126}	{'precision': 0.6666666666666666, 'recall': 0.7317073170731707, 'f1': 0.6976744186046511, 'number': 41}	{'precision': 0.5538461538461539, 'recall': 0.48, 'f1': 0.5142857142857142, 'number': 75}	{'precision': 0.8, 'recall': 0.6933333333333334, 'f1': 0.7428571428571429, 'number': 75}	0.8315	0.8480	0.8397	0.9452
0.006	18.0	26460	0.4463	{'precision': 0.6923076923076923, 'recall': 0.5431034482758621, 'f1': 0.6086956521739131, 'number': 116}	{'precision': 0.9659367396593674, 'recall': 0.9497607655502392, 'f1': 0.9577804583835947, 'number': 418}	{'precision': 0.6170212765957447, 'recall': 0.8787878787878788, 'f1': 0.7250000000000001, 'number': 33}	{'precision': 0.8989473684210526, 'recall': 0.9143468950749465, 'f1': 0.9065817409766453, 'number': 467}	{'precision': 0.9117647058823529, 'recall': 0.8857142857142857, 'f1': 0.8985507246376812, 'number': 35}	{'precision': 0.9655172413793104, 'recall': 0.9333333333333333, 'f1': 0.9491525423728815, 'number': 30}	{'precision': 0.5833333333333334, 'recall': 0.5833333333333334, 'f1': 0.5833333333333334, 'number': 12}	{'precision': 0.7446808510638298, 'recall': 0.8974358974358975, 'f1': 0.813953488372093, 'number': 39}	{'precision': 0.7142857142857143, 'recall': 0.6578947368421053, 'f1': 0.684931506849315, 'number': 38}	{'precision': 0.9649122807017544, 'recall': 0.935374149659864, 'f1': 0.9499136442141625, 'number': 294}	{'precision': 0.8155339805825242, 'recall': 0.8442211055276382, 'f1': 0.8296296296296296, 'number': 199}	{'precision': 0.5666666666666667, 'recall': 0.5666666666666667, 'f1': 0.5666666666666667, 'number': 30}	{'precision': 0.7453874538745388, 'recall': 0.9439252336448598, 'f1': 0.8329896907216495, 'number': 214}	{'precision': 0.9047619047619048, 'recall': 0.6785714285714286, 'f1': 0.7755102040816326, 'number': 28}	{'precision': 0.81, 'recall': 0.6428571428571429, 'f1': 0.7168141592920355, 'number': 126}	{'precision': 0.6595744680851063, 'recall': 0.7560975609756098, 'f1': 0.7045454545454545, 'number': 41}	{'precision': 0.5285714285714286, 'recall': 0.49333333333333335, 'f1': 0.5103448275862069, 'number': 75}	{'precision': 0.7936507936507936, 'recall': 0.6666666666666666, 'f1': 0.7246376811594203, 'number': 75}	0.8452	0.8467	0.8460	0.9480
0.0028	19.0	27930	0.4317	{'precision': 0.6147540983606558, 'recall': 0.646551724137931, 'f1': 0.6302521008403362, 'number': 116}	{'precision': 0.9553990610328639, 'recall': 0.9736842105263158, 'f1': 0.9644549763033176, 'number': 418}	{'precision': 0.6304347826086957, 'recall': 0.8787878787878788, 'f1': 0.7341772151898734, 'number': 33}	{'precision': 0.8824742268041237, 'recall': 0.9164882226980728, 'f1': 0.8991596638655462, 'number': 467}	{'precision': 0.9142857142857143, 'recall': 0.9142857142857143, 'f1': 0.9142857142857143, 'number': 35}	{'precision': 1.0, 'recall': 0.9666666666666667, 'f1': 0.983050847457627, 'number': 30}	{'precision': 0.38461538461538464, 'recall': 0.4166666666666667, 'f1': 0.4, 'number': 12}	{'precision': 0.7727272727272727, 'recall': 0.8717948717948718, 'f1': 0.8192771084337349, 'number': 39}	{'precision': 0.6857142857142857, 'recall': 0.631578947368421, 'f1': 0.6575342465753424, 'number': 38}	{'precision': 0.9625850340136054, 'recall': 0.9625850340136054, 'f1': 0.9625850340136054, 'number': 294}	{'precision': 0.7242798353909465, 'recall': 0.8844221105527639, 'f1': 0.7963800904977376, 'number': 199}	{'precision': 0.59375, 'recall': 0.6333333333333333, 'f1': 0.6129032258064516, 'number': 30}	{'precision': 0.825, 'recall': 0.9252336448598131, 'f1': 0.8722466960352423, 'number': 214}	{'precision': 0.7096774193548387, 'recall': 0.7857142857142857, 'f1': 0.7457627118644068, 'number': 28}	{'precision': 0.8481012658227848, 'recall': 0.5317460317460317, 'f1': 0.6536585365853659, 'number': 126}	{'precision': 0.5769230769230769, 'recall': 0.7317073170731707, 'f1': 0.6451612903225806, 'number': 41}	{'precision': 0.5066666666666667, 'recall': 0.5066666666666667, 'f1': 0.5066666666666667, 'number': 75}	{'precision': 0.7727272727272727, 'recall': 0.68, 'f1': 0.7234042553191491, 'number': 75}	0.8296	0.8577	0.8434	0.9467
0.0043	20.0	29400	0.4631	{'precision': 0.6463414634146342, 'recall': 0.45689655172413796, 'f1': 0.5353535353535354, 'number': 116}	{'precision': 0.9615384615384616, 'recall': 0.9569377990430622, 'f1': 0.9592326139088729, 'number': 418}	{'precision': 0.675, 'recall': 0.8181818181818182, 'f1': 0.7397260273972603, 'number': 33}	{'precision': 0.8895833333333333, 'recall': 0.9143468950749465, 'f1': 0.9017951425554382, 'number': 467}	{'precision': 0.9090909090909091, 'recall': 0.8571428571428571, 'f1': 0.8823529411764706, 'number': 35}	{'precision': 1.0, 'recall': 0.9666666666666667, 'f1': 0.983050847457627, 'number': 30}	{'precision': 0.3333333333333333, 'recall': 0.25, 'f1': 0.28571428571428575, 'number': 12}	{'precision': 0.782608695652174, 'recall': 0.9230769230769231, 'f1': 0.8470588235294118, 'number': 39}	{'precision': 0.6666666666666666, 'recall': 0.6842105263157895, 'f1': 0.6753246753246753, 'number': 38}	{'precision': 0.9963768115942029, 'recall': 0.935374149659864, 'f1': 0.9649122807017544, 'number': 294}	{'precision': 0.8168316831683168, 'recall': 0.8291457286432161, 'f1': 0.8229426433915212, 'number': 199}	{'precision': 0.6060606060606061, 'recall': 0.6666666666666666, 'f1': 0.6349206349206349, 'number': 30}	{'precision': 0.851528384279476, 'recall': 0.9112149532710281, 'f1': 0.8803611738148984, 'number': 214}	{'precision': 0.6, 'recall': 0.6428571428571429, 'f1': 0.6206896551724138, 'number': 28}	{'precision': 0.8414634146341463, 'recall': 0.5476190476190477, 'f1': 0.6634615384615384, 'number': 126}	{'precision': 0.675, 'recall': 0.6585365853658537, 'f1': 0.6666666666666667, 'number': 41}	{'precision': 0.5405405405405406, 'recall': 0.5333333333333333, 'f1': 0.5369127516778522, 'number': 75}	{'precision': 0.8947368421052632, 'recall': 0.68, 'f1': 0.7727272727272727, 'number': 75}	0.8607	0.8330	0.8467	0.9483
0.002	21.0	30870	0.4782	{'precision': 0.6923076923076923, 'recall': 0.5431034482758621, 'f1': 0.6086956521739131, 'number': 116}	{'precision': 0.9591346153846154, 'recall': 0.9545454545454546, 'f1': 0.9568345323741008, 'number': 418}	{'precision': 0.6511627906976745, 'recall': 0.8484848484848485, 'f1': 0.736842105263158, 'number': 33}	{'precision': 0.8997867803837953, 'recall': 0.9036402569593148, 'f1': 0.9017094017094017, 'number': 467}	{'precision': 0.9090909090909091, 'recall': 0.8571428571428571, 'f1': 0.8823529411764706, 'number': 35}	{'precision': 0.9032258064516129, 'recall': 0.9333333333333333, 'f1': 0.9180327868852459, 'number': 30}	{'precision': 0.4, 'recall': 0.5, 'f1': 0.4444444444444445, 'number': 12}	{'precision': 0.7446808510638298, 'recall': 0.8974358974358975, 'f1': 0.813953488372093, 'number': 39}	{'precision': 0.6976744186046512, 'recall': 0.7894736842105263, 'f1': 0.7407407407407408, 'number': 38}	{'precision': 0.96875, 'recall': 0.9489795918367347, 'f1': 0.9587628865979382, 'number': 294}	{'precision': 0.7793427230046949, 'recall': 0.8341708542713567, 'f1': 0.8058252427184466, 'number': 199}	{'precision': 0.76, 'recall': 0.6333333333333333, 'f1': 0.6909090909090909, 'number': 30}	{'precision': 0.7782101167315175, 'recall': 0.9345794392523364, 'f1': 0.8492569002123143, 'number': 214}	{'precision': 0.6470588235294118, 'recall': 0.7857142857142857, 'f1': 0.7096774193548386, 'number': 28}	{'precision': 0.8452380952380952, 'recall': 0.5634920634920635, 'f1': 0.6761904761904762, 'number': 126}	{'precision': 0.6222222222222222, 'recall': 0.6829268292682927, 'f1': 0.6511627906976744, 'number': 41}	{'precision': 0.5846153846153846, 'recall': 0.5066666666666667, 'f1': 0.5428571428571428, 'number': 75}	{'precision': 0.8333333333333334, 'recall': 0.6666666666666666, 'f1': 0.7407407407407408, 'number': 75}	0.8473	0.8432	0.8452	0.9474
0.0029	22.0	32340	0.4973	{'precision': 0.684931506849315, 'recall': 0.43103448275862066, 'f1': 0.5291005291005291, 'number': 116}	{'precision': 0.9598108747044918, 'recall': 0.9712918660287081, 'f1': 0.9655172413793104, 'number': 418}	{'precision': 0.6585365853658537, 'recall': 0.8181818181818182, 'f1': 0.7297297297297297, 'number': 33}	{'precision': 0.9051724137931034, 'recall': 0.8993576017130621, 'f1': 0.9022556390977444, 'number': 467}	{'precision': 0.8484848484848485, 'recall': 0.8, 'f1': 0.823529411764706, 'number': 35}	{'precision': 0.9310344827586207, 'recall': 0.9, 'f1': 0.9152542372881356, 'number': 30}	{'precision': 0.36363636363636365, 'recall': 0.3333333333333333, 'f1': 0.34782608695652173, 'number': 12}	{'precision': 0.75, 'recall': 0.9230769230769231, 'f1': 0.8275862068965517, 'number': 39}	{'precision': 0.6, 'recall': 0.631578947368421, 'f1': 0.6153846153846154, 'number': 38}	{'precision': 1.0, 'recall': 0.8333333333333334, 'f1': 0.9090909090909091, 'number': 294}	{'precision': 0.7614678899082569, 'recall': 0.8341708542713567, 'f1': 0.7961630695443644, 'number': 199}	{'precision': 0.6666666666666666, 'recall': 0.6, 'f1': 0.631578947368421, 'number': 30}	{'precision': 0.8377192982456141, 'recall': 0.8925233644859814, 'f1': 0.8642533936651584, 'number': 214}	{'precision': 0.6470588235294118, 'recall': 0.7857142857142857, 'f1': 0.7096774193548386, 'number': 28}	{'precision': 0.875, 'recall': 0.5555555555555556, 'f1': 0.6796116504854369, 'number': 126}	{'precision': 0.6666666666666666, 'recall': 0.6341463414634146, 'f1': 0.6499999999999999, 'number': 41}	{'precision': 0.6333333333333333, 'recall': 0.5066666666666667, 'f1': 0.5629629629629629, 'number': 75}	{'precision': 0.8275862068965517, 'recall': 0.64, 'f1': 0.7218045112781956, 'number': 75}	0.8582	0.8132	0.8351	0.9450
0.0033	23.0	33810	0.5016	{'precision': 0.6973684210526315, 'recall': 0.45689655172413796, 'f1': 0.5520833333333333, 'number': 116}	{'precision': 0.9552941176470588, 'recall': 0.9712918660287081, 'f1': 0.9632265717674972, 'number': 418}	{'precision': 0.675, 'recall': 0.8181818181818182, 'f1': 0.7397260273972603, 'number': 33}	{'precision': 0.8849372384937239, 'recall': 0.9057815845824411, 'f1': 0.8952380952380952, 'number': 467}	{'precision': 0.90625, 'recall': 0.8285714285714286, 'f1': 0.8656716417910447, 'number': 35}	{'precision': 0.896551724137931, 'recall': 0.8666666666666667, 'f1': 0.8813559322033899, 'number': 30}	{'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 12}	{'precision': 0.7906976744186046, 'recall': 0.8717948717948718, 'f1': 0.8292682926829267, 'number': 39}	{'precision': 0.6388888888888888, 'recall': 0.6052631578947368, 'f1': 0.6216216216216216, 'number': 38}	{'precision': 1.0, 'recall': 0.9217687074829932, 'f1': 0.95929203539823, 'number': 294}	{'precision': 0.7777777777777778, 'recall': 0.8442211055276382, 'f1': 0.8096385542168675, 'number': 199}	{'precision': 0.6153846153846154, 'recall': 0.5333333333333333, 'f1': 0.5714285714285715, 'number': 30}	{'precision': 0.8290598290598291, 'recall': 0.9065420560747663, 'f1': 0.8660714285714286, 'number': 214}	{'precision': 0.6470588235294118, 'recall': 0.7857142857142857, 'f1': 0.7096774193548386, 'number': 28}	{'precision': 0.8764044943820225, 'recall': 0.6190476190476191, 'f1': 0.7255813953488374, 'number': 126}	{'precision': 0.675, 'recall': 0.6585365853658537, 'f1': 0.6666666666666667, 'number': 41}	{'precision': 0.640625, 'recall': 0.5466666666666666, 'f1': 0.5899280575539567, 'number': 75}	{'precision': 0.7619047619047619, 'recall': 0.64, 'f1': 0.6956521739130435, 'number': 75}	0.8575	0.8326	0.8449	0.9465
0.0015	24.0	35280	0.4953	{'precision': 0.640625, 'recall': 0.35344827586206895, 'f1': 0.45555555555555555, 'number': 116}	{'precision': 0.9550827423167849, 'recall': 0.9665071770334929, 'f1': 0.9607609988109395, 'number': 418}	{'precision': 0.675, 'recall': 0.8181818181818182, 'f1': 0.7397260273972603, 'number': 33}	{'precision': 0.8926315789473684, 'recall': 0.9079229122055674, 'f1': 0.9002123142250531, 'number': 467}	{'precision': 0.90625, 'recall': 0.8285714285714286, 'f1': 0.8656716417910447, 'number': 35}	{'precision': 0.9655172413793104, 'recall': 0.9333333333333333, 'f1': 0.9491525423728815, 'number': 30}	{'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 12}	{'precision': 0.7674418604651163, 'recall': 0.8461538461538461, 'f1': 0.8048780487804877, 'number': 39}	{'precision': 0.6842105263157895, 'recall': 0.6842105263157895, 'f1': 0.6842105263157895, 'number': 38}	{'precision': 1.0, 'recall': 0.9013605442176871, 'f1': 0.9481216457960644, 'number': 294}	{'precision': 0.812807881773399, 'recall': 0.8291457286432161, 'f1': 0.8208955223880597, 'number': 199}	{'precision': 0.6296296296296297, 'recall': 0.5666666666666667, 'f1': 0.5964912280701755, 'number': 30}	{'precision': 0.8227848101265823, 'recall': 0.9112149532710281, 'f1': 0.8647450110864746, 'number': 214}	{'precision': 0.6666666666666666, 'recall': 0.7857142857142857, 'f1': 0.721311475409836, 'number': 28}	{'precision': 0.8625, 'recall': 0.5476190476190477, 'f1': 0.6699029126213593, 'number': 126}	{'precision': 0.6829268292682927, 'recall': 0.6829268292682927, 'f1': 0.6829268292682927, 'number': 41}	{'precision': 0.6615384615384615, 'recall': 0.5733333333333334, 'f1': 0.6142857142857143, 'number': 75}	{'precision': 0.7272727272727273, 'recall': 0.64, 'f1': 0.6808510638297872, 'number': 75}	0.8612	0.8229	0.8416	0.9467
0.0018	25.0	36750	0.4946	{'precision': 0.654320987654321, 'recall': 0.45689655172413796, 'f1': 0.5380710659898478, 'number': 116}	{'precision': 0.9577464788732394, 'recall': 0.9760765550239234, 'f1': 0.9668246445497631, 'number': 418}	{'precision': 0.675, 'recall': 0.8181818181818182, 'f1': 0.7397260273972603, 'number': 33}	{'precision': 0.8893528183716075, 'recall': 0.9122055674518201, 'f1': 0.9006342494714588, 'number': 467}	{'precision': 0.9090909090909091, 'recall': 0.8571428571428571, 'f1': 0.8823529411764706, 'number': 35}	{'precision': 0.9655172413793104, 'recall': 0.9333333333333333, 'f1': 0.9491525423728815, 'number': 30}	{'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 12}	{'precision': 0.75, 'recall': 0.8461538461538461, 'f1': 0.7951807228915662, 'number': 39}	{'precision': 0.6842105263157895, 'recall': 0.6842105263157895, 'f1': 0.6842105263157895, 'number': 38}	{'precision': 1.0, 'recall': 0.9013605442176871, 'f1': 0.9481216457960644, 'number': 294}	{'precision': 0.8028846153846154, 'recall': 0.8391959798994975, 'f1': 0.8206388206388207, 'number': 199}	{'precision': 0.6206896551724138, 'recall': 0.6, 'f1': 0.6101694915254238, 'number': 30}	{'precision': 0.8290598290598291, 'recall': 0.9065420560747663, 'f1': 0.8660714285714286, 'number': 214}	{'precision': 0.6470588235294118, 'recall': 0.7857142857142857, 'f1': 0.7096774193548386, 'number': 28}	{'precision': 0.8625, 'recall': 0.5476190476190477, 'f1': 0.6699029126213593, 'number': 126}	{'precision': 0.6829268292682927, 'recall': 0.6829268292682927, 'f1': 0.6829268292682927, 'number': 41}	{'precision': 0.6417910447761194, 'recall': 0.5733333333333334, 'f1': 0.6056338028169014, 'number': 75}	{'precision': 0.7903225806451613, 'recall': 0.6533333333333333, 'f1': 0.7153284671532847, 'number': 75}	0.8599	0.8326	0.8460	0.9475

Framework versions

• Transformers 4.40.2
• Pytorch 2.3.1+cu121
• Datasets 2.19.1
• Tokenizers 0.19.1