st-karlos-efood/setfit-multilabel-example-classifier-chain-25iters

SetFit with lighteternal/stsb-xlm-r-greek-transfer

This is a SetFit model trained on the ethos dataset that can be used for Text Classification. This SetFit model uses lighteternal/stsb-xlm-r-greek-transfer as the Sentence Transformer embedding model. A ClassifierChain instance is used for classification.

The model has been trained using an efficient few-shot learning technique that involves:

1. Fine-tuning a Sentence Transformer with contrastive learning.
2. Training a classification head with features from the fine-tuned Sentence Transformer.

Model Details

Model Description

• Model Type: SetFit
• Sentence Transformer body: lighteternal/stsb-xlm-r-greek-transfer
• Classification head: a ClassifierChain instance
• Maximum Sequence Length: 400 tokens
• Training Dataset: ethos

Model Sources

• Repository: SetFit on GitHub
• Paper: Efficient Few-Shot Learning Without Prompts
• Blogpost: SetFit: Efficient Few-Shot Learning Without Prompts

Evaluation

Metrics

Label	Accuracy
all	0.2053

Uses

Direct Use for Inference

First install the SetFit library:

pip install setfit

Then you can load this model and run inference.

from setfit import SetFitModel

# Download from the 🤗 Hub
model = SetFitModel.from_pretrained("st-karlos-efood/setfit-multilabel-example-classifier-chain-25iters")
# Run inference
preds = model("Hindus take my ass please")

Training Details

Training Set Metrics

Training set	Min	Median	Max
Word count	3	9.9307	61

Training Hyperparameters

• batch_size: (64, 64)
• num_epochs: (10, 10)
• max_steps: -1
• sampling_strategy: oversampling
• num_iterations: 25
• body_learning_rate: (2e-05, 2e-05)
• head_learning_rate: 2e-05
• loss: CosineSimilarityLoss
• distance_metric: cosine_distance
• margin: 0.25
• end_to_end: False
• use_amp: False
• warmup_proportion: 0.1
• seed: 42
• eval_max_steps: -1
• load_best_model_at_end: False

Training Results

Epoch	Step	Training Loss	Validation Loss
0.0006	1	0.2027	-
0.0305	50	0.2092	-
0.0609	100	0.1605	-
0.0914	150	0.1726	-
0.1219	200	0.1322	-
0.1523	250	0.1252	-
0.1828	300	0.1404	-
0.2133	350	0.0927	-
0.2438	400	0.1039	-
0.2742	450	0.0904	-
0.3047	500	0.1194	-
0.3352	550	0.1024	-
0.3656	600	0.151	-
0.3961	650	0.0842	-
0.4266	700	0.1158	-
0.4570	750	0.214	-
0.4875	800	0.1167	-
0.5180	850	0.1174	-
0.5484	900	0.1567	-
0.5789	950	0.0726	-
0.6094	1000	0.0741	-
0.6399	1050	0.0841	-
0.6703	1100	0.0606	-
0.7008	1150	0.1005	-
0.7313	1200	0.1236	-
0.7617	1250	0.141	-
0.7922	1300	0.1611	-
0.8227	1350	0.1068	-
0.8531	1400	0.0542	-
0.8836	1450	0.1635	-
0.9141	1500	0.106	-
0.9445	1550	0.0817	-
0.9750	1600	0.1157	-
1.0055	1650	0.1031	-
1.0360	1700	0.0969	-
1.0664	1750	0.0742	-
1.0969	1800	0.0697	-
1.1274	1850	0.1072	-
1.1578	1900	0.0593	-
1.1883	1950	0.1102	-
1.2188	2000	0.1586	-
1.2492	2050	0.1523	-
1.2797	2100	0.0921	-
1.3102	2150	0.0634	-
1.3406	2200	0.073	-
1.3711	2250	0.1131	-
1.4016	2300	0.0493	-
1.4321	2350	0.106	-
1.4625	2400	0.0585	-
1.4930	2450	0.1058	-
1.5235	2500	0.0892	-
1.5539	2550	0.0649	-
1.5844	2600	0.0481	-
1.6149	2650	0.1359	-
1.6453	2700	0.0734	-
1.6758	2750	0.0762	-
1.7063	2800	0.1082	-
1.7367	2850	0.1274	-
1.7672	2900	0.0724	-
1.7977	2950	0.0842	-
1.8282	3000	0.1558	-
1.8586	3050	0.071	-
1.8891	3100	0.1716	-
1.9196	3150	0.1078	-
1.9500	3200	0.1037	-
1.9805	3250	0.0773	-
2.0110	3300	0.0706	-
2.0414	3350	0.1577	-
2.0719	3400	0.0825	-
2.1024	3450	0.1227	-
2.1328	3500	0.1069	-
2.1633	3550	0.1037	-
2.1938	3600	0.0595	-
2.2243	3650	0.0569	-
2.2547	3700	0.0967	-
2.2852	3750	0.0632	-
2.3157	3800	0.1014	-
2.3461	3850	0.0868	-
2.3766	3900	0.0986	-
2.4071	3950	0.0585	-
2.4375	4000	0.063	-
2.4680	4050	0.1124	-
2.4985	4100	0.0444	-
2.5289	4150	0.1547	-
2.5594	4200	0.1087	-
2.5899	4250	0.0946	-
2.6204	4300	0.0261	-
2.6508	4350	0.0414	-
2.6813	4400	0.0715	-
2.7118	4450	0.0831	-
2.7422	4500	0.0779	-
2.7727	4550	0.1049	-
2.8032	4600	0.1224	-
2.8336	4650	0.0926	-
2.8641	4700	0.0745	-
2.8946	4750	0.0642	-
2.9250	4800	0.0536	-
2.9555	4850	0.1296	-
2.9860	4900	0.0596	-
3.0165	4950	0.0361	-
3.0469	5000	0.0592	-
3.0774	5050	0.0656	-
3.1079	5100	0.0584	-
3.1383	5150	0.0729	-
3.1688	5200	0.1037	-
3.1993	5250	0.0685	-
3.2297	5300	0.0511	-
3.2602	5350	0.0427	-
3.2907	5400	0.1067	-
3.3211	5450	0.0807	-
3.3516	5500	0.0815	-
3.3821	5550	0.1016	-
3.4126	5600	0.1034	-
3.4430	5650	0.1257	-
3.4735	5700	0.0877	-
3.5040	5750	0.0808	-
3.5344	5800	0.0926	-
3.5649	5850	0.0967	-
3.5954	5900	0.0401	-
3.6258	5950	0.0547	-
3.6563	6000	0.0872	-
3.6868	6050	0.0808	-
3.7172	6100	0.1125	-
3.7477	6150	0.1431	-
3.7782	6200	0.1039	-
3.8087	6250	0.061	-
3.8391	6300	0.1022	-
3.8696	6350	0.0394	-
3.9001	6400	0.0892	-
3.9305	6450	0.0535	-
3.9610	6500	0.0793	-
3.9915	6550	0.0462	-
4.0219	6600	0.0686	-
4.0524	6650	0.0506	-
4.0829	6700	0.1012	-
4.1133	6750	0.0852	-
4.1438	6800	0.0729	-
4.1743	6850	0.1007	-
4.2048	6900	0.0431	-
4.2352	6950	0.0683	-
4.2657	7000	0.0712	-
4.2962	7050	0.0732	-
4.3266	7100	0.0374	-
4.3571	7150	0.1015	-
4.3876	7200	0.15	-
4.4180	7250	0.0852	-
4.4485	7300	0.0714	-
4.4790	7350	0.0587	-
4.5094	7400	0.1335	-
4.5399	7450	0.1123	-
4.5704	7500	0.0538	-
4.6009	7550	0.0989	-
4.6313	7600	0.0878	-
4.6618	7650	0.0963	-
4.6923	7700	0.0991	-
4.7227	7750	0.0776	-
4.7532	7800	0.0663	-
4.7837	7850	0.0696	-
4.8141	7900	0.0704	-
4.8446	7950	0.0626	-
4.8751	8000	0.0657	-
4.9055	8050	0.0567	-
4.9360	8100	0.0619	-
4.9665	8150	0.0792	-
4.9970	8200	0.0671	-
5.0274	8250	0.1068	-
5.0579	8300	0.1111	-
5.0884	8350	0.0968	-
5.1188	8400	0.0577	-
5.1493	8450	0.0934	-
5.1798	8500	0.0854	-
5.2102	8550	0.0587	-
5.2407	8600	0.048	-
5.2712	8650	0.0829	-
5.3016	8700	0.0985	-
5.3321	8750	0.107	-
5.3626	8800	0.0662	-
5.3931	8850	0.0799	-
5.4235	8900	0.0948	-
5.4540	8950	0.087	-
5.4845	9000	0.0429	-
5.5149	9050	0.0699	-
5.5454	9100	0.0911	-
5.5759	9150	0.1268	-
5.6063	9200	0.1042	-
5.6368	9250	0.0642	-
5.6673	9300	0.0736	-
5.6977	9350	0.0329	-
5.7282	9400	0.126	-
5.7587	9450	0.0991	-
5.7892	9500	0.1038	-
5.8196	9550	0.0842	-
5.8501	9600	0.0623	-
5.8806	9650	0.0642	-
5.9110	9700	0.0902	-
5.9415	9750	0.0994	-
5.9720	9800	0.0685	-
6.0024	9850	0.0573	-
6.0329	9900	0.0537	-
6.0634	9950	0.0478	-
6.0938	10000	0.0513	-
6.1243	10050	0.0529	-
6.1548	10100	0.095	-
6.1853	10150	0.0578	-
6.2157	10200	0.0918	-
6.2462	10250	0.0594	-
6.2767	10300	0.1015	-
6.3071	10350	0.036	-
6.3376	10400	0.0524	-
6.3681	10450	0.0927	-
6.3985	10500	0.0934	-
6.4290	10550	0.0788	-
6.4595	10600	0.0842	-
6.4899	10650	0.0703	-
6.5204	10700	0.0684	-
6.5509	10750	0.0759	-
6.5814	10800	0.0271	-
6.6118	10850	0.0391	-
6.6423	10900	0.0895	-
6.6728	10950	0.054	-
6.7032	11000	0.0987	-
6.7337	11050	0.0577	-
6.7642	11100	0.0822	-
6.7946	11150	0.0986	-
6.8251	11200	0.0423	-
6.8556	11250	0.0672	-
6.8860	11300	0.0747	-
6.9165	11350	0.0873	-
6.9470	11400	0.106	-
6.9775	11450	0.0975	-
7.0079	11500	0.0957	-
7.0384	11550	0.0487	-
7.0689	11600	0.0698	-
7.0993	11650	0.0317	-
7.1298	11700	0.0732	-
7.1603	11750	0.1114	-
7.1907	11800	0.0689	-
7.2212	11850	0.1211	-
7.2517	11900	0.0753	-
7.2821	11950	0.062	-
7.3126	12000	0.075	-
7.3431	12050	0.0494	-
7.3736	12100	0.0724	-
7.4040	12150	0.0605	-
7.4345	12200	0.0508	-
7.4650	12250	0.0828	-
7.4954	12300	0.0512	-
7.5259	12350	0.1291	-
7.5564	12400	0.0459	-
7.5868	12450	0.0869	-
7.6173	12500	0.0379	-
7.6478	12550	0.1878	-
7.6782	12600	0.0824	-
7.7087	12650	0.0945	-
7.7392	12700	0.0763	-
7.7697	12750	0.0602	-
7.8001	12800	0.0342	-
7.8306	12850	0.0746	-
7.8611	12900	0.065	-
7.8915	12950	0.0749	-
7.9220	13000	0.0618	-
7.9525	13050	0.0567	-
7.9829	13100	0.069	-
8.0134	13150	0.0487	-
8.0439	13200	0.0578	-
8.0743	13250	0.0876	-
8.1048	13300	0.0942	-
8.1353	13350	0.0774	-
8.1658	13400	0.0557	-
8.1962	13450	0.0872	-
8.2267	13500	0.0652	-
8.2572	13550	0.088	-
8.2876	13600	0.05	-
8.3181	13650	0.0572	-
8.3486	13700	0.053	-
8.3790	13750	0.0745	-
8.4095	13800	0.1119	-
8.4400	13850	0.0909	-
8.4704	13900	0.0374	-
8.5009	13950	0.0515	-
8.5314	14000	0.0827	-
8.5619	14050	0.0925	-
8.5923	14100	0.0793	-
8.6228	14150	0.1123	-
8.6533	14200	0.0387	-
8.6837	14250	0.0898	-
8.7142	14300	0.0627	-
8.7447	14350	0.0863	-
8.7751	14400	0.1257	-
8.8056	14450	0.0553	-
8.8361	14500	0.0664	-
8.8665	14550	0.0641	-
8.8970	14600	0.0577	-
8.9275	14650	0.0672	-
8.9580	14700	0.0776	-
8.9884	14750	0.0951	-
9.0189	14800	0.0721	-
9.0494	14850	0.0609	-
9.0798	14900	0.0821	-
9.1103	14950	0.0477	-
9.1408	15000	0.0974	-
9.1712	15050	0.0534	-
9.2017	15100	0.0673	-
9.2322	15150	0.0549	-
9.2626	15200	0.0833	-
9.2931	15250	0.0957	-
9.3236	15300	0.0601	-
9.3541	15350	0.0702	-
9.3845	15400	0.0852	-
9.4150	15450	0.0576	-
9.4455	15500	0.1006	-
9.4759	15550	0.0697	-
9.5064	15600	0.0778	-
9.5369	15650	0.0778	-
9.5673	15700	0.0844	-
9.5978	15750	0.0724	-
9.6283	15800	0.0988	-
9.6587	15850	0.0699	-
9.6892	15900	0.0772	-
9.7197	15950	0.0757	-
9.7502	16000	0.0671	-
9.7806	16050	0.1057	-
9.8111	16100	0.075	-
9.8416	16150	0.0475	-
9.8720	16200	0.0572	-
9.9025	16250	0.1176	-
9.9330	16300	0.0552	-
9.9634	16350	0.1032	-
9.9939	16400	0.0935	-
0.0006	1	0.0579	-
0.0305	50	0.0231	-
0.0609	100	0.0598	-
0.0914	150	0.0541	-
0.1219	200	0.0534	-
0.1523	250	0.048	-
0.1828	300	0.0912	-
0.2133	350	0.0447	-
0.2438	400	0.0442	-
0.2742	450	0.0579	-
0.0006	1	0.0585	-
0.0305	50	0.0204	-
0.0609	100	0.0653	-
0.0914	150	0.0599	-
0.1219	200	0.0577	-
0.1523	250	0.0468	-
0.1828	300	0.0911	-
0.2133	350	0.0423	-
0.2438	400	0.0405	-
0.2742	450	0.0561	-
0.3047	500	0.0925	-
0.3352	550	0.0771	-
0.3656	600	0.0718	-
0.3961	650	0.0708	-
0.4266	700	0.0673	-
0.4570	750	0.1501	-
0.4875	800	0.0849	-
0.5180	850	0.1132	-
0.5484	900	0.0865	-
0.5789	950	0.0527	-
0.6094	1000	0.0552	-
0.6399	1050	0.0656	-
0.6703	1100	0.0648	-
0.7008	1150	0.0884	-
0.7313	1200	0.0803	-
0.7617	1250	0.083	-
0.7922	1300	0.0863	-
0.8227	1350	0.0731	-
0.8531	1400	0.0504	-
0.8836	1450	0.1039	-
0.9141	1500	0.0817	-
0.9445	1550	0.0655	-
0.9750	1600	0.0987	-
1.0055	1650	0.0905	-
1.0360	1700	0.088	-
1.0664	1750	0.0767	-
1.0969	1800	0.0574	-
1.1274	1850	0.0741	-
1.1578	1900	0.0529	-
1.1883	1950	0.0758	-
1.2188	2000	0.1253	-
1.2492	2050	0.1129	-
1.2797	2100	0.0852	-
1.3102	2150	0.0475	-
1.3406	2200	0.063	-
1.3711	2250	0.0893	-
1.4016	2300	0.0494	-
1.4321	2350	0.1083	-
1.4625	2400	0.0468	-
1.4930	2450	0.0902	-
1.5235	2500	0.0607	-
1.5539	2550	0.0571	-
1.5844	2600	0.0395	-
1.6149	2650	0.1184	-
1.6453	2700	0.0735	-
1.6758	2750	0.06	-
1.7063	2800	0.0646	-
1.7367	2850	0.1055	-
1.7672	2900	0.0592	-
1.7977	2950	0.0522	-
1.8282	3000	0.1025	-
1.8586	3050	0.0615	-
1.8891	3100	0.1491	-
1.9196	3150	0.0796	-
1.9500	3200	0.0768	-
1.9805	3250	0.0601	-
2.0110	3300	0.0543	-
2.0414	3350	0.1128	-
2.0719	3400	0.06	-
2.1024	3450	0.0994	-
2.1328	3500	0.1018	-
2.1633	3550	0.0915	-
2.1938	3600	0.0626	-
2.2243	3650	0.0454	-
2.2547	3700	0.0915	-
2.2852	3750	0.0334	-
2.3157	3800	0.0827	-
2.3461	3850	0.0709	-
2.3766	3900	0.0806	-
2.4071	3950	0.055	-
2.4375	4000	0.0571	-
2.4680	4050	0.1002	-
2.4985	4100	0.0492	-
2.5289	4150	0.1322	-
2.5594	4200	0.0961	-
2.5899	4250	0.0788	-
2.6204	4300	0.0243	-
2.6508	4350	0.0406	-
2.6813	4400	0.0786	-
2.7118	4450	0.0852	-
2.7422	4500	0.0789	-
2.7727	4550	0.0787	-
2.8032	4600	0.1152	-
2.8336	4650	0.0992	-
2.8641	4700	0.0599	-
2.8946	4750	0.0496	-
2.9250	4800	0.0444	-
2.9555	4850	0.0898	-
2.9860	4900	0.0422	-
3.0165	4950	0.0328	-
3.0469	5000	0.0584	-
3.0774	5050	0.052	-
3.1079	5100	0.0485	-
3.1383	5150	0.0542	-
3.1688	5200	0.0854	-
3.1993	5250	0.048	-
3.2297	5300	0.0417	-
3.2602	5350	0.0497	-
3.2907	5400	0.0809	-
3.3211	5450	0.074	-
3.3516	5500	0.0761	-
3.3821	5550	0.0768	-
3.4126	5600	0.0954	-
3.4430	5650	0.0955	-
3.4735	5700	0.0906	-
3.5040	5750	0.0916	-
3.5344	5800	0.0915	-
3.5649	5850	0.107	-
3.5954	5900	0.0327	-
3.6258	5950	0.0534	-
3.6563	6000	0.059	-
3.6868	6050	0.0806	-
3.7172	6100	0.0941	-
3.7477	6150	0.1368	-
3.7782	6200	0.0848	-
3.8087	6250	0.0625	-
3.8391	6300	0.103	-
3.8696	6350	0.0307	-
3.9001	6400	0.0716	-
3.9305	6450	0.0518	-
3.9610	6500	0.0645	-
3.9915	6550	0.0417	-
4.0219	6600	0.0588	-
4.0524	6650	0.047	-
4.0829	6700	0.0951	-
4.1133	6750	0.0689	-
4.1438	6800	0.0731	-
4.1743	6850	0.0785	-
4.2048	6900	0.0411	-
4.2352	6950	0.0568	-
4.2657	7000	0.0688	-
4.2962	7050	0.066	-
4.3266	7100	0.0313	-
4.3571	7150	0.1127	-
4.3876	7200	0.1347	-
4.4180	7250	0.0685	-
4.4485	7300	0.0693	-
4.4790	7350	0.053	-
4.5094	7400	0.1353	-
4.5399	7450	0.1057	-
4.5704	7500	0.0467	-
4.6009	7550	0.1059	-
4.6313	7600	0.0791	-
4.6618	7650	0.0928	-
4.6923	7700	0.0989	-
4.7227	7750	0.0619	-
4.7532	7800	0.0572	-
4.7837	7850	0.06	-
4.8141	7900	0.0711	-
4.8446	7950	0.0595	-
4.8751	8000	0.0675	-
4.9055	8050	0.0487	-
4.9360	8100	0.0569	-
4.9665	8150	0.0637	-
4.9970	8200	0.0634	-
5.0274	8250	0.093	-
5.0579	8300	0.1107	-
5.0884	8350	0.0883	-
5.1188	8400	0.051	-
5.1493	8450	0.1034	-
5.1798	8500	0.0832	-
5.2102	8550	0.0463	-
5.2407	8600	0.0596	-
5.2712	8650	0.078	-
5.3016	8700	0.0686	-
5.3321	8750	0.1053	-
5.3626	8800	0.0684	-
5.3931	8850	0.0684	-
5.4235	8900	0.092	-
5.4540	8950	0.088	-
5.4845	9000	0.0503	-
5.5149	9050	0.0752	-
5.5454	9100	0.0975	-
5.5759	9150	0.1306	-
5.6063	9200	0.1038	-
5.6368	9250	0.0573	-
5.6673	9300	0.0584	-
5.6977	9350	0.0309	-
5.7282	9400	0.1232	-
5.7587	9450	0.0991	-
5.7892	9500	0.1111	-
5.8196	9550	0.0845	-
5.8501	9600	0.0587	-
5.8806	9650	0.0589	-
5.9110	9700	0.0751	-
5.9415	9750	0.0929	-
5.9720	9800	0.0613	-
6.0024	9850	0.0578	-
6.0329	9900	0.0499	-
6.0634	9950	0.0435	-
6.0938	10000	0.0547	-
6.1243	10050	0.0549	-
6.1548	10100	0.0872	-
6.1853	10150	0.0509	-
6.2157	10200	0.0913	-
6.2462	10250	0.0581	-
6.2767	10300	0.0942	-
6.3071	10350	0.0273	-
6.3376	10400	0.0426	-
6.3681	10450	0.0825	-
6.3985	10500	0.0713	-
6.4290	10550	0.0698	-
6.4595	10600	0.0679	-
6.4899	10650	0.0631	-
6.5204	10700	0.0489	-
6.5509	10750	0.0599	-
6.5814	10800	0.033	-
6.6118	10850	0.0401	-
6.6423	10900	0.0782	-
6.6728	10950	0.0512	-
6.7032	11000	0.0939	-
6.7337	11050	0.0523	-
6.7642	11100	0.0784	-
6.7946	11150	0.0898	-
6.8251	11200	0.042	-
6.8556	11250	0.0616	-
6.8860	11300	0.0667	-
6.9165	11350	0.0807	-
6.9470	11400	0.1054	-
6.9775	11450	0.0961	-
7.0079	11500	0.0896	-
7.0384	11550	0.0463	-
7.0689	11600	0.065	-
7.0993	11650	0.0318	-
7.1298	11700	0.0692	-
7.1603	11750	0.1055	-
7.1907	11800	0.0619	-
7.2212	11850	0.1234	-
7.2517	11900	0.0698	-
7.2821	11950	0.0526	-
7.3126	12000	0.0695	-
7.3431	12050	0.051	-
7.3736	12100	0.0759	-
7.4040	12150	0.062	-
7.4345	12200	0.0509	-
7.4650	12250	0.0874	-
7.4954	12300	0.0534	-
7.5259	12350	0.1089	-
7.5564	12400	0.0516	-
7.5868	12450	0.0755	-
7.6173	12500	0.0295	-
7.6478	12550	0.1767	-
7.6782	12600	0.0744	-
7.7087	12650	0.0875	-
7.7392	12700	0.075	-
7.7697	12750	0.0583	-
7.8001	12800	0.0353	-
7.8306	12850	0.0638	-
7.8611	12900	0.045	-
7.8915	12950	0.0647	-
7.9220	13000	0.0593	-
7.9525	13050	0.0515	-
7.9829	13100	0.0705	-
8.0134	13150	0.0521	-
8.0439	13200	0.059	-
8.0743	13250	0.0758	-
8.1048	13300	0.0922	-
8.1353	13350	0.0859	-
8.1658	13400	0.0526	-
8.1962	13450	0.0892	-
8.2267	13500	0.0665	-
8.2572	13550	0.0711	-
8.2876	13600	0.0535	-
8.3181	13650	0.055	-
8.3486	13700	0.0516	-
8.3790	13750	0.0683	-
8.4095	13800	0.0959	-
8.4400	13850	0.0901	-
8.4704	13900	0.041	-
8.5009	13950	0.0464	-
8.5314	14000	0.0726	-
8.5619	14050	0.0959	-
8.5923	14100	0.0739	-
8.6228	14150	0.1083	-
8.6533	14200	0.0374	-
8.6837	14250	0.0767	-
8.7142	14300	0.0626	-
8.7447	14350	0.0847	-
8.7751	14400	0.1211	-
8.8056	14450	0.0457	-
8.8361	14500	0.0705	-
8.8665	14550	0.06	-
8.8970	14600	0.052	-
8.9275	14650	0.0677	-
8.9580	14700	0.0747	-
8.9884	14750	0.0877	-
9.0189	14800	0.0791	-
9.0494	14850	0.0573	-
9.0798	14900	0.0786	-
9.1103	14950	0.0376	-
9.1408	15000	0.0964	-
9.1712	15050	0.0542	-
9.2017	15100	0.0568	-
9.2322	15150	0.0583	-
9.2626	15200	0.0861	-
9.2931	15250	0.0994	-
9.3236	15300	0.0614	-
9.3541	15350	0.0689	-
9.3845	15400	0.0803	-
9.4150	15450	0.0599	-
9.4455	15500	0.0952	-
9.4759	15550	0.0597	-
9.5064	15600	0.0762	-
9.5369	15650	0.0718	-
9.5673	15700	0.0794	-
9.5978	15750	0.0721	-
9.6283	15800	0.0966	-
9.6587	15850	0.0604	-
9.6892	15900	0.0764	-
9.7197	15950	0.0707	-
9.7502	16000	0.0724	-
9.7806	16050	0.1072	-
9.8111	16100	0.0728	-
9.8416	16150	0.0516	-
9.8720	16200	0.0519	-
9.9025	16250	0.1077	-
9.9330	16300	0.0539	-
9.9634	16350	0.095	-
9.9939	16400	0.0957	-
0.0005	1	0.0632	-
0.0244	50	0.058	-
0.0488	100	0.0531	-
0.0731	150	0.0769	-
0.0975	200	0.0445	-
0.1219	250	0.0852	-
0.1463	300	0.058	-
0.1706	350	0.0611	-
0.1950	400	0.0772	-
0.2194	450	0.0806	-
0.2438	500	0.0686	-
0.2682	550	0.0591	-
0.2925	600	0.0838	-
0.3169	650	0.0862	-
0.3413	700	0.0641	-
0.3657	750	0.0628	-
0.3901	800	0.0725	-
0.4144	850	0.0756	-
0.4388	900	0.0686	-
0.4632	950	0.0789	-
0.4876	1000	0.1058	-
0.5119	1050	0.0682	-
0.5363	1100	0.0657	-
0.5607	1150	0.0531	-
0.5851	1200	0.0456	-
0.6095	1250	0.06	-
0.6338	1300	0.0567	-
0.6582	1350	0.0599	-
0.6826	1400	0.0743	-
0.7070	1450	0.0512	-
0.7314	1500	0.0805	-
0.7557	1550	0.1057	-
0.7801	1600	0.0714	-
0.8045	1650	0.0415	-
0.8289	1700	0.0531	-
0.8532	1750	0.0786	-
0.8776	1800	0.0867	-
0.9020	1850	0.0538	-
0.9264	1900	0.0734	-
0.9508	1950	0.0854	-
0.9751	2000	0.0584	-
0.9995	2050	0.0459	-
1.0239	2100	0.071	-
1.0483	2150	0.0716	-
1.0726	2200	0.0768	-
1.0970	2250	0.0778	-
1.1214	2300	0.1028	-
1.1458	2350	0.0598	-
1.1702	2400	0.0462	-
1.1945	2450	0.0494	-
1.2189	2500	0.0554	-
1.2433	2550	0.0645	-
1.2677	2600	0.0533	-
1.2921	2650	0.0404	-
1.3164	2700	0.0837	-
1.3408	2750	0.0832	-
1.3652	2800	0.0946	-
1.3896	2850	0.0807	-
1.4139	2900	0.0695	-
1.4383	2950	0.0436	-
1.4627	3000	0.0605	-
1.4871	3050	0.0918	-
1.5115	3100	0.0755	-
1.5358	3150	0.0745	-
1.5602	3200	0.0429	-
1.5846	3250	0.0651	-
1.6090	3300	0.0567	-
1.6333	3350	0.0679	-
1.6577	3400	0.0904	-
1.6821	3450	0.0671	-
1.7065	3500	0.0626	-
1.7309	3550	0.0439	-
1.7552	3600	0.1035	-
1.7796	3650	0.0818	-
1.8040	3700	0.1284	-
1.8284	3750	0.058	-
1.8528	3800	0.0608	-
1.8771	3850	0.0858	-
1.9015	3900	0.0611	-
1.9259	3950	0.0701	-
1.9503	4000	0.0882	-
1.9746	4050	0.0568	-
1.9990	4100	0.0591	-
2.0234	4150	0.0765	-
2.0478	4200	0.0697	-
2.0722	4250	0.0714	-
2.0965	4300	0.0438	-
2.1209	4350	0.0661	-
2.1453	4400	0.0626	-
2.1697	4450	0.0666	-
2.1941	4500	0.0583	-
2.2184	4550	0.088	-
2.2428	4600	0.0768	-
2.2672	4650	0.0528	-
2.2916	4700	0.0869	-
2.3159	4750	0.1001	-
2.3403	4800	0.0731	-
2.3647	4850	0.0858	-
2.3891	4900	0.0611	-
2.4135	4950	0.058	-
2.4378	5000	0.0725	-
2.4622	5050	0.0893	-
2.4866	5100	0.0649	-
2.5110	5150	0.0561	-
2.5353	5200	0.0569	-
2.5597	5250	0.0375	-
2.5841	5300	0.0925	-
2.6085	5350	0.0842	-
2.6329	5400	0.083	-
2.6572	5450	0.0713	-
2.6816	5500	0.1082	-
2.7060	5550	0.0718	-
2.7304	5600	0.0755	-
2.7548	5650	0.0863	-
2.7791	5700	0.081	-
2.8035	5750	0.0732	-
2.8279	5800	0.0769	-
2.8523	5850	0.0846	-
2.8766	5900	0.0794	-
2.9010	5950	0.0518	-
2.9254	6000	0.0495	-
2.9498	6050	0.0696	-
2.9742	6100	0.081	-
2.9985	6150	0.0505	-
3.0229	6200	0.0703	-
3.0473	6250	0.0738	-
3.0717	6300	0.07	-
3.0961	6350	0.0663	-
3.1204	6400	0.069	-
3.1448	6450	0.0665	-
3.1692	6500	0.0409	-
3.1936	6550	0.075	-
3.2179	6600	0.0519	-
3.2423	6650	0.0836	-
3.2667	6700	0.0631	-
3.2911	6750	0.0926	-
3.3155	6800	0.0443	-
3.3398	6850	0.0587	-
3.3642	6900	0.0654	-
3.3886	6950	0.0776	-
3.4130	7000	0.0563	-
3.4373	7050	0.0501	-
3.4617	7100	0.0549	-
3.4861	7150	0.0497	-
3.5105	7200	0.0782	-
3.5349	7250	0.0734	-
3.5592	7300	0.0704	-
3.5836	7350	0.062	-
3.6080	7400	0.0698	-
3.6324	7450	0.09	-
3.6568	7500	0.0585	-
3.6811	7550	0.0649	-
3.7055	7600	0.0685	-
3.7299	7650	0.0671	-
3.7543	7700	0.0576	-
3.7786	7750	0.0378	-
3.8030	7800	0.0679	-
3.8274	7850	0.0665	-
3.8518	7900	0.0701	-
3.8762	7950	0.0943	-
3.9005	8000	0.1062	-
3.9249	8050	0.0725	-
3.9493	8100	0.0595	-
3.9737	8150	0.0738	-
3.9980	8200	0.0793	-
4.0224	8250	0.0851	-
4.0468	8300	0.121	-
4.0712	8350	0.0919	-
4.0956	8400	0.0629	-
4.1199	8450	0.0518	-
4.1443	8500	0.0595	-
4.1687	8550	0.0684	-
4.1931	8600	0.0497	-
4.2175	8650	0.0375	-
4.2418	8700	0.0819	-
4.2662	8750	0.0781	-
4.2906	8800	0.0515	-
4.3150	8850	0.0756	-
4.3393	8900	0.0547	-
4.3637	8950	0.0875	-
4.3881	9000	0.0571	-
4.4125	9050	0.046	-
4.4369	9100	0.067	-
4.4612	9150	0.0646	-
4.4856	9200	0.0575	-
4.5100	9250	0.1137	-
4.5344	9300	0.0768	-
4.5588	9350	0.0542	-
4.5831	9400	0.0743	-
4.6075	9450	0.072	-
4.6319	9500	0.0606	-
4.6563	9550	0.0777	-
4.6806	9600	0.0435	-
4.7050	9650	0.065	-
4.7294	9700	0.0601	-
4.7538	9750	0.0579	-
4.7782	9800	0.0661	-
4.8025	9850	0.0569	-
4.8269	9900	0.0995	-
4.8513	9950	0.056	-
4.8757	10000	0.0705	-
4.9000	10050	0.066	-
4.9244	10100	0.0489	-
4.9488	10150	0.0709	-
4.9732	10200	0.0545	-
4.9976	10250	0.0886	-
5.0219	10300	0.0835	-
5.0463	10350	0.0635	-
5.0707	10400	0.066	-
5.0951	10450	0.0678	-
5.1195	10500	0.1006	-
5.1438	10550	0.0526	-
5.1682	10600	0.0691	-
5.1926	10650	0.0833	-
5.2170	10700	0.0512	-
5.2413	10750	0.0469	-
5.2657	10800	0.0837	-
5.2901	10850	0.0646	-
5.3145	10900	0.0843	-
5.3389	10950	0.0627	-
5.3632	11000	0.0503	-
5.3876	11050	0.0499	-
5.4120	11100	0.0823	-
5.4364	11150	0.0759	-
5.4608	11200	0.0436	-
5.4851	11250	0.0864	-
5.5095	11300	0.0792	-
5.5339	11350	0.0876	-
5.5583	11400	0.0535	-
5.5826	11450	0.0543	-
5.6070	11500	0.0549	-
5.6314	11550	0.0564	-
5.6558	11600	0.0454	-
5.6802	11650	0.061	-
5.7045	11700	0.0573	-
5.7289	11750	0.0655	-
5.7533	11800	0.0821	-
5.7777	11850	0.0608	-
5.8020	11900	0.0765	-
5.8264	11950	0.0807	-
5.8508	12000	0.0499	-
5.8752	12050	0.0862	-
5.8996	12100	0.0928	-
5.9239	12150	0.08	-
5.9483	12200	0.0553	-
5.9727	12250	0.0736	-
5.9971	12300	0.0576	-
6.0215	12350	0.0945	-
6.0458	12400	0.0669	-
6.0702	12450	0.0492	-
6.0946	12500	0.0795	-
6.1190	12550	0.0935	-
6.1433	12600	0.0554	-
6.1677	12650	0.0643	-
6.1921	12700	0.0715	-
6.2165	12750	0.0803	-
6.2409	12800	0.0745	-
6.2652	12850	0.0626	-
6.2896	12900	0.0539	-
6.3140	12950	0.0719	-
6.3384	13000	0.0465	-
6.3627	13050	0.0735	-
6.3871	13100	0.0637	-
6.4115	13150	0.0437	-
6.4359	13200	0.0744	-
6.4603	13250	0.072	-
6.4846	13300	0.0726	-
6.5090	13350	0.0721	-
6.5334	13400	0.0521	-
6.5578	13450	0.0575	-
6.5822	13500	0.0466	-
6.6065	13550	0.0572	-
6.6309	13600	0.0909	-
6.6553	13650	0.0524	-
6.6797	13700	0.0678	-
6.7040	13750	0.0548	-
6.7284	13800	0.0587	-
6.7528	13850	0.0575	-
6.7772	13900	0.0677	-
6.8016	13950	0.0452	-
6.8259	14000	0.0598	-
6.8503	14050	0.0642	-
6.8747	14100	0.0679	-
6.8991	14150	0.0371	-
6.9235	14200	0.0482	-
6.9478	14250	0.0497	-
6.9722	14300	0.0512	-
6.9966	14350	0.1054	-
7.0210	14400	0.0712	-
7.0453	14450	0.0646	-
7.0697	14500	0.1106	-
7.0941	14550	0.0642	-
7.1185	14600	0.0786	-
7.1429	14650	0.0581	-
7.1672	14700	0.0656	-
7.1916	14750	0.0756	-
7.2160	14800	0.0476	-
7.2404	14850	0.0817	-
7.2647	14900	0.0929	-
7.2891	14950	0.0547	-
7.3135	15000	0.0733	-
7.3379	15050	0.0762	-
7.3623	15100	0.0628	-
7.3866	15150	0.0601	-
7.4110	15200	0.0484	-
7.4354	15250	0.0551	-
7.4598	15300	0.0505	-
7.4842	15350	0.0437	-
7.5085	15400	0.0636	-
7.5329	15450	0.0624	-
7.5573	15500	0.0716	-
7.5817	15550	0.0508	-
7.6060	15600	0.0704	-
7.6304	15650	0.0604	-
7.6548	15700	0.0641	-
7.6792	15750	0.0653	-
7.7036	15800	0.0598	-
7.7279	15850	0.0829	-
7.7523	15900	0.0593	-
7.7767	15950	0.0631	-
7.8011	16000	0.0819	-
7.8255	16050	0.0776	-
7.8498	16100	0.0603	-
7.8742	16150	0.0499	-
7.8986	16200	0.0637	-
7.9230	16250	0.0639	-
7.9473	16300	0.0559	-
7.9717	16350	0.0621	-
7.9961	16400	0.0639	-
8.0205	16450	0.1066	-
8.0449	16500	0.0686	-
8.0692	16550	0.063	-
8.0936	16600	0.0789	-
8.1180	16650	0.0458	-
8.1424	16700	0.0622	-
8.1667	16750	0.0748	-
8.1911	16800	0.0355	-
8.2155	16850	0.0648	-
8.2399	16900	0.0618	-
8.2643	16950	0.0908	-
8.2886	17000	0.0544	-
8.3130	17050	0.0888	-
8.3374	17100	0.0531	-
8.3618	17150	0.0905	-
8.3862	17200	0.0811	-
8.4105	17250	0.0643	-
8.4349	17300	0.0775	-
8.4593	17350	0.0518	-
8.4837	17400	0.0683	-
8.5080	17450	0.0946	-
8.5324	17500	0.0642	-
8.5568	17550	0.0654	-
8.5812	17600	0.0682	-
8.6056	17650	0.0467	-
8.6299	17700	0.0811	-
8.6543	17750	0.077	-
8.6787	17800	0.0376	-
8.7031	17850	0.1028	-
8.7275	17900	0.0833	-
8.7518	17950	0.0591	-
8.7762	18000	0.0613	-
8.8006	18050	0.0633	-
8.8250	18100	0.0774	-
8.8493	18150	0.0609	-
8.8737	18200	0.0732	-
8.8981	18250	0.085	-
8.9225	18300	0.0762	-
8.9469	18350	0.0518	-
8.9712	18400	0.0806	-
8.9956	18450	0.0467	-
9.0200	18500	0.0467	-
9.0444	18550	0.0836	-
9.0687	18600	0.0452	-
9.0931	18650	0.0503	-
9.1175	18700	0.0624	-
9.1419	18750	0.0605	-
9.1663	18800	0.0829	-
9.1906	18850	0.0497	-
9.2150	18900	0.0575	-
9.2394	18950	0.0645	-
9.2638	19000	0.0956	-
9.2882	19050	0.045	-
9.3125	19100	0.0768	-
9.3369	19150	0.0793	-
9.3613	19200	0.0839	-
9.3857	19250	0.0518	-
9.4100	19300	0.0445	-
9.4344	19350	0.055	-
9.4588	19400	0.0649	-
9.4832	19450	0.0673	-
9.5076	19500	0.0492	-
9.5319	19550	0.0733	-
9.5563	19600	0.0879	-
9.5807	19650	0.0672	-
9.6051	19700	0.0612	-
9.6294	19750	0.0661	-
9.6538	19800	0.066	-
9.6782	19850	0.0661	-
9.7026	19900	0.0738	-
9.7270	19950	0.0728	-
9.7513	20000	0.0595	-
9.7757	20050	0.0601	-
9.8001	20100	0.0441	-
9.8245	20150	0.0768	-
9.8489	20200	0.0636	-
9.8732	20250	0.0796	-
9.8976	20300	0.0584	-
9.9220	20350	0.0801	-
9.9464	20400	0.0569	-
9.9707	20450	0.0552	-
9.9951	20500	0.0684	-

Framework Versions

• Python: 3.10.12
• SetFit: 1.0.3
• Sentence Transformers: 2.2.2
• Transformers: 4.35.2
• PyTorch: 2.1.0+cu121
• Datasets: 2.16.1
• Tokenizers: 0.15.0

Citation

BibTeX

@article{https://doi.org/10.48550/arxiv.2209.11055,
    doi = {10.48550/ARXIV.2209.11055},
    url = {https://arxiv.org/abs/2209.11055},
    author = {Tunstall, Lewis and Reimers, Nils and Jo, Unso Eun Seo and Bates, Luke and Korat, Daniel and Wasserblat, Moshe and Pereg, Oren},
    keywords = {Computation and Language (cs.CL), FOS: Computer and information sciences, FOS: Computer and information sciences},
    title = {Efficient Few-Shot Learning Without Prompts},
    publisher = {arXiv},
    year = {2022},
    copyright = {Creative Commons Attribution 4.0 International}
}