Hugging Face's logo

st-karlos-efood
/
setfit-multilabel-example-classifier-chain-25iters

Text Classification
setfit
Safetensors
sentence-transformers
xlm-roberta
generated_from_setfit_trainer
Eval Results
Model card Files Community
setfit-multilabel-example-classifier-chain-25iters / README.md
st-karlos-efood's picture
st-karlos-efood
Add SetFit model
cfdd06c verified
preview code
|
raw
history blame contribute delete
62.8 kB
metadata
library_name: setfit
tags:
  - setfit
  - sentence-transformers
  - text-classification
  - generated_from_setfit_trainer
datasets:
  - ethos
metrics:
  - accuracy
widget:
  - text: "This is what happens when you'\x80\x99re a bitch and a cunt.  Looks like that guy called it correctly.  Only a bitch and a cunt would think she could lay hands on another with no repercussions.   Maybe after that seizure she won'\x80\x99t be as much of a bitchy cunt."
  - text: >-
      What if we send every men to mars to start a new life there! They are
      useless here (Of course milk them first to store their juices)
  - text: Honestly, go fuck yourself! bitch!
  - text: Hindus take my ass please
  - text: Im going to choke you with your cross necklace idiotic religious pig
pipeline_tag: text-classification
inference: false
base_model: lighteternal/stsb-xlm-r-greek-transfer
model-index:
  - name: SetFit with lighteternal/stsb-xlm-r-greek-transfer
    results:
      - task:
          type: text-classification
          name: Text Classification
        dataset:
          name: ethos
          type: ethos
          split: test
        metrics:
          - type: accuracy
            value: 0.20533333333333334
            name: Accuracy

SetFit with lighteternal/stsb-xlm-r-greek-transfer

This is a SetFit model trained on the ethos dataset that can be used for Text Classification. This SetFit model uses lighteternal/stsb-xlm-r-greek-transfer as the Sentence Transformer embedding model. A ClassifierChain instance is used for classification.

The model has been trained using an efficient few-shot learning technique that involves:

  1. Fine-tuning a Sentence Transformer with contrastive learning.
  2. Training a classification head with features from the fine-tuned Sentence Transformer.

Model Details

Model Description

Model Sources

Evaluation

Metrics

Label Accuracy
all 0.2053

Uses

Direct Use for Inference

First install the SetFit library:

pip install setfit

Then you can load this model and run inference.

from setfit import SetFitModel

# Download from the 🤗 Hub
model = SetFitModel.from_pretrained("st-karlos-efood/setfit-multilabel-example-classifier-chain-25iters")
# Run inference
preds = model("Hindus take my ass please")

Training Details

Training Set Metrics

Training set Min Median Max
Word count 3 9.9307 61

Training Hyperparameters

  • batch_size: (64, 64)
  • num_epochs: (10, 10)
  • max_steps: -1
  • sampling_strategy: oversampling
  • num_iterations: 25
  • body_learning_rate: (2e-05, 2e-05)
  • head_learning_rate: 2e-05
  • loss: CosineSimilarityLoss
  • distance_metric: cosine_distance
  • margin: 0.25
  • end_to_end: False
  • use_amp: False
  • warmup_proportion: 0.1
  • seed: 42
  • eval_max_steps: -1
  • load_best_model_at_end: False

Training Results

Epoch Step Training Loss Validation Loss
0.0006 1 0.2027 -
0.0305 50 0.2092 -
0.0609 100 0.1605 -
0.0914 150 0.1726 -
0.1219 200 0.1322 -
0.1523 250 0.1252 -
0.1828 300 0.1404 -
0.2133 350 0.0927 -
0.2438 400 0.1039 -
0.2742 450 0.0904 -
0.3047 500 0.1194 -
0.3352 550 0.1024 -
0.3656 600 0.151 -
0.3961 650 0.0842 -
0.4266 700 0.1158 -
0.4570 750 0.214 -
0.4875 800 0.1167 -
0.5180 850 0.1174 -
0.5484 900 0.1567 -
0.5789 950 0.0726 -
0.6094 1000 0.0741 -
0.6399 1050 0.0841 -
0.6703 1100 0.0606 -
0.7008 1150 0.1005 -
0.7313 1200 0.1236 -
0.7617 1250 0.141 -
0.7922 1300 0.1611 -
0.8227 1350 0.1068 -
0.8531 1400 0.0542 -
0.8836 1450 0.1635 -
0.9141 1500 0.106 -
0.9445 1550 0.0817 -
0.9750 1600 0.1157 -
1.0055 1650 0.1031 -
1.0360 1700 0.0969 -
1.0664 1750 0.0742 -
1.0969 1800 0.0697 -
1.1274 1850 0.1072 -
1.1578 1900 0.0593 -
1.1883 1950 0.1102 -
1.2188 2000 0.1586 -
1.2492 2050 0.1523 -
1.2797 2100 0.0921 -
1.3102 2150 0.0634 -
1.3406 2200 0.073 -
1.3711 2250 0.1131 -
1.4016 2300 0.0493 -
1.4321 2350 0.106 -
1.4625 2400 0.0585 -
1.4930 2450 0.1058 -
1.5235 2500 0.0892 -
1.5539 2550 0.0649 -
1.5844 2600 0.0481 -
1.6149 2650 0.1359 -
1.6453 2700 0.0734 -
1.6758 2750 0.0762 -
1.7063 2800 0.1082 -
1.7367 2850 0.1274 -
1.7672 2900 0.0724 -
1.7977 2950 0.0842 -
1.8282 3000 0.1558 -
1.8586 3050 0.071 -
1.8891 3100 0.1716 -
1.9196 3150 0.1078 -
1.9500 3200 0.1037 -
1.9805 3250 0.0773 -
2.0110 3300 0.0706 -
2.0414 3350 0.1577 -
2.0719 3400 0.0825 -
2.1024 3450 0.1227 -
2.1328 3500 0.1069 -
2.1633 3550 0.1037 -
2.1938 3600 0.0595 -
2.2243 3650 0.0569 -
2.2547 3700 0.0967 -
2.2852 3750 0.0632 -
2.3157 3800 0.1014 -
2.3461 3850 0.0868 -
2.3766 3900 0.0986 -
2.4071 3950 0.0585 -
2.4375 4000 0.063 -
2.4680 4050 0.1124 -
2.4985 4100 0.0444 -
2.5289 4150 0.1547 -
2.5594 4200 0.1087 -
2.5899 4250 0.0946 -
2.6204 4300 0.0261 -
2.6508 4350 0.0414 -
2.6813 4400 0.0715 -
2.7118 4450 0.0831 -
2.7422 4500 0.0779 -
2.7727 4550 0.1049 -
2.8032 4600 0.1224 -
2.8336 4650 0.0926 -
2.8641 4700 0.0745 -
2.8946 4750 0.0642 -
2.9250 4800 0.0536 -
2.9555 4850 0.1296 -
2.9860 4900 0.0596 -
3.0165 4950 0.0361 -
3.0469 5000 0.0592 -
3.0774 5050 0.0656 -
3.1079 5100 0.0584 -
3.1383 5150 0.0729 -
3.1688 5200 0.1037 -
3.1993 5250 0.0685 -
3.2297 5300 0.0511 -
3.2602 5350 0.0427 -
3.2907 5400 0.1067 -
3.3211 5450 0.0807 -
3.3516 5500 0.0815 -
3.3821 5550 0.1016 -
3.4126 5600 0.1034 -
3.4430 5650 0.1257 -
3.4735 5700 0.0877 -
3.5040 5750 0.0808 -
3.5344 5800 0.0926 -
3.5649 5850 0.0967 -
3.5954 5900 0.0401 -
3.6258 5950 0.0547 -
3.6563 6000 0.0872 -
3.6868 6050 0.0808 -
3.7172 6100 0.1125 -
3.7477 6150 0.1431 -
3.7782 6200 0.1039 -
3.8087 6250 0.061 -
3.8391 6300 0.1022 -
3.8696 6350 0.0394 -
3.9001 6400 0.0892 -
3.9305 6450 0.0535 -
3.9610 6500 0.0793 -
3.9915 6550 0.0462 -
4.0219 6600 0.0686 -
4.0524 6650 0.0506 -
4.0829 6700 0.1012 -
4.1133 6750 0.0852 -
4.1438 6800 0.0729 -
4.1743 6850 0.1007 -
4.2048 6900 0.0431 -
4.2352 6950 0.0683 -
4.2657 7000 0.0712 -
4.2962 7050 0.0732 -
4.3266 7100 0.0374 -
4.3571 7150 0.1015 -
4.3876 7200 0.15 -
4.4180 7250 0.0852 -
4.4485 7300 0.0714 -
4.4790 7350 0.0587 -
4.5094 7400 0.1335 -
4.5399 7450 0.1123 -
4.5704 7500 0.0538 -
4.6009 7550 0.0989 -
4.6313 7600 0.0878 -
4.6618 7650 0.0963 -
4.6923 7700 0.0991 -
4.7227 7750 0.0776 -
4.7532 7800 0.0663 -
4.7837 7850 0.0696 -
4.8141 7900 0.0704 -
4.8446 7950 0.0626 -
4.8751 8000 0.0657 -
4.9055 8050 0.0567 -
4.9360 8100 0.0619 -
4.9665 8150 0.0792 -
4.9970 8200 0.0671 -
5.0274 8250 0.1068 -
5.0579 8300 0.1111 -
5.0884 8350 0.0968 -
5.1188 8400 0.0577 -
5.1493 8450 0.0934 -
5.1798 8500 0.0854 -
5.2102 8550 0.0587 -
5.2407 8600 0.048 -
5.2712 8650 0.0829 -
5.3016 8700 0.0985 -
5.3321 8750 0.107 -
5.3626 8800 0.0662 -
5.3931 8850 0.0799 -
5.4235 8900 0.0948 -
5.4540 8950 0.087 -
5.4845 9000 0.0429 -
5.5149 9050 0.0699 -
5.5454 9100 0.0911 -
5.5759 9150 0.1268 -
5.6063 9200 0.1042 -
5.6368 9250 0.0642 -
5.6673 9300 0.0736 -
5.6977 9350 0.0329 -
5.7282 9400 0.126 -
5.7587 9450 0.0991 -
5.7892 9500 0.1038 -
5.8196 9550 0.0842 -
5.8501 9600 0.0623 -
5.8806 9650 0.0642 -
5.9110 9700 0.0902 -
5.9415 9750 0.0994 -
5.9720 9800 0.0685 -
6.0024 9850 0.0573 -
6.0329 9900 0.0537 -
6.0634 9950 0.0478 -
6.0938 10000 0.0513 -
6.1243 10050 0.0529 -
6.1548 10100 0.095 -
6.1853 10150 0.0578 -
6.2157 10200 0.0918 -
6.2462 10250 0.0594 -
6.2767 10300 0.1015 -
6.3071 10350 0.036 -
6.3376 10400 0.0524 -
6.3681 10450 0.0927 -
6.3985 10500 0.0934 -
6.4290 10550 0.0788 -
6.4595 10600 0.0842 -
6.4899 10650 0.0703 -
6.5204 10700 0.0684 -
6.5509 10750 0.0759 -
6.5814 10800 0.0271 -
6.6118 10850 0.0391 -
6.6423 10900 0.0895 -
6.6728 10950 0.054 -
6.7032 11000 0.0987 -
6.7337 11050 0.0577 -
6.7642 11100 0.0822 -
6.7946 11150 0.0986 -
6.8251 11200 0.0423 -
6.8556 11250 0.0672 -
6.8860 11300 0.0747 -
6.9165 11350 0.0873 -
6.9470 11400 0.106 -
6.9775 11450 0.0975 -
7.0079 11500 0.0957 -
7.0384 11550 0.0487 -
7.0689 11600 0.0698 -
7.0993 11650 0.0317 -
7.1298 11700 0.0732 -
7.1603 11750 0.1114 -
7.1907 11800 0.0689 -
7.2212 11850 0.1211 -
7.2517 11900 0.0753 -
7.2821 11950 0.062 -
7.3126 12000 0.075 -
7.3431 12050 0.0494 -
7.3736 12100 0.0724 -
7.4040 12150 0.0605 -
7.4345 12200 0.0508 -
7.4650 12250 0.0828 -
7.4954 12300 0.0512 -
7.5259 12350 0.1291 -
7.5564 12400 0.0459 -
7.5868 12450 0.0869 -
7.6173 12500 0.0379 -
7.6478 12550 0.1878 -
7.6782 12600 0.0824 -
7.7087 12650 0.0945 -
7.7392 12700 0.0763 -
7.7697 12750 0.0602 -
7.8001 12800 0.0342 -
7.8306 12850 0.0746 -
7.8611 12900 0.065 -
7.8915 12950 0.0749 -
7.9220 13000 0.0618 -
7.9525 13050 0.0567 -
7.9829 13100 0.069 -
8.0134 13150 0.0487 -
8.0439 13200 0.0578 -
8.0743 13250 0.0876 -
8.1048 13300 0.0942 -
8.1353 13350 0.0774 -
8.1658 13400 0.0557 -
8.1962 13450 0.0872 -
8.2267 13500 0.0652 -
8.2572 13550 0.088 -
8.2876 13600 0.05 -
8.3181 13650 0.0572 -
8.3486 13700 0.053 -
8.3790 13750 0.0745 -
8.4095 13800 0.1119 -
8.4400 13850 0.0909 -
8.4704 13900 0.0374 -
8.5009 13950 0.0515 -
8.5314 14000 0.0827 -
8.5619 14050 0.0925 -
8.5923 14100 0.0793 -
8.6228 14150 0.1123 -
8.6533 14200 0.0387 -
8.6837 14250 0.0898 -
8.7142 14300 0.0627 -
8.7447 14350 0.0863 -
8.7751 14400 0.1257 -
8.8056 14450 0.0553 -
8.8361 14500 0.0664 -
8.8665 14550 0.0641 -
8.8970 14600 0.0577 -
8.9275 14650 0.0672 -
8.9580 14700 0.0776 -
8.9884 14750 0.0951 -
9.0189 14800 0.0721 -
9.0494 14850 0.0609 -
9.0798 14900 0.0821 -
9.1103 14950 0.0477 -
9.1408 15000 0.0974 -
9.1712 15050 0.0534 -
9.2017 15100 0.0673 -
9.2322 15150 0.0549 -
9.2626 15200 0.0833 -
9.2931 15250 0.0957 -
9.3236 15300 0.0601 -
9.3541 15350 0.0702 -
9.3845 15400 0.0852 -
9.4150 15450 0.0576 -
9.4455 15500 0.1006 -
9.4759 15550 0.0697 -
9.5064 15600 0.0778 -
9.5369 15650 0.0778 -
9.5673 15700 0.0844 -
9.5978 15750 0.0724 -
9.6283 15800 0.0988 -
9.6587 15850 0.0699 -
9.6892 15900 0.0772 -
9.7197 15950 0.0757 -
9.7502 16000 0.0671 -
9.7806 16050 0.1057 -
9.8111 16100 0.075 -
9.8416 16150 0.0475 -
9.8720 16200 0.0572 -
9.9025 16250 0.1176 -
9.9330 16300 0.0552 -
9.9634 16350 0.1032 -
9.9939 16400 0.0935 -
0.0006 1 0.0579 -
0.0305 50 0.0231 -
0.0609 100 0.0598 -
0.0914 150 0.0541 -
0.1219 200 0.0534 -
0.1523 250 0.048 -
0.1828 300 0.0912 -
0.2133 350 0.0447 -
0.2438 400 0.0442 -
0.2742 450 0.0579 -
0.0006 1 0.0585 -
0.0305 50 0.0204 -
0.0609 100 0.0653 -
0.0914 150 0.0599 -
0.1219 200 0.0577 -
0.1523 250 0.0468 -
0.1828 300 0.0911 -
0.2133 350 0.0423 -
0.2438 400 0.0405 -
0.2742 450 0.0561 -
0.3047 500 0.0925 -
0.3352 550 0.0771 -
0.3656 600 0.0718 -
0.3961 650 0.0708 -
0.4266 700 0.0673 -
0.4570 750 0.1501 -
0.4875 800 0.0849 -
0.5180 850 0.1132 -
0.5484 900 0.0865 -
0.5789 950 0.0527 -
0.6094 1000 0.0552 -
0.6399 1050 0.0656 -
0.6703 1100 0.0648 -
0.7008 1150 0.0884 -
0.7313 1200 0.0803 -
0.7617 1250 0.083 -
0.7922 1300 0.0863 -
0.8227 1350 0.0731 -
0.8531 1400 0.0504 -
0.8836 1450 0.1039 -
0.9141 1500 0.0817 -
0.9445 1550 0.0655 -
0.9750 1600 0.0987 -
1.0055 1650 0.0905 -
1.0360 1700 0.088 -
1.0664 1750 0.0767 -
1.0969 1800 0.0574 -
1.1274 1850 0.0741 -
1.1578 1900 0.0529 -
1.1883 1950 0.0758 -
1.2188 2000 0.1253 -
1.2492 2050 0.1129 -
1.2797 2100 0.0852 -
1.3102 2150 0.0475 -
1.3406 2200 0.063 -
1.3711 2250 0.0893 -
1.4016 2300 0.0494 -
1.4321 2350 0.1083 -
1.4625 2400 0.0468 -
1.4930 2450 0.0902 -
1.5235 2500 0.0607 -
1.5539 2550 0.0571 -
1.5844 2600 0.0395 -
1.6149 2650 0.1184 -
1.6453 2700 0.0735 -
1.6758 2750 0.06 -
1.7063 2800 0.0646 -
1.7367 2850 0.1055 -
1.7672 2900 0.0592 -
1.7977 2950 0.0522 -
1.8282 3000 0.1025 -
1.8586 3050 0.0615 -
1.8891 3100 0.1491 -
1.9196 3150 0.0796 -
1.9500 3200 0.0768 -
1.9805 3250 0.0601 -
2.0110 3300 0.0543 -
2.0414 3350 0.1128 -
2.0719 3400 0.06 -
2.1024 3450 0.0994 -
2.1328 3500 0.1018 -
2.1633 3550 0.0915 -
2.1938 3600 0.0626 -
2.2243 3650 0.0454 -
2.2547 3700 0.0915 -
2.2852 3750 0.0334 -
2.3157 3800 0.0827 -
2.3461 3850 0.0709 -
2.3766 3900 0.0806 -
2.4071 3950 0.055 -
2.4375 4000 0.0571 -
2.4680 4050 0.1002 -
2.4985 4100 0.0492 -
2.5289 4150 0.1322 -
2.5594 4200 0.0961 -
2.5899 4250 0.0788 -
2.6204 4300 0.0243 -
2.6508 4350 0.0406 -
2.6813 4400 0.0786 -
2.7118 4450 0.0852 -
2.7422 4500 0.0789 -
2.7727 4550 0.0787 -
2.8032 4600 0.1152 -
2.8336 4650 0.0992 -
2.8641 4700 0.0599 -
2.8946 4750 0.0496 -
2.9250 4800 0.0444 -
2.9555 4850 0.0898 -
2.9860 4900 0.0422 -
3.0165 4950 0.0328 -
3.0469 5000 0.0584 -
3.0774 5050 0.052 -
3.1079 5100 0.0485 -
3.1383 5150 0.0542 -
3.1688 5200 0.0854 -
3.1993 5250 0.048 -
3.2297 5300 0.0417 -
3.2602 5350 0.0497 -
3.2907 5400 0.0809 -
3.3211 5450 0.074 -
3.3516 5500 0.0761 -
3.3821 5550 0.0768 -
3.4126 5600 0.0954 -
3.4430 5650 0.0955 -
3.4735 5700 0.0906 -
3.5040 5750 0.0916 -
3.5344 5800 0.0915 -
3.5649 5850 0.107 -
3.5954 5900 0.0327 -
3.6258 5950 0.0534 -
3.6563 6000 0.059 -
3.6868 6050 0.0806 -
3.7172 6100 0.0941 -
3.7477 6150 0.1368 -
3.7782 6200 0.0848 -
3.8087 6250 0.0625 -
3.8391 6300 0.103 -
3.8696 6350 0.0307 -
3.9001 6400 0.0716 -
3.9305 6450 0.0518 -
3.9610 6500 0.0645 -
3.9915 6550 0.0417 -
4.0219 6600 0.0588 -
4.0524 6650 0.047 -
4.0829 6700 0.0951 -
4.1133 6750 0.0689 -
4.1438 6800 0.0731 -
4.1743 6850 0.0785 -
4.2048 6900 0.0411 -
4.2352 6950 0.0568 -
4.2657 7000 0.0688 -
4.2962 7050 0.066 -
4.3266 7100 0.0313 -
4.3571 7150 0.1127 -
4.3876 7200 0.1347 -
4.4180 7250 0.0685 -
4.4485 7300 0.0693 -
4.4790 7350 0.053 -
4.5094 7400 0.1353 -
4.5399 7450 0.1057 -
4.5704 7500 0.0467 -
4.6009 7550 0.1059 -
4.6313 7600 0.0791 -
4.6618 7650 0.0928 -
4.6923 7700 0.0989 -
4.7227 7750 0.0619 -
4.7532 7800 0.0572 -
4.7837 7850 0.06 -
4.8141 7900 0.0711 -
4.8446 7950 0.0595 -
4.8751 8000 0.0675 -
4.9055 8050 0.0487 -
4.9360 8100 0.0569 -
4.9665 8150 0.0637 -
4.9970 8200 0.0634 -
5.0274 8250 0.093 -
5.0579 8300 0.1107 -
5.0884 8350 0.0883 -
5.1188 8400 0.051 -
5.1493 8450 0.1034 -
5.1798 8500 0.0832 -
5.2102 8550 0.0463 -
5.2407 8600 0.0596 -
5.2712 8650 0.078 -
5.3016 8700 0.0686 -
5.3321 8750 0.1053 -
5.3626 8800 0.0684 -
5.3931 8850 0.0684 -
5.4235 8900 0.092 -
5.4540 8950 0.088 -
5.4845 9000 0.0503 -
5.5149 9050 0.0752 -
5.5454 9100 0.0975 -
5.5759 9150 0.1306 -
5.6063 9200 0.1038 -
5.6368 9250 0.0573 -
5.6673 9300 0.0584 -
5.6977 9350 0.0309 -
5.7282 9400 0.1232 -
5.7587 9450 0.0991 -
5.7892 9500 0.1111 -
5.8196 9550 0.0845 -
5.8501 9600 0.0587 -
5.8806 9650 0.0589 -
5.9110 9700 0.0751 -
5.9415 9750 0.0929 -
5.9720 9800 0.0613 -
6.0024 9850 0.0578 -
6.0329 9900 0.0499 -
6.0634 9950 0.0435 -
6.0938 10000 0.0547 -
6.1243 10050 0.0549 -
6.1548 10100 0.0872 -
6.1853 10150 0.0509 -
6.2157 10200 0.0913 -
6.2462 10250 0.0581 -
6.2767 10300 0.0942 -
6.3071 10350 0.0273 -
6.3376 10400 0.0426 -
6.3681 10450 0.0825 -
6.3985 10500 0.0713 -
6.4290 10550 0.0698 -
6.4595 10600 0.0679 -
6.4899 10650 0.0631 -
6.5204 10700 0.0489 -
6.5509 10750 0.0599 -
6.5814 10800 0.033 -
6.6118 10850 0.0401 -
6.6423 10900 0.0782 -
6.6728 10950 0.0512 -
6.7032 11000 0.0939 -
6.7337 11050 0.0523 -
6.7642 11100 0.0784 -
6.7946 11150 0.0898 -
6.8251 11200 0.042 -
6.8556 11250 0.0616 -
6.8860 11300 0.0667 -
6.9165 11350 0.0807 -
6.9470 11400 0.1054 -
6.9775 11450 0.0961 -
7.0079 11500 0.0896 -
7.0384 11550 0.0463 -
7.0689 11600 0.065 -
7.0993 11650 0.0318 -
7.1298 11700 0.0692 -
7.1603 11750 0.1055 -
7.1907 11800 0.0619 -
7.2212 11850 0.1234 -
7.2517 11900 0.0698 -
7.2821 11950 0.0526 -
7.3126 12000 0.0695 -
7.3431 12050 0.051 -
7.3736 12100 0.0759 -
7.4040 12150 0.062 -
7.4345 12200 0.0509 -
7.4650 12250 0.0874 -
7.4954 12300 0.0534 -
7.5259 12350 0.1089 -
7.5564 12400 0.0516 -
7.5868 12450 0.0755 -
7.6173 12500 0.0295 -
7.6478 12550 0.1767 -
7.6782 12600 0.0744 -
7.7087 12650 0.0875 -
7.7392 12700 0.075 -
7.7697 12750 0.0583 -
7.8001 12800 0.0353 -
7.8306 12850 0.0638 -
7.8611 12900 0.045 -
7.8915 12950 0.0647 -
7.9220 13000 0.0593 -
7.9525 13050 0.0515 -
7.9829 13100 0.0705 -
8.0134 13150 0.0521 -
8.0439 13200 0.059 -
8.0743 13250 0.0758 -
8.1048 13300 0.0922 -
8.1353 13350 0.0859 -
8.1658 13400 0.0526 -
8.1962 13450 0.0892 -
8.2267 13500 0.0665 -
8.2572 13550 0.0711 -
8.2876 13600 0.0535 -
8.3181 13650 0.055 -
8.3486 13700 0.0516 -
8.3790 13750 0.0683 -
8.4095 13800 0.0959 -
8.4400 13850 0.0901 -
8.4704 13900 0.041 -
8.5009 13950 0.0464 -
8.5314 14000 0.0726 -
8.5619 14050 0.0959 -
8.5923 14100 0.0739 -
8.6228 14150 0.1083 -
8.6533 14200 0.0374 -
8.6837 14250 0.0767 -
8.7142 14300 0.0626 -
8.7447 14350 0.0847 -
8.7751 14400 0.1211 -
8.8056 14450 0.0457 -
8.8361 14500 0.0705 -
8.8665 14550 0.06 -
8.8970 14600 0.052 -
8.9275 14650 0.0677 -
8.9580 14700 0.0747 -
8.9884 14750 0.0877 -
9.0189 14800 0.0791 -
9.0494 14850 0.0573 -
9.0798 14900 0.0786 -
9.1103 14950 0.0376 -
9.1408 15000 0.0964 -
9.1712 15050 0.0542 -
9.2017 15100 0.0568 -
9.2322 15150 0.0583 -
9.2626 15200 0.0861 -
9.2931 15250 0.0994 -
9.3236 15300 0.0614 -
9.3541 15350 0.0689 -
9.3845 15400 0.0803 -
9.4150 15450 0.0599 -
9.4455 15500 0.0952 -
9.4759 15550 0.0597 -
9.5064 15600 0.0762 -
9.5369 15650 0.0718 -
9.5673 15700 0.0794 -
9.5978 15750 0.0721 -
9.6283 15800 0.0966 -
9.6587 15850 0.0604 -
9.6892 15900 0.0764 -
9.7197 15950 0.0707 -
9.7502 16000 0.0724 -
9.7806 16050 0.1072 -
9.8111 16100 0.0728 -
9.8416 16150 0.0516 -
9.8720 16200 0.0519 -
9.9025 16250 0.1077 -
9.9330 16300 0.0539 -
9.9634 16350 0.095 -
9.9939 16400 0.0957 -
0.0005 1 0.0632 -
0.0244 50 0.058 -
0.0488 100 0.0531 -
0.0731 150 0.0769 -
0.0975 200 0.0445 -
0.1219 250 0.0852 -
0.1463 300 0.058 -
0.1706 350 0.0611 -
0.1950 400 0.0772 -
0.2194 450 0.0806 -
0.2438 500 0.0686 -
0.2682 550 0.0591 -
0.2925 600 0.0838 -
0.3169 650 0.0862 -
0.3413 700 0.0641 -
0.3657 750 0.0628 -
0.3901 800 0.0725 -
0.4144 850 0.0756 -
0.4388 900 0.0686 -
0.4632 950 0.0789 -
0.4876 1000 0.1058 -
0.5119 1050 0.0682 -
0.5363 1100 0.0657 -
0.5607 1150 0.0531 -
0.5851 1200 0.0456 -
0.6095 1250 0.06 -
0.6338 1300 0.0567 -
0.6582 1350 0.0599 -
0.6826 1400 0.0743 -
0.7070 1450 0.0512 -
0.7314 1500 0.0805 -
0.7557 1550 0.1057 -
0.7801 1600 0.0714 -
0.8045 1650 0.0415 -
0.8289 1700 0.0531 -
0.8532 1750 0.0786 -
0.8776 1800 0.0867 -
0.9020 1850 0.0538 -
0.9264 1900 0.0734 -
0.9508 1950 0.0854 -
0.9751 2000 0.0584 -
0.9995 2050 0.0459 -
1.0239 2100 0.071 -
1.0483 2150 0.0716 -
1.0726 2200 0.0768 -
1.0970 2250 0.0778 -
1.1214 2300 0.1028 -
1.1458 2350 0.0598 -
1.1702 2400 0.0462 -
1.1945 2450 0.0494 -
1.2189 2500 0.0554 -
1.2433 2550 0.0645 -
1.2677 2600 0.0533 -
1.2921 2650 0.0404 -
1.3164 2700 0.0837 -
1.3408 2750 0.0832 -
1.3652 2800 0.0946 -
1.3896 2850 0.0807 -
1.4139 2900 0.0695 -
1.4383 2950 0.0436 -
1.4627 3000 0.0605 -
1.4871 3050 0.0918 -
1.5115 3100 0.0755 -
1.5358 3150 0.0745 -
1.5602 3200 0.0429 -
1.5846 3250 0.0651 -
1.6090 3300 0.0567 -
1.6333 3350 0.0679 -
1.6577 3400 0.0904 -
1.6821 3450 0.0671 -
1.7065 3500 0.0626 -
1.7309 3550 0.0439 -
1.7552 3600 0.1035 -
1.7796 3650 0.0818 -
1.8040 3700 0.1284 -
1.8284 3750 0.058 -
1.8528 3800 0.0608 -
1.8771 3850 0.0858 -
1.9015 3900 0.0611 -
1.9259 3950 0.0701 -
1.9503 4000 0.0882 -
1.9746 4050 0.0568 -
1.9990 4100 0.0591 -
2.0234 4150 0.0765 -
2.0478 4200 0.0697 -
2.0722 4250 0.0714 -
2.0965 4300 0.0438 -
2.1209 4350 0.0661 -
2.1453 4400 0.0626 -
2.1697 4450 0.0666 -
2.1941 4500 0.0583 -
2.2184 4550 0.088 -
2.2428 4600 0.0768 -
2.2672 4650 0.0528 -
2.2916 4700 0.0869 -
2.3159 4750 0.1001 -
2.3403 4800 0.0731 -
2.3647 4850 0.0858 -
2.3891 4900 0.0611 -
2.4135 4950 0.058 -
2.4378 5000 0.0725 -
2.4622 5050 0.0893 -
2.4866 5100 0.0649 -
2.5110 5150 0.0561 -
2.5353 5200 0.0569 -
2.5597 5250 0.0375 -
2.5841 5300 0.0925 -
2.6085 5350 0.0842 -
2.6329 5400 0.083 -
2.6572 5450 0.0713 -
2.6816 5500 0.1082 -
2.7060 5550 0.0718 -
2.7304 5600 0.0755 -
2.7548 5650 0.0863 -
2.7791 5700 0.081 -
2.8035 5750 0.0732 -
2.8279 5800 0.0769 -
2.8523 5850 0.0846 -
2.8766 5900 0.0794 -
2.9010 5950 0.0518 -
2.9254 6000 0.0495 -
2.9498 6050 0.0696 -
2.9742 6100 0.081 -
2.9985 6150 0.0505 -
3.0229 6200 0.0703 -
3.0473 6250 0.0738 -
3.0717 6300 0.07 -
3.0961 6350 0.0663 -
3.1204 6400 0.069 -
3.1448 6450 0.0665 -
3.1692 6500 0.0409 -
3.1936 6550 0.075 -
3.2179 6600 0.0519 -
3.2423 6650 0.0836 -
3.2667 6700 0.0631 -
3.2911 6750 0.0926 -
3.3155 6800 0.0443 -
3.3398 6850 0.0587 -
3.3642 6900 0.0654 -
3.3886 6950 0.0776 -
3.4130 7000 0.0563 -
3.4373 7050 0.0501 -
3.4617 7100 0.0549 -
3.4861 7150 0.0497 -
3.5105 7200 0.0782 -
3.5349 7250 0.0734 -
3.5592 7300 0.0704 -
3.5836 7350 0.062 -
3.6080 7400 0.0698 -
3.6324 7450 0.09 -
3.6568 7500 0.0585 -
3.6811 7550 0.0649 -
3.7055 7600 0.0685 -
3.7299 7650 0.0671 -
3.7543 7700 0.0576 -
3.7786 7750 0.0378 -
3.8030 7800 0.0679 -
3.8274 7850 0.0665 -
3.8518 7900 0.0701 -
3.8762 7950 0.0943 -
3.9005 8000 0.1062 -
3.9249 8050 0.0725 -
3.9493 8100 0.0595 -
3.9737 8150 0.0738 -
3.9980 8200 0.0793 -
4.0224 8250 0.0851 -
4.0468 8300 0.121 -
4.0712 8350 0.0919 -
4.0956 8400 0.0629 -
4.1199 8450 0.0518 -
4.1443 8500 0.0595 -
4.1687 8550 0.0684 -
4.1931 8600 0.0497 -
4.2175 8650 0.0375 -
4.2418 8700 0.0819 -
4.2662 8750 0.0781 -
4.2906 8800 0.0515 -
4.3150 8850 0.0756 -
4.3393 8900 0.0547 -
4.3637 8950 0.0875 -
4.3881 9000 0.0571 -
4.4125 9050 0.046 -
4.4369 9100 0.067 -
4.4612 9150 0.0646 -
4.4856 9200 0.0575 -
4.5100 9250 0.1137 -
4.5344 9300 0.0768 -
4.5588 9350 0.0542 -
4.5831 9400 0.0743 -
4.6075 9450 0.072 -
4.6319 9500 0.0606 -
4.6563 9550 0.0777 -
4.6806 9600 0.0435 -
4.7050 9650 0.065 -
4.7294 9700 0.0601 -
4.7538 9750 0.0579 -
4.7782 9800 0.0661 -
4.8025 9850 0.0569 -
4.8269 9900 0.0995 -
4.8513 9950 0.056 -
4.8757 10000 0.0705 -
4.9000 10050 0.066 -
4.9244 10100 0.0489 -
4.9488 10150 0.0709 -
4.9732 10200 0.0545 -
4.9976 10250 0.0886 -
5.0219 10300 0.0835 -
5.0463 10350 0.0635 -
5.0707 10400 0.066 -
5.0951 10450 0.0678 -
5.1195 10500 0.1006 -
5.1438 10550 0.0526 -
5.1682 10600 0.0691 -
5.1926 10650 0.0833 -
5.2170 10700 0.0512 -
5.2413 10750 0.0469 -
5.2657 10800 0.0837 -
5.2901 10850 0.0646 -
5.3145 10900 0.0843 -
5.3389 10950 0.0627 -
5.3632 11000 0.0503 -
5.3876 11050 0.0499 -
5.4120 11100 0.0823 -
5.4364 11150 0.0759 -
5.4608 11200 0.0436 -
5.4851 11250 0.0864 -
5.5095 11300 0.0792 -
5.5339 11350 0.0876 -
5.5583 11400 0.0535 -
5.5826 11450 0.0543 -
5.6070 11500 0.0549 -
5.6314 11550 0.0564 -
5.6558 11600 0.0454 -
5.6802 11650 0.061 -
5.7045 11700 0.0573 -
5.7289 11750 0.0655 -
5.7533 11800 0.0821 -
5.7777 11850 0.0608 -
5.8020 11900 0.0765 -
5.8264 11950 0.0807 -
5.8508 12000 0.0499 -
5.8752 12050 0.0862 -
5.8996 12100 0.0928 -
5.9239 12150 0.08 -
5.9483 12200 0.0553 -
5.9727 12250 0.0736 -
5.9971 12300 0.0576 -
6.0215 12350 0.0945 -
6.0458 12400 0.0669 -
6.0702 12450 0.0492 -
6.0946 12500 0.0795 -
6.1190 12550 0.0935 -
6.1433 12600 0.0554 -
6.1677 12650 0.0643 -
6.1921 12700 0.0715 -
6.2165 12750 0.0803 -
6.2409 12800 0.0745 -
6.2652 12850 0.0626 -
6.2896 12900 0.0539 -
6.3140 12950 0.0719 -
6.3384 13000 0.0465 -
6.3627 13050 0.0735 -
6.3871 13100 0.0637 -
6.4115 13150 0.0437 -
6.4359 13200 0.0744 -
6.4603 13250 0.072 -
6.4846 13300 0.0726 -
6.5090 13350 0.0721 -
6.5334 13400 0.0521 -
6.5578 13450 0.0575 -
6.5822 13500 0.0466 -
6.6065 13550 0.0572 -
6.6309 13600 0.0909 -
6.6553 13650 0.0524 -
6.6797 13700 0.0678 -
6.7040 13750 0.0548 -
6.7284 13800 0.0587 -
6.7528 13850 0.0575 -
6.7772 13900 0.0677 -
6.8016 13950 0.0452 -
6.8259 14000 0.0598 -
6.8503 14050 0.0642 -
6.8747 14100 0.0679 -
6.8991 14150 0.0371 -
6.9235 14200 0.0482 -
6.9478 14250 0.0497 -
6.9722 14300 0.0512 -
6.9966 14350 0.1054 -
7.0210 14400 0.0712 -
7.0453 14450 0.0646 -
7.0697 14500 0.1106 -
7.0941 14550 0.0642 -
7.1185 14600 0.0786 -
7.1429 14650 0.0581 -
7.1672 14700 0.0656 -
7.1916 14750 0.0756 -
7.2160 14800 0.0476 -
7.2404 14850 0.0817 -
7.2647 14900 0.0929 -
7.2891 14950 0.0547 -
7.3135 15000 0.0733 -
7.3379 15050 0.0762 -
7.3623 15100 0.0628 -
7.3866 15150 0.0601 -
7.4110 15200 0.0484 -
7.4354 15250 0.0551 -
7.4598 15300 0.0505 -
7.4842 15350 0.0437 -
7.5085 15400 0.0636 -
7.5329 15450 0.0624 -
7.5573 15500 0.0716 -
7.5817 15550 0.0508 -
7.6060 15600 0.0704 -
7.6304 15650 0.0604 -
7.6548 15700 0.0641 -
7.6792 15750 0.0653 -
7.7036 15800 0.0598 -
7.7279 15850 0.0829 -
7.7523 15900 0.0593 -
7.7767 15950 0.0631 -
7.8011 16000 0.0819 -
7.8255 16050 0.0776 -
7.8498 16100 0.0603 -
7.8742 16150 0.0499 -
7.8986 16200 0.0637 -
7.9230 16250 0.0639 -
7.9473 16300 0.0559 -
7.9717 16350 0.0621 -
7.9961 16400 0.0639 -
8.0205 16450 0.1066 -
8.0449 16500 0.0686 -
8.0692 16550 0.063 -
8.0936 16600 0.0789 -
8.1180 16650 0.0458 -
8.1424 16700 0.0622 -
8.1667 16750 0.0748 -
8.1911 16800 0.0355 -
8.2155 16850 0.0648 -
8.2399 16900 0.0618 -
8.2643 16950 0.0908 -
8.2886 17000 0.0544 -
8.3130 17050 0.0888 -
8.3374 17100 0.0531 -
8.3618 17150 0.0905 -
8.3862 17200 0.0811 -
8.4105 17250 0.0643 -
8.4349 17300 0.0775 -
8.4593 17350 0.0518 -
8.4837 17400 0.0683 -
8.5080 17450 0.0946 -
8.5324 17500 0.0642 -
8.5568 17550 0.0654 -
8.5812 17600 0.0682 -
8.6056 17650 0.0467 -
8.6299 17700 0.0811 -
8.6543 17750 0.077 -
8.6787 17800 0.0376 -
8.7031 17850 0.1028 -
8.7275 17900 0.0833 -
8.7518 17950 0.0591 -
8.7762 18000 0.0613 -
8.8006 18050 0.0633 -
8.8250 18100 0.0774 -
8.8493 18150 0.0609 -
8.8737 18200 0.0732 -
8.8981 18250 0.085 -
8.9225 18300 0.0762 -
8.9469 18350 0.0518 -
8.9712 18400 0.0806 -
8.9956 18450 0.0467 -
9.0200 18500 0.0467 -
9.0444 18550 0.0836 -
9.0687 18600 0.0452 -
9.0931 18650 0.0503 -
9.1175 18700 0.0624 -
9.1419 18750 0.0605 -
9.1663 18800 0.0829 -
9.1906 18850 0.0497 -
9.2150 18900 0.0575 -
9.2394 18950 0.0645 -
9.2638 19000 0.0956 -
9.2882 19050 0.045 -
9.3125 19100 0.0768 -
9.3369 19150 0.0793 -
9.3613 19200 0.0839 -
9.3857 19250 0.0518 -
9.4100 19300 0.0445 -
9.4344 19350 0.055 -
9.4588 19400 0.0649 -
9.4832 19450 0.0673 -
9.5076 19500 0.0492 -
9.5319 19550 0.0733 -
9.5563 19600 0.0879 -
9.5807 19650 0.0672 -
9.6051 19700 0.0612 -
9.6294 19750 0.0661 -
9.6538 19800 0.066 -
9.6782 19850 0.0661 -
9.7026 19900 0.0738 -
9.7270 19950 0.0728 -
9.7513 20000 0.0595 -
9.7757 20050 0.0601 -
9.8001 20100 0.0441 -
9.8245 20150 0.0768 -
9.8489 20200 0.0636 -
9.8732 20250 0.0796 -
9.8976 20300 0.0584 -
9.9220 20350 0.0801 -
9.9464 20400 0.0569 -
9.9707 20450 0.0552 -
9.9951 20500 0.0684 -

Framework Versions

  • Python: 3.10.12
  • SetFit: 1.0.3
  • Sentence Transformers: 2.2.2
  • Transformers: 4.35.2
  • PyTorch: 2.1.0+cu121
  • Datasets: 2.16.1
  • Tokenizers: 0.15.0

Citation

BibTeX 

@article{https://doi.org/10.48550/arxiv.2209.11055,
    doi = {10.48550/ARXIV.2209.11055},
    url = {https://arxiv.org/abs/2209.11055},
    author = {Tunstall, Lewis and Reimers, Nils and Jo, Unso Eun Seo and Bates, Luke and Korat, Daniel and Wasserblat, Moshe and Pereg, Oren},
    keywords = {Computation and Language (cs.CL), FOS: Computer and information sciences, FOS: Computer and information sciences},
    title = {Efficient Few-Shot Learning Without Prompts},
    publisher = {arXiv},
    year = {2022},
    copyright = {Creative Commons Attribution 4.0 International}
}