| 0%| | 0/24416 [00:00<?, ?it/s] | |
| 70%|███████████████████████████████████████████████████████████████████████████████████████▌ | 17100/24416 [3:37:53<9:39:33, 4.75s/it] | |
| 70%|████████████████████████████████████████████████████████████████████████████████████████ | 17199/24416 [3:50:24<9:49:13, 4.90s/it] | |
| 71%|████████████████████████████████████████████████████████████████████████████████████████▌ | 17300/24416 [4:03:04<9:29:31, 4.80s/it] | |
| 71%|█████████████████████████████████████████████████████████████████████████████████████████ | 17399/24416 [4:15:37<9:28:18, 4.86s/it] | |
| 72%|████████████████████████████████████████████████████████████████████████████████████████▊ | 17499/24416 [4:28:42<19:12:46, 10.00s/it] | |
| ***** Running Evaluation *****███████████████████████████████████████████████████████████████▉ | 17500/24416 [4:28:52<18:57:50, 9.87s/it] | |
| Num examples = 16021 | |
| Batch size = 16 | |
| 100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 1002/1002 [12:04<00:00, 2.35it/s] | |
| Saving model checkpoint to ./checkpoint-17500 | |
| Configuration saved in ./checkpoint-17500/config.json████████████████████████████████████████▉ | 17500/24416 [4:41:09<18:57:50, 9.87s/it] | |
| Model weights saved in ./checkpoint-17500/pytorch_model.bin | |
| Configuration saved in ./checkpoint-17500/preprocessor_config.json | |
| Configuration saved in ./preprocessor_config.json | |
| Deleting older checkpoint [checkpoint-17000] due to args.save_total_limit | |
| 72%|█████████████████████████████████████████████████████████████████████████████████████████▍ | 17600/24416 [4:55:36<18:46:06, 9.91s/it] | |
| 72%|█████████████████████████████████████████████████████████████████████████████████████████▉ | 17699/24416 [5:08:02<18:44:30, 10.04s/it] | |
| 73%|██████████████████████████████████████████████████████████████████████████████████████████▍ | 17799/24416 [5:20:38<18:43:32, 10.19s/it] | |
| 73%|██████████████████████████████████████████████████████████████████████████████████████████▉ | 17900/24416 [5:33:22<17:48:52, 9.84s/it] | |
| 74%|███████████████████████████████████████████████████████████████████████████████████████████▍ | 17999/24416 [5:45:47<17:40:59, 9.92s/it] | |
| ***** Running Evaluation *****██████████████████████████████████████████████████████████████████▍ | 18000/24416 [5:45:56<17:33:20, 9.85s/it] | |
| Num examples = 16021 | |
| Batch size = 16 | |
| 100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 1002/1002 [11:58<00:00, 2.33it/s] | |
| Saving model checkpoint to ./checkpoint-18000 | |
| Configuration saved in ./checkpoint-18000/config.json███████████████████████████████████████████▍ | 18000/24416 [5:58:08<17:33:20, 9.85s/it] | |
| Model weights saved in ./checkpoint-18000/pytorch_model.bin | |
| Configuration saved in ./checkpoint-18000/preprocessor_config.json | |