wav2vec2-base-ks-finetuning / trainer_state.json
Jungwoo4021's picture
End of training
d4a571a
{
"best_metric": 0.981318034716093,
"best_model_checkpoint": "wav2vec2-base-ks-finetuning/checkpoint-400",
"epoch": 10.0,
"global_step": 500,
"is_hyper_param_search": false,
"is_local_process_zero": true,
"is_world_process_zero": true,
"log_history": [
{
"epoch": 0.2,
"learning_rate": 6e-06,
"loss": 2.4836,
"step": 10
},
{
"epoch": 0.4,
"learning_rate": 1.2e-05,
"loss": 2.3739,
"step": 20
},
{
"epoch": 0.6,
"learning_rate": 1.8e-05,
"loss": 2.1261,
"step": 30
},
{
"epoch": 0.8,
"learning_rate": 2.4e-05,
"loss": 1.8393,
"step": 40
},
{
"epoch": 1.0,
"learning_rate": 3e-05,
"loss": 1.6773,
"step": 50
},
{
"epoch": 1.0,
"eval_accuracy": 0.6209179170344219,
"eval_loss": 1.6218241453170776,
"eval_runtime": 22.422,
"eval_samples_per_second": 303.185,
"eval_steps_per_second": 1.204,
"step": 50
},
{
"epoch": 1.2,
"learning_rate": 2.9333333333333333e-05,
"loss": 1.582,
"step": 60
},
{
"epoch": 1.4,
"learning_rate": 2.8666666666666668e-05,
"loss": 1.5334,
"step": 70
},
{
"epoch": 1.6,
"learning_rate": 2.8e-05,
"loss": 1.5019,
"step": 80
},
{
"epoch": 1.8,
"learning_rate": 2.7333333333333335e-05,
"loss": 1.4931,
"step": 90
},
{
"epoch": 2.0,
"learning_rate": 2.6666666666666667e-05,
"loss": 1.4707,
"step": 100
},
{
"epoch": 2.0,
"eval_accuracy": 0.6209179170344219,
"eval_loss": 1.440006971359253,
"eval_runtime": 22.2882,
"eval_samples_per_second": 305.005,
"eval_steps_per_second": 1.211,
"step": 100
},
{
"epoch": 2.2,
"learning_rate": 2.6000000000000002e-05,
"loss": 1.4296,
"step": 110
},
{
"epoch": 2.4,
"learning_rate": 2.5333333333333334e-05,
"loss": 1.3446,
"step": 120
},
{
"epoch": 2.6,
"learning_rate": 2.4666666666666665e-05,
"loss": 1.2595,
"step": 130
},
{
"epoch": 2.8,
"learning_rate": 2.4e-05,
"loss": 1.2254,
"step": 140
},
{
"epoch": 3.0,
"learning_rate": 2.3333333333333336e-05,
"loss": 1.1387,
"step": 150
},
{
"epoch": 3.0,
"eval_accuracy": 0.6598999705795823,
"eval_loss": 1.0469876527786255,
"eval_runtime": 22.2551,
"eval_samples_per_second": 305.458,
"eval_steps_per_second": 1.213,
"step": 150
},
{
"epoch": 3.2,
"learning_rate": 2.2666666666666668e-05,
"loss": 1.0695,
"step": 160
},
{
"epoch": 3.4,
"learning_rate": 2.2e-05,
"loss": 0.9934,
"step": 170
},
{
"epoch": 3.6,
"learning_rate": 2.1333333333333335e-05,
"loss": 0.9104,
"step": 180
},
{
"epoch": 3.8,
"learning_rate": 2.0666666666666666e-05,
"loss": 0.8624,
"step": 190
},
{
"epoch": 4.0,
"learning_rate": 1.9999999999999998e-05,
"loss": 0.7909,
"step": 200
},
{
"epoch": 4.0,
"eval_accuracy": 0.8902618417181524,
"eval_loss": 0.6996719837188721,
"eval_runtime": 22.1415,
"eval_samples_per_second": 307.025,
"eval_steps_per_second": 1.219,
"step": 200
},
{
"epoch": 4.2,
"learning_rate": 1.9333333333333333e-05,
"loss": 0.7493,
"step": 210
},
{
"epoch": 4.4,
"learning_rate": 1.866666666666667e-05,
"loss": 0.6791,
"step": 220
},
{
"epoch": 4.6,
"learning_rate": 1.8e-05,
"loss": 0.6331,
"step": 230
},
{
"epoch": 4.8,
"learning_rate": 1.7333333333333332e-05,
"loss": 0.6037,
"step": 240
},
{
"epoch": 5.0,
"learning_rate": 1.6666666666666667e-05,
"loss": 0.5488,
"step": 250
},
{
"epoch": 5.0,
"eval_accuracy": 0.9639599882318329,
"eval_loss": 0.45673397183418274,
"eval_runtime": 22.1789,
"eval_samples_per_second": 306.507,
"eval_steps_per_second": 1.217,
"step": 250
},
{
"epoch": 5.2,
"learning_rate": 1.6e-05,
"loss": 0.5281,
"step": 260
},
{
"epoch": 5.4,
"learning_rate": 1.533333333333333e-05,
"loss": 0.4952,
"step": 270
},
{
"epoch": 5.6,
"learning_rate": 1.4666666666666666e-05,
"loss": 0.4839,
"step": 280
},
{
"epoch": 5.8,
"learning_rate": 1.4e-05,
"loss": 0.4483,
"step": 290
},
{
"epoch": 6.0,
"learning_rate": 1.3333333333333333e-05,
"loss": 0.4195,
"step": 300
},
{
"epoch": 6.0,
"eval_accuracy": 0.9754339511621065,
"eval_loss": 0.32884663343429565,
"eval_runtime": 22.1813,
"eval_samples_per_second": 306.475,
"eval_steps_per_second": 1.217,
"step": 300
},
{
"epoch": 6.2,
"learning_rate": 1.2666666666666667e-05,
"loss": 0.4157,
"step": 310
},
{
"epoch": 6.4,
"learning_rate": 1.2e-05,
"loss": 0.3874,
"step": 320
},
{
"epoch": 6.6,
"learning_rate": 1.1333333333333334e-05,
"loss": 0.3758,
"step": 330
},
{
"epoch": 6.8,
"learning_rate": 1.0666666666666667e-05,
"loss": 0.3628,
"step": 340
},
{
"epoch": 7.0,
"learning_rate": 9.999999999999999e-06,
"loss": 0.3445,
"step": 350
},
{
"epoch": 7.0,
"eval_accuracy": 0.980876728449544,
"eval_loss": 0.2597818374633789,
"eval_runtime": 22.1797,
"eval_samples_per_second": 306.497,
"eval_steps_per_second": 1.217,
"step": 350
},
{
"epoch": 7.2,
"learning_rate": 9.333333333333334e-06,
"loss": 0.3363,
"step": 360
},
{
"epoch": 7.4,
"learning_rate": 8.666666666666666e-06,
"loss": 0.3315,
"step": 370
},
{
"epoch": 7.6,
"learning_rate": 8e-06,
"loss": 0.3185,
"step": 380
},
{
"epoch": 7.8,
"learning_rate": 7.333333333333333e-06,
"loss": 0.325,
"step": 390
},
{
"epoch": 8.0,
"learning_rate": 6.666666666666667e-06,
"loss": 0.3107,
"step": 400
},
{
"epoch": 8.0,
"eval_accuracy": 0.981318034716093,
"eval_loss": 0.22612661123275757,
"eval_runtime": 22.2906,
"eval_samples_per_second": 304.972,
"eval_steps_per_second": 1.211,
"step": 400
},
{
"epoch": 8.2,
"learning_rate": 6e-06,
"loss": 0.2991,
"step": 410
},
{
"epoch": 8.4,
"learning_rate": 5.333333333333334e-06,
"loss": 0.3075,
"step": 420
},
{
"epoch": 8.6,
"learning_rate": 4.666666666666667e-06,
"loss": 0.299,
"step": 430
},
{
"epoch": 8.8,
"learning_rate": 4e-06,
"loss": 0.2888,
"step": 440
},
{
"epoch": 9.0,
"learning_rate": 3.3333333333333333e-06,
"loss": 0.2781,
"step": 450
},
{
"epoch": 9.0,
"eval_accuracy": 0.9810238305383936,
"eval_loss": 0.21042166650295258,
"eval_runtime": 22.2155,
"eval_samples_per_second": 306.002,
"eval_steps_per_second": 1.215,
"step": 450
},
{
"epoch": 9.2,
"learning_rate": 2.666666666666667e-06,
"loss": 0.2925,
"step": 460
},
{
"epoch": 9.4,
"learning_rate": 2e-06,
"loss": 0.2768,
"step": 470
},
{
"epoch": 9.6,
"learning_rate": 1.3333333333333334e-06,
"loss": 0.2707,
"step": 480
},
{
"epoch": 9.8,
"learning_rate": 6.666666666666667e-07,
"loss": 0.2862,
"step": 490
},
{
"epoch": 10.0,
"learning_rate": 0.0,
"loss": 0.2729,
"step": 500
},
{
"epoch": 10.0,
"eval_accuracy": 0.981318034716093,
"eval_loss": 0.20499803125858307,
"eval_runtime": 22.3358,
"eval_samples_per_second": 304.355,
"eval_steps_per_second": 1.209,
"step": 500
},
{
"epoch": 10.0,
"step": 500,
"total_flos": 4.6387626201984e+18,
"train_loss": 0.8214968571662903,
"train_runtime": 30319.4082,
"train_samples_per_second": 16.852,
"train_steps_per_second": 0.016
}
],
"max_steps": 500,
"num_train_epochs": 10,
"total_flos": 4.6387626201984e+18,
"trial_name": null,
"trial_params": null
}