{ "best_metric": null, "best_model_checkpoint": null, "epoch": 3.0, "eval_steps": 500, "global_step": 7500, "is_hyper_param_search": false, "is_local_process_zero": true, "is_world_process_zero": true, "log_history": [ { "epoch": 0.0, "learning_rate": 4.993333333333334e-05, "loss": 1.8403, "step": 10 }, { "epoch": 0.01, "learning_rate": 4.986666666666667e-05, "loss": 1.8483, "step": 20 }, { "epoch": 0.01, "learning_rate": 4.9800000000000004e-05, "loss": 1.7996, "step": 30 }, { "epoch": 0.02, "learning_rate": 4.973333333333334e-05, "loss": 1.851, "step": 40 }, { "epoch": 0.02, "learning_rate": 4.966666666666667e-05, "loss": 1.8097, "step": 50 }, { "epoch": 0.02, "learning_rate": 4.96e-05, "loss": 1.7741, "step": 60 }, { "epoch": 0.03, "learning_rate": 4.9533333333333336e-05, "loss": 1.8133, "step": 70 }, { "epoch": 0.03, "learning_rate": 4.9466666666666665e-05, "loss": 1.7702, "step": 80 }, { "epoch": 0.04, "learning_rate": 4.94e-05, "loss": 1.7981, "step": 90 }, { "epoch": 0.04, "learning_rate": 4.933333333333334e-05, "loss": 1.7578, "step": 100 }, { "epoch": 0.04, "learning_rate": 4.926666666666667e-05, "loss": 1.7957, "step": 110 }, { "epoch": 0.05, "learning_rate": 4.92e-05, "loss": 1.7931, "step": 120 }, { "epoch": 0.05, "learning_rate": 4.913333333333334e-05, "loss": 1.725, "step": 130 }, { "epoch": 0.06, "learning_rate": 4.906666666666667e-05, "loss": 1.7799, "step": 140 }, { "epoch": 0.06, "learning_rate": 4.9e-05, "loss": 1.7485, "step": 150 }, { "epoch": 0.06, "learning_rate": 4.8933333333333335e-05, "loss": 1.7766, "step": 160 }, { "epoch": 0.07, "learning_rate": 4.886666666666667e-05, "loss": 1.7928, "step": 170 }, { "epoch": 0.07, "learning_rate": 4.88e-05, "loss": 1.7415, "step": 180 }, { "epoch": 0.08, "learning_rate": 4.8733333333333337e-05, "loss": 1.7074, "step": 190 }, { "epoch": 0.08, "learning_rate": 4.866666666666667e-05, "loss": 1.7832, "step": 200 }, { "epoch": 0.08, "learning_rate": 4.86e-05, "loss": 1.7905, "step": 210 }, { "epoch": 0.09, "learning_rate": 4.853333333333334e-05, "loss": 1.7413, "step": 220 }, { "epoch": 0.09, "learning_rate": 4.8466666666666675e-05, "loss": 1.7557, "step": 230 }, { "epoch": 0.1, "learning_rate": 4.8400000000000004e-05, "loss": 1.7305, "step": 240 }, { "epoch": 0.1, "learning_rate": 4.8333333333333334e-05, "loss": 1.7794, "step": 250 }, { "epoch": 0.1, "learning_rate": 4.826666666666667e-05, "loss": 1.714, "step": 260 }, { "epoch": 0.11, "learning_rate": 4.82e-05, "loss": 1.7735, "step": 270 }, { "epoch": 0.11, "learning_rate": 4.8133333333333336e-05, "loss": 1.7581, "step": 280 }, { "epoch": 0.12, "learning_rate": 4.806666666666667e-05, "loss": 1.8081, "step": 290 }, { "epoch": 0.12, "learning_rate": 4.8e-05, "loss": 1.829, "step": 300 }, { "epoch": 0.12, "learning_rate": 4.793333333333334e-05, "loss": 1.7517, "step": 310 }, { "epoch": 0.13, "learning_rate": 4.7866666666666674e-05, "loss": 1.748, "step": 320 }, { "epoch": 0.13, "learning_rate": 4.78e-05, "loss": 1.7234, "step": 330 }, { "epoch": 0.14, "learning_rate": 4.773333333333333e-05, "loss": 1.7331, "step": 340 }, { "epoch": 0.14, "learning_rate": 4.766666666666667e-05, "loss": 1.7249, "step": 350 }, { "epoch": 0.14, "learning_rate": 4.76e-05, "loss": 1.7496, "step": 360 }, { "epoch": 0.15, "learning_rate": 4.7533333333333334e-05, "loss": 1.7553, "step": 370 }, { "epoch": 0.15, "learning_rate": 4.746666666666667e-05, "loss": 1.774, "step": 380 }, { "epoch": 0.16, "learning_rate": 4.74e-05, "loss": 1.7586, "step": 390 }, { "epoch": 0.16, "learning_rate": 4.7333333333333336e-05, "loss": 1.7573, "step": 400 }, { "epoch": 0.16, "learning_rate": 4.726666666666667e-05, "loss": 1.7784, "step": 410 }, { "epoch": 0.17, "learning_rate": 4.72e-05, "loss": 1.7639, "step": 420 }, { "epoch": 0.17, "learning_rate": 4.713333333333333e-05, "loss": 1.7655, "step": 430 }, { "epoch": 0.18, "learning_rate": 4.706666666666667e-05, "loss": 1.7478, "step": 440 }, { "epoch": 0.18, "learning_rate": 4.7e-05, "loss": 1.7327, "step": 450 }, { "epoch": 0.18, "learning_rate": 4.6933333333333333e-05, "loss": 1.7432, "step": 460 }, { "epoch": 0.19, "learning_rate": 4.686666666666667e-05, "loss": 1.7454, "step": 470 }, { "epoch": 0.19, "learning_rate": 4.6800000000000006e-05, "loss": 1.7686, "step": 480 }, { "epoch": 0.2, "learning_rate": 4.6733333333333335e-05, "loss": 1.7661, "step": 490 }, { "epoch": 0.2, "learning_rate": 4.666666666666667e-05, "loss": 1.7503, "step": 500 }, { "epoch": 0.2, "learning_rate": 4.660000000000001e-05, "loss": 1.7555, "step": 510 }, { "epoch": 0.21, "learning_rate": 4.653333333333334e-05, "loss": 1.7655, "step": 520 }, { "epoch": 0.21, "learning_rate": 4.646666666666667e-05, "loss": 1.7842, "step": 530 }, { "epoch": 0.22, "learning_rate": 4.64e-05, "loss": 1.7529, "step": 540 }, { "epoch": 0.22, "learning_rate": 4.633333333333333e-05, "loss": 1.7584, "step": 550 }, { "epoch": 0.22, "learning_rate": 4.626666666666667e-05, "loss": 1.7452, "step": 560 }, { "epoch": 0.23, "learning_rate": 4.6200000000000005e-05, "loss": 1.7815, "step": 570 }, { "epoch": 0.23, "learning_rate": 4.6133333333333334e-05, "loss": 1.7536, "step": 580 }, { "epoch": 0.24, "learning_rate": 4.606666666666667e-05, "loss": 1.7609, "step": 590 }, { "epoch": 0.24, "learning_rate": 4.600000000000001e-05, "loss": 1.764, "step": 600 }, { "epoch": 0.24, "learning_rate": 4.5933333333333336e-05, "loss": 1.7502, "step": 610 }, { "epoch": 0.25, "learning_rate": 4.5866666666666666e-05, "loss": 1.7395, "step": 620 }, { "epoch": 0.25, "learning_rate": 4.58e-05, "loss": 1.7582, "step": 630 }, { "epoch": 0.26, "learning_rate": 4.573333333333333e-05, "loss": 1.7445, "step": 640 }, { "epoch": 0.26, "learning_rate": 4.566666666666667e-05, "loss": 1.746, "step": 650 }, { "epoch": 0.26, "learning_rate": 4.5600000000000004e-05, "loss": 1.7556, "step": 660 }, { "epoch": 0.27, "learning_rate": 4.553333333333333e-05, "loss": 1.7345, "step": 670 }, { "epoch": 0.27, "learning_rate": 4.546666666666667e-05, "loss": 1.7249, "step": 680 }, { "epoch": 0.28, "learning_rate": 4.5400000000000006e-05, "loss": 1.798, "step": 690 }, { "epoch": 0.28, "learning_rate": 4.5333333333333335e-05, "loss": 1.7542, "step": 700 }, { "epoch": 0.28, "learning_rate": 4.526666666666667e-05, "loss": 1.7381, "step": 710 }, { "epoch": 0.29, "learning_rate": 4.52e-05, "loss": 1.7502, "step": 720 }, { "epoch": 0.29, "learning_rate": 4.513333333333333e-05, "loss": 1.7287, "step": 730 }, { "epoch": 0.3, "learning_rate": 4.5066666666666667e-05, "loss": 1.772, "step": 740 }, { "epoch": 0.3, "learning_rate": 4.5e-05, "loss": 1.7398, "step": 750 }, { "epoch": 0.3, "learning_rate": 4.493333333333333e-05, "loss": 1.7383, "step": 760 }, { "epoch": 0.31, "learning_rate": 4.486666666666667e-05, "loss": 1.7517, "step": 770 }, { "epoch": 0.31, "learning_rate": 4.4800000000000005e-05, "loss": 1.7238, "step": 780 }, { "epoch": 0.32, "learning_rate": 4.473333333333334e-05, "loss": 1.7242, "step": 790 }, { "epoch": 0.32, "learning_rate": 4.466666666666667e-05, "loss": 1.7499, "step": 800 }, { "epoch": 0.32, "learning_rate": 4.46e-05, "loss": 1.7569, "step": 810 }, { "epoch": 0.33, "learning_rate": 4.4533333333333336e-05, "loss": 1.7168, "step": 820 }, { "epoch": 0.33, "learning_rate": 4.4466666666666666e-05, "loss": 1.7709, "step": 830 }, { "epoch": 0.34, "learning_rate": 4.44e-05, "loss": 1.725, "step": 840 }, { "epoch": 0.34, "learning_rate": 4.433333333333334e-05, "loss": 1.7542, "step": 850 }, { "epoch": 0.34, "learning_rate": 4.426666666666667e-05, "loss": 1.7469, "step": 860 }, { "epoch": 0.35, "learning_rate": 4.4200000000000004e-05, "loss": 1.7129, "step": 870 }, { "epoch": 0.35, "learning_rate": 4.413333333333334e-05, "loss": 1.7471, "step": 880 }, { "epoch": 0.36, "learning_rate": 4.406666666666667e-05, "loss": 1.7309, "step": 890 }, { "epoch": 0.36, "learning_rate": 4.4000000000000006e-05, "loss": 1.7578, "step": 900 }, { "epoch": 0.36, "learning_rate": 4.3933333333333335e-05, "loss": 1.7537, "step": 910 }, { "epoch": 0.37, "learning_rate": 4.3866666666666665e-05, "loss": 1.7541, "step": 920 }, { "epoch": 0.37, "learning_rate": 4.38e-05, "loss": 1.729, "step": 930 }, { "epoch": 0.38, "learning_rate": 4.373333333333334e-05, "loss": 1.7653, "step": 940 }, { "epoch": 0.38, "learning_rate": 4.3666666666666666e-05, "loss": 1.786, "step": 950 }, { "epoch": 0.38, "learning_rate": 4.36e-05, "loss": 1.7329, "step": 960 }, { "epoch": 0.39, "learning_rate": 4.353333333333334e-05, "loss": 1.7489, "step": 970 }, { "epoch": 0.39, "learning_rate": 4.346666666666667e-05, "loss": 1.7389, "step": 980 }, { "epoch": 0.4, "learning_rate": 4.3400000000000005e-05, "loss": 1.7619, "step": 990 }, { "epoch": 0.4, "learning_rate": 4.3333333333333334e-05, "loss": 1.7351, "step": 1000 }, { "epoch": 0.4, "learning_rate": 4.3266666666666664e-05, "loss": 1.7487, "step": 1010 }, { "epoch": 0.41, "learning_rate": 4.32e-05, "loss": 1.7499, "step": 1020 }, { "epoch": 0.41, "learning_rate": 4.3133333333333336e-05, "loss": 1.7722, "step": 1030 }, { "epoch": 0.42, "learning_rate": 4.3066666666666665e-05, "loss": 1.7198, "step": 1040 }, { "epoch": 0.42, "learning_rate": 4.3e-05, "loss": 1.7282, "step": 1050 }, { "epoch": 0.42, "learning_rate": 4.293333333333334e-05, "loss": 1.7139, "step": 1060 }, { "epoch": 0.43, "learning_rate": 4.286666666666667e-05, "loss": 1.7745, "step": 1070 }, { "epoch": 0.43, "learning_rate": 4.2800000000000004e-05, "loss": 1.7679, "step": 1080 }, { "epoch": 0.44, "learning_rate": 4.273333333333333e-05, "loss": 1.6684, "step": 1090 }, { "epoch": 0.44, "learning_rate": 4.266666666666667e-05, "loss": 1.7274, "step": 1100 }, { "epoch": 0.44, "learning_rate": 4.26e-05, "loss": 1.7657, "step": 1110 }, { "epoch": 0.45, "learning_rate": 4.2533333333333335e-05, "loss": 1.7391, "step": 1120 }, { "epoch": 0.45, "learning_rate": 4.246666666666667e-05, "loss": 1.7278, "step": 1130 }, { "epoch": 0.46, "learning_rate": 4.24e-05, "loss": 1.766, "step": 1140 }, { "epoch": 0.46, "learning_rate": 4.233333333333334e-05, "loss": 1.7663, "step": 1150 }, { "epoch": 0.46, "learning_rate": 4.226666666666667e-05, "loss": 1.734, "step": 1160 }, { "epoch": 0.47, "learning_rate": 4.22e-05, "loss": 1.7712, "step": 1170 }, { "epoch": 0.47, "learning_rate": 4.213333333333334e-05, "loss": 1.7529, "step": 1180 }, { "epoch": 0.48, "learning_rate": 4.206666666666667e-05, "loss": 1.7348, "step": 1190 }, { "epoch": 0.48, "learning_rate": 4.2e-05, "loss": 1.7976, "step": 1200 }, { "epoch": 0.48, "learning_rate": 4.1933333333333334e-05, "loss": 1.7179, "step": 1210 }, { "epoch": 0.49, "learning_rate": 4.186666666666667e-05, "loss": 1.7676, "step": 1220 }, { "epoch": 0.49, "learning_rate": 4.18e-05, "loss": 1.7449, "step": 1230 }, { "epoch": 0.5, "learning_rate": 4.1733333333333336e-05, "loss": 1.7503, "step": 1240 }, { "epoch": 0.5, "learning_rate": 4.166666666666667e-05, "loss": 1.7229, "step": 1250 }, { "epoch": 0.5, "learning_rate": 4.16e-05, "loss": 1.7432, "step": 1260 }, { "epoch": 0.51, "learning_rate": 4.153333333333334e-05, "loss": 1.7284, "step": 1270 }, { "epoch": 0.51, "learning_rate": 4.146666666666667e-05, "loss": 1.6969, "step": 1280 }, { "epoch": 0.52, "learning_rate": 4.14e-05, "loss": 1.7578, "step": 1290 }, { "epoch": 0.52, "learning_rate": 4.133333333333333e-05, "loss": 1.744, "step": 1300 }, { "epoch": 0.52, "learning_rate": 4.126666666666667e-05, "loss": 1.7638, "step": 1310 }, { "epoch": 0.53, "learning_rate": 4.12e-05, "loss": 1.7642, "step": 1320 }, { "epoch": 0.53, "learning_rate": 4.1133333333333335e-05, "loss": 1.7197, "step": 1330 }, { "epoch": 0.54, "learning_rate": 4.106666666666667e-05, "loss": 1.7119, "step": 1340 }, { "epoch": 0.54, "learning_rate": 4.1e-05, "loss": 1.759, "step": 1350 }, { "epoch": 0.54, "learning_rate": 4.093333333333334e-05, "loss": 1.807, "step": 1360 }, { "epoch": 0.55, "learning_rate": 4.086666666666667e-05, "loss": 1.7718, "step": 1370 }, { "epoch": 0.55, "learning_rate": 4.08e-05, "loss": 1.7607, "step": 1380 }, { "epoch": 0.56, "learning_rate": 4.073333333333333e-05, "loss": 1.7472, "step": 1390 }, { "epoch": 0.56, "learning_rate": 4.066666666666667e-05, "loss": 1.7624, "step": 1400 }, { "epoch": 0.56, "learning_rate": 4.0600000000000004e-05, "loss": 1.8012, "step": 1410 }, { "epoch": 0.57, "learning_rate": 4.0533333333333334e-05, "loss": 1.7158, "step": 1420 }, { "epoch": 0.57, "learning_rate": 4.046666666666667e-05, "loss": 1.7435, "step": 1430 }, { "epoch": 0.58, "learning_rate": 4.0400000000000006e-05, "loss": 1.7389, "step": 1440 }, { "epoch": 0.58, "learning_rate": 4.0333333333333336e-05, "loss": 1.7352, "step": 1450 }, { "epoch": 0.58, "learning_rate": 4.026666666666667e-05, "loss": 1.7385, "step": 1460 }, { "epoch": 0.59, "learning_rate": 4.02e-05, "loss": 1.7531, "step": 1470 }, { "epoch": 0.59, "learning_rate": 4.013333333333333e-05, "loss": 1.7637, "step": 1480 }, { "epoch": 0.6, "learning_rate": 4.006666666666667e-05, "loss": 1.715, "step": 1490 }, { "epoch": 0.6, "learning_rate": 4e-05, "loss": 1.7841, "step": 1500 }, { "epoch": 0.6, "learning_rate": 3.993333333333333e-05, "loss": 1.8159, "step": 1510 }, { "epoch": 0.61, "learning_rate": 3.986666666666667e-05, "loss": 1.7905, "step": 1520 }, { "epoch": 0.61, "learning_rate": 3.9800000000000005e-05, "loss": 1.7349, "step": 1530 }, { "epoch": 0.62, "learning_rate": 3.9733333333333335e-05, "loss": 1.7629, "step": 1540 }, { "epoch": 0.62, "learning_rate": 3.966666666666667e-05, "loss": 1.7307, "step": 1550 }, { "epoch": 0.62, "learning_rate": 3.960000000000001e-05, "loss": 1.7358, "step": 1560 }, { "epoch": 0.63, "learning_rate": 3.9533333333333337e-05, "loss": 1.7551, "step": 1570 }, { "epoch": 0.63, "learning_rate": 3.9466666666666666e-05, "loss": 1.7659, "step": 1580 }, { "epoch": 0.64, "learning_rate": 3.94e-05, "loss": 1.7641, "step": 1590 }, { "epoch": 0.64, "learning_rate": 3.933333333333333e-05, "loss": 1.7399, "step": 1600 }, { "epoch": 0.64, "learning_rate": 3.926666666666667e-05, "loss": 1.7154, "step": 1610 }, { "epoch": 0.65, "learning_rate": 3.9200000000000004e-05, "loss": 1.7895, "step": 1620 }, { "epoch": 0.65, "learning_rate": 3.9133333333333334e-05, "loss": 1.7627, "step": 1630 }, { "epoch": 0.66, "learning_rate": 3.906666666666667e-05, "loss": 1.7081, "step": 1640 }, { "epoch": 0.66, "learning_rate": 3.9000000000000006e-05, "loss": 1.7568, "step": 1650 }, { "epoch": 0.66, "learning_rate": 3.8933333333333336e-05, "loss": 1.7378, "step": 1660 }, { "epoch": 0.67, "learning_rate": 3.8866666666666665e-05, "loss": 1.737, "step": 1670 }, { "epoch": 0.67, "learning_rate": 3.88e-05, "loss": 1.7092, "step": 1680 }, { "epoch": 0.68, "learning_rate": 3.873333333333333e-05, "loss": 1.7567, "step": 1690 }, { "epoch": 0.68, "learning_rate": 3.866666666666667e-05, "loss": 1.7541, "step": 1700 }, { "epoch": 0.68, "learning_rate": 3.86e-05, "loss": 1.7538, "step": 1710 }, { "epoch": 0.69, "learning_rate": 3.853333333333334e-05, "loss": 1.7562, "step": 1720 }, { "epoch": 0.69, "learning_rate": 3.846666666666667e-05, "loss": 1.7591, "step": 1730 }, { "epoch": 0.7, "learning_rate": 3.8400000000000005e-05, "loss": 1.699, "step": 1740 }, { "epoch": 0.7, "learning_rate": 3.8333333333333334e-05, "loss": 1.7496, "step": 1750 }, { "epoch": 0.7, "learning_rate": 3.8266666666666664e-05, "loss": 1.7092, "step": 1760 }, { "epoch": 0.71, "learning_rate": 3.82e-05, "loss": 1.7127, "step": 1770 }, { "epoch": 0.71, "learning_rate": 3.8133333333333336e-05, "loss": 1.7071, "step": 1780 }, { "epoch": 0.72, "learning_rate": 3.8066666666666666e-05, "loss": 1.7568, "step": 1790 }, { "epoch": 0.72, "learning_rate": 3.8e-05, "loss": 1.7259, "step": 1800 }, { "epoch": 0.72, "learning_rate": 3.793333333333334e-05, "loss": 1.7023, "step": 1810 }, { "epoch": 0.73, "learning_rate": 3.786666666666667e-05, "loss": 1.7794, "step": 1820 }, { "epoch": 0.73, "learning_rate": 3.7800000000000004e-05, "loss": 1.725, "step": 1830 }, { "epoch": 0.74, "learning_rate": 3.773333333333334e-05, "loss": 1.7435, "step": 1840 }, { "epoch": 0.74, "learning_rate": 3.766666666666667e-05, "loss": 1.7668, "step": 1850 }, { "epoch": 0.74, "learning_rate": 3.76e-05, "loss": 1.7463, "step": 1860 }, { "epoch": 0.75, "learning_rate": 3.7533333333333335e-05, "loss": 1.7757, "step": 1870 }, { "epoch": 0.75, "learning_rate": 3.7466666666666665e-05, "loss": 1.7463, "step": 1880 }, { "epoch": 0.76, "learning_rate": 3.74e-05, "loss": 1.7393, "step": 1890 }, { "epoch": 0.76, "learning_rate": 3.733333333333334e-05, "loss": 1.7396, "step": 1900 }, { "epoch": 0.76, "learning_rate": 3.726666666666667e-05, "loss": 1.7588, "step": 1910 }, { "epoch": 0.77, "learning_rate": 3.72e-05, "loss": 1.7409, "step": 1920 }, { "epoch": 0.77, "learning_rate": 3.713333333333334e-05, "loss": 1.7666, "step": 1930 }, { "epoch": 0.78, "learning_rate": 3.706666666666667e-05, "loss": 1.7505, "step": 1940 }, { "epoch": 0.78, "learning_rate": 3.7e-05, "loss": 1.7311, "step": 1950 }, { "epoch": 0.78, "learning_rate": 3.6933333333333334e-05, "loss": 1.7455, "step": 1960 }, { "epoch": 0.79, "learning_rate": 3.6866666666666664e-05, "loss": 1.7445, "step": 1970 }, { "epoch": 0.79, "learning_rate": 3.68e-05, "loss": 1.7616, "step": 1980 }, { "epoch": 0.8, "learning_rate": 3.6733333333333336e-05, "loss": 1.7513, "step": 1990 }, { "epoch": 0.8, "learning_rate": 3.6666666666666666e-05, "loss": 1.7541, "step": 2000 }, { "epoch": 0.8, "learning_rate": 3.66e-05, "loss": 1.7797, "step": 2010 }, { "epoch": 0.81, "learning_rate": 3.653333333333334e-05, "loss": 1.7468, "step": 2020 }, { "epoch": 0.81, "learning_rate": 3.646666666666667e-05, "loss": 1.7519, "step": 2030 }, { "epoch": 0.82, "learning_rate": 3.6400000000000004e-05, "loss": 1.7658, "step": 2040 }, { "epoch": 0.82, "learning_rate": 3.633333333333333e-05, "loss": 1.7388, "step": 2050 }, { "epoch": 0.82, "learning_rate": 3.626666666666667e-05, "loss": 1.7314, "step": 2060 }, { "epoch": 0.83, "learning_rate": 3.62e-05, "loss": 1.7286, "step": 2070 }, { "epoch": 0.83, "learning_rate": 3.6133333333333335e-05, "loss": 1.7187, "step": 2080 }, { "epoch": 0.84, "learning_rate": 3.606666666666667e-05, "loss": 1.7495, "step": 2090 }, { "epoch": 0.84, "learning_rate": 3.6e-05, "loss": 1.7142, "step": 2100 }, { "epoch": 0.84, "learning_rate": 3.593333333333334e-05, "loss": 1.7607, "step": 2110 }, { "epoch": 0.85, "learning_rate": 3.586666666666667e-05, "loss": 1.7521, "step": 2120 }, { "epoch": 0.85, "learning_rate": 3.58e-05, "loss": 1.7477, "step": 2130 }, { "epoch": 0.86, "learning_rate": 3.573333333333333e-05, "loss": 1.7357, "step": 2140 }, { "epoch": 0.86, "learning_rate": 3.566666666666667e-05, "loss": 1.7477, "step": 2150 }, { "epoch": 0.86, "learning_rate": 3.56e-05, "loss": 1.7454, "step": 2160 }, { "epoch": 0.87, "learning_rate": 3.5533333333333334e-05, "loss": 1.7187, "step": 2170 }, { "epoch": 0.87, "learning_rate": 3.546666666666667e-05, "loss": 1.7347, "step": 2180 }, { "epoch": 0.88, "learning_rate": 3.54e-05, "loss": 1.8037, "step": 2190 }, { "epoch": 0.88, "learning_rate": 3.5333333333333336e-05, "loss": 1.7429, "step": 2200 }, { "epoch": 0.88, "learning_rate": 3.526666666666667e-05, "loss": 1.7307, "step": 2210 }, { "epoch": 0.89, "learning_rate": 3.52e-05, "loss": 1.7294, "step": 2220 }, { "epoch": 0.89, "learning_rate": 3.513333333333334e-05, "loss": 1.7975, "step": 2230 }, { "epoch": 0.9, "learning_rate": 3.506666666666667e-05, "loss": 1.7199, "step": 2240 }, { "epoch": 0.9, "learning_rate": 3.5e-05, "loss": 1.7301, "step": 2250 }, { "epoch": 0.9, "learning_rate": 3.493333333333333e-05, "loss": 1.7417, "step": 2260 }, { "epoch": 0.91, "learning_rate": 3.486666666666667e-05, "loss": 1.7401, "step": 2270 }, { "epoch": 0.91, "learning_rate": 3.48e-05, "loss": 1.7556, "step": 2280 }, { "epoch": 0.92, "learning_rate": 3.4733333333333335e-05, "loss": 1.7313, "step": 2290 }, { "epoch": 0.92, "learning_rate": 3.466666666666667e-05, "loss": 1.7251, "step": 2300 }, { "epoch": 0.92, "learning_rate": 3.46e-05, "loss": 1.727, "step": 2310 }, { "epoch": 0.93, "learning_rate": 3.453333333333334e-05, "loss": 1.7578, "step": 2320 }, { "epoch": 0.93, "learning_rate": 3.4466666666666666e-05, "loss": 1.7454, "step": 2330 }, { "epoch": 0.94, "learning_rate": 3.4399999999999996e-05, "loss": 1.7461, "step": 2340 }, { "epoch": 0.94, "learning_rate": 3.433333333333333e-05, "loss": 1.7403, "step": 2350 }, { "epoch": 0.94, "learning_rate": 3.426666666666667e-05, "loss": 1.7479, "step": 2360 }, { "epoch": 0.95, "learning_rate": 3.4200000000000005e-05, "loss": 1.7442, "step": 2370 }, { "epoch": 0.95, "learning_rate": 3.4133333333333334e-05, "loss": 1.7665, "step": 2380 }, { "epoch": 0.96, "learning_rate": 3.406666666666667e-05, "loss": 1.7585, "step": 2390 }, { "epoch": 0.96, "learning_rate": 3.4000000000000007e-05, "loss": 1.8066, "step": 2400 }, { "epoch": 0.96, "learning_rate": 3.3933333333333336e-05, "loss": 1.7486, "step": 2410 }, { "epoch": 0.97, "learning_rate": 3.3866666666666665e-05, "loss": 1.7284, "step": 2420 }, { "epoch": 0.97, "learning_rate": 3.38e-05, "loss": 1.7501, "step": 2430 }, { "epoch": 0.98, "learning_rate": 3.373333333333333e-05, "loss": 1.7074, "step": 2440 }, { "epoch": 0.98, "learning_rate": 3.366666666666667e-05, "loss": 1.7394, "step": 2450 }, { "epoch": 0.98, "learning_rate": 3.3600000000000004e-05, "loss": 1.7177, "step": 2460 }, { "epoch": 0.99, "learning_rate": 3.353333333333333e-05, "loss": 1.7204, "step": 2470 }, { "epoch": 0.99, "learning_rate": 3.346666666666667e-05, "loss": 1.7328, "step": 2480 }, { "epoch": 1.0, "learning_rate": 3.3400000000000005e-05, "loss": 1.7122, "step": 2490 }, { "epoch": 1.0, "learning_rate": 3.3333333333333335e-05, "loss": 1.7563, "step": 2500 }, { "epoch": 1.0, "learning_rate": 3.326666666666667e-05, "loss": 1.7016, "step": 2510 }, { "epoch": 1.01, "learning_rate": 3.32e-05, "loss": 1.7529, "step": 2520 }, { "epoch": 1.01, "learning_rate": 3.313333333333333e-05, "loss": 1.7357, "step": 2530 }, { "epoch": 1.02, "learning_rate": 3.3066666666666666e-05, "loss": 1.7492, "step": 2540 }, { "epoch": 1.02, "learning_rate": 3.3e-05, "loss": 1.7179, "step": 2550 }, { "epoch": 1.02, "learning_rate": 3.293333333333333e-05, "loss": 1.7347, "step": 2560 }, { "epoch": 1.03, "learning_rate": 3.286666666666667e-05, "loss": 1.7282, "step": 2570 }, { "epoch": 1.03, "learning_rate": 3.2800000000000004e-05, "loss": 1.7042, "step": 2580 }, { "epoch": 1.04, "learning_rate": 3.2733333333333334e-05, "loss": 1.7716, "step": 2590 }, { "epoch": 1.04, "learning_rate": 3.266666666666667e-05, "loss": 1.7164, "step": 2600 }, { "epoch": 1.04, "learning_rate": 3.26e-05, "loss": 1.7182, "step": 2610 }, { "epoch": 1.05, "learning_rate": 3.253333333333333e-05, "loss": 1.7514, "step": 2620 }, { "epoch": 1.05, "learning_rate": 3.2466666666666665e-05, "loss": 1.736, "step": 2630 }, { "epoch": 1.06, "learning_rate": 3.24e-05, "loss": 1.74, "step": 2640 }, { "epoch": 1.06, "learning_rate": 3.233333333333333e-05, "loss": 1.7617, "step": 2650 }, { "epoch": 1.06, "learning_rate": 3.226666666666667e-05, "loss": 1.716, "step": 2660 }, { "epoch": 1.07, "learning_rate": 3.2200000000000003e-05, "loss": 1.7197, "step": 2670 }, { "epoch": 1.07, "learning_rate": 3.213333333333334e-05, "loss": 1.7327, "step": 2680 }, { "epoch": 1.08, "learning_rate": 3.206666666666667e-05, "loss": 1.7143, "step": 2690 }, { "epoch": 1.08, "learning_rate": 3.2000000000000005e-05, "loss": 1.7782, "step": 2700 }, { "epoch": 1.08, "learning_rate": 3.1933333333333335e-05, "loss": 1.7162, "step": 2710 }, { "epoch": 1.09, "learning_rate": 3.1866666666666664e-05, "loss": 1.7523, "step": 2720 }, { "epoch": 1.09, "learning_rate": 3.18e-05, "loss": 1.7584, "step": 2730 }, { "epoch": 1.1, "learning_rate": 3.173333333333334e-05, "loss": 1.7235, "step": 2740 }, { "epoch": 1.1, "learning_rate": 3.1666666666666666e-05, "loss": 1.7275, "step": 2750 }, { "epoch": 1.1, "learning_rate": 3.16e-05, "loss": 1.7458, "step": 2760 }, { "epoch": 1.11, "learning_rate": 3.153333333333334e-05, "loss": 1.7031, "step": 2770 }, { "epoch": 1.11, "learning_rate": 3.146666666666667e-05, "loss": 1.7317, "step": 2780 }, { "epoch": 1.12, "learning_rate": 3.1400000000000004e-05, "loss": 1.78, "step": 2790 }, { "epoch": 1.12, "learning_rate": 3.1333333333333334e-05, "loss": 1.7152, "step": 2800 }, { "epoch": 1.12, "learning_rate": 3.126666666666666e-05, "loss": 1.7443, "step": 2810 }, { "epoch": 1.13, "learning_rate": 3.12e-05, "loss": 1.7323, "step": 2820 }, { "epoch": 1.13, "learning_rate": 3.1133333333333336e-05, "loss": 1.7047, "step": 2830 }, { "epoch": 1.14, "learning_rate": 3.1066666666666665e-05, "loss": 1.719, "step": 2840 }, { "epoch": 1.14, "learning_rate": 3.1e-05, "loss": 1.7442, "step": 2850 }, { "epoch": 1.14, "learning_rate": 3.093333333333334e-05, "loss": 1.7096, "step": 2860 }, { "epoch": 1.15, "learning_rate": 3.086666666666667e-05, "loss": 1.7322, "step": 2870 }, { "epoch": 1.15, "learning_rate": 3.08e-05, "loss": 1.7392, "step": 2880 }, { "epoch": 1.16, "learning_rate": 3.073333333333334e-05, "loss": 1.7662, "step": 2890 }, { "epoch": 1.16, "learning_rate": 3.066666666666667e-05, "loss": 1.7646, "step": 2900 }, { "epoch": 1.16, "learning_rate": 3.06e-05, "loss": 1.7252, "step": 2910 }, { "epoch": 1.17, "learning_rate": 3.0533333333333335e-05, "loss": 1.7614, "step": 2920 }, { "epoch": 1.17, "learning_rate": 3.0466666666666664e-05, "loss": 1.747, "step": 2930 }, { "epoch": 1.18, "learning_rate": 3.04e-05, "loss": 1.7514, "step": 2940 }, { "epoch": 1.18, "learning_rate": 3.0333333333333337e-05, "loss": 1.7146, "step": 2950 }, { "epoch": 1.18, "learning_rate": 3.0266666666666666e-05, "loss": 1.7711, "step": 2960 }, { "epoch": 1.19, "learning_rate": 3.02e-05, "loss": 1.7633, "step": 2970 }, { "epoch": 1.19, "learning_rate": 3.0133333333333335e-05, "loss": 1.7203, "step": 2980 }, { "epoch": 1.2, "learning_rate": 3.006666666666667e-05, "loss": 1.7379, "step": 2990 }, { "epoch": 1.2, "learning_rate": 3e-05, "loss": 1.7509, "step": 3000 }, { "epoch": 1.2, "learning_rate": 2.9933333333333337e-05, "loss": 1.7227, "step": 3010 }, { "epoch": 1.21, "learning_rate": 2.986666666666667e-05, "loss": 1.7145, "step": 3020 }, { "epoch": 1.21, "learning_rate": 2.98e-05, "loss": 1.7357, "step": 3030 }, { "epoch": 1.22, "learning_rate": 2.9733333333333336e-05, "loss": 1.7205, "step": 3040 }, { "epoch": 1.22, "learning_rate": 2.9666666666666672e-05, "loss": 1.7456, "step": 3050 }, { "epoch": 1.22, "learning_rate": 2.96e-05, "loss": 1.7535, "step": 3060 }, { "epoch": 1.23, "learning_rate": 2.9533333333333334e-05, "loss": 1.7374, "step": 3070 }, { "epoch": 1.23, "learning_rate": 2.946666666666667e-05, "loss": 1.7547, "step": 3080 }, { "epoch": 1.24, "learning_rate": 2.94e-05, "loss": 1.706, "step": 3090 }, { "epoch": 1.24, "learning_rate": 2.9333333333333336e-05, "loss": 1.7376, "step": 3100 }, { "epoch": 1.24, "learning_rate": 2.926666666666667e-05, "loss": 1.7217, "step": 3110 }, { "epoch": 1.25, "learning_rate": 2.9199999999999998e-05, "loss": 1.7438, "step": 3120 }, { "epoch": 1.25, "learning_rate": 2.9133333333333334e-05, "loss": 1.7164, "step": 3130 }, { "epoch": 1.26, "learning_rate": 2.906666666666667e-05, "loss": 1.7545, "step": 3140 }, { "epoch": 1.26, "learning_rate": 2.9e-05, "loss": 1.7488, "step": 3150 }, { "epoch": 1.26, "learning_rate": 2.8933333333333333e-05, "loss": 1.6787, "step": 3160 }, { "epoch": 1.27, "learning_rate": 2.886666666666667e-05, "loss": 1.6961, "step": 3170 }, { "epoch": 1.27, "learning_rate": 2.88e-05, "loss": 1.7561, "step": 3180 }, { "epoch": 1.28, "learning_rate": 2.8733333333333335e-05, "loss": 1.7198, "step": 3190 }, { "epoch": 1.28, "learning_rate": 2.8666666666666668e-05, "loss": 1.755, "step": 3200 }, { "epoch": 1.28, "learning_rate": 2.86e-05, "loss": 1.7054, "step": 3210 }, { "epoch": 1.29, "learning_rate": 2.8533333333333333e-05, "loss": 1.7435, "step": 3220 }, { "epoch": 1.29, "learning_rate": 2.846666666666667e-05, "loss": 1.7453, "step": 3230 }, { "epoch": 1.3, "learning_rate": 2.84e-05, "loss": 1.7728, "step": 3240 }, { "epoch": 1.3, "learning_rate": 2.8333333333333335e-05, "loss": 1.7509, "step": 3250 }, { "epoch": 1.3, "learning_rate": 2.8266666666666668e-05, "loss": 1.7118, "step": 3260 }, { "epoch": 1.31, "learning_rate": 2.8199999999999998e-05, "loss": 1.7257, "step": 3270 }, { "epoch": 1.31, "learning_rate": 2.8133333333333334e-05, "loss": 1.7508, "step": 3280 }, { "epoch": 1.32, "learning_rate": 2.806666666666667e-05, "loss": 1.7518, "step": 3290 }, { "epoch": 1.32, "learning_rate": 2.8000000000000003e-05, "loss": 1.716, "step": 3300 }, { "epoch": 1.32, "learning_rate": 2.7933333333333332e-05, "loss": 1.7296, "step": 3310 }, { "epoch": 1.33, "learning_rate": 2.786666666666667e-05, "loss": 1.7522, "step": 3320 }, { "epoch": 1.33, "learning_rate": 2.7800000000000005e-05, "loss": 1.7034, "step": 3330 }, { "epoch": 1.34, "learning_rate": 2.7733333333333334e-05, "loss": 1.725, "step": 3340 }, { "epoch": 1.34, "learning_rate": 2.7666666666666667e-05, "loss": 1.7564, "step": 3350 }, { "epoch": 1.34, "learning_rate": 2.7600000000000003e-05, "loss": 1.7448, "step": 3360 }, { "epoch": 1.35, "learning_rate": 2.7533333333333333e-05, "loss": 1.7299, "step": 3370 }, { "epoch": 1.35, "learning_rate": 2.746666666666667e-05, "loss": 1.7507, "step": 3380 }, { "epoch": 1.36, "learning_rate": 2.7400000000000002e-05, "loss": 1.7289, "step": 3390 }, { "epoch": 1.36, "learning_rate": 2.733333333333333e-05, "loss": 1.7287, "step": 3400 }, { "epoch": 1.36, "learning_rate": 2.7266666666666668e-05, "loss": 1.7208, "step": 3410 }, { "epoch": 1.37, "learning_rate": 2.7200000000000004e-05, "loss": 1.7844, "step": 3420 }, { "epoch": 1.37, "learning_rate": 2.7133333333333333e-05, "loss": 1.7519, "step": 3430 }, { "epoch": 1.38, "learning_rate": 2.706666666666667e-05, "loss": 1.7349, "step": 3440 }, { "epoch": 1.38, "learning_rate": 2.7000000000000002e-05, "loss": 1.7467, "step": 3450 }, { "epoch": 1.38, "learning_rate": 2.6933333333333332e-05, "loss": 1.7397, "step": 3460 }, { "epoch": 1.39, "learning_rate": 2.6866666666666668e-05, "loss": 1.726, "step": 3470 }, { "epoch": 1.39, "learning_rate": 2.6800000000000004e-05, "loss": 1.7193, "step": 3480 }, { "epoch": 1.4, "learning_rate": 2.6733333333333334e-05, "loss": 1.7535, "step": 3490 }, { "epoch": 1.4, "learning_rate": 2.6666666666666667e-05, "loss": 1.713, "step": 3500 }, { "epoch": 1.4, "learning_rate": 2.6600000000000003e-05, "loss": 1.7372, "step": 3510 }, { "epoch": 1.41, "learning_rate": 2.6533333333333332e-05, "loss": 1.7556, "step": 3520 }, { "epoch": 1.41, "learning_rate": 2.646666666666667e-05, "loss": 1.7439, "step": 3530 }, { "epoch": 1.42, "learning_rate": 2.64e-05, "loss": 1.774, "step": 3540 }, { "epoch": 1.42, "learning_rate": 2.633333333333333e-05, "loss": 1.7836, "step": 3550 }, { "epoch": 1.42, "learning_rate": 2.6266666666666667e-05, "loss": 1.7529, "step": 3560 }, { "epoch": 1.43, "learning_rate": 2.6200000000000003e-05, "loss": 1.7221, "step": 3570 }, { "epoch": 1.43, "learning_rate": 2.6133333333333333e-05, "loss": 1.7289, "step": 3580 }, { "epoch": 1.44, "learning_rate": 2.6066666666666666e-05, "loss": 1.7074, "step": 3590 }, { "epoch": 1.44, "learning_rate": 2.6000000000000002e-05, "loss": 1.7585, "step": 3600 }, { "epoch": 1.44, "learning_rate": 2.5933333333333338e-05, "loss": 1.7155, "step": 3610 }, { "epoch": 1.45, "learning_rate": 2.5866666666666667e-05, "loss": 1.7344, "step": 3620 }, { "epoch": 1.45, "learning_rate": 2.58e-05, "loss": 1.7032, "step": 3630 }, { "epoch": 1.46, "learning_rate": 2.5733333333333337e-05, "loss": 1.7072, "step": 3640 }, { "epoch": 1.46, "learning_rate": 2.5666666666666666e-05, "loss": 1.6914, "step": 3650 }, { "epoch": 1.46, "learning_rate": 2.5600000000000002e-05, "loss": 1.7272, "step": 3660 }, { "epoch": 1.47, "learning_rate": 2.553333333333334e-05, "loss": 1.7299, "step": 3670 }, { "epoch": 1.47, "learning_rate": 2.5466666666666668e-05, "loss": 1.7366, "step": 3680 }, { "epoch": 1.48, "learning_rate": 2.54e-05, "loss": 1.7346, "step": 3690 }, { "epoch": 1.48, "learning_rate": 2.5333333333333337e-05, "loss": 1.7205, "step": 3700 }, { "epoch": 1.48, "learning_rate": 2.5266666666666666e-05, "loss": 1.7117, "step": 3710 }, { "epoch": 1.49, "learning_rate": 2.5200000000000003e-05, "loss": 1.7196, "step": 3720 }, { "epoch": 1.49, "learning_rate": 2.5133333333333336e-05, "loss": 1.7661, "step": 3730 }, { "epoch": 1.5, "learning_rate": 2.5066666666666665e-05, "loss": 1.7231, "step": 3740 }, { "epoch": 1.5, "learning_rate": 2.5e-05, "loss": 1.7532, "step": 3750 }, { "epoch": 1.5, "learning_rate": 2.4933333333333334e-05, "loss": 1.6964, "step": 3760 }, { "epoch": 1.51, "learning_rate": 2.486666666666667e-05, "loss": 1.7407, "step": 3770 }, { "epoch": 1.51, "learning_rate": 2.48e-05, "loss": 1.7695, "step": 3780 }, { "epoch": 1.52, "learning_rate": 2.4733333333333333e-05, "loss": 1.7334, "step": 3790 }, { "epoch": 1.52, "learning_rate": 2.466666666666667e-05, "loss": 1.7714, "step": 3800 }, { "epoch": 1.52, "learning_rate": 2.46e-05, "loss": 1.7338, "step": 3810 }, { "epoch": 1.53, "learning_rate": 2.4533333333333334e-05, "loss": 1.7342, "step": 3820 }, { "epoch": 1.53, "learning_rate": 2.4466666666666667e-05, "loss": 1.7145, "step": 3830 }, { "epoch": 1.54, "learning_rate": 2.44e-05, "loss": 1.7012, "step": 3840 }, { "epoch": 1.54, "learning_rate": 2.4333333333333336e-05, "loss": 1.7277, "step": 3850 }, { "epoch": 1.54, "learning_rate": 2.426666666666667e-05, "loss": 1.7656, "step": 3860 }, { "epoch": 1.55, "learning_rate": 2.4200000000000002e-05, "loss": 1.7481, "step": 3870 }, { "epoch": 1.55, "learning_rate": 2.4133333333333335e-05, "loss": 1.7221, "step": 3880 }, { "epoch": 1.56, "learning_rate": 2.4066666666666668e-05, "loss": 1.7414, "step": 3890 }, { "epoch": 1.56, "learning_rate": 2.4e-05, "loss": 1.6899, "step": 3900 }, { "epoch": 1.56, "learning_rate": 2.3933333333333337e-05, "loss": 1.7262, "step": 3910 }, { "epoch": 1.57, "learning_rate": 2.3866666666666666e-05, "loss": 1.767, "step": 3920 }, { "epoch": 1.57, "learning_rate": 2.38e-05, "loss": 1.7555, "step": 3930 }, { "epoch": 1.58, "learning_rate": 2.3733333333333335e-05, "loss": 1.7315, "step": 3940 }, { "epoch": 1.58, "learning_rate": 2.3666666666666668e-05, "loss": 1.7206, "step": 3950 }, { "epoch": 1.58, "learning_rate": 2.36e-05, "loss": 1.7504, "step": 3960 }, { "epoch": 1.59, "learning_rate": 2.3533333333333334e-05, "loss": 1.7558, "step": 3970 }, { "epoch": 1.59, "learning_rate": 2.3466666666666667e-05, "loss": 1.7583, "step": 3980 }, { "epoch": 1.6, "learning_rate": 2.3400000000000003e-05, "loss": 1.734, "step": 3990 }, { "epoch": 1.6, "learning_rate": 2.3333333333333336e-05, "loss": 1.751, "step": 4000 }, { "epoch": 1.6, "learning_rate": 2.326666666666667e-05, "loss": 1.7707, "step": 4010 }, { "epoch": 1.61, "learning_rate": 2.32e-05, "loss": 1.7748, "step": 4020 }, { "epoch": 1.61, "learning_rate": 2.3133333333333334e-05, "loss": 1.74, "step": 4030 }, { "epoch": 1.62, "learning_rate": 2.3066666666666667e-05, "loss": 1.7624, "step": 4040 }, { "epoch": 1.62, "learning_rate": 2.3000000000000003e-05, "loss": 1.7492, "step": 4050 }, { "epoch": 1.62, "learning_rate": 2.2933333333333333e-05, "loss": 1.7207, "step": 4060 }, { "epoch": 1.63, "learning_rate": 2.2866666666666666e-05, "loss": 1.7002, "step": 4070 }, { "epoch": 1.63, "learning_rate": 2.2800000000000002e-05, "loss": 1.7183, "step": 4080 }, { "epoch": 1.64, "learning_rate": 2.2733333333333335e-05, "loss": 1.7622, "step": 4090 }, { "epoch": 1.64, "learning_rate": 2.2666666666666668e-05, "loss": 1.6877, "step": 4100 }, { "epoch": 1.64, "learning_rate": 2.26e-05, "loss": 1.741, "step": 4110 }, { "epoch": 1.65, "learning_rate": 2.2533333333333333e-05, "loss": 1.7511, "step": 4120 }, { "epoch": 1.65, "learning_rate": 2.2466666666666666e-05, "loss": 1.7675, "step": 4130 }, { "epoch": 1.66, "learning_rate": 2.2400000000000002e-05, "loss": 1.7501, "step": 4140 }, { "epoch": 1.66, "learning_rate": 2.2333333333333335e-05, "loss": 1.7524, "step": 4150 }, { "epoch": 1.66, "learning_rate": 2.2266666666666668e-05, "loss": 1.7843, "step": 4160 }, { "epoch": 1.67, "learning_rate": 2.22e-05, "loss": 1.7129, "step": 4170 }, { "epoch": 1.67, "learning_rate": 2.2133333333333334e-05, "loss": 1.7429, "step": 4180 }, { "epoch": 1.68, "learning_rate": 2.206666666666667e-05, "loss": 1.73, "step": 4190 }, { "epoch": 1.68, "learning_rate": 2.2000000000000003e-05, "loss": 1.7227, "step": 4200 }, { "epoch": 1.68, "learning_rate": 2.1933333333333332e-05, "loss": 1.7084, "step": 4210 }, { "epoch": 1.69, "learning_rate": 2.186666666666667e-05, "loss": 1.774, "step": 4220 }, { "epoch": 1.69, "learning_rate": 2.18e-05, "loss": 1.785, "step": 4230 }, { "epoch": 1.7, "learning_rate": 2.1733333333333334e-05, "loss": 1.7254, "step": 4240 }, { "epoch": 1.7, "learning_rate": 2.1666666666666667e-05, "loss": 1.7258, "step": 4250 }, { "epoch": 1.7, "learning_rate": 2.16e-05, "loss": 1.7385, "step": 4260 }, { "epoch": 1.71, "learning_rate": 2.1533333333333333e-05, "loss": 1.7442, "step": 4270 }, { "epoch": 1.71, "learning_rate": 2.146666666666667e-05, "loss": 1.7145, "step": 4280 }, { "epoch": 1.72, "learning_rate": 2.1400000000000002e-05, "loss": 1.7415, "step": 4290 }, { "epoch": 1.72, "learning_rate": 2.1333333333333335e-05, "loss": 1.7592, "step": 4300 }, { "epoch": 1.72, "learning_rate": 2.1266666666666667e-05, "loss": 1.7022, "step": 4310 }, { "epoch": 1.73, "learning_rate": 2.12e-05, "loss": 1.7241, "step": 4320 }, { "epoch": 1.73, "learning_rate": 2.1133333333333337e-05, "loss": 1.7026, "step": 4330 }, { "epoch": 1.74, "learning_rate": 2.106666666666667e-05, "loss": 1.7383, "step": 4340 }, { "epoch": 1.74, "learning_rate": 2.1e-05, "loss": 1.7507, "step": 4350 }, { "epoch": 1.74, "learning_rate": 2.0933333333333335e-05, "loss": 1.743, "step": 4360 }, { "epoch": 1.75, "learning_rate": 2.0866666666666668e-05, "loss": 1.7689, "step": 4370 }, { "epoch": 1.75, "learning_rate": 2.08e-05, "loss": 1.7083, "step": 4380 }, { "epoch": 1.76, "learning_rate": 2.0733333333333334e-05, "loss": 1.7286, "step": 4390 }, { "epoch": 1.76, "learning_rate": 2.0666666666666666e-05, "loss": 1.7117, "step": 4400 }, { "epoch": 1.76, "learning_rate": 2.06e-05, "loss": 1.75, "step": 4410 }, { "epoch": 1.77, "learning_rate": 2.0533333333333336e-05, "loss": 1.7091, "step": 4420 }, { "epoch": 1.77, "learning_rate": 2.046666666666667e-05, "loss": 1.7298, "step": 4430 }, { "epoch": 1.78, "learning_rate": 2.04e-05, "loss": 1.7554, "step": 4440 }, { "epoch": 1.78, "learning_rate": 2.0333333333333334e-05, "loss": 1.6635, "step": 4450 }, { "epoch": 1.78, "learning_rate": 2.0266666666666667e-05, "loss": 1.7783, "step": 4460 }, { "epoch": 1.79, "learning_rate": 2.0200000000000003e-05, "loss": 1.7123, "step": 4470 }, { "epoch": 1.79, "learning_rate": 2.0133333333333336e-05, "loss": 1.7532, "step": 4480 }, { "epoch": 1.8, "learning_rate": 2.0066666666666665e-05, "loss": 1.7628, "step": 4490 }, { "epoch": 1.8, "learning_rate": 2e-05, "loss": 1.7267, "step": 4500 }, { "epoch": 1.8, "learning_rate": 1.9933333333333334e-05, "loss": 1.732, "step": 4510 }, { "epoch": 1.81, "learning_rate": 1.9866666666666667e-05, "loss": 1.7315, "step": 4520 }, { "epoch": 1.81, "learning_rate": 1.9800000000000004e-05, "loss": 1.7337, "step": 4530 }, { "epoch": 1.82, "learning_rate": 1.9733333333333333e-05, "loss": 1.7184, "step": 4540 }, { "epoch": 1.82, "learning_rate": 1.9666666666666666e-05, "loss": 1.7476, "step": 4550 }, { "epoch": 1.82, "learning_rate": 1.9600000000000002e-05, "loss": 1.7616, "step": 4560 }, { "epoch": 1.83, "learning_rate": 1.9533333333333335e-05, "loss": 1.7369, "step": 4570 }, { "epoch": 1.83, "learning_rate": 1.9466666666666668e-05, "loss": 1.7198, "step": 4580 }, { "epoch": 1.84, "learning_rate": 1.94e-05, "loss": 1.7625, "step": 4590 }, { "epoch": 1.84, "learning_rate": 1.9333333333333333e-05, "loss": 1.7187, "step": 4600 }, { "epoch": 1.84, "learning_rate": 1.926666666666667e-05, "loss": 1.7382, "step": 4610 }, { "epoch": 1.85, "learning_rate": 1.9200000000000003e-05, "loss": 1.7638, "step": 4620 }, { "epoch": 1.85, "learning_rate": 1.9133333333333332e-05, "loss": 1.7393, "step": 4630 }, { "epoch": 1.86, "learning_rate": 1.9066666666666668e-05, "loss": 1.7475, "step": 4640 }, { "epoch": 1.86, "learning_rate": 1.9e-05, "loss": 1.7743, "step": 4650 }, { "epoch": 1.86, "learning_rate": 1.8933333333333334e-05, "loss": 1.7686, "step": 4660 }, { "epoch": 1.87, "learning_rate": 1.886666666666667e-05, "loss": 1.7342, "step": 4670 }, { "epoch": 1.87, "learning_rate": 1.88e-05, "loss": 1.7404, "step": 4680 }, { "epoch": 1.88, "learning_rate": 1.8733333333333332e-05, "loss": 1.772, "step": 4690 }, { "epoch": 1.88, "learning_rate": 1.866666666666667e-05, "loss": 1.7225, "step": 4700 }, { "epoch": 1.88, "learning_rate": 1.86e-05, "loss": 1.7671, "step": 4710 }, { "epoch": 1.89, "learning_rate": 1.8533333333333334e-05, "loss": 1.7262, "step": 4720 }, { "epoch": 1.89, "learning_rate": 1.8466666666666667e-05, "loss": 1.7664, "step": 4730 }, { "epoch": 1.9, "learning_rate": 1.84e-05, "loss": 1.7139, "step": 4740 }, { "epoch": 1.9, "learning_rate": 1.8333333333333333e-05, "loss": 1.7559, "step": 4750 }, { "epoch": 1.9, "learning_rate": 1.826666666666667e-05, "loss": 1.7092, "step": 4760 }, { "epoch": 1.91, "learning_rate": 1.8200000000000002e-05, "loss": 1.7147, "step": 4770 }, { "epoch": 1.91, "learning_rate": 1.8133333333333335e-05, "loss": 1.7433, "step": 4780 }, { "epoch": 1.92, "learning_rate": 1.8066666666666668e-05, "loss": 1.7423, "step": 4790 }, { "epoch": 1.92, "learning_rate": 1.8e-05, "loss": 1.7421, "step": 4800 }, { "epoch": 1.92, "learning_rate": 1.7933333333333337e-05, "loss": 1.7571, "step": 4810 }, { "epoch": 1.93, "learning_rate": 1.7866666666666666e-05, "loss": 1.733, "step": 4820 }, { "epoch": 1.93, "learning_rate": 1.78e-05, "loss": 1.7223, "step": 4830 }, { "epoch": 1.94, "learning_rate": 1.7733333333333335e-05, "loss": 1.7414, "step": 4840 }, { "epoch": 1.94, "learning_rate": 1.7666666666666668e-05, "loss": 1.76, "step": 4850 }, { "epoch": 1.94, "learning_rate": 1.76e-05, "loss": 1.7358, "step": 4860 }, { "epoch": 1.95, "learning_rate": 1.7533333333333334e-05, "loss": 1.74, "step": 4870 }, { "epoch": 1.95, "learning_rate": 1.7466666666666667e-05, "loss": 1.7348, "step": 4880 }, { "epoch": 1.96, "learning_rate": 1.74e-05, "loss": 1.7439, "step": 4890 }, { "epoch": 1.96, "learning_rate": 1.7333333333333336e-05, "loss": 1.7639, "step": 4900 }, { "epoch": 1.96, "learning_rate": 1.726666666666667e-05, "loss": 1.7538, "step": 4910 }, { "epoch": 1.97, "learning_rate": 1.7199999999999998e-05, "loss": 1.7637, "step": 4920 }, { "epoch": 1.97, "learning_rate": 1.7133333333333334e-05, "loss": 1.7524, "step": 4930 }, { "epoch": 1.98, "learning_rate": 1.7066666666666667e-05, "loss": 1.714, "step": 4940 }, { "epoch": 1.98, "learning_rate": 1.7000000000000003e-05, "loss": 1.7355, "step": 4950 }, { "epoch": 1.98, "learning_rate": 1.6933333333333333e-05, "loss": 1.7058, "step": 4960 }, { "epoch": 1.99, "learning_rate": 1.6866666666666666e-05, "loss": 1.7185, "step": 4970 }, { "epoch": 1.99, "learning_rate": 1.6800000000000002e-05, "loss": 1.701, "step": 4980 }, { "epoch": 2.0, "learning_rate": 1.6733333333333335e-05, "loss": 1.7294, "step": 4990 }, { "epoch": 2.0, "learning_rate": 1.6666666666666667e-05, "loss": 1.7195, "step": 5000 }, { "epoch": 2.0, "learning_rate": 1.66e-05, "loss": 1.785, "step": 5010 }, { "epoch": 2.01, "learning_rate": 1.6533333333333333e-05, "loss": 1.7388, "step": 5020 }, { "epoch": 2.01, "learning_rate": 1.6466666666666666e-05, "loss": 1.7247, "step": 5030 }, { "epoch": 2.02, "learning_rate": 1.6400000000000002e-05, "loss": 1.7599, "step": 5040 }, { "epoch": 2.02, "learning_rate": 1.6333333333333335e-05, "loss": 1.7253, "step": 5050 }, { "epoch": 2.02, "learning_rate": 1.6266666666666665e-05, "loss": 1.7359, "step": 5060 }, { "epoch": 2.03, "learning_rate": 1.62e-05, "loss": 1.7299, "step": 5070 }, { "epoch": 2.03, "learning_rate": 1.6133333333333334e-05, "loss": 1.6954, "step": 5080 }, { "epoch": 2.04, "learning_rate": 1.606666666666667e-05, "loss": 1.7601, "step": 5090 }, { "epoch": 2.04, "learning_rate": 1.6000000000000003e-05, "loss": 1.7354, "step": 5100 }, { "epoch": 2.04, "learning_rate": 1.5933333333333332e-05, "loss": 1.7437, "step": 5110 }, { "epoch": 2.05, "learning_rate": 1.586666666666667e-05, "loss": 1.7225, "step": 5120 }, { "epoch": 2.05, "learning_rate": 1.58e-05, "loss": 1.7346, "step": 5130 }, { "epoch": 2.06, "learning_rate": 1.5733333333333334e-05, "loss": 1.7019, "step": 5140 }, { "epoch": 2.06, "learning_rate": 1.5666666666666667e-05, "loss": 1.7488, "step": 5150 }, { "epoch": 2.06, "learning_rate": 1.56e-05, "loss": 1.7259, "step": 5160 }, { "epoch": 2.07, "learning_rate": 1.5533333333333333e-05, "loss": 1.7441, "step": 5170 }, { "epoch": 2.07, "learning_rate": 1.546666666666667e-05, "loss": 1.7202, "step": 5180 }, { "epoch": 2.08, "learning_rate": 1.54e-05, "loss": 1.7284, "step": 5190 }, { "epoch": 2.08, "learning_rate": 1.5333333333333334e-05, "loss": 1.6949, "step": 5200 }, { "epoch": 2.08, "learning_rate": 1.5266666666666667e-05, "loss": 1.7723, "step": 5210 }, { "epoch": 2.09, "learning_rate": 1.52e-05, "loss": 1.7501, "step": 5220 }, { "epoch": 2.09, "learning_rate": 1.5133333333333333e-05, "loss": 1.7536, "step": 5230 }, { "epoch": 2.1, "learning_rate": 1.5066666666666668e-05, "loss": 1.7122, "step": 5240 }, { "epoch": 2.1, "learning_rate": 1.5e-05, "loss": 1.7591, "step": 5250 }, { "epoch": 2.1, "learning_rate": 1.4933333333333335e-05, "loss": 1.7371, "step": 5260 }, { "epoch": 2.11, "learning_rate": 1.4866666666666668e-05, "loss": 1.7547, "step": 5270 }, { "epoch": 2.11, "learning_rate": 1.48e-05, "loss": 1.7316, "step": 5280 }, { "epoch": 2.12, "learning_rate": 1.4733333333333335e-05, "loss": 1.7086, "step": 5290 }, { "epoch": 2.12, "learning_rate": 1.4666666666666668e-05, "loss": 1.7107, "step": 5300 }, { "epoch": 2.12, "learning_rate": 1.4599999999999999e-05, "loss": 1.7614, "step": 5310 }, { "epoch": 2.13, "learning_rate": 1.4533333333333335e-05, "loss": 1.7212, "step": 5320 }, { "epoch": 2.13, "learning_rate": 1.4466666666666667e-05, "loss": 1.7259, "step": 5330 }, { "epoch": 2.14, "learning_rate": 1.44e-05, "loss": 1.708, "step": 5340 }, { "epoch": 2.14, "learning_rate": 1.4333333333333334e-05, "loss": 1.7158, "step": 5350 }, { "epoch": 2.14, "learning_rate": 1.4266666666666667e-05, "loss": 1.7489, "step": 5360 }, { "epoch": 2.15, "learning_rate": 1.42e-05, "loss": 1.6801, "step": 5370 }, { "epoch": 2.15, "learning_rate": 1.4133333333333334e-05, "loss": 1.7052, "step": 5380 }, { "epoch": 2.16, "learning_rate": 1.4066666666666667e-05, "loss": 1.7301, "step": 5390 }, { "epoch": 2.16, "learning_rate": 1.4000000000000001e-05, "loss": 1.6767, "step": 5400 }, { "epoch": 2.16, "learning_rate": 1.3933333333333334e-05, "loss": 1.7496, "step": 5410 }, { "epoch": 2.17, "learning_rate": 1.3866666666666667e-05, "loss": 1.749, "step": 5420 }, { "epoch": 2.17, "learning_rate": 1.3800000000000002e-05, "loss": 1.7707, "step": 5430 }, { "epoch": 2.18, "learning_rate": 1.3733333333333335e-05, "loss": 1.7126, "step": 5440 }, { "epoch": 2.18, "learning_rate": 1.3666666666666666e-05, "loss": 1.7695, "step": 5450 }, { "epoch": 2.18, "learning_rate": 1.3600000000000002e-05, "loss": 1.7681, "step": 5460 }, { "epoch": 2.19, "learning_rate": 1.3533333333333335e-05, "loss": 1.7403, "step": 5470 }, { "epoch": 2.19, "learning_rate": 1.3466666666666666e-05, "loss": 1.7035, "step": 5480 }, { "epoch": 2.2, "learning_rate": 1.3400000000000002e-05, "loss": 1.7632, "step": 5490 }, { "epoch": 2.2, "learning_rate": 1.3333333333333333e-05, "loss": 1.7043, "step": 5500 }, { "epoch": 2.2, "learning_rate": 1.3266666666666666e-05, "loss": 1.72, "step": 5510 }, { "epoch": 2.21, "learning_rate": 1.32e-05, "loss": 1.7279, "step": 5520 }, { "epoch": 2.21, "learning_rate": 1.3133333333333334e-05, "loss": 1.7061, "step": 5530 }, { "epoch": 2.22, "learning_rate": 1.3066666666666666e-05, "loss": 1.7238, "step": 5540 }, { "epoch": 2.22, "learning_rate": 1.3000000000000001e-05, "loss": 1.7033, "step": 5550 }, { "epoch": 2.22, "learning_rate": 1.2933333333333334e-05, "loss": 1.7398, "step": 5560 }, { "epoch": 2.23, "learning_rate": 1.2866666666666668e-05, "loss": 1.7391, "step": 5570 }, { "epoch": 2.23, "learning_rate": 1.2800000000000001e-05, "loss": 1.7648, "step": 5580 }, { "epoch": 2.24, "learning_rate": 1.2733333333333334e-05, "loss": 1.7452, "step": 5590 }, { "epoch": 2.24, "learning_rate": 1.2666666666666668e-05, "loss": 1.7153, "step": 5600 }, { "epoch": 2.24, "learning_rate": 1.2600000000000001e-05, "loss": 1.7601, "step": 5610 }, { "epoch": 2.25, "learning_rate": 1.2533333333333332e-05, "loss": 1.6916, "step": 5620 }, { "epoch": 2.25, "learning_rate": 1.2466666666666667e-05, "loss": 1.7697, "step": 5630 }, { "epoch": 2.26, "learning_rate": 1.24e-05, "loss": 1.7075, "step": 5640 }, { "epoch": 2.26, "learning_rate": 1.2333333333333334e-05, "loss": 1.6793, "step": 5650 }, { "epoch": 2.26, "learning_rate": 1.2266666666666667e-05, "loss": 1.7611, "step": 5660 }, { "epoch": 2.27, "learning_rate": 1.22e-05, "loss": 1.7405, "step": 5670 }, { "epoch": 2.27, "learning_rate": 1.2133333333333335e-05, "loss": 1.738, "step": 5680 }, { "epoch": 2.28, "learning_rate": 1.2066666666666667e-05, "loss": 1.719, "step": 5690 }, { "epoch": 2.28, "learning_rate": 1.2e-05, "loss": 1.7156, "step": 5700 }, { "epoch": 2.28, "learning_rate": 1.1933333333333333e-05, "loss": 1.7065, "step": 5710 }, { "epoch": 2.29, "learning_rate": 1.1866666666666668e-05, "loss": 1.7449, "step": 5720 }, { "epoch": 2.29, "learning_rate": 1.18e-05, "loss": 1.6956, "step": 5730 }, { "epoch": 2.3, "learning_rate": 1.1733333333333333e-05, "loss": 1.6953, "step": 5740 }, { "epoch": 2.3, "learning_rate": 1.1666666666666668e-05, "loss": 1.7202, "step": 5750 }, { "epoch": 2.3, "learning_rate": 1.16e-05, "loss": 1.7228, "step": 5760 }, { "epoch": 2.31, "learning_rate": 1.1533333333333334e-05, "loss": 1.7384, "step": 5770 }, { "epoch": 2.31, "learning_rate": 1.1466666666666666e-05, "loss": 1.7316, "step": 5780 }, { "epoch": 2.32, "learning_rate": 1.1400000000000001e-05, "loss": 1.7608, "step": 5790 }, { "epoch": 2.32, "learning_rate": 1.1333333333333334e-05, "loss": 1.7391, "step": 5800 }, { "epoch": 2.32, "learning_rate": 1.1266666666666667e-05, "loss": 1.7605, "step": 5810 }, { "epoch": 2.33, "learning_rate": 1.1200000000000001e-05, "loss": 1.7753, "step": 5820 }, { "epoch": 2.33, "learning_rate": 1.1133333333333334e-05, "loss": 1.7087, "step": 5830 }, { "epoch": 2.34, "learning_rate": 1.1066666666666667e-05, "loss": 1.7355, "step": 5840 }, { "epoch": 2.34, "learning_rate": 1.1000000000000001e-05, "loss": 1.7402, "step": 5850 }, { "epoch": 2.34, "learning_rate": 1.0933333333333334e-05, "loss": 1.7254, "step": 5860 }, { "epoch": 2.35, "learning_rate": 1.0866666666666667e-05, "loss": 1.7543, "step": 5870 }, { "epoch": 2.35, "learning_rate": 1.08e-05, "loss": 1.7459, "step": 5880 }, { "epoch": 2.36, "learning_rate": 1.0733333333333334e-05, "loss": 1.7242, "step": 5890 }, { "epoch": 2.36, "learning_rate": 1.0666666666666667e-05, "loss": 1.6868, "step": 5900 }, { "epoch": 2.36, "learning_rate": 1.06e-05, "loss": 1.7215, "step": 5910 }, { "epoch": 2.37, "learning_rate": 1.0533333333333335e-05, "loss": 1.7416, "step": 5920 }, { "epoch": 2.37, "learning_rate": 1.0466666666666668e-05, "loss": 1.7598, "step": 5930 }, { "epoch": 2.38, "learning_rate": 1.04e-05, "loss": 1.7048, "step": 5940 }, { "epoch": 2.38, "learning_rate": 1.0333333333333333e-05, "loss": 1.7548, "step": 5950 }, { "epoch": 2.38, "learning_rate": 1.0266666666666668e-05, "loss": 1.6923, "step": 5960 }, { "epoch": 2.39, "learning_rate": 1.02e-05, "loss": 1.6878, "step": 5970 }, { "epoch": 2.39, "learning_rate": 1.0133333333333333e-05, "loss": 1.7219, "step": 5980 }, { "epoch": 2.4, "learning_rate": 1.0066666666666668e-05, "loss": 1.7498, "step": 5990 }, { "epoch": 2.4, "learning_rate": 1e-05, "loss": 1.7491, "step": 6000 }, { "epoch": 2.4, "learning_rate": 9.933333333333334e-06, "loss": 1.7176, "step": 6010 }, { "epoch": 2.41, "learning_rate": 9.866666666666667e-06, "loss": 1.7554, "step": 6020 }, { "epoch": 2.41, "learning_rate": 9.800000000000001e-06, "loss": 1.7421, "step": 6030 }, { "epoch": 2.42, "learning_rate": 9.733333333333334e-06, "loss": 1.7669, "step": 6040 }, { "epoch": 2.42, "learning_rate": 9.666666666666667e-06, "loss": 1.7059, "step": 6050 }, { "epoch": 2.42, "learning_rate": 9.600000000000001e-06, "loss": 1.7474, "step": 6060 }, { "epoch": 2.43, "learning_rate": 9.533333333333334e-06, "loss": 1.745, "step": 6070 }, { "epoch": 2.43, "learning_rate": 9.466666666666667e-06, "loss": 1.7072, "step": 6080 }, { "epoch": 2.44, "learning_rate": 9.4e-06, "loss": 1.7376, "step": 6090 }, { "epoch": 2.44, "learning_rate": 9.333333333333334e-06, "loss": 1.7262, "step": 6100 }, { "epoch": 2.44, "learning_rate": 9.266666666666667e-06, "loss": 1.7443, "step": 6110 }, { "epoch": 2.45, "learning_rate": 9.2e-06, "loss": 1.7375, "step": 6120 }, { "epoch": 2.45, "learning_rate": 9.133333333333335e-06, "loss": 1.7275, "step": 6130 }, { "epoch": 2.46, "learning_rate": 9.066666666666667e-06, "loss": 1.7203, "step": 6140 }, { "epoch": 2.46, "learning_rate": 9e-06, "loss": 1.7223, "step": 6150 }, { "epoch": 2.46, "learning_rate": 8.933333333333333e-06, "loss": 1.7359, "step": 6160 }, { "epoch": 2.47, "learning_rate": 8.866666666666668e-06, "loss": 1.7524, "step": 6170 }, { "epoch": 2.47, "learning_rate": 8.8e-06, "loss": 1.7701, "step": 6180 }, { "epoch": 2.48, "learning_rate": 8.733333333333333e-06, "loss": 1.7481, "step": 6190 }, { "epoch": 2.48, "learning_rate": 8.666666666666668e-06, "loss": 1.7582, "step": 6200 }, { "epoch": 2.48, "learning_rate": 8.599999999999999e-06, "loss": 1.7246, "step": 6210 }, { "epoch": 2.49, "learning_rate": 8.533333333333334e-06, "loss": 1.7509, "step": 6220 }, { "epoch": 2.49, "learning_rate": 8.466666666666666e-06, "loss": 1.717, "step": 6230 }, { "epoch": 2.5, "learning_rate": 8.400000000000001e-06, "loss": 1.7374, "step": 6240 }, { "epoch": 2.5, "learning_rate": 8.333333333333334e-06, "loss": 1.7666, "step": 6250 }, { "epoch": 2.5, "learning_rate": 8.266666666666667e-06, "loss": 1.7121, "step": 6260 }, { "epoch": 2.51, "learning_rate": 8.200000000000001e-06, "loss": 1.7085, "step": 6270 }, { "epoch": 2.51, "learning_rate": 8.133333333333332e-06, "loss": 1.7542, "step": 6280 }, { "epoch": 2.52, "learning_rate": 8.066666666666667e-06, "loss": 1.7224, "step": 6290 }, { "epoch": 2.52, "learning_rate": 8.000000000000001e-06, "loss": 1.7129, "step": 6300 }, { "epoch": 2.52, "learning_rate": 7.933333333333334e-06, "loss": 1.7168, "step": 6310 }, { "epoch": 2.53, "learning_rate": 7.866666666666667e-06, "loss": 1.7319, "step": 6320 }, { "epoch": 2.53, "learning_rate": 7.8e-06, "loss": 1.695, "step": 6330 }, { "epoch": 2.54, "learning_rate": 7.733333333333334e-06, "loss": 1.713, "step": 6340 }, { "epoch": 2.54, "learning_rate": 7.666666666666667e-06, "loss": 1.7201, "step": 6350 }, { "epoch": 2.54, "learning_rate": 7.6e-06, "loss": 1.7097, "step": 6360 }, { "epoch": 2.55, "learning_rate": 7.533333333333334e-06, "loss": 1.7161, "step": 6370 }, { "epoch": 2.55, "learning_rate": 7.4666666666666675e-06, "loss": 1.713, "step": 6380 }, { "epoch": 2.56, "learning_rate": 7.4e-06, "loss": 1.765, "step": 6390 }, { "epoch": 2.56, "learning_rate": 7.333333333333334e-06, "loss": 1.7378, "step": 6400 }, { "epoch": 2.56, "learning_rate": 7.266666666666668e-06, "loss": 1.6753, "step": 6410 }, { "epoch": 2.57, "learning_rate": 7.2e-06, "loss": 1.7128, "step": 6420 }, { "epoch": 2.57, "learning_rate": 7.133333333333333e-06, "loss": 1.7303, "step": 6430 }, { "epoch": 2.58, "learning_rate": 7.066666666666667e-06, "loss": 1.7408, "step": 6440 }, { "epoch": 2.58, "learning_rate": 7.000000000000001e-06, "loss": 1.7166, "step": 6450 }, { "epoch": 2.58, "learning_rate": 6.933333333333334e-06, "loss": 1.7363, "step": 6460 }, { "epoch": 2.59, "learning_rate": 6.866666666666667e-06, "loss": 1.8145, "step": 6470 }, { "epoch": 2.59, "learning_rate": 6.800000000000001e-06, "loss": 1.736, "step": 6480 }, { "epoch": 2.6, "learning_rate": 6.733333333333333e-06, "loss": 1.7645, "step": 6490 }, { "epoch": 2.6, "learning_rate": 6.666666666666667e-06, "loss": 1.7354, "step": 6500 }, { "epoch": 2.6, "learning_rate": 6.6e-06, "loss": 1.7248, "step": 6510 }, { "epoch": 2.61, "learning_rate": 6.533333333333333e-06, "loss": 1.6965, "step": 6520 }, { "epoch": 2.61, "learning_rate": 6.466666666666667e-06, "loss": 1.7325, "step": 6530 }, { "epoch": 2.62, "learning_rate": 6.4000000000000006e-06, "loss": 1.722, "step": 6540 }, { "epoch": 2.62, "learning_rate": 6.333333333333334e-06, "loss": 1.7391, "step": 6550 }, { "epoch": 2.62, "learning_rate": 6.266666666666666e-06, "loss": 1.7299, "step": 6560 }, { "epoch": 2.63, "learning_rate": 6.2e-06, "loss": 1.6938, "step": 6570 }, { "epoch": 2.63, "learning_rate": 6.133333333333334e-06, "loss": 1.7031, "step": 6580 }, { "epoch": 2.64, "learning_rate": 6.066666666666667e-06, "loss": 1.7268, "step": 6590 }, { "epoch": 2.64, "learning_rate": 6e-06, "loss": 1.7012, "step": 6600 }, { "epoch": 2.64, "learning_rate": 5.933333333333334e-06, "loss": 1.725, "step": 6610 }, { "epoch": 2.65, "learning_rate": 5.866666666666667e-06, "loss": 1.7499, "step": 6620 }, { "epoch": 2.65, "learning_rate": 5.8e-06, "loss": 1.7608, "step": 6630 }, { "epoch": 2.66, "learning_rate": 5.733333333333333e-06, "loss": 1.7039, "step": 6640 }, { "epoch": 2.66, "learning_rate": 5.666666666666667e-06, "loss": 1.7004, "step": 6650 }, { "epoch": 2.66, "learning_rate": 5.600000000000001e-06, "loss": 1.7364, "step": 6660 }, { "epoch": 2.67, "learning_rate": 5.5333333333333334e-06, "loss": 1.6957, "step": 6670 }, { "epoch": 2.67, "learning_rate": 5.466666666666667e-06, "loss": 1.708, "step": 6680 }, { "epoch": 2.68, "learning_rate": 5.4e-06, "loss": 1.7308, "step": 6690 }, { "epoch": 2.68, "learning_rate": 5.333333333333334e-06, "loss": 1.7412, "step": 6700 }, { "epoch": 2.68, "learning_rate": 5.266666666666667e-06, "loss": 1.7333, "step": 6710 }, { "epoch": 2.69, "learning_rate": 5.2e-06, "loss": 1.7229, "step": 6720 }, { "epoch": 2.69, "learning_rate": 5.133333333333334e-06, "loss": 1.7574, "step": 6730 }, { "epoch": 2.7, "learning_rate": 5.066666666666667e-06, "loss": 1.706, "step": 6740 }, { "epoch": 2.7, "learning_rate": 5e-06, "loss": 1.7305, "step": 6750 }, { "epoch": 2.7, "learning_rate": 4.933333333333333e-06, "loss": 1.7528, "step": 6760 }, { "epoch": 2.71, "learning_rate": 4.866666666666667e-06, "loss": 1.7153, "step": 6770 }, { "epoch": 2.71, "learning_rate": 4.800000000000001e-06, "loss": 1.7092, "step": 6780 }, { "epoch": 2.72, "learning_rate": 4.7333333333333335e-06, "loss": 1.7518, "step": 6790 }, { "epoch": 2.72, "learning_rate": 4.666666666666667e-06, "loss": 1.679, "step": 6800 }, { "epoch": 2.72, "learning_rate": 4.6e-06, "loss": 1.726, "step": 6810 }, { "epoch": 2.73, "learning_rate": 4.533333333333334e-06, "loss": 1.7061, "step": 6820 }, { "epoch": 2.73, "learning_rate": 4.4666666666666665e-06, "loss": 1.7817, "step": 6830 }, { "epoch": 2.74, "learning_rate": 4.4e-06, "loss": 1.718, "step": 6840 }, { "epoch": 2.74, "learning_rate": 4.333333333333334e-06, "loss": 1.741, "step": 6850 }, { "epoch": 2.74, "learning_rate": 4.266666666666667e-06, "loss": 1.7458, "step": 6860 }, { "epoch": 2.75, "learning_rate": 4.2000000000000004e-06, "loss": 1.7752, "step": 6870 }, { "epoch": 2.75, "learning_rate": 4.133333333333333e-06, "loss": 1.7114, "step": 6880 }, { "epoch": 2.76, "learning_rate": 4.066666666666666e-06, "loss": 1.6817, "step": 6890 }, { "epoch": 2.76, "learning_rate": 4.000000000000001e-06, "loss": 1.721, "step": 6900 }, { "epoch": 2.76, "learning_rate": 3.9333333333333335e-06, "loss": 1.6931, "step": 6910 }, { "epoch": 2.77, "learning_rate": 3.866666666666667e-06, "loss": 1.7306, "step": 6920 }, { "epoch": 2.77, "learning_rate": 3.8e-06, "loss": 1.7322, "step": 6930 }, { "epoch": 2.78, "learning_rate": 3.7333333333333337e-06, "loss": 1.744, "step": 6940 }, { "epoch": 2.78, "learning_rate": 3.666666666666667e-06, "loss": 1.7434, "step": 6950 }, { "epoch": 2.78, "learning_rate": 3.6e-06, "loss": 1.7176, "step": 6960 }, { "epoch": 2.79, "learning_rate": 3.5333333333333335e-06, "loss": 1.728, "step": 6970 }, { "epoch": 2.79, "learning_rate": 3.466666666666667e-06, "loss": 1.7597, "step": 6980 }, { "epoch": 2.8, "learning_rate": 3.4000000000000005e-06, "loss": 1.6855, "step": 6990 }, { "epoch": 2.8, "learning_rate": 3.3333333333333333e-06, "loss": 1.7674, "step": 7000 }, { "epoch": 2.8, "learning_rate": 3.2666666666666666e-06, "loss": 1.7249, "step": 7010 }, { "epoch": 2.81, "learning_rate": 3.2000000000000003e-06, "loss": 1.7586, "step": 7020 }, { "epoch": 2.81, "learning_rate": 3.133333333333333e-06, "loss": 1.7646, "step": 7030 }, { "epoch": 2.82, "learning_rate": 3.066666666666667e-06, "loss": 1.7221, "step": 7040 }, { "epoch": 2.82, "learning_rate": 3e-06, "loss": 1.7522, "step": 7050 }, { "epoch": 2.82, "learning_rate": 2.9333333333333333e-06, "loss": 1.765, "step": 7060 }, { "epoch": 2.83, "learning_rate": 2.8666666666666666e-06, "loss": 1.7374, "step": 7070 }, { "epoch": 2.83, "learning_rate": 2.8000000000000003e-06, "loss": 1.6994, "step": 7080 }, { "epoch": 2.84, "learning_rate": 2.7333333333333336e-06, "loss": 1.6968, "step": 7090 }, { "epoch": 2.84, "learning_rate": 2.666666666666667e-06, "loss": 1.7575, "step": 7100 }, { "epoch": 2.84, "learning_rate": 2.6e-06, "loss": 1.7484, "step": 7110 }, { "epoch": 2.85, "learning_rate": 2.5333333333333334e-06, "loss": 1.7298, "step": 7120 }, { "epoch": 2.85, "learning_rate": 2.4666666666666666e-06, "loss": 1.7556, "step": 7130 }, { "epoch": 2.86, "learning_rate": 2.4000000000000003e-06, "loss": 1.7202, "step": 7140 }, { "epoch": 2.86, "learning_rate": 2.3333333333333336e-06, "loss": 1.7413, "step": 7150 }, { "epoch": 2.86, "learning_rate": 2.266666666666667e-06, "loss": 1.7319, "step": 7160 }, { "epoch": 2.87, "learning_rate": 2.2e-06, "loss": 1.7296, "step": 7170 }, { "epoch": 2.87, "learning_rate": 2.1333333333333334e-06, "loss": 1.7418, "step": 7180 }, { "epoch": 2.88, "learning_rate": 2.0666666666666666e-06, "loss": 1.71, "step": 7190 }, { "epoch": 2.88, "learning_rate": 2.0000000000000003e-06, "loss": 1.7301, "step": 7200 }, { "epoch": 2.88, "learning_rate": 1.9333333333333336e-06, "loss": 1.7327, "step": 7210 }, { "epoch": 2.89, "learning_rate": 1.8666666666666669e-06, "loss": 1.7312, "step": 7220 }, { "epoch": 2.89, "learning_rate": 1.8e-06, "loss": 1.7027, "step": 7230 }, { "epoch": 2.9, "learning_rate": 1.7333333333333334e-06, "loss": 1.8019, "step": 7240 }, { "epoch": 2.9, "learning_rate": 1.6666666666666667e-06, "loss": 1.6923, "step": 7250 }, { "epoch": 2.9, "learning_rate": 1.6000000000000001e-06, "loss": 1.7176, "step": 7260 }, { "epoch": 2.91, "learning_rate": 1.5333333333333334e-06, "loss": 1.7333, "step": 7270 }, { "epoch": 2.91, "learning_rate": 1.4666666666666667e-06, "loss": 1.7161, "step": 7280 }, { "epoch": 2.92, "learning_rate": 1.4000000000000001e-06, "loss": 1.7511, "step": 7290 }, { "epoch": 2.92, "learning_rate": 1.3333333333333334e-06, "loss": 1.7001, "step": 7300 }, { "epoch": 2.92, "learning_rate": 1.2666666666666667e-06, "loss": 1.6844, "step": 7310 }, { "epoch": 2.93, "learning_rate": 1.2000000000000002e-06, "loss": 1.771, "step": 7320 }, { "epoch": 2.93, "learning_rate": 1.1333333333333334e-06, "loss": 1.7213, "step": 7330 }, { "epoch": 2.94, "learning_rate": 1.0666666666666667e-06, "loss": 1.7497, "step": 7340 }, { "epoch": 2.94, "learning_rate": 1.0000000000000002e-06, "loss": 1.747, "step": 7350 }, { "epoch": 2.94, "learning_rate": 9.333333333333334e-07, "loss": 1.6864, "step": 7360 }, { "epoch": 2.95, "learning_rate": 8.666666666666667e-07, "loss": 1.7702, "step": 7370 }, { "epoch": 2.95, "learning_rate": 8.000000000000001e-07, "loss": 1.7089, "step": 7380 }, { "epoch": 2.96, "learning_rate": 7.333333333333333e-07, "loss": 1.7194, "step": 7390 }, { "epoch": 2.96, "learning_rate": 6.666666666666667e-07, "loss": 1.779, "step": 7400 }, { "epoch": 2.96, "learning_rate": 6.000000000000001e-07, "loss": 1.7295, "step": 7410 }, { "epoch": 2.97, "learning_rate": 5.333333333333333e-07, "loss": 1.7396, "step": 7420 }, { "epoch": 2.97, "learning_rate": 4.666666666666667e-07, "loss": 1.7229, "step": 7430 }, { "epoch": 2.98, "learning_rate": 4.0000000000000003e-07, "loss": 1.7435, "step": 7440 }, { "epoch": 2.98, "learning_rate": 3.3333333333333335e-07, "loss": 1.7318, "step": 7450 }, { "epoch": 2.98, "learning_rate": 2.6666666666666667e-07, "loss": 1.729, "step": 7460 }, { "epoch": 2.99, "learning_rate": 2.0000000000000002e-07, "loss": 1.755, "step": 7470 }, { "epoch": 2.99, "learning_rate": 1.3333333333333334e-07, "loss": 1.7089, "step": 7480 }, { "epoch": 3.0, "learning_rate": 6.666666666666667e-08, "loss": 1.7234, "step": 7490 }, { "epoch": 3.0, "learning_rate": 0.0, "loss": 1.7479, "step": 7500 } ], "logging_steps": 10, "max_steps": 7500, "num_input_tokens_seen": 0, "num_train_epochs": 3, "save_steps": 500, "total_flos": 2.4372773388288e+18, "train_batch_size": 4, "trial_name": null, "trial_params": null }