diff --git "a/trainer_state.json" "b/trainer_state.json"
new file mode 100644--- /dev/null
+++ "b/trainer_state.json"
@@ -0,0 +1,18016 @@
+{
+  "best_metric": null,
+  "best_model_checkpoint": null,
+  "epoch": 4.51439126329372,
+  "global_step": 150000,
+  "is_hyper_param_search": false,
+  "is_local_process_zero": true,
+  "is_world_process_zero": true,
+  "log_history": [
+    {
+      "epoch": 0.0,
+      "learning_rate": 9.998333333333334e-05,
+      "loss": 12.9756,
+      "step": 50
+    },
+    {
+      "epoch": 0.0,
+      "learning_rate": 9.996666666666668e-05,
+      "loss": 10.241,
+      "step": 100
+    },
+    {
+      "epoch": 0.0,
+      "learning_rate": 9.995e-05,
+      "loss": 9.896,
+      "step": 150
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.993333333333334e-05,
+      "loss": 9.7387,
+      "step": 200
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.991666666666666e-05,
+      "loss": 9.6,
+      "step": 250
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.99e-05,
+      "loss": 9.4997,
+      "step": 300
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.988333333333334e-05,
+      "loss": 9.4095,
+      "step": 350
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.986666666666668e-05,
+      "loss": 9.3014,
+      "step": 400
+    },
+    {
+      "epoch": 0.01,
+      "learning_rate": 9.985000000000001e-05,
+      "loss": 9.2068,
+      "step": 450
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.983333333333334e-05,
+      "loss": 9.1056,
+      "step": 500
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.981666666666668e-05,
+      "loss": 9.0049,
+      "step": 550
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.98e-05,
+      "loss": 8.9067,
+      "step": 600
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.978333333333334e-05,
+      "loss": 8.8035,
+      "step": 650
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.976666666666667e-05,
+      "loss": 8.6573,
+      "step": 700
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.975000000000001e-05,
+      "loss": 8.4858,
+      "step": 750
+    },
+    {
+      "epoch": 0.02,
+      "learning_rate": 9.973333333333334e-05,
+      "loss": 8.3527,
+      "step": 800
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.971666666666667e-05,
+      "loss": 8.1806,
+      "step": 850
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.970000000000001e-05,
+      "loss": 8.0552,
+      "step": 900
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.968333333333333e-05,
+      "loss": 7.8983,
+      "step": 950
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.966666666666667e-05,
+      "loss": 7.7331,
+      "step": 1000
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.965000000000001e-05,
+      "loss": 7.5792,
+      "step": 1050
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.963333333333333e-05,
+      "loss": 7.4158,
+      "step": 1100
+    },
+    {
+      "epoch": 0.03,
+      "learning_rate": 9.961666666666667e-05,
+      "loss": 7.2739,
+      "step": 1150
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.960000000000001e-05,
+      "loss": 7.1047,
+      "step": 1200
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.958333333333335e-05,
+      "loss": 6.9623,
+      "step": 1250
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.956666666666667e-05,
+      "loss": 6.847,
+      "step": 1300
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.955000000000001e-05,
+      "loss": 6.7164,
+      "step": 1350
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.953333333333333e-05,
+      "loss": 6.5928,
+      "step": 1400
+    },
+    {
+      "epoch": 0.04,
+      "learning_rate": 9.951666666666667e-05,
+      "loss": 6.4514,
+      "step": 1450
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.95e-05,
+      "loss": 6.3427,
+      "step": 1500
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.948333333333334e-05,
+      "loss": 6.2347,
+      "step": 1550
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.946666666666668e-05,
+      "loss": 6.0981,
+      "step": 1600
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.945e-05,
+      "loss": 6.044,
+      "step": 1650
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.943333333333333e-05,
+      "loss": 5.9143,
+      "step": 1700
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.941666666666667e-05,
+      "loss": 5.8577,
+      "step": 1750
+    },
+    {
+      "epoch": 0.05,
+      "learning_rate": 9.94e-05,
+      "loss": 5.7443,
+      "step": 1800
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.938333333333334e-05,
+      "loss": 5.6739,
+      "step": 1850
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.936666666666668e-05,
+      "loss": 5.567,
+      "step": 1900
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.935000000000002e-05,
+      "loss": 5.529,
+      "step": 1950
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.933333333333334e-05,
+      "loss": 5.4576,
+      "step": 2000
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.931666666666666e-05,
+      "loss": 5.368,
+      "step": 2050
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.93e-05,
+      "loss": 5.2762,
+      "step": 2100
+    },
+    {
+      "epoch": 0.06,
+      "learning_rate": 9.928333333333334e-05,
+      "loss": 5.2458,
+      "step": 2150
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.926666666666668e-05,
+      "loss": 5.1764,
+      "step": 2200
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.925000000000001e-05,
+      "loss": 5.1331,
+      "step": 2250
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.923333333333334e-05,
+      "loss": 5.0553,
+      "step": 2300
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.921666666666668e-05,
+      "loss": 5.0334,
+      "step": 2350
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.92e-05,
+      "loss": 4.9688,
+      "step": 2400
+    },
+    {
+      "epoch": 0.07,
+      "learning_rate": 9.918333333333334e-05,
+      "loss": 4.8926,
+      "step": 2450
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.916666666666667e-05,
+      "loss": 4.8746,
+      "step": 2500
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.915000000000001e-05,
+      "loss": 4.8017,
+      "step": 2550
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.913333333333334e-05,
+      "loss": 4.7617,
+      "step": 2600
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.911666666666667e-05,
+      "loss": 4.7017,
+      "step": 2650
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.910000000000001e-05,
+      "loss": 4.7034,
+      "step": 2700
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.908333333333333e-05,
+      "loss": 4.6349,
+      "step": 2750
+    },
+    {
+      "epoch": 0.08,
+      "learning_rate": 9.906666666666667e-05,
+      "loss": 4.6057,
+      "step": 2800
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.905000000000001e-05,
+      "loss": 4.5507,
+      "step": 2850
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.903333333333333e-05,
+      "loss": 4.5309,
+      "step": 2900
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.901666666666667e-05,
+      "loss": 4.5222,
+      "step": 2950
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.900000000000001e-05,
+      "loss": 4.4429,
+      "step": 3000
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.898333333333335e-05,
+      "loss": 4.4487,
+      "step": 3050
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.896666666666667e-05,
+      "loss": 4.4292,
+      "step": 3100
+    },
+    {
+      "epoch": 0.09,
+      "learning_rate": 9.895e-05,
+      "loss": 4.3578,
+      "step": 3150
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.893333333333333e-05,
+      "loss": 4.3315,
+      "step": 3200
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.891666666666667e-05,
+      "loss": 4.3199,
+      "step": 3250
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.89e-05,
+      "loss": 4.2921,
+      "step": 3300
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.888333333333334e-05,
+      "loss": 4.2871,
+      "step": 3350
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.886666666666668e-05,
+      "loss": 4.2179,
+      "step": 3400
+    },
+    {
+      "epoch": 0.1,
+      "learning_rate": 9.885e-05,
+      "loss": 4.2626,
+      "step": 3450
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.883333333333333e-05,
+      "loss": 4.216,
+      "step": 3500
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.881666666666667e-05,
+      "loss": 4.146,
+      "step": 3550
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.88e-05,
+      "loss": 4.1384,
+      "step": 3600
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.878333333333334e-05,
+      "loss": 4.0877,
+      "step": 3650
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.876666666666668e-05,
+      "loss": 4.1215,
+      "step": 3700
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.875000000000002e-05,
+      "loss": 4.0752,
+      "step": 3750
+    },
+    {
+      "epoch": 0.11,
+      "learning_rate": 9.873333333333334e-05,
+      "loss": 4.0535,
+      "step": 3800
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.871666666666666e-05,
+      "loss": 4.0446,
+      "step": 3850
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.87e-05,
+      "loss": 4.0273,
+      "step": 3900
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.868333333333334e-05,
+      "loss": 3.987,
+      "step": 3950
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.866666666666668e-05,
+      "loss": 3.9682,
+      "step": 4000
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.865000000000001e-05,
+      "loss": 3.9615,
+      "step": 4050
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.863333333333334e-05,
+      "loss": 3.9437,
+      "step": 4100
+    },
+    {
+      "epoch": 0.12,
+      "learning_rate": 9.861666666666667e-05,
+      "loss": 3.9609,
+      "step": 4150
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.86e-05,
+      "loss": 3.9007,
+      "step": 4200
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.858333333333334e-05,
+      "loss": 3.9197,
+      "step": 4250
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.856666666666667e-05,
+      "loss": 3.9092,
+      "step": 4300
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.855000000000001e-05,
+      "loss": 3.8815,
+      "step": 4350
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.853333333333333e-05,
+      "loss": 3.8731,
+      "step": 4400
+    },
+    {
+      "epoch": 0.13,
+      "learning_rate": 9.851666666666667e-05,
+      "loss": 3.8498,
+      "step": 4450
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.850000000000001e-05,
+      "loss": 3.8191,
+      "step": 4500
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.848333333333333e-05,
+      "loss": 3.8038,
+      "step": 4550
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.846666666666667e-05,
+      "loss": 3.7804,
+      "step": 4600
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.845000000000001e-05,
+      "loss": 3.7785,
+      "step": 4650
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.843333333333333e-05,
+      "loss": 3.7524,
+      "step": 4700
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.841666666666667e-05,
+      "loss": 3.7435,
+      "step": 4750
+    },
+    {
+      "epoch": 0.14,
+      "learning_rate": 9.84e-05,
+      "loss": 3.7058,
+      "step": 4800
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.838333333333334e-05,
+      "loss": 3.7213,
+      "step": 4850
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.836666666666667e-05,
+      "loss": 3.7199,
+      "step": 4900
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.835e-05,
+      "loss": 3.7109,
+      "step": 4950
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.833333333333333e-05,
+      "loss": 3.67,
+      "step": 5000
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.831666666666667e-05,
+      "loss": 3.6672,
+      "step": 5050
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.83e-05,
+      "loss": 3.6381,
+      "step": 5100
+    },
+    {
+      "epoch": 0.15,
+      "learning_rate": 9.828333333333334e-05,
+      "loss": 3.652,
+      "step": 5150
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.826666666666668e-05,
+      "loss": 3.6295,
+      "step": 5200
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.825e-05,
+      "loss": 3.6133,
+      "step": 5250
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.823333333333333e-05,
+      "loss": 3.6358,
+      "step": 5300
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.821666666666666e-05,
+      "loss": 3.5972,
+      "step": 5350
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.82e-05,
+      "loss": 3.5599,
+      "step": 5400
+    },
+    {
+      "epoch": 0.16,
+      "learning_rate": 9.818333333333334e-05,
+      "loss": 3.5948,
+      "step": 5450
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.816666666666668e-05,
+      "loss": 3.5616,
+      "step": 5500
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.815000000000001e-05,
+      "loss": 3.5531,
+      "step": 5550
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.813333333333334e-05,
+      "loss": 3.5154,
+      "step": 5600
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.811666666666666e-05,
+      "loss": 3.5399,
+      "step": 5650
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.81e-05,
+      "loss": 3.5019,
+      "step": 5700
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.808333333333334e-05,
+      "loss": 3.5006,
+      "step": 5750
+    },
+    {
+      "epoch": 0.17,
+      "learning_rate": 9.806666666666667e-05,
+      "loss": 3.516,
+      "step": 5800
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.805000000000001e-05,
+      "loss": 3.4711,
+      "step": 5850
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.803333333333334e-05,
+      "loss": 3.4841,
+      "step": 5900
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.801666666666667e-05,
+      "loss": 3.4669,
+      "step": 5950
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.8e-05,
+      "loss": 3.4331,
+      "step": 6000
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.798333333333333e-05,
+      "loss": 3.4647,
+      "step": 6050
+    },
+    {
+      "epoch": 0.18,
+      "learning_rate": 9.796666666666667e-05,
+      "loss": 3.4064,
+      "step": 6100
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.795000000000001e-05,
+      "loss": 3.4302,
+      "step": 6150
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.793333333333333e-05,
+      "loss": 3.4419,
+      "step": 6200
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.791666666666667e-05,
+      "loss": 3.4309,
+      "step": 6250
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.790000000000001e-05,
+      "loss": 3.3983,
+      "step": 6300
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.788333333333333e-05,
+      "loss": 3.4278,
+      "step": 6350
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.786666666666667e-05,
+      "loss": 3.3887,
+      "step": 6400
+    },
+    {
+      "epoch": 0.19,
+      "learning_rate": 9.785e-05,
+      "loss": 3.3832,
+      "step": 6450
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.783333333333334e-05,
+      "loss": 3.3907,
+      "step": 6500
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.781666666666667e-05,
+      "loss": 3.3572,
+      "step": 6550
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.78e-05,
+      "loss": 3.3508,
+      "step": 6600
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.778333333333334e-05,
+      "loss": 3.3148,
+      "step": 6650
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.776666666666667e-05,
+      "loss": 3.3208,
+      "step": 6700
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.775e-05,
+      "loss": 3.3464,
+      "step": 6750
+    },
+    {
+      "epoch": 0.2,
+      "learning_rate": 9.773333333333334e-05,
+      "loss": 3.2992,
+      "step": 6800
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.771666666666667e-05,
+      "loss": 3.2958,
+      "step": 6850
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.77e-05,
+      "loss": 3.3083,
+      "step": 6900
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.768333333333334e-05,
+      "loss": 3.2952,
+      "step": 6950
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.766666666666668e-05,
+      "loss": 3.2838,
+      "step": 7000
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.765e-05,
+      "loss": 3.2627,
+      "step": 7050
+    },
+    {
+      "epoch": 0.21,
+      "learning_rate": 9.763333333333334e-05,
+      "loss": 3.2285,
+      "step": 7100
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.761666666666666e-05,
+      "loss": 3.2486,
+      "step": 7150
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.76e-05,
+      "loss": 3.2256,
+      "step": 7200
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.758333333333334e-05,
+      "loss": 3.2343,
+      "step": 7250
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.756666666666668e-05,
+      "loss": 3.2112,
+      "step": 7300
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.755000000000001e-05,
+      "loss": 3.2194,
+      "step": 7350
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.753333333333334e-05,
+      "loss": 3.2501,
+      "step": 7400
+    },
+    {
+      "epoch": 0.22,
+      "learning_rate": 9.751666666666666e-05,
+      "loss": 3.2072,
+      "step": 7450
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.75e-05,
+      "loss": 3.2,
+      "step": 7500
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.748333333333334e-05,
+      "loss": 3.2074,
+      "step": 7550
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.746666666666667e-05,
+      "loss": 3.1923,
+      "step": 7600
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.745000000000001e-05,
+      "loss": 3.1656,
+      "step": 7650
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.743333333333335e-05,
+      "loss": 3.1649,
+      "step": 7700
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.741666666666667e-05,
+      "loss": 3.1419,
+      "step": 7750
+    },
+    {
+      "epoch": 0.23,
+      "learning_rate": 9.74e-05,
+      "loss": 3.1689,
+      "step": 7800
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.738333333333333e-05,
+      "loss": 3.1669,
+      "step": 7850
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.736666666666667e-05,
+      "loss": 3.1225,
+      "step": 7900
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.735000000000001e-05,
+      "loss": 3.1347,
+      "step": 7950
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.733333333333335e-05,
+      "loss": 3.1221,
+      "step": 8000
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.731666666666667e-05,
+      "loss": 3.1424,
+      "step": 8050
+    },
+    {
+      "epoch": 0.24,
+      "learning_rate": 9.730000000000001e-05,
+      "loss": 3.1235,
+      "step": 8100
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.728333333333333e-05,
+      "loss": 3.1038,
+      "step": 8150
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.726666666666667e-05,
+      "loss": 3.0914,
+      "step": 8200
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.725e-05,
+      "loss": 3.0973,
+      "step": 8250
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.723333333333334e-05,
+      "loss": 3.0907,
+      "step": 8300
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.721666666666667e-05,
+      "loss": 3.0741,
+      "step": 8350
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.72e-05,
+      "loss": 3.0721,
+      "step": 8400
+    },
+    {
+      "epoch": 0.25,
+      "learning_rate": 9.718333333333334e-05,
+      "loss": 3.0742,
+      "step": 8450
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.716666666666667e-05,
+      "loss": 3.0713,
+      "step": 8500
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.715e-05,
+      "loss": 3.0456,
+      "step": 8550
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.713333333333334e-05,
+      "loss": 3.0417,
+      "step": 8600
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.711666666666666e-05,
+      "loss": 3.0475,
+      "step": 8650
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.71e-05,
+      "loss": 3.0708,
+      "step": 8700
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.708333333333334e-05,
+      "loss": 3.035,
+      "step": 8750
+    },
+    {
+      "epoch": 0.26,
+      "learning_rate": 9.706666666666668e-05,
+      "loss": 3.0145,
+      "step": 8800
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.705e-05,
+      "loss": 3.0194,
+      "step": 8850
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.703333333333334e-05,
+      "loss": 2.9845,
+      "step": 8900
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.701666666666666e-05,
+      "loss": 3.0206,
+      "step": 8950
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.7e-05,
+      "loss": 3.0113,
+      "step": 9000
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.698333333333334e-05,
+      "loss": 2.9924,
+      "step": 9050
+    },
+    {
+      "epoch": 0.27,
+      "learning_rate": 9.696666666666667e-05,
+      "loss": 3.0015,
+      "step": 9100
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.695000000000001e-05,
+      "loss": 2.9883,
+      "step": 9150
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.693333333333335e-05,
+      "loss": 2.9699,
+      "step": 9200
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.691666666666667e-05,
+      "loss": 2.9718,
+      "step": 9250
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.69e-05,
+      "loss": 2.9518,
+      "step": 9300
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.688333333333333e-05,
+      "loss": 2.9554,
+      "step": 9350
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.686666666666667e-05,
+      "loss": 2.965,
+      "step": 9400
+    },
+    {
+      "epoch": 0.28,
+      "learning_rate": 9.685000000000001e-05,
+      "loss": 2.94,
+      "step": 9450
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.683333333333335e-05,
+      "loss": 2.9469,
+      "step": 9500
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.681666666666667e-05,
+      "loss": 2.9298,
+      "step": 9550
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.680000000000001e-05,
+      "loss": 2.9336,
+      "step": 9600
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.678333333333333e-05,
+      "loss": 2.961,
+      "step": 9650
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.676666666666667e-05,
+      "loss": 2.931,
+      "step": 9700
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.675000000000001e-05,
+      "loss": 2.8938,
+      "step": 9750
+    },
+    {
+      "epoch": 0.29,
+      "learning_rate": 9.673333333333334e-05,
+      "loss": 2.8776,
+      "step": 9800
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.671666666666667e-05,
+      "loss": 2.9035,
+      "step": 9850
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.67e-05,
+      "loss": 2.9155,
+      "step": 9900
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.668333333333334e-05,
+      "loss": 2.8979,
+      "step": 9950
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.666666666666667e-05,
+      "loss": 2.8853,
+      "step": 10000
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.665e-05,
+      "loss": 2.8957,
+      "step": 10050
+    },
+    {
+      "epoch": 0.3,
+      "learning_rate": 9.663333333333334e-05,
+      "loss": 2.8572,
+      "step": 10100
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.661666666666667e-05,
+      "loss": 2.8982,
+      "step": 10150
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.66e-05,
+      "loss": 2.8419,
+      "step": 10200
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.658333333333334e-05,
+      "loss": 2.8689,
+      "step": 10250
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.656666666666668e-05,
+      "loss": 2.8596,
+      "step": 10300
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.655e-05,
+      "loss": 2.8438,
+      "step": 10350
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.653333333333334e-05,
+      "loss": 2.8693,
+      "step": 10400
+    },
+    {
+      "epoch": 0.31,
+      "learning_rate": 9.651666666666666e-05,
+      "loss": 2.8377,
+      "step": 10450
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.65e-05,
+      "loss": 2.8331,
+      "step": 10500
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.648333333333334e-05,
+      "loss": 2.8312,
+      "step": 10550
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.646666666666668e-05,
+      "loss": 2.8333,
+      "step": 10600
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.645000000000001e-05,
+      "loss": 2.8365,
+      "step": 10650
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.643333333333334e-05,
+      "loss": 2.8208,
+      "step": 10700
+    },
+    {
+      "epoch": 0.32,
+      "learning_rate": 9.641666666666666e-05,
+      "loss": 2.8346,
+      "step": 10750
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.64e-05,
+      "loss": 2.8223,
+      "step": 10800
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.638333333333334e-05,
+      "loss": 2.8121,
+      "step": 10850
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.636666666666667e-05,
+      "loss": 2.8156,
+      "step": 10900
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.635000000000001e-05,
+      "loss": 2.798,
+      "step": 10950
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.633333333333335e-05,
+      "loss": 2.784,
+      "step": 11000
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.631666666666667e-05,
+      "loss": 2.7814,
+      "step": 11050
+    },
+    {
+      "epoch": 0.33,
+      "learning_rate": 9.630033333333333e-05,
+      "loss": 2.7766,
+      "step": 11100
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.628366666666667e-05,
+      "loss": 2.7788,
+      "step": 11150
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.6267e-05,
+      "loss": 2.7799,
+      "step": 11200
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.625033333333334e-05,
+      "loss": 2.7809,
+      "step": 11250
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.623366666666667e-05,
+      "loss": 2.7706,
+      "step": 11300
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.6217e-05,
+      "loss": 2.7624,
+      "step": 11350
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.620033333333334e-05,
+      "loss": 2.751,
+      "step": 11400
+    },
+    {
+      "epoch": 0.34,
+      "learning_rate": 9.618366666666667e-05,
+      "loss": 2.7659,
+      "step": 11450
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.6167e-05,
+      "loss": 2.7681,
+      "step": 11500
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.615033333333334e-05,
+      "loss": 2.7548,
+      "step": 11550
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.613366666666666e-05,
+      "loss": 2.7476,
+      "step": 11600
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.6117e-05,
+      "loss": 2.7408,
+      "step": 11650
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.610033333333334e-05,
+      "loss": 2.7495,
+      "step": 11700
+    },
+    {
+      "epoch": 0.35,
+      "learning_rate": 9.608366666666668e-05,
+      "loss": 2.7086,
+      "step": 11750
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.6067e-05,
+      "loss": 2.7481,
+      "step": 11800
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.605033333333334e-05,
+      "loss": 2.6886,
+      "step": 11850
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.603366666666666e-05,
+      "loss": 2.7003,
+      "step": 11900
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.6017e-05,
+      "loss": 2.7104,
+      "step": 11950
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.600033333333334e-05,
+      "loss": 2.7157,
+      "step": 12000
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.598366666666667e-05,
+      "loss": 2.6862,
+      "step": 12050
+    },
+    {
+      "epoch": 0.36,
+      "learning_rate": 9.596700000000001e-05,
+      "loss": 2.6713,
+      "step": 12100
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.595033333333335e-05,
+      "loss": 2.6691,
+      "step": 12150
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.593366666666667e-05,
+      "loss": 2.7189,
+      "step": 12200
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.5917e-05,
+      "loss": 2.6744,
+      "step": 12250
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.590033333333333e-05,
+      "loss": 2.7084,
+      "step": 12300
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.588366666666667e-05,
+      "loss": 2.6886,
+      "step": 12350
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.586700000000001e-05,
+      "loss": 2.6735,
+      "step": 12400
+    },
+    {
+      "epoch": 0.37,
+      "learning_rate": 9.585033333333335e-05,
+      "loss": 2.6973,
+      "step": 12450
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.583366666666667e-05,
+      "loss": 2.6536,
+      "step": 12500
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.581700000000001e-05,
+      "loss": 2.6957,
+      "step": 12550
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.580033333333333e-05,
+      "loss": 2.6679,
+      "step": 12600
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.578366666666667e-05,
+      "loss": 2.6533,
+      "step": 12650
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.5767e-05,
+      "loss": 2.6231,
+      "step": 12700
+    },
+    {
+      "epoch": 0.38,
+      "learning_rate": 9.575033333333334e-05,
+      "loss": 2.6402,
+      "step": 12750
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.573366666666667e-05,
+      "loss": 2.6294,
+      "step": 12800
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.5717e-05,
+      "loss": 2.6556,
+      "step": 12850
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.570033333333334e-05,
+      "loss": 2.6358,
+      "step": 12900
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.568366666666667e-05,
+      "loss": 2.6134,
+      "step": 12950
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.5667e-05,
+      "loss": 2.6342,
+      "step": 13000
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.565033333333334e-05,
+      "loss": 2.6417,
+      "step": 13050
+    },
+    {
+      "epoch": 0.39,
+      "learning_rate": 9.563366666666667e-05,
+      "loss": 2.6434,
+      "step": 13100
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.5617e-05,
+      "loss": 2.6063,
+      "step": 13150
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.560033333333334e-05,
+      "loss": 2.6345,
+      "step": 13200
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.558366666666668e-05,
+      "loss": 2.6067,
+      "step": 13250
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.5567e-05,
+      "loss": 2.626,
+      "step": 13300
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.555033333333334e-05,
+      "loss": 2.6042,
+      "step": 13350
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.553366666666666e-05,
+      "loss": 2.5981,
+      "step": 13400
+    },
+    {
+      "epoch": 0.4,
+      "learning_rate": 9.5517e-05,
+      "loss": 2.6078,
+      "step": 13450
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.550033333333334e-05,
+      "loss": 2.6043,
+      "step": 13500
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.548366666666668e-05,
+      "loss": 2.5982,
+      "step": 13550
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.546700000000001e-05,
+      "loss": 2.5945,
+      "step": 13600
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.545033333333334e-05,
+      "loss": 2.5757,
+      "step": 13650
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.543366666666667e-05,
+      "loss": 2.5692,
+      "step": 13700
+    },
+    {
+      "epoch": 0.41,
+      "learning_rate": 9.5417e-05,
+      "loss": 2.5869,
+      "step": 13750
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.540033333333334e-05,
+      "loss": 2.5857,
+      "step": 13800
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.538366666666667e-05,
+      "loss": 2.5492,
+      "step": 13850
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.536700000000001e-05,
+      "loss": 2.5926,
+      "step": 13900
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.535033333333335e-05,
+      "loss": 2.5389,
+      "step": 13950
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.533366666666667e-05,
+      "loss": 2.534,
+      "step": 14000
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.5317e-05,
+      "loss": 2.5485,
+      "step": 14050
+    },
+    {
+      "epoch": 0.42,
+      "learning_rate": 9.530033333333333e-05,
+      "loss": 2.5657,
+      "step": 14100
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.528366666666667e-05,
+      "loss": 2.5504,
+      "step": 14150
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.526700000000001e-05,
+      "loss": 2.5397,
+      "step": 14200
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.525033333333335e-05,
+      "loss": 2.5507,
+      "step": 14250
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.523366666666668e-05,
+      "loss": 2.5432,
+      "step": 14300
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.5217e-05,
+      "loss": 2.531,
+      "step": 14350
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.520033333333333e-05,
+      "loss": 2.509,
+      "step": 14400
+    },
+    {
+      "epoch": 0.43,
+      "learning_rate": 9.518366666666667e-05,
+      "loss": 2.5352,
+      "step": 14450
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.5167e-05,
+      "loss": 2.5417,
+      "step": 14500
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.515033333333334e-05,
+      "loss": 2.5039,
+      "step": 14550
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.513366666666668e-05,
+      "loss": 2.5157,
+      "step": 14600
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.5117e-05,
+      "loss": 2.5251,
+      "step": 14650
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.510033333333334e-05,
+      "loss": 2.5108,
+      "step": 14700
+    },
+    {
+      "epoch": 0.44,
+      "learning_rate": 9.508366666666667e-05,
+      "loss": 2.513,
+      "step": 14750
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.5067e-05,
+      "loss": 2.5188,
+      "step": 14800
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.505033333333334e-05,
+      "loss": 2.5037,
+      "step": 14850
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.503366666666668e-05,
+      "loss": 2.4664,
+      "step": 14900
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.5017e-05,
+      "loss": 2.5113,
+      "step": 14950
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.500033333333334e-05,
+      "loss": 2.4866,
+      "step": 15000
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.498366666666668e-05,
+      "loss": 2.4689,
+      "step": 15050
+    },
+    {
+      "epoch": 0.45,
+      "learning_rate": 9.4967e-05,
+      "loss": 2.4899,
+      "step": 15100
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.495033333333334e-05,
+      "loss": 2.4747,
+      "step": 15150
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.493366666666668e-05,
+      "loss": 2.4703,
+      "step": 15200
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.4917e-05,
+      "loss": 2.4645,
+      "step": 15250
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.490066666666667e-05,
+      "loss": 2.4775,
+      "step": 15300
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.488400000000001e-05,
+      "loss": 2.4445,
+      "step": 15350
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.486733333333335e-05,
+      "loss": 2.4732,
+      "step": 15400
+    },
+    {
+      "epoch": 0.46,
+      "learning_rate": 9.485066666666668e-05,
+      "loss": 2.4791,
+      "step": 15450
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.483400000000001e-05,
+      "loss": 2.4601,
+      "step": 15500
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.481733333333333e-05,
+      "loss": 2.4497,
+      "step": 15550
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.480066666666667e-05,
+      "loss": 2.4452,
+      "step": 15600
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.4784e-05,
+      "loss": 2.447,
+      "step": 15650
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.476733333333334e-05,
+      "loss": 2.4407,
+      "step": 15700
+    },
+    {
+      "epoch": 0.47,
+      "learning_rate": 9.475066666666668e-05,
+      "loss": 2.4484,
+      "step": 15750
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.4734e-05,
+      "loss": 2.4611,
+      "step": 15800
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.471733333333334e-05,
+      "loss": 2.4342,
+      "step": 15850
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.470066666666667e-05,
+      "loss": 2.4246,
+      "step": 15900
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.4684e-05,
+      "loss": 2.4239,
+      "step": 15950
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.466733333333334e-05,
+      "loss": 2.4343,
+      "step": 16000
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.465066666666668e-05,
+      "loss": 2.4082,
+      "step": 16050
+    },
+    {
+      "epoch": 0.48,
+      "learning_rate": 9.4634e-05,
+      "loss": 2.4287,
+      "step": 16100
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.461733333333334e-05,
+      "loss": 2.4204,
+      "step": 16150
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.460066666666668e-05,
+      "loss": 2.382,
+      "step": 16200
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.4584e-05,
+      "loss": 2.4225,
+      "step": 16250
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.456733333333334e-05,
+      "loss": 2.4266,
+      "step": 16300
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.455066666666668e-05,
+      "loss": 2.3924,
+      "step": 16350
+    },
+    {
+      "epoch": 0.49,
+      "learning_rate": 9.4534e-05,
+      "loss": 2.3959,
+      "step": 16400
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.451733333333334e-05,
+      "loss": 2.4074,
+      "step": 16450
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.450066666666667e-05,
+      "loss": 2.3986,
+      "step": 16500
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.448400000000001e-05,
+      "loss": 2.3995,
+      "step": 16550
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.446733333333334e-05,
+      "loss": 2.3966,
+      "step": 16600
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.445066666666667e-05,
+      "loss": 2.3901,
+      "step": 16650
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.4434e-05,
+      "loss": 2.3822,
+      "step": 16700
+    },
+    {
+      "epoch": 0.5,
+      "learning_rate": 9.441733333333333e-05,
+      "loss": 2.393,
+      "step": 16750
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.440066666666667e-05,
+      "loss": 2.3703,
+      "step": 16800
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.438400000000001e-05,
+      "loss": 2.3874,
+      "step": 16850
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.436733333333335e-05,
+      "loss": 2.3639,
+      "step": 16900
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.435066666666667e-05,
+      "loss": 2.3884,
+      "step": 16950
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.4334e-05,
+      "loss": 2.3617,
+      "step": 17000
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.431733333333333e-05,
+      "loss": 2.379,
+      "step": 17050
+    },
+    {
+      "epoch": 0.51,
+      "learning_rate": 9.430066666666667e-05,
+      "loss": 2.3715,
+      "step": 17100
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.428400000000001e-05,
+      "loss": 2.3606,
+      "step": 17150
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.426733333333334e-05,
+      "loss": 2.3695,
+      "step": 17200
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.425066666666668e-05,
+      "loss": 2.3692,
+      "step": 17250
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.4234e-05,
+      "loss": 2.3781,
+      "step": 17300
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.421766666666666e-05,
+      "loss": 2.363,
+      "step": 17350
+    },
+    {
+      "epoch": 0.52,
+      "learning_rate": 9.4201e-05,
+      "loss": 2.3541,
+      "step": 17400
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.418433333333334e-05,
+      "loss": 2.3384,
+      "step": 17450
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.416766666666668e-05,
+      "loss": 2.3456,
+      "step": 17500
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.4151e-05,
+      "loss": 2.3458,
+      "step": 17550
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.413433333333334e-05,
+      "loss": 2.3389,
+      "step": 17600
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.411766666666668e-05,
+      "loss": 2.3233,
+      "step": 17650
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.4101e-05,
+      "loss": 2.3468,
+      "step": 17700
+    },
+    {
+      "epoch": 0.53,
+      "learning_rate": 9.408433333333334e-05,
+      "loss": 2.3365,
+      "step": 17750
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.406766666666667e-05,
+      "loss": 2.3194,
+      "step": 17800
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.4051e-05,
+      "loss": 2.3169,
+      "step": 17850
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.403433333333334e-05,
+      "loss": 2.3325,
+      "step": 17900
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.401766666666667e-05,
+      "loss": 2.3196,
+      "step": 17950
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.400100000000001e-05,
+      "loss": 2.3342,
+      "step": 18000
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.398433333333335e-05,
+      "loss": 2.3115,
+      "step": 18050
+    },
+    {
+      "epoch": 0.54,
+      "learning_rate": 9.396766666666667e-05,
+      "loss": 2.308,
+      "step": 18100
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.3951e-05,
+      "loss": 2.3382,
+      "step": 18150
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.393433333333333e-05,
+      "loss": 2.3052,
+      "step": 18200
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.391766666666667e-05,
+      "loss": 2.3167,
+      "step": 18250
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.390100000000001e-05,
+      "loss": 2.3146,
+      "step": 18300
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.388466666666668e-05,
+      "loss": 2.3043,
+      "step": 18350
+    },
+    {
+      "epoch": 0.55,
+      "learning_rate": 9.3868e-05,
+      "loss": 2.2911,
+      "step": 18400
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.385133333333334e-05,
+      "loss": 2.2816,
+      "step": 18450
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.383466666666666e-05,
+      "loss": 2.2946,
+      "step": 18500
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.3818e-05,
+      "loss": 2.305,
+      "step": 18550
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.380133333333334e-05,
+      "loss": 2.2921,
+      "step": 18600
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.378466666666668e-05,
+      "loss": 2.2803,
+      "step": 18650
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.3768e-05,
+      "loss": 2.2709,
+      "step": 18700
+    },
+    {
+      "epoch": 0.56,
+      "learning_rate": 9.375133333333334e-05,
+      "loss": 2.296,
+      "step": 18750
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.373466666666668e-05,
+      "loss": 2.27,
+      "step": 18800
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.3718e-05,
+      "loss": 2.2675,
+      "step": 18850
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.370133333333334e-05,
+      "loss": 2.2833,
+      "step": 18900
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.368466666666667e-05,
+      "loss": 2.2467,
+      "step": 18950
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.3668e-05,
+      "loss": 2.2613,
+      "step": 19000
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.365133333333334e-05,
+      "loss": 2.2498,
+      "step": 19050
+    },
+    {
+      "epoch": 0.57,
+      "learning_rate": 9.363466666666667e-05,
+      "loss": 2.256,
+      "step": 19100
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.361800000000001e-05,
+      "loss": 2.257,
+      "step": 19150
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.360133333333333e-05,
+      "loss": 2.2446,
+      "step": 19200
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.358466666666667e-05,
+      "loss": 2.2633,
+      "step": 19250
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.3568e-05,
+      "loss": 2.2612,
+      "step": 19300
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.355133333333333e-05,
+      "loss": 2.2606,
+      "step": 19350
+    },
+    {
+      "epoch": 0.58,
+      "learning_rate": 9.353466666666667e-05,
+      "loss": 2.2658,
+      "step": 19400
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.351800000000001e-05,
+      "loss": 2.2359,
+      "step": 19450
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.350133333333335e-05,
+      "loss": 2.2506,
+      "step": 19500
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.348466666666667e-05,
+      "loss": 2.2485,
+      "step": 19550
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.3468e-05,
+      "loss": 2.2408,
+      "step": 19600
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.345133333333333e-05,
+      "loss": 2.2394,
+      "step": 19650
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.343466666666667e-05,
+      "loss": 2.2329,
+      "step": 19700
+    },
+    {
+      "epoch": 0.59,
+      "learning_rate": 9.3418e-05,
+      "loss": 2.2002,
+      "step": 19750
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.340133333333334e-05,
+      "loss": 2.2367,
+      "step": 19800
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.338466666666668e-05,
+      "loss": 2.2392,
+      "step": 19850
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.3368e-05,
+      "loss": 2.2128,
+      "step": 19900
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.335133333333333e-05,
+      "loss": 2.2124,
+      "step": 19950
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.333466666666667e-05,
+      "loss": 2.1965,
+      "step": 20000
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.3318e-05,
+      "loss": 2.2184,
+      "step": 20050
+    },
+    {
+      "epoch": 0.6,
+      "learning_rate": 9.330133333333334e-05,
+      "loss": 2.2318,
+      "step": 20100
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.328466666666668e-05,
+      "loss": 2.2114,
+      "step": 20150
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.3268e-05,
+      "loss": 2.2023,
+      "step": 20200
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.325133333333334e-05,
+      "loss": 2.2169,
+      "step": 20250
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.323466666666666e-05,
+      "loss": 2.1721,
+      "step": 20300
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.3218e-05,
+      "loss": 2.2113,
+      "step": 20350
+    },
+    {
+      "epoch": 0.61,
+      "learning_rate": 9.320133333333334e-05,
+      "loss": 2.1935,
+      "step": 20400
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.318466666666668e-05,
+      "loss": 2.2054,
+      "step": 20450
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.316833333333333e-05,
+      "loss": 2.1893,
+      "step": 20500
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.315166666666667e-05,
+      "loss": 2.1913,
+      "step": 20550
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.313500000000001e-05,
+      "loss": 2.1821,
+      "step": 20600
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.311833333333335e-05,
+      "loss": 2.1436,
+      "step": 20650
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.310166666666667e-05,
+      "loss": 2.19,
+      "step": 20700
+    },
+    {
+      "epoch": 0.62,
+      "learning_rate": 9.3085e-05,
+      "loss": 2.1908,
+      "step": 20750
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.306833333333333e-05,
+      "loss": 2.1848,
+      "step": 20800
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.305166666666667e-05,
+      "loss": 2.1715,
+      "step": 20850
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.3035e-05,
+      "loss": 2.1614,
+      "step": 20900
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.301833333333334e-05,
+      "loss": 2.1829,
+      "step": 20950
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.300166666666668e-05,
+      "loss": 2.1779,
+      "step": 21000
+    },
+    {
+      "epoch": 0.63,
+      "learning_rate": 9.2985e-05,
+      "loss": 2.1697,
+      "step": 21050
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.296833333333333e-05,
+      "loss": 2.1751,
+      "step": 21100
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.295166666666667e-05,
+      "loss": 2.1594,
+      "step": 21150
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.2935e-05,
+      "loss": 2.1721,
+      "step": 21200
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.291833333333334e-05,
+      "loss": 2.1631,
+      "step": 21250
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.290166666666668e-05,
+      "loss": 2.175,
+      "step": 21300
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.2885e-05,
+      "loss": 2.1405,
+      "step": 21350
+    },
+    {
+      "epoch": 0.64,
+      "learning_rate": 9.286833333333334e-05,
+      "loss": 2.1433,
+      "step": 21400
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.285166666666666e-05,
+      "loss": 2.1588,
+      "step": 21450
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.2835e-05,
+      "loss": 2.1327,
+      "step": 21500
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.281833333333334e-05,
+      "loss": 2.1701,
+      "step": 21550
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.280166666666668e-05,
+      "loss": 2.1398,
+      "step": 21600
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.2785e-05,
+      "loss": 2.1502,
+      "step": 21650
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.276833333333334e-05,
+      "loss": 2.1158,
+      "step": 21700
+    },
+    {
+      "epoch": 0.65,
+      "learning_rate": 9.275166666666668e-05,
+      "loss": 2.1353,
+      "step": 21750
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.2735e-05,
+      "loss": 2.17,
+      "step": 21800
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.271833333333334e-05,
+      "loss": 2.1446,
+      "step": 21850
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.270166666666667e-05,
+      "loss": 2.1489,
+      "step": 21900
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.2685e-05,
+      "loss": 2.142,
+      "step": 21950
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.266833333333334e-05,
+      "loss": 2.1227,
+      "step": 22000
+    },
+    {
+      "epoch": 0.66,
+      "learning_rate": 9.265166666666667e-05,
+      "loss": 2.1419,
+      "step": 22050
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.263500000000001e-05,
+      "loss": 2.13,
+      "step": 22100
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.261833333333333e-05,
+      "loss": 2.1377,
+      "step": 22150
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.260166666666667e-05,
+      "loss": 2.1019,
+      "step": 22200
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.2585e-05,
+      "loss": 2.135,
+      "step": 22250
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.256833333333333e-05,
+      "loss": 2.1157,
+      "step": 22300
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.255166666666667e-05,
+      "loss": 2.1006,
+      "step": 22350
+    },
+    {
+      "epoch": 0.67,
+      "learning_rate": 9.253500000000001e-05,
+      "loss": 2.1231,
+      "step": 22400
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.251833333333335e-05,
+      "loss": 2.1116,
+      "step": 22450
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.250166666666667e-05,
+      "loss": 2.1041,
+      "step": 22500
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.248499999999999e-05,
+      "loss": 2.1286,
+      "step": 22550
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.246833333333333e-05,
+      "loss": 2.0929,
+      "step": 22600
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.245166666666667e-05,
+      "loss": 2.1236,
+      "step": 22650
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.243533333333334e-05,
+      "loss": 2.072,
+      "step": 22700
+    },
+    {
+      "epoch": 0.68,
+      "learning_rate": 9.241866666666668e-05,
+      "loss": 2.0861,
+      "step": 22750
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.2402e-05,
+      "loss": 2.0882,
+      "step": 22800
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.238533333333334e-05,
+      "loss": 2.0834,
+      "step": 22850
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.236866666666668e-05,
+      "loss": 2.0915,
+      "step": 22900
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.2352e-05,
+      "loss": 2.0986,
+      "step": 22950
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.233533333333334e-05,
+      "loss": 2.0793,
+      "step": 23000
+    },
+    {
+      "epoch": 0.69,
+      "learning_rate": 9.231866666666667e-05,
+      "loss": 2.0665,
+      "step": 23050
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.2302e-05,
+      "loss": 2.0851,
+      "step": 23100
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.228533333333334e-05,
+      "loss": 2.0843,
+      "step": 23150
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.226866666666667e-05,
+      "loss": 2.0777,
+      "step": 23200
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.225200000000001e-05,
+      "loss": 2.0782,
+      "step": 23250
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.223533333333333e-05,
+      "loss": 2.0693,
+      "step": 23300
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.221866666666667e-05,
+      "loss": 2.0706,
+      "step": 23350
+    },
+    {
+      "epoch": 0.7,
+      "learning_rate": 9.2202e-05,
+      "loss": 2.0584,
+      "step": 23400
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.218533333333333e-05,
+      "loss": 2.0657,
+      "step": 23450
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.216866666666667e-05,
+      "loss": 2.0857,
+      "step": 23500
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.215200000000001e-05,
+      "loss": 2.0845,
+      "step": 23550
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.213533333333335e-05,
+      "loss": 2.0523,
+      "step": 23600
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.211866666666667e-05,
+      "loss": 2.0894,
+      "step": 23650
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.2102e-05,
+      "loss": 2.0695,
+      "step": 23700
+    },
+    {
+      "epoch": 0.71,
+      "learning_rate": 9.208533333333333e-05,
+      "loss": 2.0521,
+      "step": 23750
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.206866666666667e-05,
+      "loss": 2.0766,
+      "step": 23800
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.2052e-05,
+      "loss": 2.0576,
+      "step": 23850
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.203533333333334e-05,
+      "loss": 2.0629,
+      "step": 23900
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.201866666666668e-05,
+      "loss": 2.068,
+      "step": 23950
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.2002e-05,
+      "loss": 2.0706,
+      "step": 24000
+    },
+    {
+      "epoch": 0.72,
+      "learning_rate": 9.198533333333333e-05,
+      "loss": 2.0573,
+      "step": 24050
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.196866666666667e-05,
+      "loss": 2.0408,
+      "step": 24100
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.1952e-05,
+      "loss": 2.0531,
+      "step": 24150
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.193533333333334e-05,
+      "loss": 2.0343,
+      "step": 24200
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.191866666666668e-05,
+      "loss": 2.0439,
+      "step": 24250
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.1902e-05,
+      "loss": 2.0376,
+      "step": 24300
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.188533333333334e-05,
+      "loss": 2.0395,
+      "step": 24350
+    },
+    {
+      "epoch": 0.73,
+      "learning_rate": 9.186866666666666e-05,
+      "loss": 2.0217,
+      "step": 24400
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.1852e-05,
+      "loss": 2.0535,
+      "step": 24450
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.183533333333334e-05,
+      "loss": 2.0247,
+      "step": 24500
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.181866666666668e-05,
+      "loss": 2.0284,
+      "step": 24550
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.1802e-05,
+      "loss": 2.0483,
+      "step": 24600
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.178533333333334e-05,
+      "loss": 2.0463,
+      "step": 24650
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.176900000000001e-05,
+      "loss": 2.0265,
+      "step": 24700
+    },
+    {
+      "epoch": 0.74,
+      "learning_rate": 9.175233333333335e-05,
+      "loss": 2.022,
+      "step": 24750
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.173566666666667e-05,
+      "loss": 1.989,
+      "step": 24800
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.1719e-05,
+      "loss": 2.0219,
+      "step": 24850
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.170233333333333e-05,
+      "loss": 2.0063,
+      "step": 24900
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.168566666666667e-05,
+      "loss": 1.9974,
+      "step": 24950
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.1669e-05,
+      "loss": 2.0102,
+      "step": 25000
+    },
+    {
+      "epoch": 0.75,
+      "learning_rate": 9.165233333333334e-05,
+      "loss": 2.0214,
+      "step": 25050
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.163566666666668e-05,
+      "loss": 2.0056,
+      "step": 25100
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.1619e-05,
+      "loss": 2.0024,
+      "step": 25150
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.160233333333333e-05,
+      "loss": 2.0002,
+      "step": 25200
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.158566666666667e-05,
+      "loss": 1.9955,
+      "step": 25250
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.1569e-05,
+      "loss": 1.9964,
+      "step": 25300
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.155233333333334e-05,
+      "loss": 1.998,
+      "step": 25350
+    },
+    {
+      "epoch": 0.76,
+      "learning_rate": 9.153566666666668e-05,
+      "loss": 1.9774,
+      "step": 25400
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.151933333333334e-05,
+      "loss": 1.9913,
+      "step": 25450
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.150266666666667e-05,
+      "loss": 2.0087,
+      "step": 25500
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.148600000000001e-05,
+      "loss": 1.9796,
+      "step": 25550
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.146933333333334e-05,
+      "loss": 1.9992,
+      "step": 25600
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.145266666666667e-05,
+      "loss": 1.991,
+      "step": 25650
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.1436e-05,
+      "loss": 2.0082,
+      "step": 25700
+    },
+    {
+      "epoch": 0.77,
+      "learning_rate": 9.141933333333333e-05,
+      "loss": 2.0078,
+      "step": 25750
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.140266666666667e-05,
+      "loss": 1.9683,
+      "step": 25800
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.138600000000001e-05,
+      "loss": 1.9968,
+      "step": 25850
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.136933333333335e-05,
+      "loss": 1.9835,
+      "step": 25900
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.135266666666667e-05,
+      "loss": 1.9835,
+      "step": 25950
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.1336e-05,
+      "loss": 1.9721,
+      "step": 26000
+    },
+    {
+      "epoch": 0.78,
+      "learning_rate": 9.131933333333333e-05,
+      "loss": 1.9628,
+      "step": 26050
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.130266666666667e-05,
+      "loss": 1.977,
+      "step": 26100
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.1286e-05,
+      "loss": 1.9742,
+      "step": 26150
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.126933333333334e-05,
+      "loss": 1.9786,
+      "step": 26200
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.125266666666668e-05,
+      "loss": 1.9866,
+      "step": 26250
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.1236e-05,
+      "loss": 1.9573,
+      "step": 26300
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.121933333333333e-05,
+      "loss": 1.968,
+      "step": 26350
+    },
+    {
+      "epoch": 0.79,
+      "learning_rate": 9.120266666666667e-05,
+      "loss": 1.9647,
+      "step": 26400
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.1186e-05,
+      "loss": 1.9507,
+      "step": 26450
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.116933333333334e-05,
+      "loss": 1.9861,
+      "step": 26500
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.115266666666668e-05,
+      "loss": 1.9535,
+      "step": 26550
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.1136e-05,
+      "loss": 1.9446,
+      "step": 26600
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.111933333333334e-05,
+      "loss": 1.9613,
+      "step": 26650
+    },
+    {
+      "epoch": 0.8,
+      "learning_rate": 9.110266666666666e-05,
+      "loss": 1.9518,
+      "step": 26700
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.1086e-05,
+      "loss": 1.9475,
+      "step": 26750
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.106933333333334e-05,
+      "loss": 1.9616,
+      "step": 26800
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.105266666666668e-05,
+      "loss": 1.9523,
+      "step": 26850
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.1036e-05,
+      "loss": 1.9561,
+      "step": 26900
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.101933333333334e-05,
+      "loss": 1.9424,
+      "step": 26950
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.100266666666668e-05,
+      "loss": 1.9639,
+      "step": 27000
+    },
+    {
+      "epoch": 0.81,
+      "learning_rate": 9.0986e-05,
+      "loss": 1.937,
+      "step": 27050
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.096933333333334e-05,
+      "loss": 1.9528,
+      "step": 27100
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.095266666666667e-05,
+      "loss": 1.9326,
+      "step": 27150
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.0936e-05,
+      "loss": 1.9486,
+      "step": 27200
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.091933333333334e-05,
+      "loss": 1.9431,
+      "step": 27250
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.090266666666667e-05,
+      "loss": 1.9341,
+      "step": 27300
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.088600000000001e-05,
+      "loss": 1.9632,
+      "step": 27350
+    },
+    {
+      "epoch": 0.82,
+      "learning_rate": 9.086933333333333e-05,
+      "loss": 1.9368,
+      "step": 27400
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.085266666666667e-05,
+      "loss": 1.9552,
+      "step": 27450
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.0836e-05,
+      "loss": 1.9322,
+      "step": 27500
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.081933333333333e-05,
+      "loss": 1.9325,
+      "step": 27550
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.080266666666667e-05,
+      "loss": 1.9214,
+      "step": 27600
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.078600000000001e-05,
+      "loss": 1.9225,
+      "step": 27650
+    },
+    {
+      "epoch": 0.83,
+      "learning_rate": 9.076966666666668e-05,
+      "loss": 1.9053,
+      "step": 27700
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.0753e-05,
+      "loss": 1.9306,
+      "step": 27750
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.073633333333334e-05,
+      "loss": 1.9275,
+      "step": 27800
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.071966666666666e-05,
+      "loss": 1.9069,
+      "step": 27850
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.0703e-05,
+      "loss": 1.9202,
+      "step": 27900
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.068633333333334e-05,
+      "loss": 1.9538,
+      "step": 27950
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.066966666666668e-05,
+      "loss": 1.9232,
+      "step": 28000
+    },
+    {
+      "epoch": 0.84,
+      "learning_rate": 9.0653e-05,
+      "loss": 1.8988,
+      "step": 28050
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.063633333333334e-05,
+      "loss": 1.9343,
+      "step": 28100
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.061966666666668e-05,
+      "loss": 1.9137,
+      "step": 28150
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.0603e-05,
+      "loss": 1.9038,
+      "step": 28200
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.058633333333334e-05,
+      "loss": 1.8988,
+      "step": 28250
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.056966666666667e-05,
+      "loss": 1.8869,
+      "step": 28300
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.0553e-05,
+      "loss": 1.8862,
+      "step": 28350
+    },
+    {
+      "epoch": 0.85,
+      "learning_rate": 9.053633333333334e-05,
+      "loss": 1.8987,
+      "step": 28400
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.051966666666667e-05,
+      "loss": 1.9194,
+      "step": 28450
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.050300000000001e-05,
+      "loss": 1.9035,
+      "step": 28500
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.048633333333333e-05,
+      "loss": 1.8906,
+      "step": 28550
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.046966666666667e-05,
+      "loss": 1.916,
+      "step": 28600
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.0453e-05,
+      "loss": 1.9147,
+      "step": 28650
+    },
+    {
+      "epoch": 0.86,
+      "learning_rate": 9.043633333333333e-05,
+      "loss": 1.8985,
+      "step": 28700
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.041966666666667e-05,
+      "loss": 1.8974,
+      "step": 28750
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.040300000000001e-05,
+      "loss": 1.8719,
+      "step": 28800
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.038633333333335e-05,
+      "loss": 1.8926,
+      "step": 28850
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.036966666666667e-05,
+      "loss": 1.8942,
+      "step": 28900
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.035300000000001e-05,
+      "loss": 1.8889,
+      "step": 28950
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.033633333333333e-05,
+      "loss": 1.8903,
+      "step": 29000
+    },
+    {
+      "epoch": 0.87,
+      "learning_rate": 9.031966666666667e-05,
+      "loss": 1.873,
+      "step": 29050
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.0303e-05,
+      "loss": 1.8887,
+      "step": 29100
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.028633333333334e-05,
+      "loss": 1.8769,
+      "step": 29150
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.026966666666668e-05,
+      "loss": 1.8747,
+      "step": 29200
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.0253e-05,
+      "loss": 1.8766,
+      "step": 29250
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.023633333333333e-05,
+      "loss": 1.87,
+      "step": 29300
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.021966666666667e-05,
+      "loss": 1.8879,
+      "step": 29350
+    },
+    {
+      "epoch": 0.88,
+      "learning_rate": 9.0203e-05,
+      "loss": 1.8674,
+      "step": 29400
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.018633333333334e-05,
+      "loss": 1.887,
+      "step": 29450
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.016966666666668e-05,
+      "loss": 1.8877,
+      "step": 29500
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.015300000000002e-05,
+      "loss": 1.8508,
+      "step": 29550
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.013633333333334e-05,
+      "loss": 1.8706,
+      "step": 29600
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.011966666666666e-05,
+      "loss": 1.8786,
+      "step": 29650
+    },
+    {
+      "epoch": 0.89,
+      "learning_rate": 9.0103e-05,
+      "loss": 1.8839,
+      "step": 29700
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.008633333333334e-05,
+      "loss": 1.8562,
+      "step": 29750
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.006966666666668e-05,
+      "loss": 1.8506,
+      "step": 29800
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.005300000000001e-05,
+      "loss": 1.8555,
+      "step": 29850
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.003633333333334e-05,
+      "loss": 1.8736,
+      "step": 29900
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.001966666666667e-05,
+      "loss": 1.8527,
+      "step": 29950
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 9.0003e-05,
+      "loss": 1.8576,
+      "step": 30000
+    },
+    {
+      "epoch": 0.9,
+      "learning_rate": 8.998633333333334e-05,
+      "loss": 1.8392,
+      "step": 30050
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.996966666666667e-05,
+      "loss": 1.85,
+      "step": 30100
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.995300000000001e-05,
+      "loss": 1.8479,
+      "step": 30150
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.993633333333333e-05,
+      "loss": 1.8551,
+      "step": 30200
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.991966666666667e-05,
+      "loss": 1.8636,
+      "step": 30250
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.990333333333334e-05,
+      "loss": 1.8416,
+      "step": 30300
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.988666666666668e-05,
+      "loss": 1.8583,
+      "step": 30350
+    },
+    {
+      "epoch": 0.91,
+      "learning_rate": 8.987e-05,
+      "loss": 1.8241,
+      "step": 30400
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.985333333333333e-05,
+      "loss": 1.8306,
+      "step": 30450
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.983666666666667e-05,
+      "loss": 1.856,
+      "step": 30500
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.982e-05,
+      "loss": 1.8271,
+      "step": 30550
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.980333333333334e-05,
+      "loss": 1.8509,
+      "step": 30600
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.978666666666668e-05,
+      "loss": 1.8306,
+      "step": 30650
+    },
+    {
+      "epoch": 0.92,
+      "learning_rate": 8.977000000000002e-05,
+      "loss": 1.8209,
+      "step": 30700
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.975333333333334e-05,
+      "loss": 1.8646,
+      "step": 30750
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.973666666666666e-05,
+      "loss": 1.836,
+      "step": 30800
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.972e-05,
+      "loss": 1.8383,
+      "step": 30850
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.970333333333334e-05,
+      "loss": 1.8405,
+      "step": 30900
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.968666666666668e-05,
+      "loss": 1.8228,
+      "step": 30950
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.967000000000001e-05,
+      "loss": 1.8338,
+      "step": 31000
+    },
+    {
+      "epoch": 0.93,
+      "learning_rate": 8.965333333333334e-05,
+      "loss": 1.8357,
+      "step": 31050
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.963666666666668e-05,
+      "loss": 1.8253,
+      "step": 31100
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.962e-05,
+      "loss": 1.8242,
+      "step": 31150
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.960333333333334e-05,
+      "loss": 1.8338,
+      "step": 31200
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.958666666666667e-05,
+      "loss": 1.8203,
+      "step": 31250
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.957000000000001e-05,
+      "loss": 1.8175,
+      "step": 31300
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.955333333333334e-05,
+      "loss": 1.8228,
+      "step": 31350
+    },
+    {
+      "epoch": 0.94,
+      "learning_rate": 8.953666666666667e-05,
+      "loss": 1.8189,
+      "step": 31400
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.952000000000001e-05,
+      "loss": 1.8192,
+      "step": 31450
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.950333333333333e-05,
+      "loss": 1.8056,
+      "step": 31500
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.948666666666667e-05,
+      "loss": 1.8155,
+      "step": 31550
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.947000000000001e-05,
+      "loss": 1.844,
+      "step": 31600
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.945333333333333e-05,
+      "loss": 1.7989,
+      "step": 31650
+    },
+    {
+      "epoch": 0.95,
+      "learning_rate": 8.943666666666667e-05,
+      "loss": 1.7981,
+      "step": 31700
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.942000000000001e-05,
+      "loss": 1.811,
+      "step": 31750
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.940333333333335e-05,
+      "loss": 1.7855,
+      "step": 31800
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.938666666666667e-05,
+      "loss": 1.7949,
+      "step": 31850
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.937e-05,
+      "loss": 1.8063,
+      "step": 31900
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.935333333333333e-05,
+      "loss": 1.8063,
+      "step": 31950
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.933666666666667e-05,
+      "loss": 1.8059,
+      "step": 32000
+    },
+    {
+      "epoch": 0.96,
+      "learning_rate": 8.932e-05,
+      "loss": 1.8062,
+      "step": 32050
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.930333333333334e-05,
+      "loss": 1.7989,
+      "step": 32100
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.928666666666668e-05,
+      "loss": 1.786,
+      "step": 32150
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.927e-05,
+      "loss": 1.7909,
+      "step": 32200
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.925333333333333e-05,
+      "loss": 1.7955,
+      "step": 32250
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.923666666666667e-05,
+      "loss": 1.8126,
+      "step": 32300
+    },
+    {
+      "epoch": 0.97,
+      "learning_rate": 8.922e-05,
+      "loss": 1.7939,
+      "step": 32350
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.920333333333334e-05,
+      "loss": 1.7944,
+      "step": 32400
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.918666666666668e-05,
+      "loss": 1.7826,
+      "step": 32450
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.917000000000002e-05,
+      "loss": 1.8048,
+      "step": 32500
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.915333333333334e-05,
+      "loss": 1.8147,
+      "step": 32550
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.913666666666666e-05,
+      "loss": 1.7991,
+      "step": 32600
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.912e-05,
+      "loss": 1.7624,
+      "step": 32650
+    },
+    {
+      "epoch": 0.98,
+      "learning_rate": 8.910333333333334e-05,
+      "loss": 1.7955,
+      "step": 32700
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.908666666666668e-05,
+      "loss": 1.7935,
+      "step": 32750
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.907000000000001e-05,
+      "loss": 1.7753,
+      "step": 32800
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.905333333333334e-05,
+      "loss": 1.7977,
+      "step": 32850
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.903666666666667e-05,
+      "loss": 1.7629,
+      "step": 32900
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.902e-05,
+      "loss": 1.7699,
+      "step": 32950
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.900333333333334e-05,
+      "loss": 1.7633,
+      "step": 33000
+    },
+    {
+      "epoch": 0.99,
+      "learning_rate": 8.898666666666667e-05,
+      "loss": 1.7895,
+      "step": 33050
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.897000000000001e-05,
+      "loss": 1.7787,
+      "step": 33100
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.895333333333333e-05,
+      "loss": 1.7758,
+      "step": 33150
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.893666666666667e-05,
+      "loss": 1.7703,
+      "step": 33200
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.892000000000001e-05,
+      "loss": 1.8153,
+      "step": 33250
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.890333333333333e-05,
+      "loss": 1.7515,
+      "step": 33300
+    },
+    {
+      "epoch": 1.0,
+      "learning_rate": 8.888666666666667e-05,
+      "loss": 1.7687,
+      "step": 33350
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.887000000000001e-05,
+      "loss": 1.7543,
+      "step": 33400
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.885333333333333e-05,
+      "loss": 1.7604,
+      "step": 33450
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.883666666666667e-05,
+      "loss": 1.7589,
+      "step": 33500
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.882000000000001e-05,
+      "loss": 1.7611,
+      "step": 33550
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.880333333333334e-05,
+      "loss": 1.7419,
+      "step": 33600
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.878666666666667e-05,
+      "loss": 1.7491,
+      "step": 33650
+    },
+    {
+      "epoch": 1.01,
+      "learning_rate": 8.877e-05,
+      "loss": 1.7502,
+      "step": 33700
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.875333333333333e-05,
+      "loss": 1.7526,
+      "step": 33750
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.873666666666667e-05,
+      "loss": 1.7551,
+      "step": 33800
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.872e-05,
+      "loss": 1.7273,
+      "step": 33850
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.870333333333334e-05,
+      "loss": 1.7338,
+      "step": 33900
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.868666666666668e-05,
+      "loss": 1.7428,
+      "step": 33950
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.867e-05,
+      "loss": 1.7341,
+      "step": 34000
+    },
+    {
+      "epoch": 1.02,
+      "learning_rate": 8.865366666666667e-05,
+      "loss": 1.7579,
+      "step": 34050
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.8637e-05,
+      "loss": 1.757,
+      "step": 34100
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.862033333333334e-05,
+      "loss": 1.7334,
+      "step": 34150
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.860366666666667e-05,
+      "loss": 1.7302,
+      "step": 34200
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.858700000000001e-05,
+      "loss": 1.7215,
+      "step": 34250
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.857033333333333e-05,
+      "loss": 1.7228,
+      "step": 34300
+    },
+    {
+      "epoch": 1.03,
+      "learning_rate": 8.855366666666667e-05,
+      "loss": 1.7383,
+      "step": 34350
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.853700000000001e-05,
+      "loss": 1.7389,
+      "step": 34400
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.852033333333333e-05,
+      "loss": 1.7474,
+      "step": 34450
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.850366666666667e-05,
+      "loss": 1.7437,
+      "step": 34500
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.848700000000001e-05,
+      "loss": 1.712,
+      "step": 34550
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.847033333333333e-05,
+      "loss": 1.7134,
+      "step": 34600
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.845366666666667e-05,
+      "loss": 1.7307,
+      "step": 34650
+    },
+    {
+      "epoch": 1.04,
+      "learning_rate": 8.843700000000001e-05,
+      "loss": 1.7076,
+      "step": 34700
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.842033333333334e-05,
+      "loss": 1.7079,
+      "step": 34750
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.840366666666667e-05,
+      "loss": 1.7248,
+      "step": 34800
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.8387e-05,
+      "loss": 1.729,
+      "step": 34850
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.837033333333333e-05,
+      "loss": 1.7242,
+      "step": 34900
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.835366666666667e-05,
+      "loss": 1.7094,
+      "step": 34950
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.8337e-05,
+      "loss": 1.7219,
+      "step": 35000
+    },
+    {
+      "epoch": 1.05,
+      "learning_rate": 8.832033333333334e-05,
+      "loss": 1.6999,
+      "step": 35050
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.830366666666668e-05,
+      "loss": 1.7235,
+      "step": 35100
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.8287e-05,
+      "loss": 1.7259,
+      "step": 35150
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.827033333333333e-05,
+      "loss": 1.7375,
+      "step": 35200
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.825366666666666e-05,
+      "loss": 1.7144,
+      "step": 35250
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.8237e-05,
+      "loss": 1.6983,
+      "step": 35300
+    },
+    {
+      "epoch": 1.06,
+      "learning_rate": 8.822033333333334e-05,
+      "loss": 1.7029,
+      "step": 35350
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.820366666666668e-05,
+      "loss": 1.707,
+      "step": 35400
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.818700000000001e-05,
+      "loss": 1.7188,
+      "step": 35450
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.817033333333334e-05,
+      "loss": 1.7067,
+      "step": 35500
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.815366666666666e-05,
+      "loss": 1.698,
+      "step": 35550
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.8137e-05,
+      "loss": 1.715,
+      "step": 35600
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.812033333333334e-05,
+      "loss": 1.6835,
+      "step": 35650
+    },
+    {
+      "epoch": 1.07,
+      "learning_rate": 8.810366666666667e-05,
+      "loss": 1.7003,
+      "step": 35700
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.808700000000001e-05,
+      "loss": 1.7008,
+      "step": 35750
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.807033333333334e-05,
+      "loss": 1.7015,
+      "step": 35800
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.805366666666667e-05,
+      "loss": 1.724,
+      "step": 35850
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.8037e-05,
+      "loss": 1.6945,
+      "step": 35900
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.802033333333333e-05,
+      "loss": 1.6735,
+      "step": 35950
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.800366666666667e-05,
+      "loss": 1.6708,
+      "step": 36000
+    },
+    {
+      "epoch": 1.08,
+      "learning_rate": 8.798700000000001e-05,
+      "loss": 1.6929,
+      "step": 36050
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.797033333333333e-05,
+      "loss": 1.6935,
+      "step": 36100
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.795366666666667e-05,
+      "loss": 1.7082,
+      "step": 36150
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.793700000000001e-05,
+      "loss": 1.6891,
+      "step": 36200
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.792033333333333e-05,
+      "loss": 1.6952,
+      "step": 36250
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.790366666666667e-05,
+      "loss": 1.6877,
+      "step": 36300
+    },
+    {
+      "epoch": 1.09,
+      "learning_rate": 8.788700000000001e-05,
+      "loss": 1.6827,
+      "step": 36350
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.787033333333333e-05,
+      "loss": 1.6976,
+      "step": 36400
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.785366666666667e-05,
+      "loss": 1.6779,
+      "step": 36450
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.7837e-05,
+      "loss": 1.6765,
+      "step": 36500
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.782033333333334e-05,
+      "loss": 1.6675,
+      "step": 36550
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.780366666666667e-05,
+      "loss": 1.6638,
+      "step": 36600
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.7787e-05,
+      "loss": 1.6697,
+      "step": 36650
+    },
+    {
+      "epoch": 1.1,
+      "learning_rate": 8.777033333333333e-05,
+      "loss": 1.6817,
+      "step": 36700
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.775366666666667e-05,
+      "loss": 1.6897,
+      "step": 36750
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.7737e-05,
+      "loss": 1.6781,
+      "step": 36800
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.772033333333334e-05,
+      "loss": 1.6767,
+      "step": 36850
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.770366666666668e-05,
+      "loss": 1.6804,
+      "step": 36900
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.7687e-05,
+      "loss": 1.6629,
+      "step": 36950
+    },
+    {
+      "epoch": 1.11,
+      "learning_rate": 8.767033333333333e-05,
+      "loss": 1.6604,
+      "step": 37000
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.765366666666666e-05,
+      "loss": 1.6646,
+      "step": 37050
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.7637e-05,
+      "loss": 1.6639,
+      "step": 37100
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.762033333333334e-05,
+      "loss": 1.6735,
+      "step": 37150
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.760366666666668e-05,
+      "loss": 1.6825,
+      "step": 37200
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.758700000000001e-05,
+      "loss": 1.6575,
+      "step": 37250
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.757033333333334e-05,
+      "loss": 1.6738,
+      "step": 37300
+    },
+    {
+      "epoch": 1.12,
+      "learning_rate": 8.755366666666666e-05,
+      "loss": 1.6563,
+      "step": 37350
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.753733333333333e-05,
+      "loss": 1.654,
+      "step": 37400
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.752066666666667e-05,
+      "loss": 1.6801,
+      "step": 37450
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.750400000000001e-05,
+      "loss": 1.666,
+      "step": 37500
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.748733333333333e-05,
+      "loss": 1.6736,
+      "step": 37550
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.747066666666667e-05,
+      "loss": 1.649,
+      "step": 37600
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.7454e-05,
+      "loss": 1.6396,
+      "step": 37650
+    },
+    {
+      "epoch": 1.13,
+      "learning_rate": 8.743733333333334e-05,
+      "loss": 1.6632,
+      "step": 37700
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.742066666666667e-05,
+      "loss": 1.6601,
+      "step": 37750
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.7404e-05,
+      "loss": 1.6607,
+      "step": 37800
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.738733333333333e-05,
+      "loss": 1.6478,
+      "step": 37850
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.737066666666667e-05,
+      "loss": 1.6316,
+      "step": 37900
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.7354e-05,
+      "loss": 1.6362,
+      "step": 37950
+    },
+    {
+      "epoch": 1.14,
+      "learning_rate": 8.733733333333334e-05,
+      "loss": 1.6743,
+      "step": 38000
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.732066666666668e-05,
+      "loss": 1.6459,
+      "step": 38050
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.7304e-05,
+      "loss": 1.6337,
+      "step": 38100
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.728733333333333e-05,
+      "loss": 1.6323,
+      "step": 38150
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.727066666666666e-05,
+      "loss": 1.6723,
+      "step": 38200
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.7254e-05,
+      "loss": 1.6191,
+      "step": 38250
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.723733333333334e-05,
+      "loss": 1.6395,
+      "step": 38300
+    },
+    {
+      "epoch": 1.15,
+      "learning_rate": 8.722066666666668e-05,
+      "loss": 1.6281,
+      "step": 38350
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.720400000000001e-05,
+      "loss": 1.6227,
+      "step": 38400
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.718733333333334e-05,
+      "loss": 1.629,
+      "step": 38450
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.717066666666666e-05,
+      "loss": 1.6371,
+      "step": 38500
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.7154e-05,
+      "loss": 1.6436,
+      "step": 38550
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.713733333333334e-05,
+      "loss": 1.6278,
+      "step": 38600
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.712066666666667e-05,
+      "loss": 1.6339,
+      "step": 38650
+    },
+    {
+      "epoch": 1.16,
+      "learning_rate": 8.710400000000001e-05,
+      "loss": 1.6177,
+      "step": 38700
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.708733333333335e-05,
+      "loss": 1.6303,
+      "step": 38750
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.707066666666667e-05,
+      "loss": 1.618,
+      "step": 38800
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.7054e-05,
+      "loss": 1.6322,
+      "step": 38850
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.703733333333333e-05,
+      "loss": 1.6181,
+      "step": 38900
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.702066666666667e-05,
+      "loss": 1.6245,
+      "step": 38950
+    },
+    {
+      "epoch": 1.17,
+      "learning_rate": 8.700400000000001e-05,
+      "loss": 1.606,
+      "step": 39000
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.698733333333335e-05,
+      "loss": 1.6176,
+      "step": 39050
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.697066666666667e-05,
+      "loss": 1.6053,
+      "step": 39100
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.695400000000001e-05,
+      "loss": 1.6218,
+      "step": 39150
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.693733333333333e-05,
+      "loss": 1.6179,
+      "step": 39200
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.692066666666667e-05,
+      "loss": 1.6153,
+      "step": 39250
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.690400000000001e-05,
+      "loss": 1.6096,
+      "step": 39300
+    },
+    {
+      "epoch": 1.18,
+      "learning_rate": 8.688733333333334e-05,
+      "loss": 1.6142,
+      "step": 39350
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.687066666666667e-05,
+      "loss": 1.6132,
+      "step": 39400
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.6854e-05,
+      "loss": 1.6415,
+      "step": 39450
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.683733333333334e-05,
+      "loss": 1.6042,
+      "step": 39500
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.682066666666667e-05,
+      "loss": 1.6063,
+      "step": 39550
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.6804e-05,
+      "loss": 1.5976,
+      "step": 39600
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.678733333333334e-05,
+      "loss": 1.6102,
+      "step": 39650
+    },
+    {
+      "epoch": 1.19,
+      "learning_rate": 8.677066666666667e-05,
+      "loss": 1.6094,
+      "step": 39700
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.6754e-05,
+      "loss": 1.6094,
+      "step": 39750
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.673733333333334e-05,
+      "loss": 1.584,
+      "step": 39800
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.672066666666668e-05,
+      "loss": 1.5983,
+      "step": 39850
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.6704e-05,
+      "loss": 1.597,
+      "step": 39900
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.668733333333334e-05,
+      "loss": 1.583,
+      "step": 39950
+    },
+    {
+      "epoch": 1.2,
+      "learning_rate": 8.667066666666666e-05,
+      "loss": 1.6078,
+      "step": 40000
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.6654e-05,
+      "loss": 1.5896,
+      "step": 40050
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.663733333333334e-05,
+      "loss": 1.5971,
+      "step": 40100
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.662066666666668e-05,
+      "loss": 1.5968,
+      "step": 40150
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.660400000000001e-05,
+      "loss": 1.6122,
+      "step": 40200
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.658733333333334e-05,
+      "loss": 1.5939,
+      "step": 40250
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.657066666666666e-05,
+      "loss": 1.5801,
+      "step": 40300
+    },
+    {
+      "epoch": 1.21,
+      "learning_rate": 8.6554e-05,
+      "loss": 1.5937,
+      "step": 40350
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.653733333333334e-05,
+      "loss": 1.5784,
+      "step": 40400
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.652066666666667e-05,
+      "loss": 1.5819,
+      "step": 40450
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.650400000000001e-05,
+      "loss": 1.5841,
+      "step": 40500
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.648733333333335e-05,
+      "loss": 1.5856,
+      "step": 40550
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.647066666666667e-05,
+      "loss": 1.5698,
+      "step": 40600
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.6454e-05,
+      "loss": 1.5714,
+      "step": 40650
+    },
+    {
+      "epoch": 1.22,
+      "learning_rate": 8.643733333333333e-05,
+      "loss": 1.5848,
+      "step": 40700
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.642066666666667e-05,
+      "loss": 1.5627,
+      "step": 40750
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.640400000000001e-05,
+      "loss": 1.5684,
+      "step": 40800
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.638733333333335e-05,
+      "loss": 1.5785,
+      "step": 40850
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.637066666666667e-05,
+      "loss": 1.577,
+      "step": 40900
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.635400000000001e-05,
+      "loss": 1.5944,
+      "step": 40950
+    },
+    {
+      "epoch": 1.23,
+      "learning_rate": 8.633733333333333e-05,
+      "loss": 1.582,
+      "step": 41000
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.632066666666667e-05,
+      "loss": 1.5746,
+      "step": 41050
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.6304e-05,
+      "loss": 1.5592,
+      "step": 41100
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.628733333333334e-05,
+      "loss": 1.5717,
+      "step": 41150
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.627066666666667e-05,
+      "loss": 1.5585,
+      "step": 41200
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.6254e-05,
+      "loss": 1.5734,
+      "step": 41250
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.623733333333334e-05,
+      "loss": 1.5755,
+      "step": 41300
+    },
+    {
+      "epoch": 1.24,
+      "learning_rate": 8.622066666666667e-05,
+      "loss": 1.5556,
+      "step": 41350
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.6204e-05,
+      "loss": 1.5581,
+      "step": 41400
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.618733333333334e-05,
+      "loss": 1.5759,
+      "step": 41450
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.617066666666666e-05,
+      "loss": 1.5712,
+      "step": 41500
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.6154e-05,
+      "loss": 1.5673,
+      "step": 41550
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.613766666666667e-05,
+      "loss": 1.5553,
+      "step": 41600
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.612100000000001e-05,
+      "loss": 1.5793,
+      "step": 41650
+    },
+    {
+      "epoch": 1.25,
+      "learning_rate": 8.610433333333335e-05,
+      "loss": 1.5558,
+      "step": 41700
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.608766666666667e-05,
+      "loss": 1.5457,
+      "step": 41750
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.6071e-05,
+      "loss": 1.5567,
+      "step": 41800
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.605433333333333e-05,
+      "loss": 1.5604,
+      "step": 41850
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.603766666666667e-05,
+      "loss": 1.5506,
+      "step": 41900
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.602100000000001e-05,
+      "loss": 1.5365,
+      "step": 41950
+    },
+    {
+      "epoch": 1.26,
+      "learning_rate": 8.600433333333335e-05,
+      "loss": 1.5367,
+      "step": 42000
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.598766666666667e-05,
+      "loss": 1.5336,
+      "step": 42050
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.597100000000001e-05,
+      "loss": 1.5522,
+      "step": 42100
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.595433333333333e-05,
+      "loss": 1.5588,
+      "step": 42150
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.593766666666667e-05,
+      "loss": 1.5562,
+      "step": 42200
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.5921e-05,
+      "loss": 1.5634,
+      "step": 42250
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.590433333333334e-05,
+      "loss": 1.5503,
+      "step": 42300
+    },
+    {
+      "epoch": 1.27,
+      "learning_rate": 8.588766666666667e-05,
+      "loss": 1.5362,
+      "step": 42350
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.5871e-05,
+      "loss": 1.541,
+      "step": 42400
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.585433333333334e-05,
+      "loss": 1.5591,
+      "step": 42450
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.583766666666667e-05,
+      "loss": 1.5483,
+      "step": 42500
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.5821e-05,
+      "loss": 1.5373,
+      "step": 42550
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.580433333333334e-05,
+      "loss": 1.5404,
+      "step": 42600
+    },
+    {
+      "epoch": 1.28,
+      "learning_rate": 8.578766666666667e-05,
+      "loss": 1.5491,
+      "step": 42650
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.5771e-05,
+      "loss": 1.5315,
+      "step": 42700
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.575433333333334e-05,
+      "loss": 1.517,
+      "step": 42750
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.573766666666668e-05,
+      "loss": 1.5568,
+      "step": 42800
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.5721e-05,
+      "loss": 1.5178,
+      "step": 42850
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.570433333333334e-05,
+      "loss": 1.5439,
+      "step": 42900
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.568766666666666e-05,
+      "loss": 1.55,
+      "step": 42950
+    },
+    {
+      "epoch": 1.29,
+      "learning_rate": 8.5671e-05,
+      "loss": 1.5523,
+      "step": 43000
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.565433333333334e-05,
+      "loss": 1.5293,
+      "step": 43050
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.563766666666668e-05,
+      "loss": 1.5303,
+      "step": 43100
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.562100000000001e-05,
+      "loss": 1.5463,
+      "step": 43150
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.560433333333334e-05,
+      "loss": 1.5454,
+      "step": 43200
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.558766666666666e-05,
+      "loss": 1.5326,
+      "step": 43250
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.5571e-05,
+      "loss": 1.5318,
+      "step": 43300
+    },
+    {
+      "epoch": 1.3,
+      "learning_rate": 8.555433333333334e-05,
+      "loss": 1.5446,
+      "step": 43350
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.553766666666667e-05,
+      "loss": 1.5245,
+      "step": 43400
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.552100000000001e-05,
+      "loss": 1.5202,
+      "step": 43450
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.550433333333335e-05,
+      "loss": 1.5277,
+      "step": 43500
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.548766666666667e-05,
+      "loss": 1.532,
+      "step": 43550
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.5471e-05,
+      "loss": 1.518,
+      "step": 43600
+    },
+    {
+      "epoch": 1.31,
+      "learning_rate": 8.545466666666667e-05,
+      "loss": 1.5241,
+      "step": 43650
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.5438e-05,
+      "loss": 1.518,
+      "step": 43700
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.542133333333334e-05,
+      "loss": 1.5283,
+      "step": 43750
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.540466666666667e-05,
+      "loss": 1.5219,
+      "step": 43800
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.5388e-05,
+      "loss": 1.5164,
+      "step": 43850
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.537133333333334e-05,
+      "loss": 1.5243,
+      "step": 43900
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.535466666666668e-05,
+      "loss": 1.5134,
+      "step": 43950
+    },
+    {
+      "epoch": 1.32,
+      "learning_rate": 8.5338e-05,
+      "loss": 1.5112,
+      "step": 44000
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.532133333333334e-05,
+      "loss": 1.496,
+      "step": 44050
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.530466666666666e-05,
+      "loss": 1.5316,
+      "step": 44100
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.5288e-05,
+      "loss": 1.5112,
+      "step": 44150
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.527133333333334e-05,
+      "loss": 1.5229,
+      "step": 44200
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.525466666666668e-05,
+      "loss": 1.5092,
+      "step": 44250
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.523800000000001e-05,
+      "loss": 1.5216,
+      "step": 44300
+    },
+    {
+      "epoch": 1.33,
+      "learning_rate": 8.522133333333334e-05,
+      "loss": 1.5202,
+      "step": 44350
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.520466666666666e-05,
+      "loss": 1.5228,
+      "step": 44400
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.5188e-05,
+      "loss": 1.517,
+      "step": 44450
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.517133333333334e-05,
+      "loss": 1.5039,
+      "step": 44500
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.515466666666667e-05,
+      "loss": 1.5244,
+      "step": 44550
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.513800000000001e-05,
+      "loss": 1.5122,
+      "step": 44600
+    },
+    {
+      "epoch": 1.34,
+      "learning_rate": 8.512133333333335e-05,
+      "loss": 1.5041,
+      "step": 44650
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.510466666666667e-05,
+      "loss": 1.4953,
+      "step": 44700
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.5088e-05,
+      "loss": 1.5044,
+      "step": 44750
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.507133333333333e-05,
+      "loss": 1.5225,
+      "step": 44800
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.505466666666667e-05,
+      "loss": 1.4948,
+      "step": 44850
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.503800000000001e-05,
+      "loss": 1.4985,
+      "step": 44900
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.502133333333335e-05,
+      "loss": 1.5043,
+      "step": 44950
+    },
+    {
+      "epoch": 1.35,
+      "learning_rate": 8.500466666666667e-05,
+      "loss": 1.5109,
+      "step": 45000
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.498800000000001e-05,
+      "loss": 1.5108,
+      "step": 45050
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.497133333333333e-05,
+      "loss": 1.508,
+      "step": 45100
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.495466666666667e-05,
+      "loss": 1.4736,
+      "step": 45150
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.4938e-05,
+      "loss": 1.4991,
+      "step": 45200
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.492133333333334e-05,
+      "loss": 1.4937,
+      "step": 45250
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.490466666666667e-05,
+      "loss": 1.491,
+      "step": 45300
+    },
+    {
+      "epoch": 1.36,
+      "learning_rate": 8.4888e-05,
+      "loss": 1.4742,
+      "step": 45350
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.487133333333334e-05,
+      "loss": 1.4912,
+      "step": 45400
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.485466666666667e-05,
+      "loss": 1.497,
+      "step": 45450
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.4838e-05,
+      "loss": 1.4874,
+      "step": 45500
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.482133333333334e-05,
+      "loss": 1.4551,
+      "step": 45550
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.480466666666666e-05,
+      "loss": 1.4914,
+      "step": 45600
+    },
+    {
+      "epoch": 1.37,
+      "learning_rate": 8.4788e-05,
+      "loss": 1.4913,
+      "step": 45650
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.477133333333334e-05,
+      "loss": 1.4682,
+      "step": 45700
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.475466666666668e-05,
+      "loss": 1.4744,
+      "step": 45750
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.4738e-05,
+      "loss": 1.4849,
+      "step": 45800
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.472133333333334e-05,
+      "loss": 1.4847,
+      "step": 45850
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.470466666666666e-05,
+      "loss": 1.5011,
+      "step": 45900
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.4688e-05,
+      "loss": 1.5112,
+      "step": 45950
+    },
+    {
+      "epoch": 1.38,
+      "learning_rate": 8.467133333333334e-05,
+      "loss": 1.4784,
+      "step": 46000
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.465466666666667e-05,
+      "loss": 1.4914,
+      "step": 46050
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.463800000000001e-05,
+      "loss": 1.5101,
+      "step": 46100
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.462133333333334e-05,
+      "loss": 1.4934,
+      "step": 46150
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.460466666666666e-05,
+      "loss": 1.4788,
+      "step": 46200
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.4588e-05,
+      "loss": 1.4822,
+      "step": 46250
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.457133333333333e-05,
+      "loss": 1.4853,
+      "step": 46300
+    },
+    {
+      "epoch": 1.39,
+      "learning_rate": 8.4555e-05,
+      "loss": 1.4761,
+      "step": 46350
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.453833333333334e-05,
+      "loss": 1.4708,
+      "step": 46400
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.452166666666667e-05,
+      "loss": 1.4788,
+      "step": 46450
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.4505e-05,
+      "loss": 1.478,
+      "step": 46500
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.448833333333334e-05,
+      "loss": 1.4856,
+      "step": 46550
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.447166666666667e-05,
+      "loss": 1.4734,
+      "step": 46600
+    },
+    {
+      "epoch": 1.4,
+      "learning_rate": 8.4455e-05,
+      "loss": 1.4648,
+      "step": 46650
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.443833333333334e-05,
+      "loss": 1.4696,
+      "step": 46700
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.442166666666667e-05,
+      "loss": 1.4806,
+      "step": 46750
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.4405e-05,
+      "loss": 1.4742,
+      "step": 46800
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.438833333333334e-05,
+      "loss": 1.4714,
+      "step": 46850
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.437166666666668e-05,
+      "loss": 1.4659,
+      "step": 46900
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.4355e-05,
+      "loss": 1.4909,
+      "step": 46950
+    },
+    {
+      "epoch": 1.41,
+      "learning_rate": 8.433833333333334e-05,
+      "loss": 1.4827,
+      "step": 47000
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.432166666666666e-05,
+      "loss": 1.4773,
+      "step": 47050
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.4305e-05,
+      "loss": 1.4483,
+      "step": 47100
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.428833333333334e-05,
+      "loss": 1.4941,
+      "step": 47150
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.427166666666667e-05,
+      "loss": 1.4823,
+      "step": 47200
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.425500000000001e-05,
+      "loss": 1.472,
+      "step": 47250
+    },
+    {
+      "epoch": 1.42,
+      "learning_rate": 8.423833333333334e-05,
+      "loss": 1.4542,
+      "step": 47300
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.422166666666666e-05,
+      "loss": 1.4627,
+      "step": 47350
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.4205e-05,
+      "loss": 1.4727,
+      "step": 47400
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.418833333333334e-05,
+      "loss": 1.4548,
+      "step": 47450
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.417166666666667e-05,
+      "loss": 1.4648,
+      "step": 47500
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.415500000000001e-05,
+      "loss": 1.4771,
+      "step": 47550
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.413833333333335e-05,
+      "loss": 1.4426,
+      "step": 47600
+    },
+    {
+      "epoch": 1.43,
+      "learning_rate": 8.412166666666667e-05,
+      "loss": 1.4393,
+      "step": 47650
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.4105e-05,
+      "loss": 1.4563,
+      "step": 47700
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.408833333333333e-05,
+      "loss": 1.4484,
+      "step": 47750
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.407166666666667e-05,
+      "loss": 1.4589,
+      "step": 47800
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.405500000000001e-05,
+      "loss": 1.4487,
+      "step": 47850
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.403833333333334e-05,
+      "loss": 1.4626,
+      "step": 47900
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.402166666666667e-05,
+      "loss": 1.4522,
+      "step": 47950
+    },
+    {
+      "epoch": 1.44,
+      "learning_rate": 8.4005e-05,
+      "loss": 1.4473,
+      "step": 48000
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.398833333333333e-05,
+      "loss": 1.4631,
+      "step": 48050
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.397166666666667e-05,
+      "loss": 1.4463,
+      "step": 48100
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.3955e-05,
+      "loss": 1.457,
+      "step": 48150
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.393833333333334e-05,
+      "loss": 1.4642,
+      "step": 48200
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.392166666666668e-05,
+      "loss": 1.4568,
+      "step": 48250
+    },
+    {
+      "epoch": 1.45,
+      "learning_rate": 8.3905e-05,
+      "loss": 1.4576,
+      "step": 48300
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.388833333333334e-05,
+      "loss": 1.4525,
+      "step": 48350
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.387166666666667e-05,
+      "loss": 1.4511,
+      "step": 48400
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.3855e-05,
+      "loss": 1.4525,
+      "step": 48450
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.383833333333334e-05,
+      "loss": 1.4244,
+      "step": 48500
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.3822e-05,
+      "loss": 1.4383,
+      "step": 48550
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.380533333333334e-05,
+      "loss": 1.4452,
+      "step": 48600
+    },
+    {
+      "epoch": 1.46,
+      "learning_rate": 8.378866666666667e-05,
+      "loss": 1.4419,
+      "step": 48650
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.377200000000001e-05,
+      "loss": 1.4297,
+      "step": 48700
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.375533333333335e-05,
+      "loss": 1.4568,
+      "step": 48750
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.373866666666667e-05,
+      "loss": 1.4599,
+      "step": 48800
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.3722e-05,
+      "loss": 1.4393,
+      "step": 48850
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.370533333333333e-05,
+      "loss": 1.4342,
+      "step": 48900
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.368866666666667e-05,
+      "loss": 1.4325,
+      "step": 48950
+    },
+    {
+      "epoch": 1.47,
+      "learning_rate": 8.367200000000001e-05,
+      "loss": 1.4344,
+      "step": 49000
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.365533333333335e-05,
+      "loss": 1.4567,
+      "step": 49050
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.363866666666667e-05,
+      "loss": 1.4395,
+      "step": 49100
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.3622e-05,
+      "loss": 1.4247,
+      "step": 49150
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.360533333333333e-05,
+      "loss": 1.4533,
+      "step": 49200
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.358866666666667e-05,
+      "loss": 1.4368,
+      "step": 49250
+    },
+    {
+      "epoch": 1.48,
+      "learning_rate": 8.3572e-05,
+      "loss": 1.4337,
+      "step": 49300
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.355533333333334e-05,
+      "loss": 1.4351,
+      "step": 49350
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.353866666666668e-05,
+      "loss": 1.4413,
+      "step": 49400
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.3522e-05,
+      "loss": 1.4136,
+      "step": 49450
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.350533333333334e-05,
+      "loss": 1.4291,
+      "step": 49500
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.348866666666667e-05,
+      "loss": 1.4259,
+      "step": 49550
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.3472e-05,
+      "loss": 1.4329,
+      "step": 49600
+    },
+    {
+      "epoch": 1.49,
+      "learning_rate": 8.345533333333334e-05,
+      "loss": 1.4194,
+      "step": 49650
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.343866666666668e-05,
+      "loss": 1.4194,
+      "step": 49700
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.3422e-05,
+      "loss": 1.4117,
+      "step": 49750
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.340533333333334e-05,
+      "loss": 1.4084,
+      "step": 49800
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.338866666666668e-05,
+      "loss": 1.4303,
+      "step": 49850
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.3372e-05,
+      "loss": 1.4218,
+      "step": 49900
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.335533333333334e-05,
+      "loss": 1.429,
+      "step": 49950
+    },
+    {
+      "epoch": 1.5,
+      "learning_rate": 8.333866666666668e-05,
+      "loss": 1.4186,
+      "step": 50000
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.3322e-05,
+      "loss": 1.4337,
+      "step": 50050
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.330533333333334e-05,
+      "loss": 1.4225,
+      "step": 50100
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.328866666666667e-05,
+      "loss": 1.4176,
+      "step": 50150
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.327233333333335e-05,
+      "loss": 1.4111,
+      "step": 50200
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.325566666666667e-05,
+      "loss": 1.4194,
+      "step": 50250
+    },
+    {
+      "epoch": 1.51,
+      "learning_rate": 8.3239e-05,
+      "loss": 1.4211,
+      "step": 50300
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.322233333333333e-05,
+      "loss": 1.4207,
+      "step": 50350
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.320566666666667e-05,
+      "loss": 1.4157,
+      "step": 50400
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.3189e-05,
+      "loss": 1.4242,
+      "step": 50450
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.317233333333334e-05,
+      "loss": 1.4178,
+      "step": 50500
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.315566666666668e-05,
+      "loss": 1.4225,
+      "step": 50550
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.3139e-05,
+      "loss": 1.4222,
+      "step": 50600
+    },
+    {
+      "epoch": 1.52,
+      "learning_rate": 8.312233333333333e-05,
+      "loss": 1.4085,
+      "step": 50650
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.310566666666667e-05,
+      "loss": 1.4206,
+      "step": 50700
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.3089e-05,
+      "loss": 1.4154,
+      "step": 50750
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.307233333333334e-05,
+      "loss": 1.4001,
+      "step": 50800
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.305566666666668e-05,
+      "loss": 1.4238,
+      "step": 50850
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.3039e-05,
+      "loss": 1.4193,
+      "step": 50900
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.302233333333334e-05,
+      "loss": 1.4196,
+      "step": 50950
+    },
+    {
+      "epoch": 1.53,
+      "learning_rate": 8.300566666666666e-05,
+      "loss": 1.4183,
+      "step": 51000
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.2989e-05,
+      "loss": 1.4051,
+      "step": 51050
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.297233333333334e-05,
+      "loss": 1.3795,
+      "step": 51100
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.295566666666668e-05,
+      "loss": 1.406,
+      "step": 51150
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.2939e-05,
+      "loss": 1.4101,
+      "step": 51200
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.292233333333334e-05,
+      "loss": 1.418,
+      "step": 51250
+    },
+    {
+      "epoch": 1.54,
+      "learning_rate": 8.290566666666667e-05,
+      "loss": 1.4019,
+      "step": 51300
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.288900000000001e-05,
+      "loss": 1.405,
+      "step": 51350
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.287233333333334e-05,
+      "loss": 1.4002,
+      "step": 51400
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.285566666666667e-05,
+      "loss": 1.4082,
+      "step": 51450
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.2839e-05,
+      "loss": 1.4095,
+      "step": 51500
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.282233333333333e-05,
+      "loss": 1.4073,
+      "step": 51550
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.280566666666667e-05,
+      "loss": 1.412,
+      "step": 51600
+    },
+    {
+      "epoch": 1.55,
+      "learning_rate": 8.278900000000001e-05,
+      "loss": 1.4111,
+      "step": 51650
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.277233333333335e-05,
+      "loss": 1.4054,
+      "step": 51700
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.275566666666667e-05,
+      "loss": 1.3711,
+      "step": 51750
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.2739e-05,
+      "loss": 1.3961,
+      "step": 51800
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.272233333333333e-05,
+      "loss": 1.4089,
+      "step": 51850
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.270566666666667e-05,
+      "loss": 1.4134,
+      "step": 51900
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.268900000000001e-05,
+      "loss": 1.4058,
+      "step": 51950
+    },
+    {
+      "epoch": 1.56,
+      "learning_rate": 8.267233333333334e-05,
+      "loss": 1.3863,
+      "step": 52000
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.265566666666668e-05,
+      "loss": 1.4103,
+      "step": 52050
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.2639e-05,
+      "loss": 1.3937,
+      "step": 52100
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.262233333333333e-05,
+      "loss": 1.4059,
+      "step": 52150
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.260566666666667e-05,
+      "loss": 1.3977,
+      "step": 52200
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.2589e-05,
+      "loss": 1.3838,
+      "step": 52250
+    },
+    {
+      "epoch": 1.57,
+      "learning_rate": 8.257233333333334e-05,
+      "loss": 1.404,
+      "step": 52300
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.255566666666668e-05,
+      "loss": 1.4144,
+      "step": 52350
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.2539e-05,
+      "loss": 1.3853,
+      "step": 52400
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.252233333333334e-05,
+      "loss": 1.394,
+      "step": 52450
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.250566666666667e-05,
+      "loss": 1.403,
+      "step": 52500
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.2489e-05,
+      "loss": 1.4065,
+      "step": 52550
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.247233333333334e-05,
+      "loss": 1.4014,
+      "step": 52600
+    },
+    {
+      "epoch": 1.58,
+      "learning_rate": 8.245566666666668e-05,
+      "loss": 1.3966,
+      "step": 52650
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.2439e-05,
+      "loss": 1.3873,
+      "step": 52700
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.242233333333334e-05,
+      "loss": 1.3884,
+      "step": 52750
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.240566666666668e-05,
+      "loss": 1.4028,
+      "step": 52800
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.2389e-05,
+      "loss": 1.3931,
+      "step": 52850
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.237233333333334e-05,
+      "loss": 1.3865,
+      "step": 52900
+    },
+    {
+      "epoch": 1.59,
+      "learning_rate": 8.235566666666667e-05,
+      "loss": 1.3805,
+      "step": 52950
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.2339e-05,
+      "loss": 1.3775,
+      "step": 53000
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.232233333333334e-05,
+      "loss": 1.393,
+      "step": 53050
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.230566666666667e-05,
+      "loss": 1.3913,
+      "step": 53100
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.228900000000001e-05,
+      "loss": 1.3786,
+      "step": 53150
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.227233333333334e-05,
+      "loss": 1.3865,
+      "step": 53200
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.225566666666667e-05,
+      "loss": 1.3809,
+      "step": 53250
+    },
+    {
+      "epoch": 1.6,
+      "learning_rate": 8.2239e-05,
+      "loss": 1.3861,
+      "step": 53300
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.222233333333333e-05,
+      "loss": 1.3767,
+      "step": 53350
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.220566666666667e-05,
+      "loss": 1.3867,
+      "step": 53400
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.218900000000001e-05,
+      "loss": 1.3784,
+      "step": 53450
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.217233333333335e-05,
+      "loss": 1.3927,
+      "step": 53500
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.2156e-05,
+      "loss": 1.3798,
+      "step": 53550
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.213933333333333e-05,
+      "loss": 1.3698,
+      "step": 53600
+    },
+    {
+      "epoch": 1.61,
+      "learning_rate": 8.212266666666667e-05,
+      "loss": 1.3674,
+      "step": 53650
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.2106e-05,
+      "loss": 1.3842,
+      "step": 53700
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.208933333333334e-05,
+      "loss": 1.4003,
+      "step": 53750
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.207266666666668e-05,
+      "loss": 1.3729,
+      "step": 53800
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.2056e-05,
+      "loss": 1.3832,
+      "step": 53850
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.203933333333334e-05,
+      "loss": 1.3782,
+      "step": 53900
+    },
+    {
+      "epoch": 1.62,
+      "learning_rate": 8.202266666666666e-05,
+      "loss": 1.361,
+      "step": 53950
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.2006e-05,
+      "loss": 1.3623,
+      "step": 54000
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.198933333333334e-05,
+      "loss": 1.3774,
+      "step": 54050
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.197266666666668e-05,
+      "loss": 1.3643,
+      "step": 54100
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.1956e-05,
+      "loss": 1.3676,
+      "step": 54150
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.193933333333334e-05,
+      "loss": 1.3809,
+      "step": 54200
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.192266666666667e-05,
+      "loss": 1.3809,
+      "step": 54250
+    },
+    {
+      "epoch": 1.63,
+      "learning_rate": 8.190600000000001e-05,
+      "loss": 1.365,
+      "step": 54300
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.188933333333334e-05,
+      "loss": 1.3883,
+      "step": 54350
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.187266666666667e-05,
+      "loss": 1.3952,
+      "step": 54400
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.1856e-05,
+      "loss": 1.3722,
+      "step": 54450
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.183933333333333e-05,
+      "loss": 1.3695,
+      "step": 54500
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.182266666666667e-05,
+      "loss": 1.3731,
+      "step": 54550
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.180600000000001e-05,
+      "loss": 1.3706,
+      "step": 54600
+    },
+    {
+      "epoch": 1.64,
+      "learning_rate": 8.178933333333335e-05,
+      "loss": 1.3418,
+      "step": 54650
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.177266666666667e-05,
+      "loss": 1.3723,
+      "step": 54700
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.1756e-05,
+      "loss": 1.3639,
+      "step": 54750
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.173933333333333e-05,
+      "loss": 1.3689,
+      "step": 54800
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.172266666666667e-05,
+      "loss": 1.3649,
+      "step": 54850
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.170600000000001e-05,
+      "loss": 1.3639,
+      "step": 54900
+    },
+    {
+      "epoch": 1.65,
+      "learning_rate": 8.168933333333334e-05,
+      "loss": 1.3637,
+      "step": 54950
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.167266666666668e-05,
+      "loss": 1.3688,
+      "step": 55000
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.1656e-05,
+      "loss": 1.3686,
+      "step": 55050
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.163933333333333e-05,
+      "loss": 1.3412,
+      "step": 55100
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.162266666666667e-05,
+      "loss": 1.3621,
+      "step": 55150
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.1606e-05,
+      "loss": 1.3488,
+      "step": 55200
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.158933333333334e-05,
+      "loss": 1.3635,
+      "step": 55250
+    },
+    {
+      "epoch": 1.66,
+      "learning_rate": 8.157266666666668e-05,
+      "loss": 1.3483,
+      "step": 55300
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.1556e-05,
+      "loss": 1.3641,
+      "step": 55350
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.153933333333334e-05,
+      "loss": 1.3621,
+      "step": 55400
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.152266666666666e-05,
+      "loss": 1.3482,
+      "step": 55450
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.1506e-05,
+      "loss": 1.3654,
+      "step": 55500
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.148933333333334e-05,
+      "loss": 1.3585,
+      "step": 55550
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.147266666666668e-05,
+      "loss": 1.3549,
+      "step": 55600
+    },
+    {
+      "epoch": 1.67,
+      "learning_rate": 8.1456e-05,
+      "loss": 1.3535,
+      "step": 55650
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.143933333333334e-05,
+      "loss": 1.3727,
+      "step": 55700
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.142266666666668e-05,
+      "loss": 1.351,
+      "step": 55750
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.1406e-05,
+      "loss": 1.3473,
+      "step": 55800
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.138933333333334e-05,
+      "loss": 1.3644,
+      "step": 55850
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.137266666666667e-05,
+      "loss": 1.3541,
+      "step": 55900
+    },
+    {
+      "epoch": 1.68,
+      "learning_rate": 8.1356e-05,
+      "loss": 1.3455,
+      "step": 55950
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.133933333333334e-05,
+      "loss": 1.3739,
+      "step": 56000
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.132266666666667e-05,
+      "loss": 1.3426,
+      "step": 56050
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.130600000000001e-05,
+      "loss": 1.3505,
+      "step": 56100
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.128933333333333e-05,
+      "loss": 1.3611,
+      "step": 56150
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.127266666666667e-05,
+      "loss": 1.3596,
+      "step": 56200
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.1256e-05,
+      "loss": 1.3577,
+      "step": 56250
+    },
+    {
+      "epoch": 1.69,
+      "learning_rate": 8.123933333333333e-05,
+      "loss": 1.338,
+      "step": 56300
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.122266666666667e-05,
+      "loss": 1.3415,
+      "step": 56350
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.120600000000001e-05,
+      "loss": 1.3498,
+      "step": 56400
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.118933333333335e-05,
+      "loss": 1.3513,
+      "step": 56450
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.117266666666667e-05,
+      "loss": 1.3439,
+      "step": 56500
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.1156e-05,
+      "loss": 1.3372,
+      "step": 56550
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.113933333333333e-05,
+      "loss": 1.3502,
+      "step": 56600
+    },
+    {
+      "epoch": 1.7,
+      "learning_rate": 8.112266666666667e-05,
+      "loss": 1.3261,
+      "step": 56650
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.1106e-05,
+      "loss": 1.34,
+      "step": 56700
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.108933333333334e-05,
+      "loss": 1.3407,
+      "step": 56750
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.107266666666668e-05,
+      "loss": 1.3407,
+      "step": 56800
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.1056e-05,
+      "loss": 1.3337,
+      "step": 56850
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.103933333333333e-05,
+      "loss": 1.3468,
+      "step": 56900
+    },
+    {
+      "epoch": 1.71,
+      "learning_rate": 8.102266666666667e-05,
+      "loss": 1.3256,
+      "step": 56950
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.1006e-05,
+      "loss": 1.3564,
+      "step": 57000
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.098933333333334e-05,
+      "loss": 1.3425,
+      "step": 57050
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.097266666666668e-05,
+      "loss": 1.3486,
+      "step": 57100
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.0956e-05,
+      "loss": 1.3237,
+      "step": 57150
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.093933333333334e-05,
+      "loss": 1.3391,
+      "step": 57200
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.092266666666666e-05,
+      "loss": 1.349,
+      "step": 57250
+    },
+    {
+      "epoch": 1.72,
+      "learning_rate": 8.0906e-05,
+      "loss": 1.3403,
+      "step": 57300
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.088933333333334e-05,
+      "loss": 1.3422,
+      "step": 57350
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.087266666666668e-05,
+      "loss": 1.3327,
+      "step": 57400
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.0856e-05,
+      "loss": 1.3316,
+      "step": 57450
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.083933333333334e-05,
+      "loss": 1.3435,
+      "step": 57500
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.082266666666667e-05,
+      "loss": 1.3143,
+      "step": 57550
+    },
+    {
+      "epoch": 1.73,
+      "learning_rate": 8.0806e-05,
+      "loss": 1.3357,
+      "step": 57600
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.078933333333334e-05,
+      "loss": 1.3394,
+      "step": 57650
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.077266666666667e-05,
+      "loss": 1.3352,
+      "step": 57700
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.0756e-05,
+      "loss": 1.3386,
+      "step": 57750
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.073933333333333e-05,
+      "loss": 1.3411,
+      "step": 57800
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.072266666666667e-05,
+      "loss": 1.3275,
+      "step": 57850
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.070600000000001e-05,
+      "loss": 1.3322,
+      "step": 57900
+    },
+    {
+      "epoch": 1.74,
+      "learning_rate": 8.068933333333333e-05,
+      "loss": 1.3275,
+      "step": 57950
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.067266666666667e-05,
+      "loss": 1.3196,
+      "step": 58000
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.065600000000001e-05,
+      "loss": 1.3219,
+      "step": 58050
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.063933333333333e-05,
+      "loss": 1.3346,
+      "step": 58100
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.062266666666667e-05,
+      "loss": 1.3349,
+      "step": 58150
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.060600000000001e-05,
+      "loss": 1.3201,
+      "step": 58200
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.058966666666668e-05,
+      "loss": 1.3365,
+      "step": 58250
+    },
+    {
+      "epoch": 1.75,
+      "learning_rate": 8.057333333333334e-05,
+      "loss": 1.3371,
+      "step": 58300
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.055666666666667e-05,
+      "loss": 1.3208,
+      "step": 58350
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.054e-05,
+      "loss": 1.3403,
+      "step": 58400
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.052333333333334e-05,
+      "loss": 1.3401,
+      "step": 58450
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.050666666666667e-05,
+      "loss": 1.31,
+      "step": 58500
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.049e-05,
+      "loss": 1.3294,
+      "step": 58550
+    },
+    {
+      "epoch": 1.76,
+      "learning_rate": 8.047333333333333e-05,
+      "loss": 1.3075,
+      "step": 58600
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.045666666666667e-05,
+      "loss": 1.3359,
+      "step": 58650
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.044000000000001e-05,
+      "loss": 1.3177,
+      "step": 58700
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.042333333333333e-05,
+      "loss": 1.3361,
+      "step": 58750
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.040666666666667e-05,
+      "loss": 1.3399,
+      "step": 58800
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.039e-05,
+      "loss": 1.3123,
+      "step": 58850
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.037333333333333e-05,
+      "loss": 1.3203,
+      "step": 58900
+    },
+    {
+      "epoch": 1.77,
+      "learning_rate": 8.035666666666667e-05,
+      "loss": 1.3283,
+      "step": 58950
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.034e-05,
+      "loss": 1.3174,
+      "step": 59000
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.032333333333334e-05,
+      "loss": 1.3112,
+      "step": 59050
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.030666666666667e-05,
+      "loss": 1.3161,
+      "step": 59100
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.028999999999999e-05,
+      "loss": 1.3156,
+      "step": 59150
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.027333333333333e-05,
+      "loss": 1.3199,
+      "step": 59200
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.025666666666667e-05,
+      "loss": 1.3227,
+      "step": 59250
+    },
+    {
+      "epoch": 1.78,
+      "learning_rate": 8.024e-05,
+      "loss": 1.3358,
+      "step": 59300
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.022333333333334e-05,
+      "loss": 1.2977,
+      "step": 59350
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.020666666666668e-05,
+      "loss": 1.3123,
+      "step": 59400
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.019e-05,
+      "loss": 1.3177,
+      "step": 59450
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.017333333333333e-05,
+      "loss": 1.3084,
+      "step": 59500
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.015666666666666e-05,
+      "loss": 1.3043,
+      "step": 59550
+    },
+    {
+      "epoch": 1.79,
+      "learning_rate": 8.014e-05,
+      "loss": 1.3076,
+      "step": 59600
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.012333333333334e-05,
+      "loss": 1.3153,
+      "step": 59650
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.010666666666668e-05,
+      "loss": 1.3143,
+      "step": 59700
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.009e-05,
+      "loss": 1.3021,
+      "step": 59750
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.007333333333334e-05,
+      "loss": 1.305,
+      "step": 59800
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.005666666666666e-05,
+      "loss": 1.2966,
+      "step": 59850
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.004e-05,
+      "loss": 1.2896,
+      "step": 59900
+    },
+    {
+      "epoch": 1.8,
+      "learning_rate": 8.002333333333334e-05,
+      "loss": 1.3214,
+      "step": 59950
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 8.000666666666667e-05,
+      "loss": 1.3142,
+      "step": 60000
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.999000000000001e-05,
+      "loss": 1.3152,
+      "step": 60050
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.997333333333334e-05,
+      "loss": 1.304,
+      "step": 60100
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.995666666666667e-05,
+      "loss": 1.3126,
+      "step": 60150
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.994000000000001e-05,
+      "loss": 1.3123,
+      "step": 60200
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.992333333333333e-05,
+      "loss": 1.311,
+      "step": 60250
+    },
+    {
+      "epoch": 1.81,
+      "learning_rate": 7.990699999999999e-05,
+      "loss": 1.3155,
+      "step": 60300
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.989033333333333e-05,
+      "loss": 1.3057,
+      "step": 60350
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.987366666666667e-05,
+      "loss": 1.2911,
+      "step": 60400
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.9857e-05,
+      "loss": 1.3125,
+      "step": 60450
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.984033333333334e-05,
+      "loss": 1.3041,
+      "step": 60500
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.982366666666668e-05,
+      "loss": 1.3083,
+      "step": 60550
+    },
+    {
+      "epoch": 1.82,
+      "learning_rate": 7.9807e-05,
+      "loss": 1.2951,
+      "step": 60600
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.979033333333333e-05,
+      "loss": 1.2968,
+      "step": 60650
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.977366666666666e-05,
+      "loss": 1.3008,
+      "step": 60700
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.9757e-05,
+      "loss": 1.2908,
+      "step": 60750
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.974033333333334e-05,
+      "loss": 1.3035,
+      "step": 60800
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.972366666666668e-05,
+      "loss": 1.2961,
+      "step": 60850
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.9707e-05,
+      "loss": 1.2977,
+      "step": 60900
+    },
+    {
+      "epoch": 1.83,
+      "learning_rate": 7.969033333333334e-05,
+      "loss": 1.2808,
+      "step": 60950
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.967366666666666e-05,
+      "loss": 1.2874,
+      "step": 61000
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.9657e-05,
+      "loss": 1.3042,
+      "step": 61050
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.964033333333334e-05,
+      "loss": 1.29,
+      "step": 61100
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.962366666666667e-05,
+      "loss": 1.2925,
+      "step": 61150
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.960700000000001e-05,
+      "loss": 1.3027,
+      "step": 61200
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.959033333333334e-05,
+      "loss": 1.2767,
+      "step": 61250
+    },
+    {
+      "epoch": 1.84,
+      "learning_rate": 7.957366666666667e-05,
+      "loss": 1.2792,
+      "step": 61300
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.9557e-05,
+      "loss": 1.2902,
+      "step": 61350
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.954033333333333e-05,
+      "loss": 1.3078,
+      "step": 61400
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.952366666666667e-05,
+      "loss": 1.3125,
+      "step": 61450
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.950700000000001e-05,
+      "loss": 1.3167,
+      "step": 61500
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.949033333333333e-05,
+      "loss": 1.2817,
+      "step": 61550
+    },
+    {
+      "epoch": 1.85,
+      "learning_rate": 7.947366666666667e-05,
+      "loss": 1.2713,
+      "step": 61600
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.945700000000001e-05,
+      "loss": 1.2814,
+      "step": 61650
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.944033333333333e-05,
+      "loss": 1.3005,
+      "step": 61700
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.942366666666667e-05,
+      "loss": 1.2971,
+      "step": 61750
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.940700000000001e-05,
+      "loss": 1.2942,
+      "step": 61800
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.939033333333333e-05,
+      "loss": 1.2827,
+      "step": 61850
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.937366666666667e-05,
+      "loss": 1.2838,
+      "step": 61900
+    },
+    {
+      "epoch": 1.86,
+      "learning_rate": 7.9357e-05,
+      "loss": 1.2996,
+      "step": 61950
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.934033333333334e-05,
+      "loss": 1.2731,
+      "step": 62000
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.932366666666667e-05,
+      "loss": 1.2987,
+      "step": 62050
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.9307e-05,
+      "loss": 1.2897,
+      "step": 62100
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.929033333333333e-05,
+      "loss": 1.283,
+      "step": 62150
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.927366666666667e-05,
+      "loss": 1.2864,
+      "step": 62200
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.9257e-05,
+      "loss": 1.2766,
+      "step": 62250
+    },
+    {
+      "epoch": 1.87,
+      "learning_rate": 7.924033333333334e-05,
+      "loss": 1.2688,
+      "step": 62300
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.922366666666668e-05,
+      "loss": 1.2759,
+      "step": 62350
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.9207e-05,
+      "loss": 1.2883,
+      "step": 62400
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.919033333333333e-05,
+      "loss": 1.3015,
+      "step": 62450
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.917366666666666e-05,
+      "loss": 1.2837,
+      "step": 62500
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.9157e-05,
+      "loss": 1.281,
+      "step": 62550
+    },
+    {
+      "epoch": 1.88,
+      "learning_rate": 7.914033333333334e-05,
+      "loss": 1.2856,
+      "step": 62600
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.912366666666668e-05,
+      "loss": 1.298,
+      "step": 62650
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.910700000000001e-05,
+      "loss": 1.2751,
+      "step": 62700
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.909033333333334e-05,
+      "loss": 1.2782,
+      "step": 62750
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.907366666666666e-05,
+      "loss": 1.2973,
+      "step": 62800
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.9057e-05,
+      "loss": 1.2763,
+      "step": 62850
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.904033333333334e-05,
+      "loss": 1.2816,
+      "step": 62900
+    },
+    {
+      "epoch": 1.89,
+      "learning_rate": 7.902366666666667e-05,
+      "loss": 1.2669,
+      "step": 62950
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.900700000000001e-05,
+      "loss": 1.2811,
+      "step": 63000
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.899033333333334e-05,
+      "loss": 1.2815,
+      "step": 63050
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.897366666666667e-05,
+      "loss": 1.2907,
+      "step": 63100
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.895700000000001e-05,
+      "loss": 1.2871,
+      "step": 63150
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.894033333333333e-05,
+      "loss": 1.2905,
+      "step": 63200
+    },
+    {
+      "epoch": 1.9,
+      "learning_rate": 7.892366666666667e-05,
+      "loss": 1.271,
+      "step": 63250
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.890700000000001e-05,
+      "loss": 1.2853,
+      "step": 63300
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.889033333333333e-05,
+      "loss": 1.292,
+      "step": 63350
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.887366666666667e-05,
+      "loss": 1.2791,
+      "step": 63400
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.885700000000001e-05,
+      "loss": 1.2867,
+      "step": 63450
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.884033333333334e-05,
+      "loss": 1.2839,
+      "step": 63500
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.882366666666667e-05,
+      "loss": 1.2793,
+      "step": 63550
+    },
+    {
+      "epoch": 1.91,
+      "learning_rate": 7.8807e-05,
+      "loss": 1.3102,
+      "step": 63600
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.879033333333333e-05,
+      "loss": 1.2618,
+      "step": 63650
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.877366666666667e-05,
+      "loss": 1.2722,
+      "step": 63700
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.8757e-05,
+      "loss": 1.2591,
+      "step": 63750
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.874033333333334e-05,
+      "loss": 1.2683,
+      "step": 63800
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.872366666666668e-05,
+      "loss": 1.2691,
+      "step": 63850
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.8707e-05,
+      "loss": 1.2772,
+      "step": 63900
+    },
+    {
+      "epoch": 1.92,
+      "learning_rate": 7.869066666666666e-05,
+      "loss": 1.2731,
+      "step": 63950
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.8674e-05,
+      "loss": 1.2773,
+      "step": 64000
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.865733333333334e-05,
+      "loss": 1.2727,
+      "step": 64050
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.864066666666667e-05,
+      "loss": 1.2618,
+      "step": 64100
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.862400000000001e-05,
+      "loss": 1.2572,
+      "step": 64150
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.860733333333334e-05,
+      "loss": 1.271,
+      "step": 64200
+    },
+    {
+      "epoch": 1.93,
+      "learning_rate": 7.859066666666667e-05,
+      "loss": 1.29,
+      "step": 64250
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.8574e-05,
+      "loss": 1.2838,
+      "step": 64300
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.855733333333333e-05,
+      "loss": 1.2536,
+      "step": 64350
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.854066666666667e-05,
+      "loss": 1.2782,
+      "step": 64400
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.852400000000001e-05,
+      "loss": 1.2713,
+      "step": 64450
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.850733333333333e-05,
+      "loss": 1.2537,
+      "step": 64500
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.849066666666667e-05,
+      "loss": 1.269,
+      "step": 64550
+    },
+    {
+      "epoch": 1.94,
+      "learning_rate": 7.847400000000001e-05,
+      "loss": 1.2742,
+      "step": 64600
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.845733333333333e-05,
+      "loss": 1.2687,
+      "step": 64650
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.844066666666667e-05,
+      "loss": 1.2534,
+      "step": 64700
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.8424e-05,
+      "loss": 1.2677,
+      "step": 64750
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.840733333333333e-05,
+      "loss": 1.2746,
+      "step": 64800
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.839066666666667e-05,
+      "loss": 1.2425,
+      "step": 64850
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.8374e-05,
+      "loss": 1.2587,
+      "step": 64900
+    },
+    {
+      "epoch": 1.95,
+      "learning_rate": 7.835733333333334e-05,
+      "loss": 1.2649,
+      "step": 64950
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.834066666666667e-05,
+      "loss": 1.2661,
+      "step": 65000
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.8324e-05,
+      "loss": 1.2623,
+      "step": 65050
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.830733333333333e-05,
+      "loss": 1.2734,
+      "step": 65100
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.829066666666667e-05,
+      "loss": 1.2594,
+      "step": 65150
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.8274e-05,
+      "loss": 1.2629,
+      "step": 65200
+    },
+    {
+      "epoch": 1.96,
+      "learning_rate": 7.825733333333334e-05,
+      "loss": 1.2747,
+      "step": 65250
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.824066666666668e-05,
+      "loss": 1.255,
+      "step": 65300
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.8224e-05,
+      "loss": 1.2672,
+      "step": 65350
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.820733333333333e-05,
+      "loss": 1.2803,
+      "step": 65400
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.819066666666666e-05,
+      "loss": 1.2523,
+      "step": 65450
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.8174e-05,
+      "loss": 1.263,
+      "step": 65500
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.815733333333334e-05,
+      "loss": 1.2522,
+      "step": 65550
+    },
+    {
+      "epoch": 1.97,
+      "learning_rate": 7.814066666666668e-05,
+      "loss": 1.2682,
+      "step": 65600
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.812400000000001e-05,
+      "loss": 1.2637,
+      "step": 65650
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.810733333333334e-05,
+      "loss": 1.2597,
+      "step": 65700
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.809066666666666e-05,
+      "loss": 1.2638,
+      "step": 65750
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.8074e-05,
+      "loss": 1.2462,
+      "step": 65800
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.805733333333334e-05,
+      "loss": 1.2445,
+      "step": 65850
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.804066666666667e-05,
+      "loss": 1.2506,
+      "step": 65900
+    },
+    {
+      "epoch": 1.98,
+      "learning_rate": 7.802400000000001e-05,
+      "loss": 1.252,
+      "step": 65950
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.800733333333333e-05,
+      "loss": 1.2509,
+      "step": 66000
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.799066666666667e-05,
+      "loss": 1.2484,
+      "step": 66050
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.797400000000001e-05,
+      "loss": 1.2621,
+      "step": 66100
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.795733333333333e-05,
+      "loss": 1.2617,
+      "step": 66150
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.794066666666667e-05,
+      "loss": 1.2391,
+      "step": 66200
+    },
+    {
+      "epoch": 1.99,
+      "learning_rate": 7.792433333333333e-05,
+      "loss": 1.2462,
+      "step": 66250
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.790766666666667e-05,
+      "loss": 1.2492,
+      "step": 66300
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.7891e-05,
+      "loss": 1.253,
+      "step": 66350
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.787433333333334e-05,
+      "loss": 1.249,
+      "step": 66400
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.785766666666668e-05,
+      "loss": 1.2438,
+      "step": 66450
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.7841e-05,
+      "loss": 1.27,
+      "step": 66500
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.782433333333333e-05,
+      "loss": 1.2286,
+      "step": 66550
+    },
+    {
+      "epoch": 2.0,
+      "learning_rate": 7.780766666666666e-05,
+      "loss": 1.2475,
+      "step": 66600
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.7791e-05,
+      "loss": 1.2492,
+      "step": 66650
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.777433333333334e-05,
+      "loss": 1.2255,
+      "step": 66700
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.775766666666668e-05,
+      "loss": 1.2409,
+      "step": 66750
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.774100000000001e-05,
+      "loss": 1.246,
+      "step": 66800
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.772433333333334e-05,
+      "loss": 1.2243,
+      "step": 66850
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.770766666666666e-05,
+      "loss": 1.2292,
+      "step": 66900
+    },
+    {
+      "epoch": 2.01,
+      "learning_rate": 7.7691e-05,
+      "loss": 1.2324,
+      "step": 66950
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.767433333333334e-05,
+      "loss": 1.2329,
+      "step": 67000
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.765766666666667e-05,
+      "loss": 1.216,
+      "step": 67050
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.764100000000001e-05,
+      "loss": 1.2355,
+      "step": 67100
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.762433333333333e-05,
+      "loss": 1.2376,
+      "step": 67150
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.760766666666667e-05,
+      "loss": 1.2303,
+      "step": 67200
+    },
+    {
+      "epoch": 2.02,
+      "learning_rate": 7.7591e-05,
+      "loss": 1.2384,
+      "step": 67250
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.757433333333333e-05,
+      "loss": 1.244,
+      "step": 67300
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.755766666666667e-05,
+      "loss": 1.2295,
+      "step": 67350
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.754100000000001e-05,
+      "loss": 1.2204,
+      "step": 67400
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.752433333333333e-05,
+      "loss": 1.2275,
+      "step": 67450
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.750766666666667e-05,
+      "loss": 1.2401,
+      "step": 67500
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.749100000000001e-05,
+      "loss": 1.2289,
+      "step": 67550
+    },
+    {
+      "epoch": 2.03,
+      "learning_rate": 7.747433333333333e-05,
+      "loss": 1.2184,
+      "step": 67600
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.745766666666667e-05,
+      "loss": 1.2227,
+      "step": 67650
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.7441e-05,
+      "loss": 1.2338,
+      "step": 67700
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.742433333333333e-05,
+      "loss": 1.2274,
+      "step": 67750
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.740766666666667e-05,
+      "loss": 1.222,
+      "step": 67800
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.7391e-05,
+      "loss": 1.2299,
+      "step": 67850
+    },
+    {
+      "epoch": 2.04,
+      "learning_rate": 7.737433333333334e-05,
+      "loss": 1.2214,
+      "step": 67900
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.735766666666667e-05,
+      "loss": 1.243,
+      "step": 67950
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.7341e-05,
+      "loss": 1.2317,
+      "step": 68000
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.732433333333333e-05,
+      "loss": 1.2281,
+      "step": 68050
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.730766666666667e-05,
+      "loss": 1.2277,
+      "step": 68100
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.7291e-05,
+      "loss": 1.2311,
+      "step": 68150
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.727433333333334e-05,
+      "loss": 1.2176,
+      "step": 68200
+    },
+    {
+      "epoch": 2.05,
+      "learning_rate": 7.725766666666668e-05,
+      "loss": 1.224,
+      "step": 68250
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.7241e-05,
+      "loss": 1.2156,
+      "step": 68300
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.722433333333333e-05,
+      "loss": 1.2178,
+      "step": 68350
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.720766666666666e-05,
+      "loss": 1.2184,
+      "step": 68400
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.7191e-05,
+      "loss": 1.2126,
+      "step": 68450
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.717433333333334e-05,
+      "loss": 1.2298,
+      "step": 68500
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.715766666666667e-05,
+      "loss": 1.2204,
+      "step": 68550
+    },
+    {
+      "epoch": 2.06,
+      "learning_rate": 7.714100000000001e-05,
+      "loss": 1.2254,
+      "step": 68600
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.712433333333334e-05,
+      "loss": 1.2383,
+      "step": 68650
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.710766666666666e-05,
+      "loss": 1.2143,
+      "step": 68700
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.7091e-05,
+      "loss": 1.2145,
+      "step": 68750
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.707433333333334e-05,
+      "loss": 1.2327,
+      "step": 68800
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.705766666666667e-05,
+      "loss": 1.2269,
+      "step": 68850
+    },
+    {
+      "epoch": 2.07,
+      "learning_rate": 7.704100000000001e-05,
+      "loss": 1.2401,
+      "step": 68900
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.702433333333333e-05,
+      "loss": 1.2159,
+      "step": 68950
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.700766666666667e-05,
+      "loss": 1.2262,
+      "step": 69000
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.699100000000001e-05,
+      "loss": 1.2016,
+      "step": 69050
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.697433333333333e-05,
+      "loss": 1.2114,
+      "step": 69100
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.695766666666667e-05,
+      "loss": 1.2292,
+      "step": 69150
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.694100000000001e-05,
+      "loss": 1.2114,
+      "step": 69200
+    },
+    {
+      "epoch": 2.08,
+      "learning_rate": 7.692433333333333e-05,
+      "loss": 1.2176,
+      "step": 69250
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.690766666666667e-05,
+      "loss": 1.2177,
+      "step": 69300
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.6891e-05,
+      "loss": 1.2237,
+      "step": 69350
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.687433333333334e-05,
+      "loss": 1.2203,
+      "step": 69400
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.685766666666667e-05,
+      "loss": 1.2128,
+      "step": 69450
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.6841e-05,
+      "loss": 1.233,
+      "step": 69500
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.682433333333333e-05,
+      "loss": 1.2313,
+      "step": 69550
+    },
+    {
+      "epoch": 2.09,
+      "learning_rate": 7.680766666666667e-05,
+      "loss": 1.2126,
+      "step": 69600
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.6791e-05,
+      "loss": 1.2196,
+      "step": 69650
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.677433333333334e-05,
+      "loss": 1.2154,
+      "step": 69700
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.675766666666668e-05,
+      "loss": 1.2134,
+      "step": 69750
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.6741e-05,
+      "loss": 1.2258,
+      "step": 69800
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.672433333333334e-05,
+      "loss": 1.2017,
+      "step": 69850
+    },
+    {
+      "epoch": 2.1,
+      "learning_rate": 7.670766666666666e-05,
+      "loss": 1.2107,
+      "step": 69900
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.6691e-05,
+      "loss": 1.2172,
+      "step": 69950
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.667433333333334e-05,
+      "loss": 1.2296,
+      "step": 70000
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.665766666666668e-05,
+      "loss": 1.2151,
+      "step": 70050
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.664100000000001e-05,
+      "loss": 1.2141,
+      "step": 70100
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.662433333333334e-05,
+      "loss": 1.2275,
+      "step": 70150
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.660766666666666e-05,
+      "loss": 1.2165,
+      "step": 70200
+    },
+    {
+      "epoch": 2.11,
+      "learning_rate": 7.6591e-05,
+      "loss": 1.2148,
+      "step": 70250
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.657466666666667e-05,
+      "loss": 1.2175,
+      "step": 70300
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.655800000000001e-05,
+      "loss": 1.2269,
+      "step": 70350
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.654166666666667e-05,
+      "loss": 1.2017,
+      "step": 70400
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.6525e-05,
+      "loss": 1.2037,
+      "step": 70450
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.650833333333334e-05,
+      "loss": 1.1998,
+      "step": 70500
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.649166666666668e-05,
+      "loss": 1.1945,
+      "step": 70550
+    },
+    {
+      "epoch": 2.12,
+      "learning_rate": 7.6475e-05,
+      "loss": 1.2345,
+      "step": 70600
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.645833333333333e-05,
+      "loss": 1.2066,
+      "step": 70650
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.644166666666666e-05,
+      "loss": 1.2068,
+      "step": 70700
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.6425e-05,
+      "loss": 1.2254,
+      "step": 70750
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.640833333333334e-05,
+      "loss": 1.2095,
+      "step": 70800
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.639166666666668e-05,
+      "loss": 1.2059,
+      "step": 70850
+    },
+    {
+      "epoch": 2.13,
+      "learning_rate": 7.637500000000001e-05,
+      "loss": 1.2322,
+      "step": 70900
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.635833333333334e-05,
+      "loss": 1.2094,
+      "step": 70950
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.634166666666666e-05,
+      "loss": 1.2061,
+      "step": 71000
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.6325e-05,
+      "loss": 1.2105,
+      "step": 71050
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.630833333333334e-05,
+      "loss": 1.2102,
+      "step": 71100
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.629166666666667e-05,
+      "loss": 1.1977,
+      "step": 71150
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.627500000000001e-05,
+      "loss": 1.2153,
+      "step": 71200
+    },
+    {
+      "epoch": 2.14,
+      "learning_rate": 7.625833333333333e-05,
+      "loss": 1.2143,
+      "step": 71250
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.624166666666667e-05,
+      "loss": 1.2119,
+      "step": 71300
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.6225e-05,
+      "loss": 1.1944,
+      "step": 71350
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.620833333333333e-05,
+      "loss": 1.2155,
+      "step": 71400
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.619166666666667e-05,
+      "loss": 1.2138,
+      "step": 71450
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.617500000000001e-05,
+      "loss": 1.1953,
+      "step": 71500
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.615833333333333e-05,
+      "loss": 1.2042,
+      "step": 71550
+    },
+    {
+      "epoch": 2.15,
+      "learning_rate": 7.614166666666667e-05,
+      "loss": 1.2095,
+      "step": 71600
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.612500000000001e-05,
+      "loss": 1.2163,
+      "step": 71650
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.610833333333333e-05,
+      "loss": 1.1994,
+      "step": 71700
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.609166666666667e-05,
+      "loss": 1.2081,
+      "step": 71750
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.6075e-05,
+      "loss": 1.1944,
+      "step": 71800
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.605833333333333e-05,
+      "loss": 1.2065,
+      "step": 71850
+    },
+    {
+      "epoch": 2.16,
+      "learning_rate": 7.604166666666667e-05,
+      "loss": 1.2184,
+      "step": 71900
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.6025e-05,
+      "loss": 1.2046,
+      "step": 71950
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.600833333333334e-05,
+      "loss": 1.2109,
+      "step": 72000
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.599166666666667e-05,
+      "loss": 1.2094,
+      "step": 72050
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.5975e-05,
+      "loss": 1.1855,
+      "step": 72100
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.595833333333334e-05,
+      "loss": 1.1973,
+      "step": 72150
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.594166666666666e-05,
+      "loss": 1.1966,
+      "step": 72200
+    },
+    {
+      "epoch": 2.17,
+      "learning_rate": 7.5925e-05,
+      "loss": 1.2016,
+      "step": 72250
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.590833333333334e-05,
+      "loss": 1.1994,
+      "step": 72300
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.589166666666668e-05,
+      "loss": 1.1917,
+      "step": 72350
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.5875e-05,
+      "loss": 1.2065,
+      "step": 72400
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.585833333333334e-05,
+      "loss": 1.2046,
+      "step": 72450
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.584166666666666e-05,
+      "loss": 1.1915,
+      "step": 72500
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.5825e-05,
+      "loss": 1.1817,
+      "step": 72550
+    },
+    {
+      "epoch": 2.18,
+      "learning_rate": 7.580833333333334e-05,
+      "loss": 1.2087,
+      "step": 72600
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.579166666666667e-05,
+      "loss": 1.1934,
+      "step": 72650
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.577500000000001e-05,
+      "loss": 1.2195,
+      "step": 72700
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.575833333333334e-05,
+      "loss": 1.1943,
+      "step": 72750
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.574166666666666e-05,
+      "loss": 1.1818,
+      "step": 72800
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.5725e-05,
+      "loss": 1.1992,
+      "step": 72850
+    },
+    {
+      "epoch": 2.19,
+      "learning_rate": 7.570833333333333e-05,
+      "loss": 1.1994,
+      "step": 72900
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.569166666666667e-05,
+      "loss": 1.211,
+      "step": 72950
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.567500000000001e-05,
+      "loss": 1.1832,
+      "step": 73000
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.565833333333335e-05,
+      "loss": 1.1883,
+      "step": 73050
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.564166666666667e-05,
+      "loss": 1.1848,
+      "step": 73100
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.5625e-05,
+      "loss": 1.1959,
+      "step": 73150
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.560833333333333e-05,
+      "loss": 1.1963,
+      "step": 73200
+    },
+    {
+      "epoch": 2.2,
+      "learning_rate": 7.5592e-05,
+      "loss": 1.1769,
+      "step": 73250
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.557533333333334e-05,
+      "loss": 1.1872,
+      "step": 73300
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.555866666666667e-05,
+      "loss": 1.2014,
+      "step": 73350
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.5542e-05,
+      "loss": 1.1997,
+      "step": 73400
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.552533333333334e-05,
+      "loss": 1.1952,
+      "step": 73450
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.550866666666668e-05,
+      "loss": 1.2084,
+      "step": 73500
+    },
+    {
+      "epoch": 2.21,
+      "learning_rate": 7.5492e-05,
+      "loss": 1.1789,
+      "step": 73550
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.547533333333334e-05,
+      "loss": 1.1827,
+      "step": 73600
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.545866666666666e-05,
+      "loss": 1.1991,
+      "step": 73650
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.5442e-05,
+      "loss": 1.187,
+      "step": 73700
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.542533333333334e-05,
+      "loss": 1.1822,
+      "step": 73750
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.540866666666668e-05,
+      "loss": 1.1896,
+      "step": 73800
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.539200000000001e-05,
+      "loss": 1.1828,
+      "step": 73850
+    },
+    {
+      "epoch": 2.22,
+      "learning_rate": 7.537533333333334e-05,
+      "loss": 1.182,
+      "step": 73900
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.535866666666666e-05,
+      "loss": 1.1869,
+      "step": 73950
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.5342e-05,
+      "loss": 1.1765,
+      "step": 74000
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.532533333333334e-05,
+      "loss": 1.1957,
+      "step": 74050
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.530866666666667e-05,
+      "loss": 1.1838,
+      "step": 74100
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.529200000000001e-05,
+      "loss": 1.1904,
+      "step": 74150
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.527533333333335e-05,
+      "loss": 1.1728,
+      "step": 74200
+    },
+    {
+      "epoch": 2.23,
+      "learning_rate": 7.525866666666667e-05,
+      "loss": 1.1734,
+      "step": 74250
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.5242e-05,
+      "loss": 1.1888,
+      "step": 74300
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.522533333333333e-05,
+      "loss": 1.1846,
+      "step": 74350
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.520866666666667e-05,
+      "loss": 1.1877,
+      "step": 74400
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.519200000000001e-05,
+      "loss": 1.1861,
+      "step": 74450
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.517533333333335e-05,
+      "loss": 1.1906,
+      "step": 74500
+    },
+    {
+      "epoch": 2.24,
+      "learning_rate": 7.515866666666667e-05,
+      "loss": 1.1808,
+      "step": 74550
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.5142e-05,
+      "loss": 1.1977,
+      "step": 74600
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.512533333333333e-05,
+      "loss": 1.1777,
+      "step": 74650
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.510866666666667e-05,
+      "loss": 1.1946,
+      "step": 74700
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.5092e-05,
+      "loss": 1.1843,
+      "step": 74750
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.507533333333334e-05,
+      "loss": 1.2123,
+      "step": 74800
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.505866666666667e-05,
+      "loss": 1.1881,
+      "step": 74850
+    },
+    {
+      "epoch": 2.25,
+      "learning_rate": 7.5042e-05,
+      "loss": 1.1716,
+      "step": 74900
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.502533333333334e-05,
+      "loss": 1.1882,
+      "step": 74950
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.500866666666667e-05,
+      "loss": 1.1747,
+      "step": 75000
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.4992e-05,
+      "loss": 1.1832,
+      "step": 75050
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.497533333333334e-05,
+      "loss": 1.1839,
+      "step": 75100
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.495866666666666e-05,
+      "loss": 1.1774,
+      "step": 75150
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.4942e-05,
+      "loss": 1.1752,
+      "step": 75200
+    },
+    {
+      "epoch": 2.26,
+      "learning_rate": 7.492533333333334e-05,
+      "loss": 1.1934,
+      "step": 75250
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.490866666666668e-05,
+      "loss": 1.176,
+      "step": 75300
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.4892e-05,
+      "loss": 1.1792,
+      "step": 75350
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.487533333333334e-05,
+      "loss": 1.1696,
+      "step": 75400
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.485866666666666e-05,
+      "loss": 1.1936,
+      "step": 75450
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.4842e-05,
+      "loss": 1.1852,
+      "step": 75500
+    },
+    {
+      "epoch": 2.27,
+      "learning_rate": 7.482533333333334e-05,
+      "loss": 1.1782,
+      "step": 75550
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.480866666666667e-05,
+      "loss": 1.1671,
+      "step": 75600
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.479200000000001e-05,
+      "loss": 1.1776,
+      "step": 75650
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.477533333333334e-05,
+      "loss": 1.1723,
+      "step": 75700
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.475866666666666e-05,
+      "loss": 1.1812,
+      "step": 75750
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.4742e-05,
+      "loss": 1.1614,
+      "step": 75800
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.472533333333333e-05,
+      "loss": 1.1729,
+      "step": 75850
+    },
+    {
+      "epoch": 2.28,
+      "learning_rate": 7.470866666666667e-05,
+      "loss": 1.1836,
+      "step": 75900
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.469200000000001e-05,
+      "loss": 1.1882,
+      "step": 75950
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.467533333333335e-05,
+      "loss": 1.1799,
+      "step": 76000
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.465866666666667e-05,
+      "loss": 1.1911,
+      "step": 76050
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.4642e-05,
+      "loss": 1.1888,
+      "step": 76100
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.462533333333333e-05,
+      "loss": 1.1808,
+      "step": 76150
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.460866666666667e-05,
+      "loss": 1.1827,
+      "step": 76200
+    },
+    {
+      "epoch": 2.29,
+      "learning_rate": 7.459200000000001e-05,
+      "loss": 1.1856,
+      "step": 76250
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.457533333333334e-05,
+      "loss": 1.1762,
+      "step": 76300
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.455866666666667e-05,
+      "loss": 1.1809,
+      "step": 76350
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.4542e-05,
+      "loss": 1.1835,
+      "step": 76400
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.452533333333333e-05,
+      "loss": 1.1719,
+      "step": 76450
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.450866666666667e-05,
+      "loss": 1.1745,
+      "step": 76500
+    },
+    {
+      "epoch": 2.3,
+      "learning_rate": 7.4492e-05,
+      "loss": 1.1755,
+      "step": 76550
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.447533333333334e-05,
+      "loss": 1.1854,
+      "step": 76600
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.445866666666667e-05,
+      "loss": 1.1846,
+      "step": 76650
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.4442e-05,
+      "loss": 1.1862,
+      "step": 76700
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.442533333333334e-05,
+      "loss": 1.1785,
+      "step": 76750
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.440866666666666e-05,
+      "loss": 1.175,
+      "step": 76800
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.4392e-05,
+      "loss": 1.1729,
+      "step": 76850
+    },
+    {
+      "epoch": 2.31,
+      "learning_rate": 7.437533333333334e-05,
+      "loss": 1.1807,
+      "step": 76900
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.435866666666666e-05,
+      "loss": 1.172,
+      "step": 76950
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.4342e-05,
+      "loss": 1.1771,
+      "step": 77000
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.432533333333334e-05,
+      "loss": 1.1669,
+      "step": 77050
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.430866666666668e-05,
+      "loss": 1.1783,
+      "step": 77100
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.4292e-05,
+      "loss": 1.1668,
+      "step": 77150
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.427533333333334e-05,
+      "loss": 1.1653,
+      "step": 77200
+    },
+    {
+      "epoch": 2.32,
+      "learning_rate": 7.425866666666666e-05,
+      "loss": 1.1682,
+      "step": 77250
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.424233333333333e-05,
+      "loss": 1.156,
+      "step": 77300
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.422566666666667e-05,
+      "loss": 1.1636,
+      "step": 77350
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.420900000000001e-05,
+      "loss": 1.1797,
+      "step": 77400
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.419233333333334e-05,
+      "loss": 1.1597,
+      "step": 77450
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.417566666666667e-05,
+      "loss": 1.1692,
+      "step": 77500
+    },
+    {
+      "epoch": 2.33,
+      "learning_rate": 7.4159e-05,
+      "loss": 1.1773,
+      "step": 77550
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.414233333333333e-05,
+      "loss": 1.175,
+      "step": 77600
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.412566666666667e-05,
+      "loss": 1.171,
+      "step": 77650
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.4109e-05,
+      "loss": 1.1737,
+      "step": 77700
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.409233333333334e-05,
+      "loss": 1.1777,
+      "step": 77750
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.407566666666667e-05,
+      "loss": 1.1899,
+      "step": 77800
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.4059e-05,
+      "loss": 1.164,
+      "step": 77850
+    },
+    {
+      "epoch": 2.34,
+      "learning_rate": 7.404233333333334e-05,
+      "loss": 1.1466,
+      "step": 77900
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.402566666666666e-05,
+      "loss": 1.1664,
+      "step": 77950
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.4009e-05,
+      "loss": 1.1811,
+      "step": 78000
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.399233333333334e-05,
+      "loss": 1.1722,
+      "step": 78050
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.397566666666666e-05,
+      "loss": 1.1592,
+      "step": 78100
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.3959e-05,
+      "loss": 1.152,
+      "step": 78150
+    },
+    {
+      "epoch": 2.35,
+      "learning_rate": 7.394233333333334e-05,
+      "loss": 1.1678,
+      "step": 78200
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.392566666666668e-05,
+      "loss": 1.1718,
+      "step": 78250
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.3909e-05,
+      "loss": 1.1816,
+      "step": 78300
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.389233333333334e-05,
+      "loss": 1.165,
+      "step": 78350
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.387566666666666e-05,
+      "loss": 1.1633,
+      "step": 78400
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.3859e-05,
+      "loss": 1.1687,
+      "step": 78450
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.384233333333334e-05,
+      "loss": 1.159,
+      "step": 78500
+    },
+    {
+      "epoch": 2.36,
+      "learning_rate": 7.382566666666667e-05,
+      "loss": 1.164,
+      "step": 78550
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.380900000000001e-05,
+      "loss": 1.1572,
+      "step": 78600
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.379233333333333e-05,
+      "loss": 1.1643,
+      "step": 78650
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.377566666666666e-05,
+      "loss": 1.149,
+      "step": 78700
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.3759e-05,
+      "loss": 1.1819,
+      "step": 78750
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.374233333333333e-05,
+      "loss": 1.1785,
+      "step": 78800
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.372566666666667e-05,
+      "loss": 1.162,
+      "step": 78850
+    },
+    {
+      "epoch": 2.37,
+      "learning_rate": 7.370900000000001e-05,
+      "loss": 1.1496,
+      "step": 78900
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.369233333333335e-05,
+      "loss": 1.1555,
+      "step": 78950
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.367566666666667e-05,
+      "loss": 1.1582,
+      "step": 79000
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.3659e-05,
+      "loss": 1.1571,
+      "step": 79050
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.364233333333333e-05,
+      "loss": 1.1554,
+      "step": 79100
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.3626e-05,
+      "loss": 1.164,
+      "step": 79150
+    },
+    {
+      "epoch": 2.38,
+      "learning_rate": 7.360933333333334e-05,
+      "loss": 1.1576,
+      "step": 79200
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.359266666666666e-05,
+      "loss": 1.1645,
+      "step": 79250
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.3576e-05,
+      "loss": 1.1612,
+      "step": 79300
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.355933333333334e-05,
+      "loss": 1.1607,
+      "step": 79350
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.354266666666668e-05,
+      "loss": 1.1618,
+      "step": 79400
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.3526e-05,
+      "loss": 1.166,
+      "step": 79450
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.350933333333334e-05,
+      "loss": 1.1554,
+      "step": 79500
+    },
+    {
+      "epoch": 2.39,
+      "learning_rate": 7.349266666666666e-05,
+      "loss": 1.1556,
+      "step": 79550
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.3476e-05,
+      "loss": 1.1541,
+      "step": 79600
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.345933333333334e-05,
+      "loss": 1.1529,
+      "step": 79650
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.344266666666667e-05,
+      "loss": 1.1652,
+      "step": 79700
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.342600000000001e-05,
+      "loss": 1.1551,
+      "step": 79750
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.340933333333334e-05,
+      "loss": 1.1592,
+      "step": 79800
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.339266666666666e-05,
+      "loss": 1.1383,
+      "step": 79850
+    },
+    {
+      "epoch": 2.4,
+      "learning_rate": 7.3376e-05,
+      "loss": 1.1573,
+      "step": 79900
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.335933333333333e-05,
+      "loss": 1.1577,
+      "step": 79950
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.334266666666667e-05,
+      "loss": 1.1694,
+      "step": 80000
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.332600000000001e-05,
+      "loss": 1.163,
+      "step": 80050
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.330933333333335e-05,
+      "loss": 1.1556,
+      "step": 80100
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.329266666666667e-05,
+      "loss": 1.1815,
+      "step": 80150
+    },
+    {
+      "epoch": 2.41,
+      "learning_rate": 7.3276e-05,
+      "loss": 1.1444,
+      "step": 80200
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.325933333333333e-05,
+      "loss": 1.1502,
+      "step": 80250
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.324266666666667e-05,
+      "loss": 1.1544,
+      "step": 80300
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.3226e-05,
+      "loss": 1.1604,
+      "step": 80350
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.320933333333334e-05,
+      "loss": 1.1621,
+      "step": 80400
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.319266666666667e-05,
+      "loss": 1.1398,
+      "step": 80450
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.3176e-05,
+      "loss": 1.1567,
+      "step": 80500
+    },
+    {
+      "epoch": 2.42,
+      "learning_rate": 7.315933333333333e-05,
+      "loss": 1.1541,
+      "step": 80550
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.314266666666667e-05,
+      "loss": 1.1487,
+      "step": 80600
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.3126e-05,
+      "loss": 1.1498,
+      "step": 80650
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.310933333333334e-05,
+      "loss": 1.1485,
+      "step": 80700
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.309266666666667e-05,
+      "loss": 1.15,
+      "step": 80750
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.3076e-05,
+      "loss": 1.1648,
+      "step": 80800
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.305933333333334e-05,
+      "loss": 1.1464,
+      "step": 80850
+    },
+    {
+      "epoch": 2.43,
+      "learning_rate": 7.304266666666666e-05,
+      "loss": 1.147,
+      "step": 80900
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.3026e-05,
+      "loss": 1.1495,
+      "step": 80950
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.300933333333334e-05,
+      "loss": 1.1559,
+      "step": 81000
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.299266666666666e-05,
+      "loss": 1.1709,
+      "step": 81050
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.2976e-05,
+      "loss": 1.1514,
+      "step": 81100
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.295933333333334e-05,
+      "loss": 1.1623,
+      "step": 81150
+    },
+    {
+      "epoch": 2.44,
+      "learning_rate": 7.294266666666668e-05,
+      "loss": 1.1503,
+      "step": 81200
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.2926e-05,
+      "loss": 1.1397,
+      "step": 81250
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.290933333333334e-05,
+      "loss": 1.1331,
+      "step": 81300
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.289266666666666e-05,
+      "loss": 1.1487,
+      "step": 81350
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.2876e-05,
+      "loss": 1.1493,
+      "step": 81400
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.285933333333334e-05,
+      "loss": 1.134,
+      "step": 81450
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.284266666666667e-05,
+      "loss": 1.1474,
+      "step": 81500
+    },
+    {
+      "epoch": 2.45,
+      "learning_rate": 7.282600000000001e-05,
+      "loss": 1.1357,
+      "step": 81550
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.280933333333333e-05,
+      "loss": 1.1452,
+      "step": 81600
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.279266666666667e-05,
+      "loss": 1.1423,
+      "step": 81650
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.2776e-05,
+      "loss": 1.1499,
+      "step": 81700
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.275933333333333e-05,
+      "loss": 1.1509,
+      "step": 81750
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.274266666666667e-05,
+      "loss": 1.1509,
+      "step": 81800
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.272600000000001e-05,
+      "loss": 1.1397,
+      "step": 81850
+    },
+    {
+      "epoch": 2.46,
+      "learning_rate": 7.270933333333335e-05,
+      "loss": 1.1456,
+      "step": 81900
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.269266666666667e-05,
+      "loss": 1.1319,
+      "step": 81950
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.2676e-05,
+      "loss": 1.1312,
+      "step": 82000
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.265933333333333e-05,
+      "loss": 1.1216,
+      "step": 82050
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.264266666666667e-05,
+      "loss": 1.1524,
+      "step": 82100
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.262633333333334e-05,
+      "loss": 1.1447,
+      "step": 82150
+    },
+    {
+      "epoch": 2.47,
+      "learning_rate": 7.260966666666666e-05,
+      "loss": 1.1426,
+      "step": 82200
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.2593e-05,
+      "loss": 1.135,
+      "step": 82250
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.257633333333334e-05,
+      "loss": 1.1352,
+      "step": 82300
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.255966666666668e-05,
+      "loss": 1.1544,
+      "step": 82350
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.2543e-05,
+      "loss": 1.1499,
+      "step": 82400
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.252633333333334e-05,
+      "loss": 1.1268,
+      "step": 82450
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.250966666666666e-05,
+      "loss": 1.1304,
+      "step": 82500
+    },
+    {
+      "epoch": 2.48,
+      "learning_rate": 7.2493e-05,
+      "loss": 1.1302,
+      "step": 82550
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.247633333333334e-05,
+      "loss": 1.1413,
+      "step": 82600
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.245966666666667e-05,
+      "loss": 1.1415,
+      "step": 82650
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.244300000000001e-05,
+      "loss": 1.1285,
+      "step": 82700
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.242633333333333e-05,
+      "loss": 1.1244,
+      "step": 82750
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.240966666666667e-05,
+      "loss": 1.1418,
+      "step": 82800
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.2393e-05,
+      "loss": 1.1506,
+      "step": 82850
+    },
+    {
+      "epoch": 2.49,
+      "learning_rate": 7.237633333333333e-05,
+      "loss": 1.1444,
+      "step": 82900
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.235966666666667e-05,
+      "loss": 1.1495,
+      "step": 82950
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.234300000000001e-05,
+      "loss": 1.1352,
+      "step": 83000
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.232633333333335e-05,
+      "loss": 1.1264,
+      "step": 83050
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.230966666666667e-05,
+      "loss": 1.1367,
+      "step": 83100
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.2293e-05,
+      "loss": 1.1543,
+      "step": 83150
+    },
+    {
+      "epoch": 2.5,
+      "learning_rate": 7.227633333333333e-05,
+      "loss": 1.1409,
+      "step": 83200
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.225966666666667e-05,
+      "loss": 1.1365,
+      "step": 83250
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.2243e-05,
+      "loss": 1.1467,
+      "step": 83300
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.222633333333334e-05,
+      "loss": 1.1404,
+      "step": 83350
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.220966666666668e-05,
+      "loss": 1.1352,
+      "step": 83400
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.2193e-05,
+      "loss": 1.1415,
+      "step": 83450
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.217633333333333e-05,
+      "loss": 1.1311,
+      "step": 83500
+    },
+    {
+      "epoch": 2.51,
+      "learning_rate": 7.215966666666667e-05,
+      "loss": 1.1184,
+      "step": 83550
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.2143e-05,
+      "loss": 1.1369,
+      "step": 83600
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.212633333333334e-05,
+      "loss": 1.1457,
+      "step": 83650
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.210966666666668e-05,
+      "loss": 1.1485,
+      "step": 83700
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.2093e-05,
+      "loss": 1.1276,
+      "step": 83750
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.207633333333334e-05,
+      "loss": 1.133,
+      "step": 83800
+    },
+    {
+      "epoch": 2.52,
+      "learning_rate": 7.205966666666666e-05,
+      "loss": 1.1327,
+      "step": 83850
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.2043e-05,
+      "loss": 1.1343,
+      "step": 83900
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.202633333333334e-05,
+      "loss": 1.1219,
+      "step": 83950
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.200966666666668e-05,
+      "loss": 1.1353,
+      "step": 84000
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.1993e-05,
+      "loss": 1.1408,
+      "step": 84050
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.197633333333334e-05,
+      "loss": 1.1223,
+      "step": 84100
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.195966666666667e-05,
+      "loss": 1.1292,
+      "step": 84150
+    },
+    {
+      "epoch": 2.53,
+      "learning_rate": 7.1943e-05,
+      "loss": 1.12,
+      "step": 84200
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.192666666666667e-05,
+      "loss": 1.1326,
+      "step": 84250
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.191e-05,
+      "loss": 1.1392,
+      "step": 84300
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.189333333333333e-05,
+      "loss": 1.1291,
+      "step": 84350
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.187666666666667e-05,
+      "loss": 1.1425,
+      "step": 84400
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.186e-05,
+      "loss": 1.1308,
+      "step": 84450
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.184333333333334e-05,
+      "loss": 1.1224,
+      "step": 84500
+    },
+    {
+      "epoch": 2.54,
+      "learning_rate": 7.182666666666668e-05,
+      "loss": 1.1345,
+      "step": 84550
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.181e-05,
+      "loss": 1.1244,
+      "step": 84600
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.179333333333333e-05,
+      "loss": 1.1293,
+      "step": 84650
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.177666666666667e-05,
+      "loss": 1.1297,
+      "step": 84700
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.176e-05,
+      "loss": 1.1319,
+      "step": 84750
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.174333333333334e-05,
+      "loss": 1.1324,
+      "step": 84800
+    },
+    {
+      "epoch": 2.55,
+      "learning_rate": 7.172666666666668e-05,
+      "loss": 1.1493,
+      "step": 84850
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.171e-05,
+      "loss": 1.1424,
+      "step": 84900
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.169333333333334e-05,
+      "loss": 1.1407,
+      "step": 84950
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.167666666666666e-05,
+      "loss": 1.1241,
+      "step": 85000
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.166e-05,
+      "loss": 1.1389,
+      "step": 85050
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.164333333333334e-05,
+      "loss": 1.1221,
+      "step": 85100
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.162666666666668e-05,
+      "loss": 1.1312,
+      "step": 85150
+    },
+    {
+      "epoch": 2.56,
+      "learning_rate": 7.161e-05,
+      "loss": 1.1186,
+      "step": 85200
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.159333333333334e-05,
+      "loss": 1.1269,
+      "step": 85250
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.157666666666668e-05,
+      "loss": 1.1238,
+      "step": 85300
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.156e-05,
+      "loss": 1.1279,
+      "step": 85350
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.154333333333334e-05,
+      "loss": 1.117,
+      "step": 85400
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.152666666666667e-05,
+      "loss": 1.1215,
+      "step": 85450
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.151e-05,
+      "loss": 1.1205,
+      "step": 85500
+    },
+    {
+      "epoch": 2.57,
+      "learning_rate": 7.149333333333334e-05,
+      "loss": 1.1263,
+      "step": 85550
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.147666666666667e-05,
+      "loss": 1.1409,
+      "step": 85600
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.146000000000001e-05,
+      "loss": 1.12,
+      "step": 85650
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.144333333333333e-05,
+      "loss": 1.1201,
+      "step": 85700
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.142666666666667e-05,
+      "loss": 1.1273,
+      "step": 85750
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.141e-05,
+      "loss": 1.1309,
+      "step": 85800
+    },
+    {
+      "epoch": 2.58,
+      "learning_rate": 7.139333333333333e-05,
+      "loss": 1.1279,
+      "step": 85850
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.137666666666667e-05,
+      "loss": 1.1391,
+      "step": 85900
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.136000000000001e-05,
+      "loss": 1.1196,
+      "step": 85950
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.134333333333335e-05,
+      "loss": 1.1274,
+      "step": 86000
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.132666666666667e-05,
+      "loss": 1.1347,
+      "step": 86050
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.130999999999999e-05,
+      "loss": 1.1232,
+      "step": 86100
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.129333333333333e-05,
+      "loss": 1.1059,
+      "step": 86150
+    },
+    {
+      "epoch": 2.59,
+      "learning_rate": 7.127666666666667e-05,
+      "loss": 1.1259,
+      "step": 86200
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.126e-05,
+      "loss": 1.1051,
+      "step": 86250
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.124333333333334e-05,
+      "loss": 1.1197,
+      "step": 86300
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.122666666666668e-05,
+      "loss": 1.1318,
+      "step": 86350
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.121e-05,
+      "loss": 1.1256,
+      "step": 86400
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.119333333333333e-05,
+      "loss": 1.1295,
+      "step": 86450
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.117666666666667e-05,
+      "loss": 1.1181,
+      "step": 86500
+    },
+    {
+      "epoch": 2.6,
+      "learning_rate": 7.116e-05,
+      "loss": 1.1306,
+      "step": 86550
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.114333333333334e-05,
+      "loss": 1.1073,
+      "step": 86600
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.112666666666668e-05,
+      "loss": 1.1234,
+      "step": 86650
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.111e-05,
+      "loss": 1.1115,
+      "step": 86700
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.109366666666667e-05,
+      "loss": 1.1292,
+      "step": 86750
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.107700000000001e-05,
+      "loss": 1.1089,
+      "step": 86800
+    },
+    {
+      "epoch": 2.61,
+      "learning_rate": 7.106033333333333e-05,
+      "loss": 1.1303,
+      "step": 86850
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.104366666666667e-05,
+      "loss": 1.1215,
+      "step": 86900
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.1027e-05,
+      "loss": 1.1202,
+      "step": 86950
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.101033333333333e-05,
+      "loss": 1.1269,
+      "step": 87000
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.099366666666667e-05,
+      "loss": 1.1156,
+      "step": 87050
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.097700000000001e-05,
+      "loss": 1.1315,
+      "step": 87100
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.096033333333335e-05,
+      "loss": 1.1322,
+      "step": 87150
+    },
+    {
+      "epoch": 2.62,
+      "learning_rate": 7.094366666666667e-05,
+      "loss": 1.0949,
+      "step": 87200
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.0927e-05,
+      "loss": 1.1114,
+      "step": 87250
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.091033333333333e-05,
+      "loss": 1.1301,
+      "step": 87300
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.089366666666667e-05,
+      "loss": 1.1255,
+      "step": 87350
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.0877e-05,
+      "loss": 1.1112,
+      "step": 87400
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.086033333333334e-05,
+      "loss": 1.1312,
+      "step": 87450
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.084366666666668e-05,
+      "loss": 1.1171,
+      "step": 87500
+    },
+    {
+      "epoch": 2.63,
+      "learning_rate": 7.0827e-05,
+      "loss": 1.1151,
+      "step": 87550
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.081033333333333e-05,
+      "loss": 1.1101,
+      "step": 87600
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.079366666666667e-05,
+      "loss": 1.1065,
+      "step": 87650
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.0777e-05,
+      "loss": 1.1334,
+      "step": 87700
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.076033333333334e-05,
+      "loss": 1.1015,
+      "step": 87750
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.074366666666668e-05,
+      "loss": 1.125,
+      "step": 87800
+    },
+    {
+      "epoch": 2.64,
+      "learning_rate": 7.0727e-05,
+      "loss": 1.1213,
+      "step": 87850
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.071033333333334e-05,
+      "loss": 1.1157,
+      "step": 87900
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.069366666666666e-05,
+      "loss": 1.137,
+      "step": 87950
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.0677e-05,
+      "loss": 1.1017,
+      "step": 88000
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.066033333333334e-05,
+      "loss": 1.1158,
+      "step": 88050
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.064366666666668e-05,
+      "loss": 1.1355,
+      "step": 88100
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.0627e-05,
+      "loss": 1.1057,
+      "step": 88150
+    },
+    {
+      "epoch": 2.65,
+      "learning_rate": 7.061033333333334e-05,
+      "loss": 1.1117,
+      "step": 88200
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.059366666666667e-05,
+      "loss": 1.111,
+      "step": 88250
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.0577e-05,
+      "loss": 1.1012,
+      "step": 88300
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.056033333333334e-05,
+      "loss": 1.1054,
+      "step": 88350
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.054366666666667e-05,
+      "loss": 1.1059,
+      "step": 88400
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.0527e-05,
+      "loss": 1.1187,
+      "step": 88450
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.051033333333333e-05,
+      "loss": 1.1079,
+      "step": 88500
+    },
+    {
+      "epoch": 2.66,
+      "learning_rate": 7.049366666666667e-05,
+      "loss": 1.1101,
+      "step": 88550
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.047700000000001e-05,
+      "loss": 1.131,
+      "step": 88600
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.046033333333333e-05,
+      "loss": 1.1118,
+      "step": 88650
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.044366666666667e-05,
+      "loss": 1.0959,
+      "step": 88700
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.0427e-05,
+      "loss": 1.1176,
+      "step": 88750
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.041066666666667e-05,
+      "loss": 1.1125,
+      "step": 88800
+    },
+    {
+      "epoch": 2.67,
+      "learning_rate": 7.0394e-05,
+      "loss": 1.1029,
+      "step": 88850
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.037733333333334e-05,
+      "loss": 1.1054,
+      "step": 88900
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.036066666666668e-05,
+      "loss": 1.1025,
+      "step": 88950
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.0344e-05,
+      "loss": 1.1077,
+      "step": 89000
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.032733333333334e-05,
+      "loss": 1.1075,
+      "step": 89050
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.031066666666666e-05,
+      "loss": 1.1133,
+      "step": 89100
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.0294e-05,
+      "loss": 1.1269,
+      "step": 89150
+    },
+    {
+      "epoch": 2.68,
+      "learning_rate": 7.027733333333334e-05,
+      "loss": 1.1236,
+      "step": 89200
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.026066666666668e-05,
+      "loss": 1.1093,
+      "step": 89250
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.0244e-05,
+      "loss": 1.1075,
+      "step": 89300
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.022733333333334e-05,
+      "loss": 1.1021,
+      "step": 89350
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.021066666666668e-05,
+      "loss": 1.1171,
+      "step": 89400
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.0194e-05,
+      "loss": 1.1126,
+      "step": 89450
+    },
+    {
+      "epoch": 2.69,
+      "learning_rate": 7.017733333333334e-05,
+      "loss": 1.1057,
+      "step": 89500
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.016066666666667e-05,
+      "loss": 1.1038,
+      "step": 89550
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.0144e-05,
+      "loss": 1.1093,
+      "step": 89600
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.012733333333334e-05,
+      "loss": 1.0998,
+      "step": 89650
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.011066666666667e-05,
+      "loss": 1.0987,
+      "step": 89700
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.009400000000001e-05,
+      "loss": 1.1015,
+      "step": 89750
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.007733333333333e-05,
+      "loss": 1.0945,
+      "step": 89800
+    },
+    {
+      "epoch": 2.7,
+      "learning_rate": 7.006066666666667e-05,
+      "loss": 1.1126,
+      "step": 89850
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 7.0044e-05,
+      "loss": 1.0957,
+      "step": 89900
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 7.002733333333333e-05,
+      "loss": 1.1049,
+      "step": 89950
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 7.001066666666667e-05,
+      "loss": 1.0967,
+      "step": 90000
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 6.999400000000001e-05,
+      "loss": 1.1179,
+      "step": 90050
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 6.997733333333335e-05,
+      "loss": 1.0986,
+      "step": 90100
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 6.996066666666667e-05,
+      "loss": 1.0869,
+      "step": 90150
+    },
+    {
+      "epoch": 2.71,
+      "learning_rate": 6.994399999999999e-05,
+      "loss": 1.1051,
+      "step": 90200
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.992733333333333e-05,
+      "loss": 1.1098,
+      "step": 90250
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.991066666666667e-05,
+      "loss": 1.0977,
+      "step": 90300
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.9894e-05,
+      "loss": 1.1278,
+      "step": 90350
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.987733333333334e-05,
+      "loss": 1.1182,
+      "step": 90400
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.986066666666668e-05,
+      "loss": 1.1107,
+      "step": 90450
+    },
+    {
+      "epoch": 2.72,
+      "learning_rate": 6.9844e-05,
+      "loss": 1.0939,
+      "step": 90500
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.982733333333333e-05,
+      "loss": 1.1103,
+      "step": 90550
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.981066666666667e-05,
+      "loss": 1.0947,
+      "step": 90600
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.9794e-05,
+      "loss": 1.0853,
+      "step": 90650
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.977733333333334e-05,
+      "loss": 1.1005,
+      "step": 90700
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.976066666666668e-05,
+      "loss": 1.1006,
+      "step": 90750
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.9744e-05,
+      "loss": 1.1101,
+      "step": 90800
+    },
+    {
+      "epoch": 2.73,
+      "learning_rate": 6.972733333333334e-05,
+      "loss": 1.09,
+      "step": 90850
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.971066666666666e-05,
+      "loss": 1.0947,
+      "step": 90900
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.9694e-05,
+      "loss": 1.0944,
+      "step": 90950
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.967733333333334e-05,
+      "loss": 1.1064,
+      "step": 91000
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.966066666666668e-05,
+      "loss": 1.0855,
+      "step": 91050
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.9644e-05,
+      "loss": 1.1054,
+      "step": 91100
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.962733333333334e-05,
+      "loss": 1.0949,
+      "step": 91150
+    },
+    {
+      "epoch": 2.74,
+      "learning_rate": 6.961066666666667e-05,
+      "loss": 1.1023,
+      "step": 91200
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.9594e-05,
+      "loss": 1.0998,
+      "step": 91250
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.957733333333334e-05,
+      "loss": 1.0782,
+      "step": 91300
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.956066666666667e-05,
+      "loss": 1.1008,
+      "step": 91350
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.9544e-05,
+      "loss": 1.1052,
+      "step": 91400
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.952733333333333e-05,
+      "loss": 1.0971,
+      "step": 91450
+    },
+    {
+      "epoch": 2.75,
+      "learning_rate": 6.951066666666667e-05,
+      "loss": 1.0955,
+      "step": 91500
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.949400000000001e-05,
+      "loss": 1.1018,
+      "step": 91550
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.947733333333333e-05,
+      "loss": 1.1043,
+      "step": 91600
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.946066666666667e-05,
+      "loss": 1.101,
+      "step": 91650
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.9444e-05,
+      "loss": 1.0917,
+      "step": 91700
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.942733333333333e-05,
+      "loss": 1.1049,
+      "step": 91750
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.941066666666667e-05,
+      "loss": 1.1099,
+      "step": 91800
+    },
+    {
+      "epoch": 2.76,
+      "learning_rate": 6.939400000000001e-05,
+      "loss": 1.0904,
+      "step": 91850
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.937733333333334e-05,
+      "loss": 1.1132,
+      "step": 91900
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.936066666666667e-05,
+      "loss": 1.0989,
+      "step": 91950
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.934399999999999e-05,
+      "loss": 1.0876,
+      "step": 92000
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.932733333333333e-05,
+      "loss": 1.0871,
+      "step": 92050
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.931066666666667e-05,
+      "loss": 1.0972,
+      "step": 92100
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.9294e-05,
+      "loss": 1.0913,
+      "step": 92150
+    },
+    {
+      "epoch": 2.77,
+      "learning_rate": 6.927733333333334e-05,
+      "loss": 1.1021,
+      "step": 92200
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.926066666666668e-05,
+      "loss": 1.0875,
+      "step": 92250
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.924433333333334e-05,
+      "loss": 1.1063,
+      "step": 92300
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.922766666666667e-05,
+      "loss": 1.0805,
+      "step": 92350
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.9211e-05,
+      "loss": 1.0965,
+      "step": 92400
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.919433333333334e-05,
+      "loss": 1.0993,
+      "step": 92450
+    },
+    {
+      "epoch": 2.78,
+      "learning_rate": 6.917766666666667e-05,
+      "loss": 1.1107,
+      "step": 92500
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.9161e-05,
+      "loss": 1.1046,
+      "step": 92550
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.914433333333333e-05,
+      "loss": 1.0804,
+      "step": 92600
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.912766666666667e-05,
+      "loss": 1.087,
+      "step": 92650
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.911100000000001e-05,
+      "loss": 1.0778,
+      "step": 92700
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.909433333333333e-05,
+      "loss": 1.0834,
+      "step": 92750
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.907766666666667e-05,
+      "loss": 1.0877,
+      "step": 92800
+    },
+    {
+      "epoch": 2.79,
+      "learning_rate": 6.9061e-05,
+      "loss": 1.0941,
+      "step": 92850
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.904433333333333e-05,
+      "loss": 1.1039,
+      "step": 92900
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.902766666666667e-05,
+      "loss": 1.0795,
+      "step": 92950
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.901100000000001e-05,
+      "loss": 1.0702,
+      "step": 93000
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.899433333333334e-05,
+      "loss": 1.0957,
+      "step": 93050
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.897766666666667e-05,
+      "loss": 1.0751,
+      "step": 93100
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.896099999999999e-05,
+      "loss": 1.0932,
+      "step": 93150
+    },
+    {
+      "epoch": 2.8,
+      "learning_rate": 6.894433333333333e-05,
+      "loss": 1.0779,
+      "step": 93200
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.892766666666667e-05,
+      "loss": 1.0791,
+      "step": 93250
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.8911e-05,
+      "loss": 1.081,
+      "step": 93300
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.889433333333334e-05,
+      "loss": 1.0955,
+      "step": 93350
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.887766666666668e-05,
+      "loss": 1.0824,
+      "step": 93400
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.8861e-05,
+      "loss": 1.0864,
+      "step": 93450
+    },
+    {
+      "epoch": 2.81,
+      "learning_rate": 6.884433333333333e-05,
+      "loss": 1.0831,
+      "step": 93500
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.882766666666666e-05,
+      "loss": 1.1048,
+      "step": 93550
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.8811e-05,
+      "loss": 1.0953,
+      "step": 93600
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.879433333333334e-05,
+      "loss": 1.09,
+      "step": 93650
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.877766666666668e-05,
+      "loss": 1.1042,
+      "step": 93700
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.876100000000001e-05,
+      "loss": 1.0932,
+      "step": 93750
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.874433333333334e-05,
+      "loss": 1.0875,
+      "step": 93800
+    },
+    {
+      "epoch": 2.82,
+      "learning_rate": 6.872766666666666e-05,
+      "loss": 1.0701,
+      "step": 93850
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.8711e-05,
+      "loss": 1.0848,
+      "step": 93900
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.869433333333334e-05,
+      "loss": 1.0791,
+      "step": 93950
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.867766666666667e-05,
+      "loss": 1.0918,
+      "step": 94000
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.866100000000001e-05,
+      "loss": 1.0811,
+      "step": 94050
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.864433333333334e-05,
+      "loss": 1.0939,
+      "step": 94100
+    },
+    {
+      "epoch": 2.83,
+      "learning_rate": 6.862766666666667e-05,
+      "loss": 1.0915,
+      "step": 94150
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.8611e-05,
+      "loss": 1.0782,
+      "step": 94200
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.859433333333333e-05,
+      "loss": 1.0901,
+      "step": 94250
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.857766666666667e-05,
+      "loss": 1.0892,
+      "step": 94300
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.856100000000001e-05,
+      "loss": 1.0875,
+      "step": 94350
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.854433333333333e-05,
+      "loss": 1.0865,
+      "step": 94400
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.852766666666667e-05,
+      "loss": 1.0926,
+      "step": 94450
+    },
+    {
+      "epoch": 2.84,
+      "learning_rate": 6.851100000000001e-05,
+      "loss": 1.0898,
+      "step": 94500
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.849433333333333e-05,
+      "loss": 1.0849,
+      "step": 94550
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.847766666666667e-05,
+      "loss": 1.0739,
+      "step": 94600
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.846100000000001e-05,
+      "loss": 1.095,
+      "step": 94650
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.844433333333333e-05,
+      "loss": 1.0873,
+      "step": 94700
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.842766666666667e-05,
+      "loss": 1.0818,
+      "step": 94750
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.8411e-05,
+      "loss": 1.0666,
+      "step": 94800
+    },
+    {
+      "epoch": 2.85,
+      "learning_rate": 6.839433333333334e-05,
+      "loss": 1.064,
+      "step": 94850
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.837766666666667e-05,
+      "loss": 1.0994,
+      "step": 94900
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.8361e-05,
+      "loss": 1.061,
+      "step": 94950
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.834433333333333e-05,
+      "loss": 1.0823,
+      "step": 95000
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.832766666666667e-05,
+      "loss": 1.0713,
+      "step": 95050
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.8311e-05,
+      "loss": 1.0669,
+      "step": 95100
+    },
+    {
+      "epoch": 2.86,
+      "learning_rate": 6.829433333333334e-05,
+      "loss": 1.0888,
+      "step": 95150
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.827766666666668e-05,
+      "loss": 1.0834,
+      "step": 95200
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.8261e-05,
+      "loss": 1.0846,
+      "step": 95250
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.824433333333333e-05,
+      "loss": 1.0989,
+      "step": 95300
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.822766666666666e-05,
+      "loss": 1.0939,
+      "step": 95350
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.8211e-05,
+      "loss": 1.0864,
+      "step": 95400
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.819433333333334e-05,
+      "loss": 1.0734,
+      "step": 95450
+    },
+    {
+      "epoch": 2.87,
+      "learning_rate": 6.817766666666668e-05,
+      "loss": 1.0738,
+      "step": 95500
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.816100000000001e-05,
+      "loss": 1.0883,
+      "step": 95550
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.814433333333334e-05,
+      "loss": 1.0634,
+      "step": 95600
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.812766666666666e-05,
+      "loss": 1.0773,
+      "step": 95650
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.8111e-05,
+      "loss": 1.081,
+      "step": 95700
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.809433333333334e-05,
+      "loss": 1.0814,
+      "step": 95750
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.807766666666667e-05,
+      "loss": 1.0826,
+      "step": 95800
+    },
+    {
+      "epoch": 2.88,
+      "learning_rate": 6.806100000000001e-05,
+      "loss": 1.0853,
+      "step": 95850
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.804433333333334e-05,
+      "loss": 1.0764,
+      "step": 95900
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.802766666666667e-05,
+      "loss": 1.0735,
+      "step": 95950
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.8011e-05,
+      "loss": 1.0873,
+      "step": 96000
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.799433333333333e-05,
+      "loss": 1.0749,
+      "step": 96050
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.797766666666667e-05,
+      "loss": 1.0918,
+      "step": 96100
+    },
+    {
+      "epoch": 2.89,
+      "learning_rate": 6.796100000000001e-05,
+      "loss": 1.0743,
+      "step": 96150
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.794433333333333e-05,
+      "loss": 1.0653,
+      "step": 96200
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.792766666666667e-05,
+      "loss": 1.0769,
+      "step": 96250
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.791100000000001e-05,
+      "loss": 1.0639,
+      "step": 96300
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.789466666666668e-05,
+      "loss": 1.0728,
+      "step": 96350
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.7878e-05,
+      "loss": 1.0795,
+      "step": 96400
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.786133333333333e-05,
+      "loss": 1.0819,
+      "step": 96450
+    },
+    {
+      "epoch": 2.9,
+      "learning_rate": 6.784466666666666e-05,
+      "loss": 1.0659,
+      "step": 96500
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.7828e-05,
+      "loss": 1.0814,
+      "step": 96550
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.781166666666667e-05,
+      "loss": 1.0697,
+      "step": 96600
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.779500000000001e-05,
+      "loss": 1.0816,
+      "step": 96650
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.777833333333333e-05,
+      "loss": 1.0713,
+      "step": 96700
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.776166666666667e-05,
+      "loss": 1.0716,
+      "step": 96750
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.774500000000001e-05,
+      "loss": 1.077,
+      "step": 96800
+    },
+    {
+      "epoch": 2.91,
+      "learning_rate": 6.772833333333333e-05,
+      "loss": 1.0818,
+      "step": 96850
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.771166666666667e-05,
+      "loss": 1.076,
+      "step": 96900
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.769500000000001e-05,
+      "loss": 1.0755,
+      "step": 96950
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.767833333333333e-05,
+      "loss": 1.0727,
+      "step": 97000
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.766166666666667e-05,
+      "loss": 1.0677,
+      "step": 97050
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.764500000000001e-05,
+      "loss": 1.0724,
+      "step": 97100
+    },
+    {
+      "epoch": 2.92,
+      "learning_rate": 6.762833333333334e-05,
+      "loss": 1.0737,
+      "step": 97150
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.761166666666667e-05,
+      "loss": 1.0801,
+      "step": 97200
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.7595e-05,
+      "loss": 1.0827,
+      "step": 97250
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.757833333333333e-05,
+      "loss": 1.0708,
+      "step": 97300
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.756166666666667e-05,
+      "loss": 1.0792,
+      "step": 97350
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.7545e-05,
+      "loss": 1.0683,
+      "step": 97400
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.752833333333334e-05,
+      "loss": 1.0617,
+      "step": 97450
+    },
+    {
+      "epoch": 2.93,
+      "learning_rate": 6.751166666666668e-05,
+      "loss": 1.0776,
+      "step": 97500
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.7495e-05,
+      "loss": 1.0728,
+      "step": 97550
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.747833333333333e-05,
+      "loss": 1.0796,
+      "step": 97600
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.746166666666666e-05,
+      "loss": 1.0771,
+      "step": 97650
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.7445e-05,
+      "loss": 1.0604,
+      "step": 97700
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.742833333333334e-05,
+      "loss": 1.0786,
+      "step": 97750
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.741166666666668e-05,
+      "loss": 1.0693,
+      "step": 97800
+    },
+    {
+      "epoch": 2.94,
+      "learning_rate": 6.739500000000001e-05,
+      "loss": 1.0641,
+      "step": 97850
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.737833333333334e-05,
+      "loss": 1.0794,
+      "step": 97900
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.736166666666666e-05,
+      "loss": 1.07,
+      "step": 97950
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.7345e-05,
+      "loss": 1.0693,
+      "step": 98000
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.732833333333334e-05,
+      "loss": 1.0866,
+      "step": 98050
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.731166666666667e-05,
+      "loss": 1.0746,
+      "step": 98100
+    },
+    {
+      "epoch": 2.95,
+      "learning_rate": 6.729500000000001e-05,
+      "loss": 1.0665,
+      "step": 98150
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.727833333333334e-05,
+      "loss": 1.0731,
+      "step": 98200
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.726166666666667e-05,
+      "loss": 1.0725,
+      "step": 98250
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.7245e-05,
+      "loss": 1.058,
+      "step": 98300
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.722833333333333e-05,
+      "loss": 1.0731,
+      "step": 98350
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.721166666666667e-05,
+      "loss": 1.0802,
+      "step": 98400
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.719500000000001e-05,
+      "loss": 1.0663,
+      "step": 98450
+    },
+    {
+      "epoch": 2.96,
+      "learning_rate": 6.717833333333333e-05,
+      "loss": 1.0599,
+      "step": 98500
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.716166666666667e-05,
+      "loss": 1.0777,
+      "step": 98550
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.714500000000001e-05,
+      "loss": 1.0777,
+      "step": 98600
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.712833333333333e-05,
+      "loss": 1.0663,
+      "step": 98650
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.711166666666667e-05,
+      "loss": 1.0676,
+      "step": 98700
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.709500000000001e-05,
+      "loss": 1.0804,
+      "step": 98750
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.707833333333333e-05,
+      "loss": 1.0559,
+      "step": 98800
+    },
+    {
+      "epoch": 2.97,
+      "learning_rate": 6.706166666666667e-05,
+      "loss": 1.0668,
+      "step": 98850
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.7045e-05,
+      "loss": 1.0765,
+      "step": 98900
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.702833333333334e-05,
+      "loss": 1.071,
+      "step": 98950
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.701166666666667e-05,
+      "loss": 1.0659,
+      "step": 99000
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.6995e-05,
+      "loss": 1.0594,
+      "step": 99050
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.697833333333333e-05,
+      "loss": 1.0686,
+      "step": 99100
+    },
+    {
+      "epoch": 2.98,
+      "learning_rate": 6.696166666666667e-05,
+      "loss": 1.0768,
+      "step": 99150
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.6945e-05,
+      "loss": 1.0687,
+      "step": 99200
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.692833333333334e-05,
+      "loss": 1.0748,
+      "step": 99250
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.691166666666668e-05,
+      "loss": 1.0658,
+      "step": 99300
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.6895e-05,
+      "loss": 1.0493,
+      "step": 99350
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.687833333333333e-05,
+      "loss": 1.0621,
+      "step": 99400
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.686166666666666e-05,
+      "loss": 1.0694,
+      "step": 99450
+    },
+    {
+      "epoch": 2.99,
+      "learning_rate": 6.6845e-05,
+      "loss": 1.0523,
+      "step": 99500
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.682833333333334e-05,
+      "loss": 1.064,
+      "step": 99550
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.681166666666668e-05,
+      "loss": 1.0674,
+      "step": 99600
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.679500000000001e-05,
+      "loss": 1.042,
+      "step": 99650
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.677833333333334e-05,
+      "loss": 1.0678,
+      "step": 99700
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.676166666666666e-05,
+      "loss": 1.0637,
+      "step": 99750
+    },
+    {
+      "epoch": 3.0,
+      "learning_rate": 6.6745e-05,
+      "loss": 1.0414,
+      "step": 99800
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.672833333333334e-05,
+      "loss": 1.047,
+      "step": 99850
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.671200000000001e-05,
+      "loss": 1.0698,
+      "step": 99900
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.669533333333333e-05,
+      "loss": 1.0417,
+      "step": 99950
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.667866666666667e-05,
+      "loss": 1.0592,
+      "step": 100000
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.6662e-05,
+      "loss": 1.0451,
+      "step": 100050
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.664533333333334e-05,
+      "loss": 1.06,
+      "step": 100100
+    },
+    {
+      "epoch": 3.01,
+      "learning_rate": 6.662866666666667e-05,
+      "loss": 1.0399,
+      "step": 100150
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.6612e-05,
+      "loss": 1.0489,
+      "step": 100200
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.659533333333333e-05,
+      "loss": 1.0437,
+      "step": 100250
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.657866666666667e-05,
+      "loss": 1.0404,
+      "step": 100300
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.6562e-05,
+      "loss": 1.0495,
+      "step": 100350
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.654533333333334e-05,
+      "loss": 1.0591,
+      "step": 100400
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.652866666666668e-05,
+      "loss": 1.0461,
+      "step": 100450
+    },
+    {
+      "epoch": 3.02,
+      "learning_rate": 6.6512e-05,
+      "loss": 1.0266,
+      "step": 100500
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.649533333333333e-05,
+      "loss": 1.0406,
+      "step": 100550
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.647866666666666e-05,
+      "loss": 1.0557,
+      "step": 100600
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.6462e-05,
+      "loss": 1.047,
+      "step": 100650
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.644533333333334e-05,
+      "loss": 1.041,
+      "step": 100700
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.642866666666668e-05,
+      "loss": 1.0471,
+      "step": 100750
+    },
+    {
+      "epoch": 3.03,
+      "learning_rate": 6.641200000000001e-05,
+      "loss": 1.0455,
+      "step": 100800
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.639533333333334e-05,
+      "loss": 1.0402,
+      "step": 100850
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.637866666666666e-05,
+      "loss": 1.0394,
+      "step": 100900
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.6362e-05,
+      "loss": 1.0378,
+      "step": 100950
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.634533333333334e-05,
+      "loss": 1.0598,
+      "step": 101000
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.632866666666667e-05,
+      "loss": 1.0493,
+      "step": 101050
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.631200000000001e-05,
+      "loss": 1.05,
+      "step": 101100
+    },
+    {
+      "epoch": 3.04,
+      "learning_rate": 6.629533333333334e-05,
+      "loss": 1.0435,
+      "step": 101150
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.627866666666667e-05,
+      "loss": 1.0554,
+      "step": 101200
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.6262e-05,
+      "loss": 1.0534,
+      "step": 101250
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.624533333333333e-05,
+      "loss": 1.0502,
+      "step": 101300
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.622866666666667e-05,
+      "loss": 1.0407,
+      "step": 101350
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.621200000000001e-05,
+      "loss": 1.0594,
+      "step": 101400
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.619533333333333e-05,
+      "loss": 1.0518,
+      "step": 101450
+    },
+    {
+      "epoch": 3.05,
+      "learning_rate": 6.617866666666667e-05,
+      "loss": 1.0431,
+      "step": 101500
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.616200000000001e-05,
+      "loss": 1.0477,
+      "step": 101550
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.614533333333333e-05,
+      "loss": 1.0502,
+      "step": 101600
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.612866666666667e-05,
+      "loss": 1.0268,
+      "step": 101650
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.6112e-05,
+      "loss": 1.0484,
+      "step": 101700
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.609533333333333e-05,
+      "loss": 1.0412,
+      "step": 101750
+    },
+    {
+      "epoch": 3.06,
+      "learning_rate": 6.607866666666667e-05,
+      "loss": 1.0494,
+      "step": 101800
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.6062e-05,
+      "loss": 1.0451,
+      "step": 101850
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.604533333333334e-05,
+      "loss": 1.0523,
+      "step": 101900
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.602866666666667e-05,
+      "loss": 1.0488,
+      "step": 101950
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.6012e-05,
+      "loss": 1.0514,
+      "step": 102000
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.599533333333333e-05,
+      "loss": 1.0541,
+      "step": 102050
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.597866666666667e-05,
+      "loss": 1.0446,
+      "step": 102100
+    },
+    {
+      "epoch": 3.07,
+      "learning_rate": 6.5962e-05,
+      "loss": 1.0433,
+      "step": 102150
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.594533333333334e-05,
+      "loss": 1.0366,
+      "step": 102200
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.592866666666668e-05,
+      "loss": 1.033,
+      "step": 102250
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.5912e-05,
+      "loss": 1.0362,
+      "step": 102300
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.589533333333333e-05,
+      "loss": 1.0401,
+      "step": 102350
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.587866666666666e-05,
+      "loss": 1.0533,
+      "step": 102400
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.5862e-05,
+      "loss": 1.0442,
+      "step": 102450
+    },
+    {
+      "epoch": 3.08,
+      "learning_rate": 6.584533333333334e-05,
+      "loss": 1.0287,
+      "step": 102500
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.582866666666668e-05,
+      "loss": 1.0464,
+      "step": 102550
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.581200000000001e-05,
+      "loss": 1.048,
+      "step": 102600
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.579533333333334e-05,
+      "loss": 1.0329,
+      "step": 102650
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.577866666666666e-05,
+      "loss": 1.0495,
+      "step": 102700
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.5762e-05,
+      "loss": 1.0376,
+      "step": 102750
+    },
+    {
+      "epoch": 3.09,
+      "learning_rate": 6.574533333333334e-05,
+      "loss": 1.0427,
+      "step": 102800
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.572866666666667e-05,
+      "loss": 1.0363,
+      "step": 102850
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.571200000000001e-05,
+      "loss": 1.034,
+      "step": 102900
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.569533333333333e-05,
+      "loss": 1.0396,
+      "step": 102950
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.567866666666667e-05,
+      "loss": 1.037,
+      "step": 103000
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.5662e-05,
+      "loss": 1.0455,
+      "step": 103050
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.564533333333333e-05,
+      "loss": 1.0381,
+      "step": 103100
+    },
+    {
+      "epoch": 3.1,
+      "learning_rate": 6.562866666666667e-05,
+      "loss": 1.0485,
+      "step": 103150
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.561200000000001e-05,
+      "loss": 1.0491,
+      "step": 103200
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.559533333333335e-05,
+      "loss": 1.0289,
+      "step": 103250
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.557866666666667e-05,
+      "loss": 1.0461,
+      "step": 103300
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.556200000000001e-05,
+      "loss": 1.0469,
+      "step": 103350
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.554533333333333e-05,
+      "loss": 1.041,
+      "step": 103400
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.552866666666667e-05,
+      "loss": 1.0423,
+      "step": 103450
+    },
+    {
+      "epoch": 3.11,
+      "learning_rate": 6.5512e-05,
+      "loss": 1.035,
+      "step": 103500
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.549533333333334e-05,
+      "loss": 1.0423,
+      "step": 103550
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.547866666666667e-05,
+      "loss": 1.0411,
+      "step": 103600
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.5462e-05,
+      "loss": 1.0545,
+      "step": 103650
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.544533333333334e-05,
+      "loss": 1.0413,
+      "step": 103700
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.542866666666667e-05,
+      "loss": 1.05,
+      "step": 103750
+    },
+    {
+      "epoch": 3.12,
+      "learning_rate": 6.5412e-05,
+      "loss": 1.0347,
+      "step": 103800
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.539533333333334e-05,
+      "loss": 1.0269,
+      "step": 103850
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.5379e-05,
+      "loss": 1.0413,
+      "step": 103900
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.536233333333334e-05,
+      "loss": 1.0497,
+      "step": 103950
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.534566666666667e-05,
+      "loss": 1.0325,
+      "step": 104000
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.532900000000001e-05,
+      "loss": 1.05,
+      "step": 104050
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.531233333333333e-05,
+      "loss": 1.0474,
+      "step": 104100
+    },
+    {
+      "epoch": 3.13,
+      "learning_rate": 6.529566666666667e-05,
+      "loss": 1.0427,
+      "step": 104150
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.5279e-05,
+      "loss": 1.0487,
+      "step": 104200
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.526233333333333e-05,
+      "loss": 1.0332,
+      "step": 104250
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.524566666666667e-05,
+      "loss": 1.0459,
+      "step": 104300
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.522900000000001e-05,
+      "loss": 1.0474,
+      "step": 104350
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.521233333333335e-05,
+      "loss": 1.0335,
+      "step": 104400
+    },
+    {
+      "epoch": 3.14,
+      "learning_rate": 6.519566666666667e-05,
+      "loss": 1.0375,
+      "step": 104450
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.517900000000001e-05,
+      "loss": 1.0267,
+      "step": 104500
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.516233333333333e-05,
+      "loss": 1.021,
+      "step": 104550
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.514566666666667e-05,
+      "loss": 1.0438,
+      "step": 104600
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.5129e-05,
+      "loss": 1.039,
+      "step": 104650
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.511233333333334e-05,
+      "loss": 1.039,
+      "step": 104700
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.509566666666667e-05,
+      "loss": 1.0292,
+      "step": 104750
+    },
+    {
+      "epoch": 3.15,
+      "learning_rate": 6.5079e-05,
+      "loss": 1.0366,
+      "step": 104800
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.506233333333334e-05,
+      "loss": 1.0209,
+      "step": 104850
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.504566666666667e-05,
+      "loss": 1.0307,
+      "step": 104900
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.5029e-05,
+      "loss": 1.0372,
+      "step": 104950
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.501233333333334e-05,
+      "loss": 1.0451,
+      "step": 105000
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.499566666666667e-05,
+      "loss": 1.0478,
+      "step": 105050
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.4979e-05,
+      "loss": 1.0377,
+      "step": 105100
+    },
+    {
+      "epoch": 3.16,
+      "learning_rate": 6.496233333333334e-05,
+      "loss": 1.0224,
+      "step": 105150
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.494566666666668e-05,
+      "loss": 1.011,
+      "step": 105200
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.4929e-05,
+      "loss": 1.0342,
+      "step": 105250
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.491233333333334e-05,
+      "loss": 1.0291,
+      "step": 105300
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.489566666666666e-05,
+      "loss": 1.0202,
+      "step": 105350
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.4879e-05,
+      "loss": 1.0289,
+      "step": 105400
+    },
+    {
+      "epoch": 3.17,
+      "learning_rate": 6.486233333333334e-05,
+      "loss": 1.0359,
+      "step": 105450
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.484566666666667e-05,
+      "loss": 1.0411,
+      "step": 105500
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.482900000000001e-05,
+      "loss": 1.0548,
+      "step": 105550
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.481233333333334e-05,
+      "loss": 1.0214,
+      "step": 105600
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.479566666666666e-05,
+      "loss": 1.0357,
+      "step": 105650
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.4779e-05,
+      "loss": 1.0352,
+      "step": 105700
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.476233333333334e-05,
+      "loss": 1.021,
+      "step": 105750
+    },
+    {
+      "epoch": 3.18,
+      "learning_rate": 6.474566666666667e-05,
+      "loss": 1.0476,
+      "step": 105800
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.472900000000001e-05,
+      "loss": 1.0394,
+      "step": 105850
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.471233333333335e-05,
+      "loss": 1.0426,
+      "step": 105900
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.469566666666667e-05,
+      "loss": 1.0261,
+      "step": 105950
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.4679e-05,
+      "loss": 1.0345,
+      "step": 106000
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.466233333333333e-05,
+      "loss": 1.0284,
+      "step": 106050
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.4646e-05,
+      "loss": 1.0371,
+      "step": 106100
+    },
+    {
+      "epoch": 3.19,
+      "learning_rate": 6.462933333333334e-05,
+      "loss": 1.033,
+      "step": 106150
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.461266666666667e-05,
+      "loss": 1.0404,
+      "step": 106200
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.4596e-05,
+      "loss": 1.0305,
+      "step": 106250
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.457933333333334e-05,
+      "loss": 1.0315,
+      "step": 106300
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.456266666666668e-05,
+      "loss": 1.0339,
+      "step": 106350
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.4546e-05,
+      "loss": 1.0277,
+      "step": 106400
+    },
+    {
+      "epoch": 3.2,
+      "learning_rate": 6.452933333333334e-05,
+      "loss": 1.0334,
+      "step": 106450
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.451266666666666e-05,
+      "loss": 1.039,
+      "step": 106500
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.4496e-05,
+      "loss": 1.0219,
+      "step": 106550
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.447933333333334e-05,
+      "loss": 1.029,
+      "step": 106600
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.446266666666668e-05,
+      "loss": 1.0182,
+      "step": 106650
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.444600000000001e-05,
+      "loss": 1.0315,
+      "step": 106700
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.442933333333334e-05,
+      "loss": 1.035,
+      "step": 106750
+    },
+    {
+      "epoch": 3.21,
+      "learning_rate": 6.441266666666666e-05,
+      "loss": 1.0244,
+      "step": 106800
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.4396e-05,
+      "loss": 1.0246,
+      "step": 106850
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.437933333333334e-05,
+      "loss": 1.0332,
+      "step": 106900
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.436266666666667e-05,
+      "loss": 1.0199,
+      "step": 106950
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.434600000000001e-05,
+      "loss": 1.0258,
+      "step": 107000
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.432933333333335e-05,
+      "loss": 1.037,
+      "step": 107050
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.431266666666667e-05,
+      "loss": 1.0271,
+      "step": 107100
+    },
+    {
+      "epoch": 3.22,
+      "learning_rate": 6.4296e-05,
+      "loss": 1.0398,
+      "step": 107150
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.427933333333333e-05,
+      "loss": 1.0169,
+      "step": 107200
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.4263e-05,
+      "loss": 1.0246,
+      "step": 107250
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.424633333333334e-05,
+      "loss": 1.0301,
+      "step": 107300
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.422966666666667e-05,
+      "loss": 1.0326,
+      "step": 107350
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.4213e-05,
+      "loss": 1.0401,
+      "step": 107400
+    },
+    {
+      "epoch": 3.23,
+      "learning_rate": 6.419633333333334e-05,
+      "loss": 1.0298,
+      "step": 107450
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.417966666666666e-05,
+      "loss": 1.0283,
+      "step": 107500
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.4163e-05,
+      "loss": 1.0157,
+      "step": 107550
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.414633333333334e-05,
+      "loss": 1.0196,
+      "step": 107600
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.412966666666666e-05,
+      "loss": 1.0385,
+      "step": 107650
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.4113e-05,
+      "loss": 1.0349,
+      "step": 107700
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.409633333333334e-05,
+      "loss": 1.0165,
+      "step": 107750
+    },
+    {
+      "epoch": 3.24,
+      "learning_rate": 6.407966666666668e-05,
+      "loss": 1.029,
+      "step": 107800
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.4063e-05,
+      "loss": 1.0312,
+      "step": 107850
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.404633333333334e-05,
+      "loss": 1.0323,
+      "step": 107900
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.402966666666666e-05,
+      "loss": 1.0128,
+      "step": 107950
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.4013e-05,
+      "loss": 1.0357,
+      "step": 108000
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.399633333333334e-05,
+      "loss": 1.0282,
+      "step": 108050
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.397966666666667e-05,
+      "loss": 1.0081,
+      "step": 108100
+    },
+    {
+      "epoch": 3.25,
+      "learning_rate": 6.396300000000001e-05,
+      "loss": 1.0218,
+      "step": 108150
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.394633333333333e-05,
+      "loss": 1.0352,
+      "step": 108200
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.392966666666667e-05,
+      "loss": 1.0161,
+      "step": 108250
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.3913e-05,
+      "loss": 1.0295,
+      "step": 108300
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.389633333333333e-05,
+      "loss": 1.0249,
+      "step": 108350
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.387966666666667e-05,
+      "loss": 1.018,
+      "step": 108400
+    },
+    {
+      "epoch": 3.26,
+      "learning_rate": 6.386300000000001e-05,
+      "loss": 1.025,
+      "step": 108450
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.384633333333335e-05,
+      "loss": 1.0199,
+      "step": 108500
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.382966666666667e-05,
+      "loss": 1.0157,
+      "step": 108550
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.381300000000001e-05,
+      "loss": 1.0285,
+      "step": 108600
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.379633333333333e-05,
+      "loss": 1.0258,
+      "step": 108650
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.377966666666667e-05,
+      "loss": 1.0238,
+      "step": 108700
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.3763e-05,
+      "loss": 1.0292,
+      "step": 108750
+    },
+    {
+      "epoch": 3.27,
+      "learning_rate": 6.374633333333334e-05,
+      "loss": 1.0098,
+      "step": 108800
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.372966666666667e-05,
+      "loss": 1.0179,
+      "step": 108850
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.3713e-05,
+      "loss": 1.0334,
+      "step": 108900
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.369633333333334e-05,
+      "loss": 1.0244,
+      "step": 108950
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.367966666666667e-05,
+      "loss": 1.0197,
+      "step": 109000
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.3663e-05,
+      "loss": 1.0271,
+      "step": 109050
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.364633333333334e-05,
+      "loss": 1.0397,
+      "step": 109100
+    },
+    {
+      "epoch": 3.28,
+      "learning_rate": 6.362966666666666e-05,
+      "loss": 1.0261,
+      "step": 109150
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.3613e-05,
+      "loss": 1.0343,
+      "step": 109200
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.359633333333334e-05,
+      "loss": 1.0212,
+      "step": 109250
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.357966666666668e-05,
+      "loss": 1.018,
+      "step": 109300
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.3563e-05,
+      "loss": 1.0352,
+      "step": 109350
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.354633333333334e-05,
+      "loss": 1.0347,
+      "step": 109400
+    },
+    {
+      "epoch": 3.29,
+      "learning_rate": 6.352966666666666e-05,
+      "loss": 1.0343,
+      "step": 109450
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.3513e-05,
+      "loss": 1.0145,
+      "step": 109500
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.349633333333334e-05,
+      "loss": 1.0192,
+      "step": 109550
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.347966666666667e-05,
+      "loss": 1.0173,
+      "step": 109600
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.346300000000001e-05,
+      "loss": 1.0175,
+      "step": 109650
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.344633333333334e-05,
+      "loss": 1.0112,
+      "step": 109700
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.342966666666666e-05,
+      "loss": 1.0107,
+      "step": 109750
+    },
+    {
+      "epoch": 3.3,
+      "learning_rate": 6.3413e-05,
+      "loss": 1.0114,
+      "step": 109800
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.339633333333333e-05,
+      "loss": 1.0136,
+      "step": 109850
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.337966666666667e-05,
+      "loss": 1.0218,
+      "step": 109900
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.336300000000001e-05,
+      "loss": 1.0253,
+      "step": 109950
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.334633333333335e-05,
+      "loss": 1.0212,
+      "step": 110000
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.332966666666667e-05,
+      "loss": 1.0278,
+      "step": 110050
+    },
+    {
+      "epoch": 3.31,
+      "learning_rate": 6.3313e-05,
+      "loss": 1.0233,
+      "step": 110100
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.329633333333333e-05,
+      "loss": 1.0236,
+      "step": 110150
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.327966666666667e-05,
+      "loss": 1.0175,
+      "step": 110200
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.326300000000001e-05,
+      "loss": 1.015,
+      "step": 110250
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.324633333333334e-05,
+      "loss": 1.0134,
+      "step": 110300
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.322966666666667e-05,
+      "loss": 1.0143,
+      "step": 110350
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.3213e-05,
+      "loss": 1.0099,
+      "step": 110400
+    },
+    {
+      "epoch": 3.32,
+      "learning_rate": 6.319633333333333e-05,
+      "loss": 1.0143,
+      "step": 110450
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.317966666666667e-05,
+      "loss": 1.0246,
+      "step": 110500
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.3163e-05,
+      "loss": 1.0078,
+      "step": 110550
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.314633333333334e-05,
+      "loss": 1.0066,
+      "step": 110600
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.312966666666667e-05,
+      "loss": 1.022,
+      "step": 110650
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.3113e-05,
+      "loss": 1.0148,
+      "step": 110700
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.309633333333334e-05,
+      "loss": 1.0193,
+      "step": 110750
+    },
+    {
+      "epoch": 3.33,
+      "learning_rate": 6.307966666666667e-05,
+      "loss": 1.0271,
+      "step": 110800
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.3063e-05,
+      "loss": 1.0148,
+      "step": 110850
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.304633333333334e-05,
+      "loss": 1.0203,
+      "step": 110900
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.302966666666666e-05,
+      "loss": 1.0007,
+      "step": 110950
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.3013e-05,
+      "loss": 1.0127,
+      "step": 111000
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.299633333333334e-05,
+      "loss": 1.0138,
+      "step": 111050
+    },
+    {
+      "epoch": 3.34,
+      "learning_rate": 6.297966666666668e-05,
+      "loss": 1.0106,
+      "step": 111100
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.2963e-05,
+      "loss": 1.0115,
+      "step": 111150
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.294633333333334e-05,
+      "loss": 1.0202,
+      "step": 111200
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.292966666666666e-05,
+      "loss": 1.0119,
+      "step": 111250
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.2913e-05,
+      "loss": 1.0107,
+      "step": 111300
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.289633333333334e-05,
+      "loss": 1.0193,
+      "step": 111350
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.287966666666667e-05,
+      "loss": 1.0136,
+      "step": 111400
+    },
+    {
+      "epoch": 3.35,
+      "learning_rate": 6.286300000000001e-05,
+      "loss": 0.9997,
+      "step": 111450
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.284633333333334e-05,
+      "loss": 1.0025,
+      "step": 111500
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.282966666666666e-05,
+      "loss": 1.0139,
+      "step": 111550
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.2813e-05,
+      "loss": 1.0227,
+      "step": 111600
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.279633333333333e-05,
+      "loss": 1.0167,
+      "step": 111650
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.277966666666667e-05,
+      "loss": 1.016,
+      "step": 111700
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.276300000000001e-05,
+      "loss": 1.02,
+      "step": 111750
+    },
+    {
+      "epoch": 3.36,
+      "learning_rate": 6.274633333333335e-05,
+      "loss": 1.0231,
+      "step": 111800
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.272966666666667e-05,
+      "loss": 1.0018,
+      "step": 111850
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.2713e-05,
+      "loss": 1.0093,
+      "step": 111900
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.269666666666667e-05,
+      "loss": 1.0068,
+      "step": 111950
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.268e-05,
+      "loss": 1.0118,
+      "step": 112000
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.266333333333334e-05,
+      "loss": 1.0099,
+      "step": 112050
+    },
+    {
+      "epoch": 3.37,
+      "learning_rate": 6.264666666666666e-05,
+      "loss": 1.0138,
+      "step": 112100
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.263e-05,
+      "loss": 1.0181,
+      "step": 112150
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.261333333333334e-05,
+      "loss": 1.0084,
+      "step": 112200
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.259666666666668e-05,
+      "loss": 1.0159,
+      "step": 112250
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.258e-05,
+      "loss": 1.0206,
+      "step": 112300
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.256333333333334e-05,
+      "loss": 1.0034,
+      "step": 112350
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.254666666666666e-05,
+      "loss": 1.0105,
+      "step": 112400
+    },
+    {
+      "epoch": 3.38,
+      "learning_rate": 6.253e-05,
+      "loss": 1.0209,
+      "step": 112450
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.251333333333334e-05,
+      "loss": 1.008,
+      "step": 112500
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.249666666666667e-05,
+      "loss": 1.0058,
+      "step": 112550
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.248000000000001e-05,
+      "loss": 1.0229,
+      "step": 112600
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.246333333333334e-05,
+      "loss": 1.0047,
+      "step": 112650
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.244666666666666e-05,
+      "loss": 1.022,
+      "step": 112700
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.243e-05,
+      "loss": 1.0064,
+      "step": 112750
+    },
+    {
+      "epoch": 3.39,
+      "learning_rate": 6.241333333333333e-05,
+      "loss": 1.0059,
+      "step": 112800
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.239666666666667e-05,
+      "loss": 1.0081,
+      "step": 112850
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.238000000000001e-05,
+      "loss": 1.0055,
+      "step": 112900
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.236333333333335e-05,
+      "loss": 1.0063,
+      "step": 112950
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.234666666666667e-05,
+      "loss": 1.0008,
+      "step": 113000
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.233e-05,
+      "loss": 0.996,
+      "step": 113050
+    },
+    {
+      "epoch": 3.4,
+      "learning_rate": 6.231333333333333e-05,
+      "loss": 1.0169,
+      "step": 113100
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.229666666666667e-05,
+      "loss": 1.0002,
+      "step": 113150
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.228000000000001e-05,
+      "loss": 1.0196,
+      "step": 113200
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.226333333333334e-05,
+      "loss": 1.0142,
+      "step": 113250
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.224666666666667e-05,
+      "loss": 1.0274,
+      "step": 113300
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.223e-05,
+      "loss": 1.012,
+      "step": 113350
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.221333333333333e-05,
+      "loss": 1.014,
+      "step": 113400
+    },
+    {
+      "epoch": 3.41,
+      "learning_rate": 6.219666666666667e-05,
+      "loss": 1.0006,
+      "step": 113450
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.218e-05,
+      "loss": 1.0238,
+      "step": 113500
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.216333333333334e-05,
+      "loss": 1.0115,
+      "step": 113550
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.214666666666667e-05,
+      "loss": 1.0122,
+      "step": 113600
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.213e-05,
+      "loss": 1.0134,
+      "step": 113650
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.211333333333334e-05,
+      "loss": 1.0046,
+      "step": 113700
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.209666666666666e-05,
+      "loss": 1.0138,
+      "step": 113750
+    },
+    {
+      "epoch": 3.42,
+      "learning_rate": 6.208e-05,
+      "loss": 1.0017,
+      "step": 113800
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.206333333333334e-05,
+      "loss": 1.0258,
+      "step": 113850
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.204666666666668e-05,
+      "loss": 1.0151,
+      "step": 113900
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.203e-05,
+      "loss": 1.0172,
+      "step": 113950
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.201333333333334e-05,
+      "loss": 1.0017,
+      "step": 114000
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.199666666666668e-05,
+      "loss": 0.9849,
+      "step": 114050
+    },
+    {
+      "epoch": 3.43,
+      "learning_rate": 6.198e-05,
+      "loss": 1.0016,
+      "step": 114100
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.196333333333334e-05,
+      "loss": 1.0054,
+      "step": 114150
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.194666666666667e-05,
+      "loss": 1.017,
+      "step": 114200
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.193e-05,
+      "loss": 1.0194,
+      "step": 114250
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.191333333333334e-05,
+      "loss": 0.9953,
+      "step": 114300
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.189666666666667e-05,
+      "loss": 1.0108,
+      "step": 114350
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.188000000000001e-05,
+      "loss": 1.0087,
+      "step": 114400
+    },
+    {
+      "epoch": 3.44,
+      "learning_rate": 6.186333333333333e-05,
+      "loss": 1.0155,
+      "step": 114450
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.184666666666667e-05,
+      "loss": 1.0132,
+      "step": 114500
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.183e-05,
+      "loss": 1.0196,
+      "step": 114550
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.181333333333333e-05,
+      "loss": 0.996,
+      "step": 114600
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.179666666666667e-05,
+      "loss": 1.0187,
+      "step": 114650
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.178000000000001e-05,
+      "loss": 1.0144,
+      "step": 114700
+    },
+    {
+      "epoch": 3.45,
+      "learning_rate": 6.176333333333335e-05,
+      "loss": 1.0018,
+      "step": 114750
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.174666666666667e-05,
+      "loss": 1.0037,
+      "step": 114800
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.173e-05,
+      "loss": 1.016,
+      "step": 114850
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.171333333333333e-05,
+      "loss": 0.9923,
+      "step": 114900
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.169666666666667e-05,
+      "loss": 1.0091,
+      "step": 114950
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.168e-05,
+      "loss": 1.0044,
+      "step": 115000
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.166333333333334e-05,
+      "loss": 0.9931,
+      "step": 115050
+    },
+    {
+      "epoch": 3.46,
+      "learning_rate": 6.164666666666668e-05,
+      "loss": 0.999,
+      "step": 115100
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.163e-05,
+      "loss": 1.01,
+      "step": 115150
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.161333333333333e-05,
+      "loss": 0.9898,
+      "step": 115200
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.159666666666667e-05,
+      "loss": 1.01,
+      "step": 115250
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.158e-05,
+      "loss": 1.0061,
+      "step": 115300
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.156333333333334e-05,
+      "loss": 1.0044,
+      "step": 115350
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.154666666666668e-05,
+      "loss": 1.003,
+      "step": 115400
+    },
+    {
+      "epoch": 3.47,
+      "learning_rate": 6.153e-05,
+      "loss": 1.008,
+      "step": 115450
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.151333333333334e-05,
+      "loss": 1.0093,
+      "step": 115500
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.149666666666666e-05,
+      "loss": 1.0021,
+      "step": 115550
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.148e-05,
+      "loss": 0.9952,
+      "step": 115600
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.146333333333334e-05,
+      "loss": 0.9955,
+      "step": 115650
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.144666666666668e-05,
+      "loss": 1.009,
+      "step": 115700
+    },
+    {
+      "epoch": 3.48,
+      "learning_rate": 6.143e-05,
+      "loss": 0.9846,
+      "step": 115750
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.141333333333334e-05,
+      "loss": 1.0107,
+      "step": 115800
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.139666666666667e-05,
+      "loss": 0.9975,
+      "step": 115850
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.138e-05,
+      "loss": 0.9927,
+      "step": 115900
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.136333333333334e-05,
+      "loss": 1.0184,
+      "step": 115950
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.1347e-05,
+      "loss": 1.005,
+      "step": 116000
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.133033333333333e-05,
+      "loss": 1.0113,
+      "step": 116050
+    },
+    {
+      "epoch": 3.49,
+      "learning_rate": 6.131366666666667e-05,
+      "loss": 0.9861,
+      "step": 116100
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.1297e-05,
+      "loss": 0.9986,
+      "step": 116150
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.128066666666668e-05,
+      "loss": 0.9962,
+      "step": 116200
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.1264e-05,
+      "loss": 1.0001,
+      "step": 116250
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.124733333333334e-05,
+      "loss": 1.0095,
+      "step": 116300
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.123066666666666e-05,
+      "loss": 0.9982,
+      "step": 116350
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.1214e-05,
+      "loss": 1.0067,
+      "step": 116400
+    },
+    {
+      "epoch": 3.5,
+      "learning_rate": 6.119733333333334e-05,
+      "loss": 0.9958,
+      "step": 116450
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.118066666666668e-05,
+      "loss": 1.0049,
+      "step": 116500
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.1164e-05,
+      "loss": 0.9942,
+      "step": 116550
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.114733333333334e-05,
+      "loss": 1.0218,
+      "step": 116600
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.113066666666667e-05,
+      "loss": 1.0032,
+      "step": 116650
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.1114e-05,
+      "loss": 0.9971,
+      "step": 116700
+    },
+    {
+      "epoch": 3.51,
+      "learning_rate": 6.109733333333334e-05,
+      "loss": 0.9916,
+      "step": 116750
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.108066666666667e-05,
+      "loss": 0.9984,
+      "step": 116800
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.1064e-05,
+      "loss": 0.9934,
+      "step": 116850
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.104733333333333e-05,
+      "loss": 0.9862,
+      "step": 116900
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.103066666666667e-05,
+      "loss": 0.9947,
+      "step": 116950
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.1014e-05,
+      "loss": 1.0029,
+      "step": 117000
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.099733333333334e-05,
+      "loss": 1.0054,
+      "step": 117050
+    },
+    {
+      "epoch": 3.52,
+      "learning_rate": 6.098066666666668e-05,
+      "loss": 1.0029,
+      "step": 117100
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.0964e-05,
+      "loss": 1.0019,
+      "step": 117150
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.094733333333333e-05,
+      "loss": 0.9976,
+      "step": 117200
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.093066666666667e-05,
+      "loss": 0.9938,
+      "step": 117250
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.091400000000001e-05,
+      "loss": 0.9957,
+      "step": 117300
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.089733333333334e-05,
+      "loss": 0.988,
+      "step": 117350
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.0880666666666675e-05,
+      "loss": 0.9887,
+      "step": 117400
+    },
+    {
+      "epoch": 3.53,
+      "learning_rate": 6.0864e-05,
+      "loss": 0.9927,
+      "step": 117450
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.0847333333333336e-05,
+      "loss": 0.9919,
+      "step": 117500
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.083066666666667e-05,
+      "loss": 0.984,
+      "step": 117550
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.0814000000000004e-05,
+      "loss": 1.0116,
+      "step": 117600
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.079733333333334e-05,
+      "loss": 0.9902,
+      "step": 117650
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.078066666666667e-05,
+      "loss": 0.9816,
+      "step": 117700
+    },
+    {
+      "epoch": 3.54,
+      "learning_rate": 6.0763999999999996e-05,
+      "loss": 1.0024,
+      "step": 117750
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.0747333333333334e-05,
+      "loss": 1.0095,
+      "step": 117800
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.073066666666667e-05,
+      "loss": 0.9884,
+      "step": 117850
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.0714e-05,
+      "loss": 0.9962,
+      "step": 117900
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.069733333333334e-05,
+      "loss": 1.0,
+      "step": 117950
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.068066666666668e-05,
+      "loss": 0.9984,
+      "step": 118000
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.0664e-05,
+      "loss": 0.9965,
+      "step": 118050
+    },
+    {
+      "epoch": 3.55,
+      "learning_rate": 6.064733333333333e-05,
+      "loss": 0.9997,
+      "step": 118100
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.063066666666667e-05,
+      "loss": 1.0161,
+      "step": 118150
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.0614000000000006e-05,
+      "loss": 0.9998,
+      "step": 118200
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.059733333333334e-05,
+      "loss": 0.9913,
+      "step": 118250
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.0580666666666674e-05,
+      "loss": 0.9925,
+      "step": 118300
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.0564e-05,
+      "loss": 0.9927,
+      "step": 118350
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.0547333333333336e-05,
+      "loss": 0.9964,
+      "step": 118400
+    },
+    {
+      "epoch": 3.56,
+      "learning_rate": 6.0530666666666666e-05,
+      "loss": 0.9982,
+      "step": 118450
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.0514000000000004e-05,
+      "loss": 0.9921,
+      "step": 118500
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.049733333333334e-05,
+      "loss": 0.9989,
+      "step": 118550
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.048066666666667e-05,
+      "loss": 0.9843,
+      "step": 118600
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.0463999999999996e-05,
+      "loss": 0.9852,
+      "step": 118650
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.044733333333333e-05,
+      "loss": 0.9924,
+      "step": 118700
+    },
+    {
+      "epoch": 3.57,
+      "learning_rate": 6.043066666666667e-05,
+      "loss": 1.0048,
+      "step": 118750
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.0414e-05,
+      "loss": 0.9998,
+      "step": 118800
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.039733333333334e-05,
+      "loss": 0.9957,
+      "step": 118850
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.038133333333334e-05,
+      "loss": 0.9979,
+      "step": 118900
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.036466666666667e-05,
+      "loss": 0.9867,
+      "step": 118950
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.0348000000000006e-05,
+      "loss": 1.0011,
+      "step": 119000
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.033133333333334e-05,
+      "loss": 1.006,
+      "step": 119050
+    },
+    {
+      "epoch": 3.58,
+      "learning_rate": 6.0314666666666674e-05,
+      "loss": 0.9878,
+      "step": 119100
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.0298e-05,
+      "loss": 0.9833,
+      "step": 119150
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.0281333333333335e-05,
+      "loss": 0.9953,
+      "step": 119200
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.026466666666667e-05,
+      "loss": 0.9949,
+      "step": 119250
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.0248e-05,
+      "loss": 0.9921,
+      "step": 119300
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.023133333333334e-05,
+      "loss": 0.9996,
+      "step": 119350
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.021466666666668e-05,
+      "loss": 0.9987,
+      "step": 119400
+    },
+    {
+      "epoch": 3.59,
+      "learning_rate": 6.0198e-05,
+      "loss": 0.9966,
+      "step": 119450
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.018133333333333e-05,
+      "loss": 0.9939,
+      "step": 119500
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.016466666666667e-05,
+      "loss": 1.0008,
+      "step": 119550
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.014800000000001e-05,
+      "loss": 0.9866,
+      "step": 119600
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.013133333333334e-05,
+      "loss": 0.9992,
+      "step": 119650
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.0114666666666676e-05,
+      "loss": 0.9812,
+      "step": 119700
+    },
+    {
+      "epoch": 3.6,
+      "learning_rate": 6.0098333333333334e-05,
+      "loss": 0.9969,
+      "step": 119750
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 6.008166666666667e-05,
+      "loss": 1.005,
+      "step": 119800
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 6.0065e-05,
+      "loss": 0.9979,
+      "step": 119850
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 6.004833333333334e-05,
+      "loss": 1.0037,
+      "step": 119900
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 6.003166666666668e-05,
+      "loss": 0.9946,
+      "step": 119950
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 6.0015e-05,
+      "loss": 0.9859,
+      "step": 120000
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 5.999833333333333e-05,
+      "loss": 1.0028,
+      "step": 120050
+    },
+    {
+      "epoch": 3.61,
+      "learning_rate": 5.998166666666667e-05,
+      "loss": 0.9954,
+      "step": 120100
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.9965000000000006e-05,
+      "loss": 0.9982,
+      "step": 120150
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.994833333333334e-05,
+      "loss": 0.9828,
+      "step": 120200
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.9931666666666674e-05,
+      "loss": 0.9959,
+      "step": 120250
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.9915e-05,
+      "loss": 1.0052,
+      "step": 120300
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.9898333333333336e-05,
+      "loss": 0.9873,
+      "step": 120350
+    },
+    {
+      "epoch": 3.62,
+      "learning_rate": 5.9881666666666666e-05,
+      "loss": 0.9897,
+      "step": 120400
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.9865000000000004e-05,
+      "loss": 0.9909,
+      "step": 120450
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.984833333333334e-05,
+      "loss": 0.9792,
+      "step": 120500
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.983166666666667e-05,
+      "loss": 0.9852,
+      "step": 120550
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.9814999999999996e-05,
+      "loss": 0.9844,
+      "step": 120600
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.979833333333333e-05,
+      "loss": 0.9938,
+      "step": 120650
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.978166666666667e-05,
+      "loss": 0.9792,
+      "step": 120700
+    },
+    {
+      "epoch": 3.63,
+      "learning_rate": 5.9765e-05,
+      "loss": 0.9922,
+      "step": 120750
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.974833333333334e-05,
+      "loss": 0.9841,
+      "step": 120800
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.9731666666666676e-05,
+      "loss": 0.9858,
+      "step": 120850
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.9715e-05,
+      "loss": 0.9893,
+      "step": 120900
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.969833333333333e-05,
+      "loss": 0.9839,
+      "step": 120950
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.968166666666667e-05,
+      "loss": 0.9855,
+      "step": 121000
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.9665000000000006e-05,
+      "loss": 0.9984,
+      "step": 121050
+    },
+    {
+      "epoch": 3.64,
+      "learning_rate": 5.9648333333333336e-05,
+      "loss": 0.9838,
+      "step": 121100
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.9631666666666674e-05,
+      "loss": 0.9995,
+      "step": 121150
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.9615e-05,
+      "loss": 0.9836,
+      "step": 121200
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.9598333333333335e-05,
+      "loss": 0.9896,
+      "step": 121250
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.9581666666666666e-05,
+      "loss": 0.996,
+      "step": 121300
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.9565e-05,
+      "loss": 0.9899,
+      "step": 121350
+    },
+    {
+      "epoch": 3.65,
+      "learning_rate": 5.954833333333334e-05,
+      "loss": 0.9998,
+      "step": 121400
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.953166666666667e-05,
+      "loss": 0.9796,
+      "step": 121450
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.9514999999999995e-05,
+      "loss": 0.9782,
+      "step": 121500
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.949833333333333e-05,
+      "loss": 0.9713,
+      "step": 121550
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.948166666666667e-05,
+      "loss": 0.9803,
+      "step": 121600
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.9465e-05,
+      "loss": 0.9843,
+      "step": 121650
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.944833333333334e-05,
+      "loss": 0.9905,
+      "step": 121700
+    },
+    {
+      "epoch": 3.66,
+      "learning_rate": 5.9431666666666676e-05,
+      "loss": 0.9832,
+      "step": 121750
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.9415e-05,
+      "loss": 0.9952,
+      "step": 121800
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.939833333333334e-05,
+      "loss": 0.9972,
+      "step": 121850
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.938166666666667e-05,
+      "loss": 0.9871,
+      "step": 121900
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.9365000000000005e-05,
+      "loss": 0.9833,
+      "step": 121950
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.9348333333333336e-05,
+      "loss": 1.0027,
+      "step": 122000
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.933166666666667e-05,
+      "loss": 0.9847,
+      "step": 122050
+    },
+    {
+      "epoch": 3.67,
+      "learning_rate": 5.9315e-05,
+      "loss": 1.0024,
+      "step": 122100
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.9298333333333335e-05,
+      "loss": 0.9809,
+      "step": 122150
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.928166666666667e-05,
+      "loss": 0.9818,
+      "step": 122200
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.9265e-05,
+      "loss": 1.0109,
+      "step": 122250
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.924833333333334e-05,
+      "loss": 0.9848,
+      "step": 122300
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.923166666666668e-05,
+      "loss": 0.9815,
+      "step": 122350
+    },
+    {
+      "epoch": 3.68,
+      "learning_rate": 5.9215e-05,
+      "loss": 0.9965,
+      "step": 122400
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.919833333333333e-05,
+      "loss": 0.9931,
+      "step": 122450
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.918166666666667e-05,
+      "loss": 1.0008,
+      "step": 122500
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.916500000000001e-05,
+      "loss": 0.9877,
+      "step": 122550
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.914833333333334e-05,
+      "loss": 0.9679,
+      "step": 122600
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.9131666666666675e-05,
+      "loss": 0.9759,
+      "step": 122650
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.9115e-05,
+      "loss": 0.9776,
+      "step": 122700
+    },
+    {
+      "epoch": 3.69,
+      "learning_rate": 5.9098333333333336e-05,
+      "loss": 0.9834,
+      "step": 122750
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.908166666666667e-05,
+      "loss": 0.9798,
+      "step": 122800
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.9065000000000005e-05,
+      "loss": 0.9773,
+      "step": 122850
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.904833333333334e-05,
+      "loss": 0.9865,
+      "step": 122900
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.903166666666667e-05,
+      "loss": 0.9822,
+      "step": 122950
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.9014999999999997e-05,
+      "loss": 0.9783,
+      "step": 123000
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.8998333333333334e-05,
+      "loss": 0.976,
+      "step": 123050
+    },
+    {
+      "epoch": 3.7,
+      "learning_rate": 5.898166666666667e-05,
+      "loss": 0.9673,
+      "step": 123100
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.8965e-05,
+      "loss": 0.993,
+      "step": 123150
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.894833333333334e-05,
+      "loss": 0.9772,
+      "step": 123200
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.893166666666668e-05,
+      "loss": 0.9868,
+      "step": 123250
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.8915e-05,
+      "loss": 0.985,
+      "step": 123300
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.889833333333333e-05,
+      "loss": 0.9877,
+      "step": 123350
+    },
+    {
+      "epoch": 3.71,
+      "learning_rate": 5.888166666666667e-05,
+      "loss": 0.9687,
+      "step": 123400
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8865000000000006e-05,
+      "loss": 0.9818,
+      "step": 123450
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.884833333333334e-05,
+      "loss": 0.9804,
+      "step": 123500
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8831666666666675e-05,
+      "loss": 0.9987,
+      "step": 123550
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8815e-05,
+      "loss": 0.9847,
+      "step": 123600
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8798333333333336e-05,
+      "loss": 0.9892,
+      "step": 123650
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8781666666666667e-05,
+      "loss": 0.9748,
+      "step": 123700
+    },
+    {
+      "epoch": 3.72,
+      "learning_rate": 5.8765000000000004e-05,
+      "loss": 0.9956,
+      "step": 123750
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.874833333333334e-05,
+      "loss": 0.986,
+      "step": 123800
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.873166666666667e-05,
+      "loss": 0.9625,
+      "step": 123850
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.8714999999999996e-05,
+      "loss": 0.9834,
+      "step": 123900
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.8698333333333333e-05,
+      "loss": 0.9777,
+      "step": 123950
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.868166666666667e-05,
+      "loss": 0.9885,
+      "step": 124000
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.8665e-05,
+      "loss": 0.987,
+      "step": 124050
+    },
+    {
+      "epoch": 3.73,
+      "learning_rate": 5.864833333333334e-05,
+      "loss": 0.9786,
+      "step": 124100
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.8631666666666676e-05,
+      "loss": 0.9913,
+      "step": 124150
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.8615e-05,
+      "loss": 0.9774,
+      "step": 124200
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.859833333333333e-05,
+      "loss": 0.9885,
+      "step": 124250
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.858166666666667e-05,
+      "loss": 0.9771,
+      "step": 124300
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.8565000000000006e-05,
+      "loss": 0.9684,
+      "step": 124350
+    },
+    {
+      "epoch": 3.74,
+      "learning_rate": 5.8548333333333337e-05,
+      "loss": 0.9779,
+      "step": 124400
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.8531666666666674e-05,
+      "loss": 0.971,
+      "step": 124450
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.8515e-05,
+      "loss": 0.9885,
+      "step": 124500
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.8498333333333335e-05,
+      "loss": 0.9768,
+      "step": 124550
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.8481666666666666e-05,
+      "loss": 0.9823,
+      "step": 124600
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.8465000000000004e-05,
+      "loss": 0.9901,
+      "step": 124650
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.844833333333334e-05,
+      "loss": 0.975,
+      "step": 124700
+    },
+    {
+      "epoch": 3.75,
+      "learning_rate": 5.843166666666667e-05,
+      "loss": 0.9676,
+      "step": 124750
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.8414999999999996e-05,
+      "loss": 0.9805,
+      "step": 124800
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.839833333333333e-05,
+      "loss": 0.9723,
+      "step": 124850
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.838166666666667e-05,
+      "loss": 0.9868,
+      "step": 124900
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.8365e-05,
+      "loss": 0.9757,
+      "step": 124950
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.834833333333334e-05,
+      "loss": 0.98,
+      "step": 125000
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.8331666666666676e-05,
+      "loss": 0.9896,
+      "step": 125050
+    },
+    {
+      "epoch": 3.76,
+      "learning_rate": 5.8315e-05,
+      "loss": 0.9665,
+      "step": 125100
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.829833333333333e-05,
+      "loss": 0.9807,
+      "step": 125150
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.828166666666667e-05,
+      "loss": 0.9846,
+      "step": 125200
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.8265000000000005e-05,
+      "loss": 0.9713,
+      "step": 125250
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.8248333333333336e-05,
+      "loss": 0.9819,
+      "step": 125300
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.8231666666666674e-05,
+      "loss": 0.9785,
+      "step": 125350
+    },
+    {
+      "epoch": 3.77,
+      "learning_rate": 5.8215e-05,
+      "loss": 0.9853,
+      "step": 125400
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.8198333333333335e-05,
+      "loss": 0.9832,
+      "step": 125450
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.8181666666666666e-05,
+      "loss": 0.9671,
+      "step": 125500
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.8165e-05,
+      "loss": 0.9809,
+      "step": 125550
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.814833333333334e-05,
+      "loss": 0.9764,
+      "step": 125600
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.813166666666667e-05,
+      "loss": 0.9627,
+      "step": 125650
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.811500000000001e-05,
+      "loss": 0.9778,
+      "step": 125700
+    },
+    {
+      "epoch": 3.78,
+      "learning_rate": 5.809833333333333e-05,
+      "loss": 0.9752,
+      "step": 125750
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.808166666666667e-05,
+      "loss": 0.9666,
+      "step": 125800
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.8065e-05,
+      "loss": 0.975,
+      "step": 125850
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.804833333333334e-05,
+      "loss": 0.9687,
+      "step": 125900
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.8031666666666675e-05,
+      "loss": 0.9735,
+      "step": 125950
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.8015000000000006e-05,
+      "loss": 0.9803,
+      "step": 126000
+    },
+    {
+      "epoch": 3.79,
+      "learning_rate": 5.799833333333333e-05,
+      "loss": 0.9803,
+      "step": 126050
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.798166666666667e-05,
+      "loss": 0.9775,
+      "step": 126100
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.7965000000000005e-05,
+      "loss": 0.9759,
+      "step": 126150
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.7948333333333336e-05,
+      "loss": 0.9665,
+      "step": 126200
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.793166666666667e-05,
+      "loss": 0.9828,
+      "step": 126250
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.791500000000001e-05,
+      "loss": 0.9717,
+      "step": 126300
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.7898333333333334e-05,
+      "loss": 0.9689,
+      "step": 126350
+    },
+    {
+      "epoch": 3.8,
+      "learning_rate": 5.7881666666666665e-05,
+      "loss": 0.9736,
+      "step": 126400
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.7865e-05,
+      "loss": 0.9744,
+      "step": 126450
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.784833333333334e-05,
+      "loss": 0.9637,
+      "step": 126500
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.783166666666667e-05,
+      "loss": 0.9778,
+      "step": 126550
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.781500000000001e-05,
+      "loss": 0.9669,
+      "step": 126600
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.779833333333333e-05,
+      "loss": 0.975,
+      "step": 126650
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.778166666666667e-05,
+      "loss": 0.9973,
+      "step": 126700
+    },
+    {
+      "epoch": 3.81,
+      "learning_rate": 5.7765e-05,
+      "loss": 0.9894,
+      "step": 126750
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.774833333333334e-05,
+      "loss": 0.984,
+      "step": 126800
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.7731666666666675e-05,
+      "loss": 0.9742,
+      "step": 126850
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.7715000000000006e-05,
+      "loss": 0.9738,
+      "step": 126900
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.769833333333333e-05,
+      "loss": 0.9792,
+      "step": 126950
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.768166666666667e-05,
+      "loss": 0.9625,
+      "step": 127000
+    },
+    {
+      "epoch": 3.82,
+      "learning_rate": 5.7665000000000004e-05,
+      "loss": 0.9596,
+      "step": 127050
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.7648333333333335e-05,
+      "loss": 0.9662,
+      "step": 127100
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.763166666666667e-05,
+      "loss": 0.9644,
+      "step": 127150
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.761500000000001e-05,
+      "loss": 0.9755,
+      "step": 127200
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.7598333333333334e-05,
+      "loss": 0.9719,
+      "step": 127250
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.7581666666666665e-05,
+      "loss": 0.9566,
+      "step": 127300
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.7565e-05,
+      "loss": 0.9771,
+      "step": 127350
+    },
+    {
+      "epoch": 3.83,
+      "learning_rate": 5.754833333333334e-05,
+      "loss": 0.9589,
+      "step": 127400
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.753200000000001e-05,
+      "loss": 0.9759,
+      "step": 127450
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.7515333333333335e-05,
+      "loss": 0.9646,
+      "step": 127500
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.7498666666666665e-05,
+      "loss": 0.9696,
+      "step": 127550
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.7482e-05,
+      "loss": 0.9488,
+      "step": 127600
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.746533333333334e-05,
+      "loss": 0.9642,
+      "step": 127650
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.744866666666667e-05,
+      "loss": 0.9668,
+      "step": 127700
+    },
+    {
+      "epoch": 3.84,
+      "learning_rate": 5.743200000000001e-05,
+      "loss": 0.984,
+      "step": 127750
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.741533333333333e-05,
+      "loss": 0.9708,
+      "step": 127800
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.739866666666667e-05,
+      "loss": 0.9597,
+      "step": 127850
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.7382e-05,
+      "loss": 0.9756,
+      "step": 127900
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.736533333333334e-05,
+      "loss": 0.9724,
+      "step": 127950
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.7348666666666675e-05,
+      "loss": 0.9701,
+      "step": 128000
+    },
+    {
+      "epoch": 3.85,
+      "learning_rate": 5.7332000000000006e-05,
+      "loss": 0.9653,
+      "step": 128050
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.731533333333333e-05,
+      "loss": 0.9649,
+      "step": 128100
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.729866666666667e-05,
+      "loss": 0.958,
+      "step": 128150
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.7282000000000005e-05,
+      "loss": 0.9576,
+      "step": 128200
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.7265333333333336e-05,
+      "loss": 0.9748,
+      "step": 128250
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.724866666666667e-05,
+      "loss": 0.9624,
+      "step": 128300
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.723233333333333e-05,
+      "loss": 0.977,
+      "step": 128350
+    },
+    {
+      "epoch": 3.86,
+      "learning_rate": 5.721566666666667e-05,
+      "loss": 0.9756,
+      "step": 128400
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7199000000000006e-05,
+      "loss": 0.9697,
+      "step": 128450
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7182333333333336e-05,
+      "loss": 0.9651,
+      "step": 128500
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7165666666666674e-05,
+      "loss": 0.9694,
+      "step": 128550
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.714900000000001e-05,
+      "loss": 0.9717,
+      "step": 128600
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7132333333333335e-05,
+      "loss": 0.9676,
+      "step": 128650
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7115666666666666e-05,
+      "loss": 0.9788,
+      "step": 128700
+    },
+    {
+      "epoch": 3.87,
+      "learning_rate": 5.7099e-05,
+      "loss": 0.9546,
+      "step": 128750
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.708233333333334e-05,
+      "loss": 0.9671,
+      "step": 128800
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.706566666666667e-05,
+      "loss": 0.9517,
+      "step": 128850
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.704900000000001e-05,
+      "loss": 0.9602,
+      "step": 128900
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.703233333333333e-05,
+      "loss": 0.963,
+      "step": 128950
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.701566666666667e-05,
+      "loss": 0.9693,
+      "step": 129000
+    },
+    {
+      "epoch": 3.88,
+      "learning_rate": 5.6999e-05,
+      "loss": 0.9793,
+      "step": 129050
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.698233333333334e-05,
+      "loss": 0.9672,
+      "step": 129100
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.6965666666666676e-05,
+      "loss": 0.9621,
+      "step": 129150
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.6949000000000007e-05,
+      "loss": 0.9587,
+      "step": 129200
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.693233333333333e-05,
+      "loss": 0.9776,
+      "step": 129250
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.691566666666667e-05,
+      "loss": 0.9711,
+      "step": 129300
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.6899000000000005e-05,
+      "loss": 0.9563,
+      "step": 129350
+    },
+    {
+      "epoch": 3.89,
+      "learning_rate": 5.6882333333333336e-05,
+      "loss": 0.9689,
+      "step": 129400
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.6865666666666673e-05,
+      "loss": 0.9645,
+      "step": 129450
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.684900000000001e-05,
+      "loss": 0.9661,
+      "step": 129500
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.6832333333333335e-05,
+      "loss": 0.9605,
+      "step": 129550
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.6815666666666665e-05,
+      "loss": 0.9637,
+      "step": 129600
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.6799e-05,
+      "loss": 0.9535,
+      "step": 129650
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.678233333333334e-05,
+      "loss": 0.9593,
+      "step": 129700
+    },
+    {
+      "epoch": 3.9,
+      "learning_rate": 5.676566666666667e-05,
+      "loss": 0.966,
+      "step": 129750
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.674900000000001e-05,
+      "loss": 0.9593,
+      "step": 129800
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.673233333333333e-05,
+      "loss": 0.967,
+      "step": 129850
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.671566666666667e-05,
+      "loss": 0.9801,
+      "step": 129900
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.6699e-05,
+      "loss": 0.9614,
+      "step": 129950
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.668233333333334e-05,
+      "loss": 0.9695,
+      "step": 130000
+    },
+    {
+      "epoch": 3.91,
+      "learning_rate": 5.6665666666666675e-05,
+      "loss": 0.9697,
+      "step": 130050
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.6649000000000006e-05,
+      "loss": 0.9487,
+      "step": 130100
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.663233333333333e-05,
+      "loss": 0.961,
+      "step": 130150
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.661566666666667e-05,
+      "loss": 0.9606,
+      "step": 130200
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.6599000000000005e-05,
+      "loss": 0.953,
+      "step": 130250
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.6582333333333335e-05,
+      "loss": 0.9568,
+      "step": 130300
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.656566666666667e-05,
+      "loss": 0.9649,
+      "step": 130350
+    },
+    {
+      "epoch": 3.92,
+      "learning_rate": 5.654900000000001e-05,
+      "loss": 0.9727,
+      "step": 130400
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.6532333333333334e-05,
+      "loss": 0.9614,
+      "step": 130450
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.6515666666666665e-05,
+      "loss": 0.9599,
+      "step": 130500
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.6499e-05,
+      "loss": 0.967,
+      "step": 130550
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.648233333333334e-05,
+      "loss": 0.9667,
+      "step": 130600
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.646566666666667e-05,
+      "loss": 0.961,
+      "step": 130650
+    },
+    {
+      "epoch": 3.93,
+      "learning_rate": 5.644900000000001e-05,
+      "loss": 0.9646,
+      "step": 130700
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.643233333333333e-05,
+      "loss": 0.9568,
+      "step": 130750
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.641566666666667e-05,
+      "loss": 0.9746,
+      "step": 130800
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.6399e-05,
+      "loss": 0.9599,
+      "step": 130850
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.638233333333334e-05,
+      "loss": 0.9688,
+      "step": 130900
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.6365666666666675e-05,
+      "loss": 0.9504,
+      "step": 130950
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.6349000000000005e-05,
+      "loss": 0.9715,
+      "step": 131000
+    },
+    {
+      "epoch": 3.94,
+      "learning_rate": 5.633233333333333e-05,
+      "loss": 0.9486,
+      "step": 131050
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.631566666666667e-05,
+      "loss": 0.9692,
+      "step": 131100
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.6299000000000004e-05,
+      "loss": 0.9685,
+      "step": 131150
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.6282333333333335e-05,
+      "loss": 0.9631,
+      "step": 131200
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.626566666666667e-05,
+      "loss": 0.9588,
+      "step": 131250
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.624900000000001e-05,
+      "loss": 0.969,
+      "step": 131300
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.6232333333333334e-05,
+      "loss": 0.9629,
+      "step": 131350
+    },
+    {
+      "epoch": 3.95,
+      "learning_rate": 5.6215666666666664e-05,
+      "loss": 0.9577,
+      "step": 131400
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.6199e-05,
+      "loss": 0.9562,
+      "step": 131450
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.618233333333334e-05,
+      "loss": 0.95,
+      "step": 131500
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.616566666666667e-05,
+      "loss": 0.9599,
+      "step": 131550
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.614900000000001e-05,
+      "loss": 0.9655,
+      "step": 131600
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.613233333333333e-05,
+      "loss": 0.9585,
+      "step": 131650
+    },
+    {
+      "epoch": 3.96,
+      "learning_rate": 5.611566666666667e-05,
+      "loss": 0.9709,
+      "step": 131700
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.6099e-05,
+      "loss": 0.9671,
+      "step": 131750
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.608233333333334e-05,
+      "loss": 0.9645,
+      "step": 131800
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.6065666666666674e-05,
+      "loss": 0.9645,
+      "step": 131850
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.6049000000000005e-05,
+      "loss": 0.9612,
+      "step": 131900
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.603233333333333e-05,
+      "loss": 0.9613,
+      "step": 131950
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.6015666666666666e-05,
+      "loss": 0.9609,
+      "step": 132000
+    },
+    {
+      "epoch": 3.97,
+      "learning_rate": 5.5999000000000004e-05,
+      "loss": 0.9671,
+      "step": 132050
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.5982333333333334e-05,
+      "loss": 0.9746,
+      "step": 132100
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.596566666666667e-05,
+      "loss": 0.9633,
+      "step": 132150
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.594900000000001e-05,
+      "loss": 0.9521,
+      "step": 132200
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.593233333333333e-05,
+      "loss": 0.9526,
+      "step": 132250
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.5915666666666664e-05,
+      "loss": 0.9711,
+      "step": 132300
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.5899e-05,
+      "loss": 0.977,
+      "step": 132350
+    },
+    {
+      "epoch": 3.98,
+      "learning_rate": 5.588233333333334e-05,
+      "loss": 0.9582,
+      "step": 132400
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.586600000000001e-05,
+      "loss": 0.9653,
+      "step": 132450
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.5849333333333334e-05,
+      "loss": 0.9481,
+      "step": 132500
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.5832666666666665e-05,
+      "loss": 0.9659,
+      "step": 132550
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.5816e-05,
+      "loss": 0.9498,
+      "step": 132600
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.579933333333334e-05,
+      "loss": 0.9598,
+      "step": 132650
+    },
+    {
+      "epoch": 3.99,
+      "learning_rate": 5.578266666666667e-05,
+      "loss": 0.9534,
+      "step": 132700
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.576600000000001e-05,
+      "loss": 0.9633,
+      "step": 132750
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.574933333333333e-05,
+      "loss": 0.9589,
+      "step": 132800
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.573266666666667e-05,
+      "loss": 0.9697,
+      "step": 132850
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.5716e-05,
+      "loss": 0.958,
+      "step": 132900
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.569933333333334e-05,
+      "loss": 0.9646,
+      "step": 132950
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.5682666666666675e-05,
+      "loss": 0.9454,
+      "step": 133000
+    },
+    {
+      "epoch": 4.0,
+      "learning_rate": 5.5666000000000005e-05,
+      "loss": 0.9422,
+      "step": 133050
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.564933333333333e-05,
+      "loss": 0.9482,
+      "step": 133100
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.563266666666667e-05,
+      "loss": 0.9398,
+      "step": 133150
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.5616000000000004e-05,
+      "loss": 0.9399,
+      "step": 133200
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.5599333333333335e-05,
+      "loss": 0.949,
+      "step": 133250
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.558266666666667e-05,
+      "loss": 0.9523,
+      "step": 133300
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.556600000000001e-05,
+      "loss": 0.9477,
+      "step": 133350
+    },
+    {
+      "epoch": 4.01,
+      "learning_rate": 5.5549333333333334e-05,
+      "loss": 0.9352,
+      "step": 133400
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.5532666666666664e-05,
+      "loss": 0.9437,
+      "step": 133450
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.5516e-05,
+      "loss": 0.9529,
+      "step": 133500
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.549933333333334e-05,
+      "loss": 0.944,
+      "step": 133550
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.548266666666667e-05,
+      "loss": 0.9567,
+      "step": 133600
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.546600000000001e-05,
+      "loss": 0.9367,
+      "step": 133650
+    },
+    {
+      "epoch": 4.02,
+      "learning_rate": 5.544933333333333e-05,
+      "loss": 0.9386,
+      "step": 133700
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.543266666666667e-05,
+      "loss": 0.9474,
+      "step": 133750
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.5416e-05,
+      "loss": 0.9365,
+      "step": 133800
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.539933333333334e-05,
+      "loss": 0.9395,
+      "step": 133850
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.5382666666666674e-05,
+      "loss": 0.9419,
+      "step": 133900
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.5366000000000005e-05,
+      "loss": 0.9378,
+      "step": 133950
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.534933333333333e-05,
+      "loss": 0.9397,
+      "step": 134000
+    },
+    {
+      "epoch": 4.03,
+      "learning_rate": 5.5332666666666666e-05,
+      "loss": 0.9338,
+      "step": 134050
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.5316000000000004e-05,
+      "loss": 0.9518,
+      "step": 134100
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.5299333333333334e-05,
+      "loss": 0.934,
+      "step": 134150
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.528266666666667e-05,
+      "loss": 0.9307,
+      "step": 134200
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.526600000000001e-05,
+      "loss": 0.9499,
+      "step": 134250
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.524933333333333e-05,
+      "loss": 0.9425,
+      "step": 134300
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.5232666666666664e-05,
+      "loss": 0.9416,
+      "step": 134350
+    },
+    {
+      "epoch": 4.04,
+      "learning_rate": 5.5216e-05,
+      "loss": 0.9443,
+      "step": 134400
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.519933333333334e-05,
+      "loss": 0.9445,
+      "step": 134450
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.518266666666667e-05,
+      "loss": 0.9514,
+      "step": 134500
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.516600000000001e-05,
+      "loss": 0.9492,
+      "step": 134550
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.514933333333333e-05,
+      "loss": 0.9479,
+      "step": 134600
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.513266666666667e-05,
+      "loss": 0.9561,
+      "step": 134650
+    },
+    {
+      "epoch": 4.05,
+      "learning_rate": 5.5116e-05,
+      "loss": 0.9475,
+      "step": 134700
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.5099333333333336e-05,
+      "loss": 0.9446,
+      "step": 134750
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.5082666666666674e-05,
+      "loss": 0.9368,
+      "step": 134800
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.5066000000000004e-05,
+      "loss": 0.9467,
+      "step": 134850
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.504933333333333e-05,
+      "loss": 0.9476,
+      "step": 134900
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.5032666666666666e-05,
+      "loss": 0.9379,
+      "step": 134950
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.5016e-05,
+      "loss": 0.946,
+      "step": 135000
+    },
+    {
+      "epoch": 4.06,
+      "learning_rate": 5.4999333333333334e-05,
+      "loss": 0.9398,
+      "step": 135050
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.498266666666667e-05,
+      "loss": 0.9367,
+      "step": 135100
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.496600000000001e-05,
+      "loss": 0.9325,
+      "step": 135150
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.494933333333333e-05,
+      "loss": 0.9394,
+      "step": 135200
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.493266666666666e-05,
+      "loss": 0.9311,
+      "step": 135250
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.4916e-05,
+      "loss": 0.9456,
+      "step": 135300
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.489933333333334e-05,
+      "loss": 0.934,
+      "step": 135350
+    },
+    {
+      "epoch": 4.07,
+      "learning_rate": 5.488266666666667e-05,
+      "loss": 0.9442,
+      "step": 135400
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.4866000000000006e-05,
+      "loss": 0.9467,
+      "step": 135450
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.4849333333333344e-05,
+      "loss": 0.9352,
+      "step": 135500
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.483266666666667e-05,
+      "loss": 0.9485,
+      "step": 135550
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.4816e-05,
+      "loss": 0.9438,
+      "step": 135600
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.4799333333333336e-05,
+      "loss": 0.9467,
+      "step": 135650
+    },
+    {
+      "epoch": 4.08,
+      "learning_rate": 5.478266666666667e-05,
+      "loss": 0.9531,
+      "step": 135700
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.4766000000000004e-05,
+      "loss": 0.9467,
+      "step": 135750
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.474933333333334e-05,
+      "loss": 0.9414,
+      "step": 135800
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.4732666666666665e-05,
+      "loss": 0.9391,
+      "step": 135850
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.4716e-05,
+      "loss": 0.9362,
+      "step": 135900
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.469933333333333e-05,
+      "loss": 0.9405,
+      "step": 135950
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.468266666666667e-05,
+      "loss": 0.9369,
+      "step": 136000
+    },
+    {
+      "epoch": 4.09,
+      "learning_rate": 5.466600000000001e-05,
+      "loss": 0.9302,
+      "step": 136050
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.464933333333334e-05,
+      "loss": 0.9329,
+      "step": 136100
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.463266666666666e-05,
+      "loss": 0.9517,
+      "step": 136150
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.4616e-05,
+      "loss": 0.9402,
+      "step": 136200
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.459933333333334e-05,
+      "loss": 0.9183,
+      "step": 136250
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.458266666666667e-05,
+      "loss": 0.9444,
+      "step": 136300
+    },
+    {
+      "epoch": 4.1,
+      "learning_rate": 5.4566000000000006e-05,
+      "loss": 0.9531,
+      "step": 136350
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.454933333333334e-05,
+      "loss": 0.9256,
+      "step": 136400
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.453266666666667e-05,
+      "loss": 0.9336,
+      "step": 136450
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.451633333333334e-05,
+      "loss": 0.9475,
+      "step": 136500
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.449966666666667e-05,
+      "loss": 0.9381,
+      "step": 136550
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.448300000000001e-05,
+      "loss": 0.9441,
+      "step": 136600
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.4466333333333344e-05,
+      "loss": 0.9211,
+      "step": 136650
+    },
+    {
+      "epoch": 4.11,
+      "learning_rate": 5.444966666666667e-05,
+      "loss": 0.9421,
+      "step": 136700
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.443333333333333e-05,
+      "loss": 0.9352,
+      "step": 136750
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.441666666666667e-05,
+      "loss": 0.9323,
+      "step": 136800
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.440000000000001e-05,
+      "loss": 0.9336,
+      "step": 136850
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.438333333333333e-05,
+      "loss": 0.9379,
+      "step": 136900
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.436666666666667e-05,
+      "loss": 0.9333,
+      "step": 136950
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.435e-05,
+      "loss": 0.9323,
+      "step": 137000
+    },
+    {
+      "epoch": 4.12,
+      "learning_rate": 5.433333333333334e-05,
+      "loss": 0.93,
+      "step": 137050
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.4316666666666675e-05,
+      "loss": 0.9322,
+      "step": 137100
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.4300000000000005e-05,
+      "loss": 0.9474,
+      "step": 137150
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.428333333333333e-05,
+      "loss": 0.9325,
+      "step": 137200
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.4266666666666667e-05,
+      "loss": 0.9469,
+      "step": 137250
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.4250000000000004e-05,
+      "loss": 0.9282,
+      "step": 137300
+    },
+    {
+      "epoch": 4.13,
+      "learning_rate": 5.4233333333333335e-05,
+      "loss": 0.9316,
+      "step": 137350
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.421666666666667e-05,
+      "loss": 0.9373,
+      "step": 137400
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.420000000000001e-05,
+      "loss": 0.9334,
+      "step": 137450
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.4183333333333334e-05,
+      "loss": 0.9407,
+      "step": 137500
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.4166666666666664e-05,
+      "loss": 0.9263,
+      "step": 137550
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.415e-05,
+      "loss": 0.9287,
+      "step": 137600
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.413333333333334e-05,
+      "loss": 0.9369,
+      "step": 137650
+    },
+    {
+      "epoch": 4.14,
+      "learning_rate": 5.411666666666667e-05,
+      "loss": 0.9562,
+      "step": 137700
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.410000000000001e-05,
+      "loss": 0.9352,
+      "step": 137750
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.4083333333333345e-05,
+      "loss": 0.9404,
+      "step": 137800
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.406666666666667e-05,
+      "loss": 0.9425,
+      "step": 137850
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.405e-05,
+      "loss": 0.9319,
+      "step": 137900
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.403333333333334e-05,
+      "loss": 0.9452,
+      "step": 137950
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.4016666666666674e-05,
+      "loss": 0.9403,
+      "step": 138000
+    },
+    {
+      "epoch": 4.15,
+      "learning_rate": 5.4000000000000005e-05,
+      "loss": 0.9438,
+      "step": 138050
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.398333333333334e-05,
+      "loss": 0.9371,
+      "step": 138100
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.3966666666666666e-05,
+      "loss": 0.9392,
+      "step": 138150
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.3950000000000004e-05,
+      "loss": 0.9364,
+      "step": 138200
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.3933333333333334e-05,
+      "loss": 0.9357,
+      "step": 138250
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.391666666666667e-05,
+      "loss": 0.9352,
+      "step": 138300
+    },
+    {
+      "epoch": 4.16,
+      "learning_rate": 5.390000000000001e-05,
+      "loss": 0.9486,
+      "step": 138350
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.388333333333334e-05,
+      "loss": 0.9312,
+      "step": 138400
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.3866666666666664e-05,
+      "loss": 0.9352,
+      "step": 138450
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.385e-05,
+      "loss": 0.9273,
+      "step": 138500
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.383333333333334e-05,
+      "loss": 0.9252,
+      "step": 138550
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.381666666666667e-05,
+      "loss": 0.9349,
+      "step": 138600
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.380000000000001e-05,
+      "loss": 0.9318,
+      "step": 138650
+    },
+    {
+      "epoch": 4.17,
+      "learning_rate": 5.3783333333333344e-05,
+      "loss": 0.9313,
+      "step": 138700
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.376666666666667e-05,
+      "loss": 0.9308,
+      "step": 138750
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.375e-05,
+      "loss": 0.9337,
+      "step": 138800
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.3733333333333336e-05,
+      "loss": 0.9225,
+      "step": 138850
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.3716666666666674e-05,
+      "loss": 0.9379,
+      "step": 138900
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.3700000000000004e-05,
+      "loss": 0.9341,
+      "step": 138950
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.368333333333334e-05,
+      "loss": 0.9402,
+      "step": 139000
+    },
+    {
+      "epoch": 4.18,
+      "learning_rate": 5.3666666666666666e-05,
+      "loss": 0.9413,
+      "step": 139050
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.365033333333334e-05,
+      "loss": 0.9332,
+      "step": 139100
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.363366666666667e-05,
+      "loss": 0.9216,
+      "step": 139150
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.3617000000000005e-05,
+      "loss": 0.9516,
+      "step": 139200
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.360033333333334e-05,
+      "loss": 0.9312,
+      "step": 139250
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.3583666666666667e-05,
+      "loss": 0.9239,
+      "step": 139300
+    },
+    {
+      "epoch": 4.19,
+      "learning_rate": 5.3567e-05,
+      "loss": 0.9379,
+      "step": 139350
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.3550333333333335e-05,
+      "loss": 0.9222,
+      "step": 139400
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.353366666666667e-05,
+      "loss": 0.9377,
+      "step": 139450
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.3517e-05,
+      "loss": 0.9402,
+      "step": 139500
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.350033333333334e-05,
+      "loss": 0.9297,
+      "step": 139550
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.3483666666666664e-05,
+      "loss": 0.9379,
+      "step": 139600
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.3467e-05,
+      "loss": 0.9138,
+      "step": 139650
+    },
+    {
+      "epoch": 4.2,
+      "learning_rate": 5.345033333333333e-05,
+      "loss": 0.931,
+      "step": 139700
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.343366666666667e-05,
+      "loss": 0.9283,
+      "step": 139750
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.341700000000001e-05,
+      "loss": 0.9402,
+      "step": 139800
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.340033333333334e-05,
+      "loss": 0.9271,
+      "step": 139850
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.338366666666667e-05,
+      "loss": 0.9399,
+      "step": 139900
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.3367e-05,
+      "loss": 0.9301,
+      "step": 139950
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.3350333333333337e-05,
+      "loss": 0.9348,
+      "step": 140000
+    },
+    {
+      "epoch": 4.21,
+      "learning_rate": 5.3333666666666674e-05,
+      "loss": 0.9449,
+      "step": 140050
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.3317000000000005e-05,
+      "loss": 0.9455,
+      "step": 140100
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.330033333333334e-05,
+      "loss": 0.9266,
+      "step": 140150
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.3283666666666666e-05,
+      "loss": 0.9251,
+      "step": 140200
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.3267000000000003e-05,
+      "loss": 0.9371,
+      "step": 140250
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.3250333333333334e-05,
+      "loss": 0.9263,
+      "step": 140300
+    },
+    {
+      "epoch": 4.22,
+      "learning_rate": 5.323366666666667e-05,
+      "loss": 0.9322,
+      "step": 140350
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.321700000000001e-05,
+      "loss": 0.9338,
+      "step": 140400
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.320033333333334e-05,
+      "loss": 0.9322,
+      "step": 140450
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.3183666666666664e-05,
+      "loss": 0.9328,
+      "step": 140500
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.3167e-05,
+      "loss": 0.9259,
+      "step": 140550
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.315033333333334e-05,
+      "loss": 0.9281,
+      "step": 140600
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.313366666666667e-05,
+      "loss": 0.9166,
+      "step": 140650
+    },
+    {
+      "epoch": 4.23,
+      "learning_rate": 5.3117000000000007e-05,
+      "loss": 0.9291,
+      "step": 140700
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.3100333333333344e-05,
+      "loss": 0.9337,
+      "step": 140750
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.308366666666667e-05,
+      "loss": 0.9385,
+      "step": 140800
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.3067e-05,
+      "loss": 0.9244,
+      "step": 140850
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.3050333333333336e-05,
+      "loss": 0.9425,
+      "step": 140900
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.3033666666666674e-05,
+      "loss": 0.9237,
+      "step": 140950
+    },
+    {
+      "epoch": 4.24,
+      "learning_rate": 5.3017000000000004e-05,
+      "loss": 0.9312,
+      "step": 141000
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.300033333333334e-05,
+      "loss": 0.9456,
+      "step": 141050
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.2983666666666666e-05,
+      "loss": 0.9317,
+      "step": 141100
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.2967e-05,
+      "loss": 0.9464,
+      "step": 141150
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.2950333333333334e-05,
+      "loss": 0.9153,
+      "step": 141200
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.293366666666667e-05,
+      "loss": 0.9298,
+      "step": 141250
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.291733333333334e-05,
+      "loss": 0.9123,
+      "step": 141300
+    },
+    {
+      "epoch": 4.25,
+      "learning_rate": 5.2900666666666666e-05,
+      "loss": 0.9277,
+      "step": 141350
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.2884e-05,
+      "loss": 0.9393,
+      "step": 141400
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.2867333333333335e-05,
+      "loss": 0.9224,
+      "step": 141450
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.285066666666667e-05,
+      "loss": 0.9281,
+      "step": 141500
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.2834e-05,
+      "loss": 0.9141,
+      "step": 141550
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.281733333333334e-05,
+      "loss": 0.9232,
+      "step": 141600
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.2800666666666664e-05,
+      "loss": 0.9305,
+      "step": 141650
+    },
+    {
+      "epoch": 4.26,
+      "learning_rate": 5.2784e-05,
+      "loss": 0.9204,
+      "step": 141700
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.276733333333333e-05,
+      "loss": 0.9179,
+      "step": 141750
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.275066666666667e-05,
+      "loss": 0.9299,
+      "step": 141800
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.273400000000001e-05,
+      "loss": 0.9163,
+      "step": 141850
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.271733333333334e-05,
+      "loss": 0.927,
+      "step": 141900
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.270066666666666e-05,
+      "loss": 0.931,
+      "step": 141950
+    },
+    {
+      "epoch": 4.27,
+      "learning_rate": 5.2684e-05,
+      "loss": 0.9236,
+      "step": 142000
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.2667333333333337e-05,
+      "loss": 0.9211,
+      "step": 142050
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.265066666666667e-05,
+      "loss": 0.9275,
+      "step": 142100
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.2634000000000005e-05,
+      "loss": 0.9445,
+      "step": 142150
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.261733333333334e-05,
+      "loss": 0.9397,
+      "step": 142200
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.2600666666666666e-05,
+      "loss": 0.923,
+      "step": 142250
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.2584e-05,
+      "loss": 0.9321,
+      "step": 142300
+    },
+    {
+      "epoch": 4.28,
+      "learning_rate": 5.2567333333333334e-05,
+      "loss": 0.9342,
+      "step": 142350
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.255066666666667e-05,
+      "loss": 0.9269,
+      "step": 142400
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.2534e-05,
+      "loss": 0.9266,
+      "step": 142450
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.251733333333334e-05,
+      "loss": 0.934,
+      "step": 142500
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.2500666666666664e-05,
+      "loss": 0.9292,
+      "step": 142550
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.2484e-05,
+      "loss": 0.9263,
+      "step": 142600
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.246733333333333e-05,
+      "loss": 0.923,
+      "step": 142650
+    },
+    {
+      "epoch": 4.29,
+      "learning_rate": 5.245066666666667e-05,
+      "loss": 0.9424,
+      "step": 142700
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.2434000000000007e-05,
+      "loss": 0.927,
+      "step": 142750
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.241733333333334e-05,
+      "loss": 0.9128,
+      "step": 142800
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.240066666666667e-05,
+      "loss": 0.9295,
+      "step": 142850
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.2384e-05,
+      "loss": 0.9077,
+      "step": 142900
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.2367333333333336e-05,
+      "loss": 0.9316,
+      "step": 142950
+    },
+    {
+      "epoch": 4.3,
+      "learning_rate": 5.2350666666666673e-05,
+      "loss": 0.9382,
+      "step": 143000
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.2334000000000004e-05,
+      "loss": 0.9442,
+      "step": 143050
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.231733333333334e-05,
+      "loss": 0.9327,
+      "step": 143100
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.2300666666666665e-05,
+      "loss": 0.9134,
+      "step": 143150
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.2284e-05,
+      "loss": 0.9296,
+      "step": 143200
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.2267333333333334e-05,
+      "loss": 0.9282,
+      "step": 143250
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.225066666666667e-05,
+      "loss": 0.9174,
+      "step": 143300
+    },
+    {
+      "epoch": 4.31,
+      "learning_rate": 5.223400000000001e-05,
+      "loss": 0.9456,
+      "step": 143350
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.221733333333334e-05,
+      "loss": 0.9267,
+      "step": 143400
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.220066666666666e-05,
+      "loss": 0.9221,
+      "step": 143450
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.2184e-05,
+      "loss": 0.9089,
+      "step": 143500
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.216733333333334e-05,
+      "loss": 0.9237,
+      "step": 143550
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.215066666666667e-05,
+      "loss": 0.9201,
+      "step": 143600
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.2134000000000006e-05,
+      "loss": 0.9318,
+      "step": 143650
+    },
+    {
+      "epoch": 4.32,
+      "learning_rate": 5.2117333333333343e-05,
+      "loss": 0.9307,
+      "step": 143700
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.210066666666667e-05,
+      "loss": 0.9201,
+      "step": 143750
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.2084e-05,
+      "loss": 0.9169,
+      "step": 143800
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.206766666666667e-05,
+      "loss": 0.9244,
+      "step": 143850
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.205100000000001e-05,
+      "loss": 0.9234,
+      "step": 143900
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.203433333333334e-05,
+      "loss": 0.9178,
+      "step": 143950
+    },
+    {
+      "epoch": 4.33,
+      "learning_rate": 5.201766666666666e-05,
+      "loss": 0.9284,
+      "step": 144000
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.2001e-05,
+      "loss": 0.9283,
+      "step": 144050
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.1984333333333336e-05,
+      "loss": 0.9438,
+      "step": 144100
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.196766666666667e-05,
+      "loss": 0.9249,
+      "step": 144150
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.1951000000000005e-05,
+      "loss": 0.9212,
+      "step": 144200
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.193433333333334e-05,
+      "loss": 0.9197,
+      "step": 144250
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.1917666666666666e-05,
+      "loss": 0.919,
+      "step": 144300
+    },
+    {
+      "epoch": 4.34,
+      "learning_rate": 5.1900999999999997e-05,
+      "loss": 0.9269,
+      "step": 144350
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.188466666666667e-05,
+      "loss": 0.9266,
+      "step": 144400
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.1868000000000006e-05,
+      "loss": 0.9223,
+      "step": 144450
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.185133333333334e-05,
+      "loss": 0.9385,
+      "step": 144500
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.183466666666667e-05,
+      "loss": 0.928,
+      "step": 144550
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.1818e-05,
+      "loss": 0.9209,
+      "step": 144600
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.1801333333333335e-05,
+      "loss": 0.9212,
+      "step": 144650
+    },
+    {
+      "epoch": 4.35,
+      "learning_rate": 5.178466666666667e-05,
+      "loss": 0.931,
+      "step": 144700
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.1768e-05,
+      "loss": 0.9284,
+      "step": 144750
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.175133333333334e-05,
+      "loss": 0.9403,
+      "step": 144800
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.1734666666666664e-05,
+      "loss": 0.9309,
+      "step": 144850
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.1718e-05,
+      "loss": 0.94,
+      "step": 144900
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.170133333333333e-05,
+      "loss": 0.9206,
+      "step": 144950
+    },
+    {
+      "epoch": 4.36,
+      "learning_rate": 5.168466666666667e-05,
+      "loss": 0.9329,
+      "step": 145000
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.166800000000001e-05,
+      "loss": 0.9314,
+      "step": 145050
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.165133333333334e-05,
+      "loss": 0.922,
+      "step": 145100
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.163466666666666e-05,
+      "loss": 0.9273,
+      "step": 145150
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.1618e-05,
+      "loss": 0.9191,
+      "step": 145200
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.160133333333334e-05,
+      "loss": 0.9268,
+      "step": 145250
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.158466666666667e-05,
+      "loss": 0.919,
+      "step": 145300
+    },
+    {
+      "epoch": 4.37,
+      "learning_rate": 5.1568000000000005e-05,
+      "loss": 0.9216,
+      "step": 145350
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.155133333333334e-05,
+      "loss": 0.9304,
+      "step": 145400
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.1534666666666666e-05,
+      "loss": 0.9209,
+      "step": 145450
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.1518e-05,
+      "loss": 0.9308,
+      "step": 145500
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.1501333333333334e-05,
+      "loss": 0.9208,
+      "step": 145550
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.148466666666667e-05,
+      "loss": 0.9125,
+      "step": 145600
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.1468e-05,
+      "loss": 0.9398,
+      "step": 145650
+    },
+    {
+      "epoch": 4.38,
+      "learning_rate": 5.145133333333334e-05,
+      "loss": 0.9356,
+      "step": 145700
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.1434666666666664e-05,
+      "loss": 0.9234,
+      "step": 145750
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.1418e-05,
+      "loss": 0.9341,
+      "step": 145800
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.140133333333333e-05,
+      "loss": 0.9254,
+      "step": 145850
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.138466666666667e-05,
+      "loss": 0.9133,
+      "step": 145900
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.136800000000001e-05,
+      "loss": 0.9246,
+      "step": 145950
+    },
+    {
+      "epoch": 4.39,
+      "learning_rate": 5.135133333333334e-05,
+      "loss": 0.9257,
+      "step": 146000
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.133466666666666e-05,
+      "loss": 0.9249,
+      "step": 146050
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.1318e-05,
+      "loss": 0.9157,
+      "step": 146100
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.1301333333333336e-05,
+      "loss": 0.9337,
+      "step": 146150
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.128466666666667e-05,
+      "loss": 0.9153,
+      "step": 146200
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.1268000000000004e-05,
+      "loss": 0.9208,
+      "step": 146250
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.125133333333334e-05,
+      "loss": 0.9057,
+      "step": 146300
+    },
+    {
+      "epoch": 4.4,
+      "learning_rate": 5.1234666666666666e-05,
+      "loss": 0.9227,
+      "step": 146350
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.1217999999999996e-05,
+      "loss": 0.9235,
+      "step": 146400
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.1201333333333334e-05,
+      "loss": 0.9313,
+      "step": 146450
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.118466666666667e-05,
+      "loss": 0.915,
+      "step": 146500
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.1168e-05,
+      "loss": 0.9195,
+      "step": 146550
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.115133333333334e-05,
+      "loss": 0.9157,
+      "step": 146600
+    },
+    {
+      "epoch": 4.41,
+      "learning_rate": 5.1134666666666663e-05,
+      "loss": 0.925,
+      "step": 146650
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.1118e-05,
+      "loss": 0.9191,
+      "step": 146700
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.110133333333333e-05,
+      "loss": 0.9188,
+      "step": 146750
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.108466666666667e-05,
+      "loss": 0.9223,
+      "step": 146800
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.1068000000000006e-05,
+      "loss": 0.9198,
+      "step": 146850
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.105133333333334e-05,
+      "loss": 0.9147,
+      "step": 146900
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.103466666666666e-05,
+      "loss": 0.9355,
+      "step": 146950
+    },
+    {
+      "epoch": 4.42,
+      "learning_rate": 5.1018e-05,
+      "loss": 0.9283,
+      "step": 147000
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.1001333333333336e-05,
+      "loss": 0.9143,
+      "step": 147050
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.0984666666666667e-05,
+      "loss": 0.9136,
+      "step": 147100
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.0968000000000004e-05,
+      "loss": 0.9117,
+      "step": 147150
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.095133333333334e-05,
+      "loss": 0.9156,
+      "step": 147200
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.0934666666666665e-05,
+      "loss": 0.9254,
+      "step": 147250
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.0917999999999996e-05,
+      "loss": 0.9101,
+      "step": 147300
+    },
+    {
+      "epoch": 4.43,
+      "learning_rate": 5.0901333333333333e-05,
+      "loss": 0.9202,
+      "step": 147350
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.088466666666667e-05,
+      "loss": 0.9269,
+      "step": 147400
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.0868e-05,
+      "loss": 0.9242,
+      "step": 147450
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.085133333333334e-05,
+      "loss": 0.9313,
+      "step": 147500
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.083466666666666e-05,
+      "loss": 0.9133,
+      "step": 147550
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.0818e-05,
+      "loss": 0.9302,
+      "step": 147600
+    },
+    {
+      "epoch": 4.44,
+      "learning_rate": 5.080133333333333e-05,
+      "loss": 0.9149,
+      "step": 147650
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.078466666666667e-05,
+      "loss": 0.918,
+      "step": 147700
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.0768000000000006e-05,
+      "loss": 0.9176,
+      "step": 147750
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.0751333333333337e-05,
+      "loss": 0.9167,
+      "step": 147800
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.073466666666666e-05,
+      "loss": 0.9222,
+      "step": 147850
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.0718e-05,
+      "loss": 0.9204,
+      "step": 147900
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.0701333333333335e-05,
+      "loss": 0.9118,
+      "step": 147950
+    },
+    {
+      "epoch": 4.45,
+      "learning_rate": 5.0684666666666666e-05,
+      "loss": 0.9228,
+      "step": 148000
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.0668000000000003e-05,
+      "loss": 0.9167,
+      "step": 148050
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.065133333333334e-05,
+      "loss": 0.9202,
+      "step": 148100
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.0634666666666665e-05,
+      "loss": 0.9204,
+      "step": 148150
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.0617999999999995e-05,
+      "loss": 0.9173,
+      "step": 148200
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.060133333333333e-05,
+      "loss": 0.9198,
+      "step": 148250
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.058466666666667e-05,
+      "loss": 0.9146,
+      "step": 148300
+    },
+    {
+      "epoch": 4.46,
+      "learning_rate": 5.0568e-05,
+      "loss": 0.9174,
+      "step": 148350
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.055133333333334e-05,
+      "loss": 0.9115,
+      "step": 148400
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.0534666666666676e-05,
+      "loss": 0.9178,
+      "step": 148450
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.0518333333333334e-05,
+      "loss": 0.9064,
+      "step": 148500
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.050166666666667e-05,
+      "loss": 0.9267,
+      "step": 148550
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.0485e-05,
+      "loss": 0.9287,
+      "step": 148600
+    },
+    {
+      "epoch": 4.47,
+      "learning_rate": 5.046833333333334e-05,
+      "loss": 0.9064,
+      "step": 148650
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.045166666666666e-05,
+      "loss": 0.9152,
+      "step": 148700
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.0435e-05,
+      "loss": 0.9256,
+      "step": 148750
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.041833333333333e-05,
+      "loss": 0.9172,
+      "step": 148800
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.040166666666667e-05,
+      "loss": 0.9245,
+      "step": 148850
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.0385000000000006e-05,
+      "loss": 0.9216,
+      "step": 148900
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.036833333333334e-05,
+      "loss": 0.9164,
+      "step": 148950
+    },
+    {
+      "epoch": 4.48,
+      "learning_rate": 5.035166666666666e-05,
+      "loss": 0.8962,
+      "step": 149000
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0335e-05,
+      "loss": 0.9101,
+      "step": 149050
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0318333333333336e-05,
+      "loss": 0.9209,
+      "step": 149100
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0301666666666666e-05,
+      "loss": 0.914,
+      "step": 149150
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0285000000000004e-05,
+      "loss": 0.9167,
+      "step": 149200
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.026833333333334e-05,
+      "loss": 0.9187,
+      "step": 149250
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0251666666666665e-05,
+      "loss": 0.903,
+      "step": 149300
+    },
+    {
+      "epoch": 4.49,
+      "learning_rate": 5.0234999999999996e-05,
+      "loss": 0.9156,
+      "step": 149350
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.021833333333333e-05,
+      "loss": 0.928,
+      "step": 149400
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.020166666666667e-05,
+      "loss": 0.9167,
+      "step": 149450
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.0185e-05,
+      "loss": 0.9072,
+      "step": 149500
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.016833333333334e-05,
+      "loss": 0.9125,
+      "step": 149550
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.0151666666666676e-05,
+      "loss": 0.9092,
+      "step": 149600
+    },
+    {
+      "epoch": 4.5,
+      "learning_rate": 5.0135e-05,
+      "loss": 0.9165,
+      "step": 149650
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.011833333333333e-05,
+      "loss": 0.9163,
+      "step": 149700
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.010166666666667e-05,
+      "loss": 0.9131,
+      "step": 149750
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.0085000000000006e-05,
+      "loss": 0.9204,
+      "step": 149800
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.0068333333333336e-05,
+      "loss": 0.9299,
+      "step": 149850
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.0051666666666674e-05,
+      "loss": 0.9287,
+      "step": 149900
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.0035e-05,
+      "loss": 0.9129,
+      "step": 149950
+    },
+    {
+      "epoch": 4.51,
+      "learning_rate": 5.0018333333333335e-05,
+      "loss": 0.9185,
+      "step": 150000
+    }
+  ],
+  "max_steps": 300000,
+  "num_train_epochs": 10,
+  "total_flos": 1.55724036440064e+18,
+  "trial_name": null,
+  "trial_params": null
+}