vumichien commited on
Commit
c563ccb
1 Parent(s): cd09f98

End of training

Browse files
all_results.json ADDED
@@ -0,0 +1,13 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 35.01,
3
+ "eval_cer": 8.602199997371567,
4
+ "eval_loss": 0.42318904399871826,
5
+ "eval_runtime": 2082.3881,
6
+ "eval_samples_per_second": 2.211,
7
+ "eval_steps_per_second": 0.069,
8
+ "eval_wer": 13.467905405405405,
9
+ "train_loss": 0.05437950399313122,
10
+ "train_runtime": 68558.2482,
11
+ "train_samples_per_second": 4.668,
12
+ "train_steps_per_second": 0.073
13
+ }
eval_results.json ADDED
@@ -0,0 +1,9 @@
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 35.01,
3
+ "eval_cer": 8.602199997371567,
4
+ "eval_loss": 0.42318904399871826,
5
+ "eval_runtime": 2082.3881,
6
+ "eval_samples_per_second": 2.211,
7
+ "eval_steps_per_second": 0.069,
8
+ "eval_wer": 13.467905405405405
9
+ }
runs/Dec07_11-03-23_be573e32d063/events.out.tfevents.1670482467.be573e32d063.13940.2 ADDED
@@ -0,0 +1,3 @@
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:d6cb83029c53ce927e1e017f9c356b35c26eba4a6fb7e1d768f02c4138e34749
3
+ size 405
train_results.json ADDED
@@ -0,0 +1,7 @@
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 35.01,
3
+ "train_loss": 0.05437950399313122,
4
+ "train_runtime": 68558.2482,
5
+ "train_samples_per_second": 4.668,
6
+ "train_steps_per_second": 0.073
7
+ }
trainer_state.json ADDED
@@ -0,0 +1,1275 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "best_metric": 13.467905405405405,
3
+ "best_model_checkpoint": "./checkpoint-4000",
4
+ "epoch": 35.013,
5
+ "global_step": 5000,
6
+ "is_hyper_param_search": false,
7
+ "is_local_process_zero": true,
8
+ "is_world_process_zero": true,
9
+ "log_history": [
10
+ {
11
+ "epoch": 0.01,
12
+ "learning_rate": 4.4e-07,
13
+ "loss": 1.9274,
14
+ "step": 25
15
+ },
16
+ {
17
+ "epoch": 0.01,
18
+ "learning_rate": 9.400000000000001e-07,
19
+ "loss": 1.3911,
20
+ "step": 50
21
+ },
22
+ {
23
+ "epoch": 0.01,
24
+ "learning_rate": 1.44e-06,
25
+ "loss": 0.9517,
26
+ "step": 75
27
+ },
28
+ {
29
+ "epoch": 0.02,
30
+ "learning_rate": 1.94e-06,
31
+ "loss": 0.7936,
32
+ "step": 100
33
+ },
34
+ {
35
+ "epoch": 0.03,
36
+ "learning_rate": 2.4400000000000004e-06,
37
+ "loss": 0.5844,
38
+ "step": 125
39
+ },
40
+ {
41
+ "epoch": 1.0,
42
+ "learning_rate": 2.9400000000000002e-06,
43
+ "loss": 0.4746,
44
+ "step": 150
45
+ },
46
+ {
47
+ "epoch": 1.01,
48
+ "learning_rate": 3.44e-06,
49
+ "loss": 0.3596,
50
+ "step": 175
51
+ },
52
+ {
53
+ "epoch": 1.01,
54
+ "learning_rate": 3.94e-06,
55
+ "loss": 0.3042,
56
+ "step": 200
57
+ },
58
+ {
59
+ "epoch": 1.02,
60
+ "learning_rate": 4.440000000000001e-06,
61
+ "loss": 0.3491,
62
+ "step": 225
63
+ },
64
+ {
65
+ "epoch": 1.02,
66
+ "learning_rate": 4.94e-06,
67
+ "loss": 0.3651,
68
+ "step": 250
69
+ },
70
+ {
71
+ "epoch": 1.03,
72
+ "learning_rate": 5.4400000000000004e-06,
73
+ "loss": 0.2814,
74
+ "step": 275
75
+ },
76
+ {
77
+ "epoch": 2.0,
78
+ "learning_rate": 5.94e-06,
79
+ "loss": 0.2445,
80
+ "step": 300
81
+ },
82
+ {
83
+ "epoch": 2.01,
84
+ "learning_rate": 6.440000000000001e-06,
85
+ "loss": 0.1973,
86
+ "step": 325
87
+ },
88
+ {
89
+ "epoch": 2.01,
90
+ "learning_rate": 6.9400000000000005e-06,
91
+ "loss": 0.2002,
92
+ "step": 350
93
+ },
94
+ {
95
+ "epoch": 2.02,
96
+ "learning_rate": 7.440000000000001e-06,
97
+ "loss": 0.2419,
98
+ "step": 375
99
+ },
100
+ {
101
+ "epoch": 2.02,
102
+ "learning_rate": 7.94e-06,
103
+ "loss": 0.207,
104
+ "step": 400
105
+ },
106
+ {
107
+ "epoch": 3.0,
108
+ "learning_rate": 8.44e-06,
109
+ "loss": 0.1727,
110
+ "step": 425
111
+ },
112
+ {
113
+ "epoch": 3.01,
114
+ "learning_rate": 8.94e-06,
115
+ "loss": 0.1393,
116
+ "step": 450
117
+ },
118
+ {
119
+ "epoch": 3.01,
120
+ "learning_rate": 9.440000000000001e-06,
121
+ "loss": 0.1144,
122
+ "step": 475
123
+ },
124
+ {
125
+ "epoch": 3.02,
126
+ "learning_rate": 9.940000000000001e-06,
127
+ "loss": 0.1448,
128
+ "step": 500
129
+ },
130
+ {
131
+ "epoch": 3.02,
132
+ "learning_rate": 9.951111111111111e-06,
133
+ "loss": 0.1509,
134
+ "step": 525
135
+ },
136
+ {
137
+ "epoch": 3.03,
138
+ "learning_rate": 9.895555555555557e-06,
139
+ "loss": 0.1178,
140
+ "step": 550
141
+ },
142
+ {
143
+ "epoch": 4.0,
144
+ "learning_rate": 9.84e-06,
145
+ "loss": 0.1004,
146
+ "step": 575
147
+ },
148
+ {
149
+ "epoch": 4.01,
150
+ "learning_rate": 9.784444444444445e-06,
151
+ "loss": 0.0754,
152
+ "step": 600
153
+ },
154
+ {
155
+ "epoch": 4.01,
156
+ "learning_rate": 9.72888888888889e-06,
157
+ "loss": 0.0685,
158
+ "step": 625
159
+ },
160
+ {
161
+ "epoch": 4.02,
162
+ "learning_rate": 9.673333333333334e-06,
163
+ "loss": 0.085,
164
+ "step": 650
165
+ },
166
+ {
167
+ "epoch": 4.02,
168
+ "learning_rate": 9.617777777777778e-06,
169
+ "loss": 0.0822,
170
+ "step": 675
171
+ },
172
+ {
173
+ "epoch": 4.03,
174
+ "learning_rate": 9.562222222222223e-06,
175
+ "loss": 0.0601,
176
+ "step": 700
177
+ },
178
+ {
179
+ "epoch": 5.0,
180
+ "learning_rate": 9.506666666666667e-06,
181
+ "loss": 0.0511,
182
+ "step": 725
183
+ },
184
+ {
185
+ "epoch": 5.01,
186
+ "learning_rate": 9.451111111111112e-06,
187
+ "loss": 0.0369,
188
+ "step": 750
189
+ },
190
+ {
191
+ "epoch": 5.01,
192
+ "learning_rate": 9.395555555555556e-06,
193
+ "loss": 0.0415,
194
+ "step": 775
195
+ },
196
+ {
197
+ "epoch": 5.02,
198
+ "learning_rate": 9.340000000000002e-06,
199
+ "loss": 0.0472,
200
+ "step": 800
201
+ },
202
+ {
203
+ "epoch": 5.02,
204
+ "learning_rate": 9.284444444444444e-06,
205
+ "loss": 0.039,
206
+ "step": 825
207
+ },
208
+ {
209
+ "epoch": 6.0,
210
+ "learning_rate": 9.22888888888889e-06,
211
+ "loss": 0.0313,
212
+ "step": 850
213
+ },
214
+ {
215
+ "epoch": 6.01,
216
+ "learning_rate": 9.173333333333334e-06,
217
+ "loss": 0.0231,
218
+ "step": 875
219
+ },
220
+ {
221
+ "epoch": 6.01,
222
+ "learning_rate": 9.117777777777778e-06,
223
+ "loss": 0.018,
224
+ "step": 900
225
+ },
226
+ {
227
+ "epoch": 6.02,
228
+ "learning_rate": 9.062222222222224e-06,
229
+ "loss": 0.0238,
230
+ "step": 925
231
+ },
232
+ {
233
+ "epoch": 6.02,
234
+ "learning_rate": 9.006666666666666e-06,
235
+ "loss": 0.0259,
236
+ "step": 950
237
+ },
238
+ {
239
+ "epoch": 6.03,
240
+ "learning_rate": 8.951111111111112e-06,
241
+ "loss": 0.0195,
242
+ "step": 975
243
+ },
244
+ {
245
+ "epoch": 7.0,
246
+ "learning_rate": 8.895555555555556e-06,
247
+ "loss": 0.0167,
248
+ "step": 1000
249
+ },
250
+ {
251
+ "epoch": 7.0,
252
+ "eval_cer": 8.573287248163384,
253
+ "eval_loss": 0.3065800666809082,
254
+ "eval_runtime": 2083.1946,
255
+ "eval_samples_per_second": 2.21,
256
+ "eval_steps_per_second": 0.069,
257
+ "eval_wer": 13.673986486486486,
258
+ "step": 1000
259
+ },
260
+ {
261
+ "epoch": 7.01,
262
+ "learning_rate": 8.84e-06,
263
+ "loss": 0.0121,
264
+ "step": 1025
265
+ },
266
+ {
267
+ "epoch": 7.01,
268
+ "learning_rate": 8.784444444444446e-06,
269
+ "loss": 0.0107,
270
+ "step": 1050
271
+ },
272
+ {
273
+ "epoch": 7.02,
274
+ "learning_rate": 8.72888888888889e-06,
275
+ "loss": 0.0152,
276
+ "step": 1075
277
+ },
278
+ {
279
+ "epoch": 7.02,
280
+ "learning_rate": 8.673333333333334e-06,
281
+ "loss": 0.0151,
282
+ "step": 1100
283
+ },
284
+ {
285
+ "epoch": 7.03,
286
+ "learning_rate": 8.617777777777778e-06,
287
+ "loss": 0.0109,
288
+ "step": 1125
289
+ },
290
+ {
291
+ "epoch": 8.0,
292
+ "learning_rate": 8.562222222222224e-06,
293
+ "loss": 0.0091,
294
+ "step": 1150
295
+ },
296
+ {
297
+ "epoch": 8.01,
298
+ "learning_rate": 8.506666666666668e-06,
299
+ "loss": 0.0065,
300
+ "step": 1175
301
+ },
302
+ {
303
+ "epoch": 8.01,
304
+ "learning_rate": 8.451111111111112e-06,
305
+ "loss": 0.0089,
306
+ "step": 1200
307
+ },
308
+ {
309
+ "epoch": 8.02,
310
+ "learning_rate": 8.395555555555557e-06,
311
+ "loss": 0.0106,
312
+ "step": 1225
313
+ },
314
+ {
315
+ "epoch": 8.02,
316
+ "learning_rate": 8.34e-06,
317
+ "loss": 0.0085,
318
+ "step": 1250
319
+ },
320
+ {
321
+ "epoch": 9.0,
322
+ "learning_rate": 8.284444444444446e-06,
323
+ "loss": 0.0071,
324
+ "step": 1275
325
+ },
326
+ {
327
+ "epoch": 9.01,
328
+ "learning_rate": 8.22888888888889e-06,
329
+ "loss": 0.0056,
330
+ "step": 1300
331
+ },
332
+ {
333
+ "epoch": 9.01,
334
+ "learning_rate": 8.173333333333334e-06,
335
+ "loss": 0.0046,
336
+ "step": 1325
337
+ },
338
+ {
339
+ "epoch": 9.02,
340
+ "learning_rate": 8.11777777777778e-06,
341
+ "loss": 0.0079,
342
+ "step": 1350
343
+ },
344
+ {
345
+ "epoch": 9.02,
346
+ "learning_rate": 8.062222222222222e-06,
347
+ "loss": 0.0074,
348
+ "step": 1375
349
+ },
350
+ {
351
+ "epoch": 9.03,
352
+ "learning_rate": 8.006666666666667e-06,
353
+ "loss": 0.0061,
354
+ "step": 1400
355
+ },
356
+ {
357
+ "epoch": 10.0,
358
+ "learning_rate": 7.951111111111111e-06,
359
+ "loss": 0.0043,
360
+ "step": 1425
361
+ },
362
+ {
363
+ "epoch": 10.01,
364
+ "learning_rate": 7.895555555555557e-06,
365
+ "loss": 0.0037,
366
+ "step": 1450
367
+ },
368
+ {
369
+ "epoch": 10.01,
370
+ "learning_rate": 7.840000000000001e-06,
371
+ "loss": 0.0039,
372
+ "step": 1475
373
+ },
374
+ {
375
+ "epoch": 10.02,
376
+ "learning_rate": 7.784444444444445e-06,
377
+ "loss": 0.005,
378
+ "step": 1500
379
+ },
380
+ {
381
+ "epoch": 10.02,
382
+ "learning_rate": 7.72888888888889e-06,
383
+ "loss": 0.0046,
384
+ "step": 1525
385
+ },
386
+ {
387
+ "epoch": 10.03,
388
+ "learning_rate": 7.673333333333333e-06,
389
+ "loss": 0.0038,
390
+ "step": 1550
391
+ },
392
+ {
393
+ "epoch": 11.0,
394
+ "learning_rate": 7.617777777777778e-06,
395
+ "loss": 0.0037,
396
+ "step": 1575
397
+ },
398
+ {
399
+ "epoch": 11.01,
400
+ "learning_rate": 7.562222222222223e-06,
401
+ "loss": 0.0033,
402
+ "step": 1600
403
+ },
404
+ {
405
+ "epoch": 11.01,
406
+ "learning_rate": 7.506666666666668e-06,
407
+ "loss": 0.0035,
408
+ "step": 1625
409
+ },
410
+ {
411
+ "epoch": 11.02,
412
+ "learning_rate": 7.451111111111111e-06,
413
+ "loss": 0.0038,
414
+ "step": 1650
415
+ },
416
+ {
417
+ "epoch": 11.02,
418
+ "learning_rate": 7.395555555555556e-06,
419
+ "loss": 0.0035,
420
+ "step": 1675
421
+ },
422
+ {
423
+ "epoch": 12.0,
424
+ "learning_rate": 7.340000000000001e-06,
425
+ "loss": 0.0031,
426
+ "step": 1700
427
+ },
428
+ {
429
+ "epoch": 12.01,
430
+ "learning_rate": 7.284444444444445e-06,
431
+ "loss": 0.0026,
432
+ "step": 1725
433
+ },
434
+ {
435
+ "epoch": 12.01,
436
+ "learning_rate": 7.22888888888889e-06,
437
+ "loss": 0.0027,
438
+ "step": 1750
439
+ },
440
+ {
441
+ "epoch": 12.02,
442
+ "learning_rate": 7.173333333333335e-06,
443
+ "loss": 0.003,
444
+ "step": 1775
445
+ },
446
+ {
447
+ "epoch": 12.02,
448
+ "learning_rate": 7.117777777777778e-06,
449
+ "loss": 0.0032,
450
+ "step": 1800
451
+ },
452
+ {
453
+ "epoch": 12.03,
454
+ "learning_rate": 7.062222222222223e-06,
455
+ "loss": 0.0033,
456
+ "step": 1825
457
+ },
458
+ {
459
+ "epoch": 13.0,
460
+ "learning_rate": 7.006666666666667e-06,
461
+ "loss": 0.0023,
462
+ "step": 1850
463
+ },
464
+ {
465
+ "epoch": 13.01,
466
+ "learning_rate": 6.951111111111112e-06,
467
+ "loss": 0.0022,
468
+ "step": 1875
469
+ },
470
+ {
471
+ "epoch": 13.01,
472
+ "learning_rate": 6.8955555555555565e-06,
473
+ "loss": 0.0023,
474
+ "step": 1900
475
+ },
476
+ {
477
+ "epoch": 13.02,
478
+ "learning_rate": 6.8400000000000014e-06,
479
+ "loss": 0.0034,
480
+ "step": 1925
481
+ },
482
+ {
483
+ "epoch": 13.02,
484
+ "learning_rate": 6.784444444444445e-06,
485
+ "loss": 0.0027,
486
+ "step": 1950
487
+ },
488
+ {
489
+ "epoch": 14.0,
490
+ "learning_rate": 6.7288888888888895e-06,
491
+ "loss": 0.0022,
492
+ "step": 1975
493
+ },
494
+ {
495
+ "epoch": 14.01,
496
+ "learning_rate": 6.6733333333333335e-06,
497
+ "loss": 0.0021,
498
+ "step": 2000
499
+ },
500
+ {
501
+ "epoch": 14.01,
502
+ "eval_cer": 8.781590464049625,
503
+ "eval_loss": 0.35786405205726624,
504
+ "eval_runtime": 2102.0317,
505
+ "eval_samples_per_second": 2.19,
506
+ "eval_steps_per_second": 0.069,
507
+ "eval_wer": 13.87331081081081,
508
+ "step": 2000
509
+ },
510
+ {
511
+ "epoch": 14.01,
512
+ "learning_rate": 6.617777777777778e-06,
513
+ "loss": 0.0019,
514
+ "step": 2025
515
+ },
516
+ {
517
+ "epoch": 14.02,
518
+ "learning_rate": 6.562222222222223e-06,
519
+ "loss": 0.0022,
520
+ "step": 2050
521
+ },
522
+ {
523
+ "epoch": 14.02,
524
+ "learning_rate": 6.5066666666666665e-06,
525
+ "loss": 0.002,
526
+ "step": 2075
527
+ },
528
+ {
529
+ "epoch": 14.03,
530
+ "learning_rate": 6.451111111111111e-06,
531
+ "loss": 0.0024,
532
+ "step": 2100
533
+ },
534
+ {
535
+ "epoch": 15.0,
536
+ "learning_rate": 6.395555555555556e-06,
537
+ "loss": 0.0018,
538
+ "step": 2125
539
+ },
540
+ {
541
+ "epoch": 15.01,
542
+ "learning_rate": 6.34e-06,
543
+ "loss": 0.0017,
544
+ "step": 2150
545
+ },
546
+ {
547
+ "epoch": 15.01,
548
+ "learning_rate": 6.284444444444445e-06,
549
+ "loss": 0.002,
550
+ "step": 2175
551
+ },
552
+ {
553
+ "epoch": 15.02,
554
+ "learning_rate": 6.22888888888889e-06,
555
+ "loss": 0.0018,
556
+ "step": 2200
557
+ },
558
+ {
559
+ "epoch": 15.02,
560
+ "learning_rate": 6.173333333333333e-06,
561
+ "loss": 0.0019,
562
+ "step": 2225
563
+ },
564
+ {
565
+ "epoch": 15.03,
566
+ "learning_rate": 6.117777777777778e-06,
567
+ "loss": 0.002,
568
+ "step": 2250
569
+ },
570
+ {
571
+ "epoch": 16.0,
572
+ "learning_rate": 6.062222222222223e-06,
573
+ "loss": 0.0014,
574
+ "step": 2275
575
+ },
576
+ {
577
+ "epoch": 16.01,
578
+ "learning_rate": 6.006666666666667e-06,
579
+ "loss": 0.0012,
580
+ "step": 2300
581
+ },
582
+ {
583
+ "epoch": 16.01,
584
+ "learning_rate": 5.951111111111112e-06,
585
+ "loss": 0.0013,
586
+ "step": 2325
587
+ },
588
+ {
589
+ "epoch": 16.02,
590
+ "learning_rate": 5.895555555555557e-06,
591
+ "loss": 0.0019,
592
+ "step": 2350
593
+ },
594
+ {
595
+ "epoch": 16.02,
596
+ "learning_rate": 5.84e-06,
597
+ "loss": 0.0014,
598
+ "step": 2375
599
+ },
600
+ {
601
+ "epoch": 17.0,
602
+ "learning_rate": 5.784444444444445e-06,
603
+ "loss": 0.0014,
604
+ "step": 2400
605
+ },
606
+ {
607
+ "epoch": 17.01,
608
+ "learning_rate": 5.72888888888889e-06,
609
+ "loss": 0.001,
610
+ "step": 2425
611
+ },
612
+ {
613
+ "epoch": 17.01,
614
+ "learning_rate": 5.673333333333334e-06,
615
+ "loss": 0.0009,
616
+ "step": 2450
617
+ },
618
+ {
619
+ "epoch": 17.02,
620
+ "learning_rate": 5.617777777777779e-06,
621
+ "loss": 0.0013,
622
+ "step": 2475
623
+ },
624
+ {
625
+ "epoch": 17.02,
626
+ "learning_rate": 5.562222222222222e-06,
627
+ "loss": 0.0015,
628
+ "step": 2500
629
+ },
630
+ {
631
+ "epoch": 17.03,
632
+ "learning_rate": 5.506666666666667e-06,
633
+ "loss": 0.0012,
634
+ "step": 2525
635
+ },
636
+ {
637
+ "epoch": 18.0,
638
+ "learning_rate": 5.451111111111112e-06,
639
+ "loss": 0.001,
640
+ "step": 2550
641
+ },
642
+ {
643
+ "epoch": 18.01,
644
+ "learning_rate": 5.3955555555555565e-06,
645
+ "loss": 0.0008,
646
+ "step": 2575
647
+ },
648
+ {
649
+ "epoch": 18.01,
650
+ "learning_rate": 5.3400000000000005e-06,
651
+ "loss": 0.0009,
652
+ "step": 2600
653
+ },
654
+ {
655
+ "epoch": 18.02,
656
+ "learning_rate": 5.2844444444444454e-06,
657
+ "loss": 0.001,
658
+ "step": 2625
659
+ },
660
+ {
661
+ "epoch": 18.02,
662
+ "learning_rate": 5.228888888888889e-06,
663
+ "loss": 0.0011,
664
+ "step": 2650
665
+ },
666
+ {
667
+ "epoch": 18.03,
668
+ "learning_rate": 5.1733333333333335e-06,
669
+ "loss": 0.0009,
670
+ "step": 2675
671
+ },
672
+ {
673
+ "epoch": 19.0,
674
+ "learning_rate": 5.117777777777778e-06,
675
+ "loss": 0.0008,
676
+ "step": 2700
677
+ },
678
+ {
679
+ "epoch": 19.01,
680
+ "learning_rate": 5.062222222222222e-06,
681
+ "loss": 0.0007,
682
+ "step": 2725
683
+ },
684
+ {
685
+ "epoch": 19.01,
686
+ "learning_rate": 5.006666666666667e-06,
687
+ "loss": 0.0009,
688
+ "step": 2750
689
+ },
690
+ {
691
+ "epoch": 19.02,
692
+ "learning_rate": 4.951111111111111e-06,
693
+ "loss": 0.001,
694
+ "step": 2775
695
+ },
696
+ {
697
+ "epoch": 19.02,
698
+ "learning_rate": 4.895555555555556e-06,
699
+ "loss": 0.0009,
700
+ "step": 2800
701
+ },
702
+ {
703
+ "epoch": 20.0,
704
+ "learning_rate": 4.84e-06,
705
+ "loss": 0.0008,
706
+ "step": 2825
707
+ },
708
+ {
709
+ "epoch": 20.01,
710
+ "learning_rate": 4.784444444444445e-06,
711
+ "loss": 0.0007,
712
+ "step": 2850
713
+ },
714
+ {
715
+ "epoch": 20.01,
716
+ "learning_rate": 4.728888888888889e-06,
717
+ "loss": 0.0006,
718
+ "step": 2875
719
+ },
720
+ {
721
+ "epoch": 20.02,
722
+ "learning_rate": 4.673333333333333e-06,
723
+ "loss": 0.001,
724
+ "step": 2900
725
+ },
726
+ {
727
+ "epoch": 20.02,
728
+ "learning_rate": 4.617777777777778e-06,
729
+ "loss": 0.0009,
730
+ "step": 2925
731
+ },
732
+ {
733
+ "epoch": 20.03,
734
+ "learning_rate": 4.562222222222222e-06,
735
+ "loss": 0.0008,
736
+ "step": 2950
737
+ },
738
+ {
739
+ "epoch": 21.0,
740
+ "learning_rate": 4.506666666666667e-06,
741
+ "loss": 0.0007,
742
+ "step": 2975
743
+ },
744
+ {
745
+ "epoch": 21.01,
746
+ "learning_rate": 4.451111111111112e-06,
747
+ "loss": 0.0006,
748
+ "step": 3000
749
+ },
750
+ {
751
+ "epoch": 21.01,
752
+ "eval_cer": 8.61731347991221,
753
+ "eval_loss": 0.4025404453277588,
754
+ "eval_runtime": 2078.2382,
755
+ "eval_samples_per_second": 2.215,
756
+ "eval_steps_per_second": 0.069,
757
+ "eval_wer": 13.579391891891893,
758
+ "step": 3000
759
+ },
760
+ {
761
+ "epoch": 21.01,
762
+ "learning_rate": 4.395555555555556e-06,
763
+ "loss": 0.0007,
764
+ "step": 3025
765
+ },
766
+ {
767
+ "epoch": 21.02,
768
+ "learning_rate": 4.34e-06,
769
+ "loss": 0.001,
770
+ "step": 3050
771
+ },
772
+ {
773
+ "epoch": 21.02,
774
+ "learning_rate": 4.284444444444445e-06,
775
+ "loss": 0.0008,
776
+ "step": 3075
777
+ },
778
+ {
779
+ "epoch": 21.03,
780
+ "learning_rate": 4.228888888888889e-06,
781
+ "loss": 0.0007,
782
+ "step": 3100
783
+ },
784
+ {
785
+ "epoch": 22.0,
786
+ "learning_rate": 4.173333333333334e-06,
787
+ "loss": 0.0006,
788
+ "step": 3125
789
+ },
790
+ {
791
+ "epoch": 22.01,
792
+ "learning_rate": 4.117777777777779e-06,
793
+ "loss": 0.0006,
794
+ "step": 3150
795
+ },
796
+ {
797
+ "epoch": 22.01,
798
+ "learning_rate": 4.062222222222223e-06,
799
+ "loss": 0.0008,
800
+ "step": 3175
801
+ },
802
+ {
803
+ "epoch": 22.02,
804
+ "learning_rate": 4.006666666666667e-06,
805
+ "loss": 0.0008,
806
+ "step": 3200
807
+ },
808
+ {
809
+ "epoch": 22.02,
810
+ "learning_rate": 3.951111111111112e-06,
811
+ "loss": 0.0007,
812
+ "step": 3225
813
+ },
814
+ {
815
+ "epoch": 23.0,
816
+ "learning_rate": 3.895555555555556e-06,
817
+ "loss": 0.0006,
818
+ "step": 3250
819
+ },
820
+ {
821
+ "epoch": 23.01,
822
+ "learning_rate": 3.8400000000000005e-06,
823
+ "loss": 0.0005,
824
+ "step": 3275
825
+ },
826
+ {
827
+ "epoch": 23.01,
828
+ "learning_rate": 3.784444444444445e-06,
829
+ "loss": 0.0006,
830
+ "step": 3300
831
+ },
832
+ {
833
+ "epoch": 23.02,
834
+ "learning_rate": 3.728888888888889e-06,
835
+ "loss": 0.0006,
836
+ "step": 3325
837
+ },
838
+ {
839
+ "epoch": 23.02,
840
+ "learning_rate": 3.673333333333334e-06,
841
+ "loss": 0.0007,
842
+ "step": 3350
843
+ },
844
+ {
845
+ "epoch": 23.03,
846
+ "learning_rate": 3.617777777777778e-06,
847
+ "loss": 0.0006,
848
+ "step": 3375
849
+ },
850
+ {
851
+ "epoch": 24.0,
852
+ "learning_rate": 3.5622222222222224e-06,
853
+ "loss": 0.0006,
854
+ "step": 3400
855
+ },
856
+ {
857
+ "epoch": 24.01,
858
+ "learning_rate": 3.5066666666666673e-06,
859
+ "loss": 0.0005,
860
+ "step": 3425
861
+ },
862
+ {
863
+ "epoch": 24.01,
864
+ "learning_rate": 3.4511111111111113e-06,
865
+ "loss": 0.0007,
866
+ "step": 3450
867
+ },
868
+ {
869
+ "epoch": 24.02,
870
+ "learning_rate": 3.3955555555555558e-06,
871
+ "loss": 0.0007,
872
+ "step": 3475
873
+ },
874
+ {
875
+ "epoch": 24.02,
876
+ "learning_rate": 3.3400000000000006e-06,
877
+ "loss": 0.0007,
878
+ "step": 3500
879
+ },
880
+ {
881
+ "epoch": 24.03,
882
+ "learning_rate": 3.2844444444444447e-06,
883
+ "loss": 0.0006,
884
+ "step": 3525
885
+ },
886
+ {
887
+ "epoch": 25.0,
888
+ "learning_rate": 3.228888888888889e-06,
889
+ "loss": 0.0005,
890
+ "step": 3550
891
+ },
892
+ {
893
+ "epoch": 25.01,
894
+ "learning_rate": 3.173333333333334e-06,
895
+ "loss": 0.0005,
896
+ "step": 3575
897
+ },
898
+ {
899
+ "epoch": 25.02,
900
+ "learning_rate": 3.117777777777778e-06,
901
+ "loss": 0.0009,
902
+ "step": 3600
903
+ },
904
+ {
905
+ "epoch": 25.02,
906
+ "learning_rate": 3.0622222222222225e-06,
907
+ "loss": 0.0007,
908
+ "step": 3625
909
+ },
910
+ {
911
+ "epoch": 25.02,
912
+ "learning_rate": 3.0066666666666674e-06,
913
+ "loss": 0.0006,
914
+ "step": 3650
915
+ },
916
+ {
917
+ "epoch": 26.0,
918
+ "learning_rate": 2.9511111111111114e-06,
919
+ "loss": 0.0005,
920
+ "step": 3675
921
+ },
922
+ {
923
+ "epoch": 26.01,
924
+ "learning_rate": 2.895555555555556e-06,
925
+ "loss": 0.0005,
926
+ "step": 3700
927
+ },
928
+ {
929
+ "epoch": 26.01,
930
+ "learning_rate": 2.84e-06,
931
+ "loss": 0.0008,
932
+ "step": 3725
933
+ },
934
+ {
935
+ "epoch": 26.02,
936
+ "learning_rate": 2.784444444444445e-06,
937
+ "loss": 0.0006,
938
+ "step": 3750
939
+ },
940
+ {
941
+ "epoch": 26.02,
942
+ "learning_rate": 2.7288888888888893e-06,
943
+ "loss": 0.0006,
944
+ "step": 3775
945
+ },
946
+ {
947
+ "epoch": 26.03,
948
+ "learning_rate": 2.6733333333333333e-06,
949
+ "loss": 0.0006,
950
+ "step": 3800
951
+ },
952
+ {
953
+ "epoch": 27.0,
954
+ "learning_rate": 2.617777777777778e-06,
955
+ "loss": 0.0005,
956
+ "step": 3825
957
+ },
958
+ {
959
+ "epoch": 27.01,
960
+ "learning_rate": 2.5622222222222226e-06,
961
+ "loss": 0.0004,
962
+ "step": 3850
963
+ },
964
+ {
965
+ "epoch": 27.01,
966
+ "learning_rate": 2.5066666666666667e-06,
967
+ "loss": 0.0005,
968
+ "step": 3875
969
+ },
970
+ {
971
+ "epoch": 27.02,
972
+ "learning_rate": 2.451111111111111e-06,
973
+ "loss": 0.0006,
974
+ "step": 3900
975
+ },
976
+ {
977
+ "epoch": 27.02,
978
+ "learning_rate": 2.3955555555555556e-06,
979
+ "loss": 0.0006,
980
+ "step": 3925
981
+ },
982
+ {
983
+ "epoch": 28.0,
984
+ "learning_rate": 2.3400000000000005e-06,
985
+ "loss": 0.0005,
986
+ "step": 3950
987
+ },
988
+ {
989
+ "epoch": 28.01,
990
+ "learning_rate": 2.2844444444444445e-06,
991
+ "loss": 0.0004,
992
+ "step": 3975
993
+ },
994
+ {
995
+ "epoch": 28.01,
996
+ "learning_rate": 2.228888888888889e-06,
997
+ "loss": 0.0004,
998
+ "step": 4000
999
+ },
1000
+ {
1001
+ "epoch": 28.01,
1002
+ "eval_cer": 8.602199997371567,
1003
+ "eval_loss": 0.42318904399871826,
1004
+ "eval_runtime": 2080.3231,
1005
+ "eval_samples_per_second": 2.213,
1006
+ "eval_steps_per_second": 0.069,
1007
+ "eval_wer": 13.467905405405405,
1008
+ "step": 4000
1009
+ },
1010
+ {
1011
+ "epoch": 28.02,
1012
+ "learning_rate": 2.1733333333333334e-06,
1013
+ "loss": 0.0005,
1014
+ "step": 4025
1015
+ },
1016
+ {
1017
+ "epoch": 28.02,
1018
+ "learning_rate": 2.117777777777778e-06,
1019
+ "loss": 0.0006,
1020
+ "step": 4050
1021
+ },
1022
+ {
1023
+ "epoch": 28.03,
1024
+ "learning_rate": 2.0622222222222223e-06,
1025
+ "loss": 0.0005,
1026
+ "step": 4075
1027
+ },
1028
+ {
1029
+ "epoch": 29.0,
1030
+ "learning_rate": 2.006666666666667e-06,
1031
+ "loss": 0.0005,
1032
+ "step": 4100
1033
+ },
1034
+ {
1035
+ "epoch": 29.01,
1036
+ "learning_rate": 1.9511111111111113e-06,
1037
+ "loss": 0.0004,
1038
+ "step": 4125
1039
+ },
1040
+ {
1041
+ "epoch": 29.01,
1042
+ "learning_rate": 1.8955555555555557e-06,
1043
+ "loss": 0.0004,
1044
+ "step": 4150
1045
+ },
1046
+ {
1047
+ "epoch": 29.02,
1048
+ "learning_rate": 1.8400000000000002e-06,
1049
+ "loss": 0.0006,
1050
+ "step": 4175
1051
+ },
1052
+ {
1053
+ "epoch": 29.02,
1054
+ "learning_rate": 1.7844444444444444e-06,
1055
+ "loss": 0.0005,
1056
+ "step": 4200
1057
+ },
1058
+ {
1059
+ "epoch": 29.03,
1060
+ "learning_rate": 1.728888888888889e-06,
1061
+ "loss": 0.0005,
1062
+ "step": 4225
1063
+ },
1064
+ {
1065
+ "epoch": 30.0,
1066
+ "learning_rate": 1.6733333333333335e-06,
1067
+ "loss": 0.0004,
1068
+ "step": 4250
1069
+ },
1070
+ {
1071
+ "epoch": 30.01,
1072
+ "learning_rate": 1.6177777777777778e-06,
1073
+ "loss": 0.0004,
1074
+ "step": 4275
1075
+ },
1076
+ {
1077
+ "epoch": 30.01,
1078
+ "learning_rate": 1.5622222222222225e-06,
1079
+ "loss": 0.0005,
1080
+ "step": 4300
1081
+ },
1082
+ {
1083
+ "epoch": 30.02,
1084
+ "learning_rate": 1.506666666666667e-06,
1085
+ "loss": 0.0005,
1086
+ "step": 4325
1087
+ },
1088
+ {
1089
+ "epoch": 30.02,
1090
+ "learning_rate": 1.4511111111111112e-06,
1091
+ "loss": 0.0005,
1092
+ "step": 4350
1093
+ },
1094
+ {
1095
+ "epoch": 31.0,
1096
+ "learning_rate": 1.3955555555555556e-06,
1097
+ "loss": 0.0004,
1098
+ "step": 4375
1099
+ },
1100
+ {
1101
+ "epoch": 31.01,
1102
+ "learning_rate": 1.34e-06,
1103
+ "loss": 0.0004,
1104
+ "step": 4400
1105
+ },
1106
+ {
1107
+ "epoch": 31.01,
1108
+ "learning_rate": 1.2844444444444445e-06,
1109
+ "loss": 0.0004,
1110
+ "step": 4425
1111
+ },
1112
+ {
1113
+ "epoch": 31.02,
1114
+ "learning_rate": 1.228888888888889e-06,
1115
+ "loss": 0.0005,
1116
+ "step": 4450
1117
+ },
1118
+ {
1119
+ "epoch": 31.02,
1120
+ "learning_rate": 1.1733333333333335e-06,
1121
+ "loss": 0.0005,
1122
+ "step": 4475
1123
+ },
1124
+ {
1125
+ "epoch": 31.03,
1126
+ "learning_rate": 1.117777777777778e-06,
1127
+ "loss": 0.0005,
1128
+ "step": 4500
1129
+ },
1130
+ {
1131
+ "epoch": 32.0,
1132
+ "learning_rate": 1.0622222222222222e-06,
1133
+ "loss": 0.0004,
1134
+ "step": 4525
1135
+ },
1136
+ {
1137
+ "epoch": 32.01,
1138
+ "learning_rate": 1.0066666666666668e-06,
1139
+ "loss": 0.0004,
1140
+ "step": 4550
1141
+ },
1142
+ {
1143
+ "epoch": 32.01,
1144
+ "learning_rate": 9.511111111111111e-07,
1145
+ "loss": 0.0004,
1146
+ "step": 4575
1147
+ },
1148
+ {
1149
+ "epoch": 32.02,
1150
+ "learning_rate": 8.955555555555557e-07,
1151
+ "loss": 0.0005,
1152
+ "step": 4600
1153
+ },
1154
+ {
1155
+ "epoch": 32.02,
1156
+ "learning_rate": 8.400000000000001e-07,
1157
+ "loss": 0.0005,
1158
+ "step": 4625
1159
+ },
1160
+ {
1161
+ "epoch": 32.03,
1162
+ "learning_rate": 7.844444444444445e-07,
1163
+ "loss": 0.0004,
1164
+ "step": 4650
1165
+ },
1166
+ {
1167
+ "epoch": 33.0,
1168
+ "learning_rate": 7.28888888888889e-07,
1169
+ "loss": 0.0004,
1170
+ "step": 4675
1171
+ },
1172
+ {
1173
+ "epoch": 33.01,
1174
+ "learning_rate": 6.733333333333334e-07,
1175
+ "loss": 0.0004,
1176
+ "step": 4700
1177
+ },
1178
+ {
1179
+ "epoch": 33.01,
1180
+ "learning_rate": 6.177777777777778e-07,
1181
+ "loss": 0.0004,
1182
+ "step": 4725
1183
+ },
1184
+ {
1185
+ "epoch": 33.02,
1186
+ "learning_rate": 5.622222222222223e-07,
1187
+ "loss": 0.0005,
1188
+ "step": 4750
1189
+ },
1190
+ {
1191
+ "epoch": 33.02,
1192
+ "learning_rate": 5.066666666666667e-07,
1193
+ "loss": 0.0004,
1194
+ "step": 4775
1195
+ },
1196
+ {
1197
+ "epoch": 34.0,
1198
+ "learning_rate": 4.511111111111111e-07,
1199
+ "loss": 0.0004,
1200
+ "step": 4800
1201
+ },
1202
+ {
1203
+ "epoch": 34.01,
1204
+ "learning_rate": 3.9555555555555557e-07,
1205
+ "loss": 0.0004,
1206
+ "step": 4825
1207
+ },
1208
+ {
1209
+ "epoch": 34.01,
1210
+ "learning_rate": 3.4000000000000003e-07,
1211
+ "loss": 0.0004,
1212
+ "step": 4850
1213
+ },
1214
+ {
1215
+ "epoch": 34.02,
1216
+ "learning_rate": 2.844444444444445e-07,
1217
+ "loss": 0.0004,
1218
+ "step": 4875
1219
+ },
1220
+ {
1221
+ "epoch": 34.02,
1222
+ "learning_rate": 2.2888888888888892e-07,
1223
+ "loss": 0.0005,
1224
+ "step": 4900
1225
+ },
1226
+ {
1227
+ "epoch": 34.03,
1228
+ "learning_rate": 1.7333333333333335e-07,
1229
+ "loss": 0.0004,
1230
+ "step": 4925
1231
+ },
1232
+ {
1233
+ "epoch": 35.0,
1234
+ "learning_rate": 1.1777777777777778e-07,
1235
+ "loss": 0.0004,
1236
+ "step": 4950
1237
+ },
1238
+ {
1239
+ "epoch": 35.01,
1240
+ "learning_rate": 6.222222222222223e-08,
1241
+ "loss": 0.0003,
1242
+ "step": 4975
1243
+ },
1244
+ {
1245
+ "epoch": 35.01,
1246
+ "learning_rate": 6.666666666666667e-09,
1247
+ "loss": 0.0004,
1248
+ "step": 5000
1249
+ },
1250
+ {
1251
+ "epoch": 35.01,
1252
+ "eval_cer": 8.621256127531508,
1253
+ "eval_loss": 0.4318770468235016,
1254
+ "eval_runtime": 2083.1303,
1255
+ "eval_samples_per_second": 2.21,
1256
+ "eval_steps_per_second": 0.069,
1257
+ "eval_wer": 13.474662162162163,
1258
+ "step": 5000
1259
+ },
1260
+ {
1261
+ "epoch": 35.01,
1262
+ "step": 5000,
1263
+ "total_flos": 9.18019016957952e+19,
1264
+ "train_loss": 0.05437950399313122,
1265
+ "train_runtime": 68558.2482,
1266
+ "train_samples_per_second": 4.668,
1267
+ "train_steps_per_second": 0.073
1268
+ }
1269
+ ],
1270
+ "max_steps": 5000,
1271
+ "num_train_epochs": 9223372036854775807,
1272
+ "total_flos": 9.18019016957952e+19,
1273
+ "trial_name": null,
1274
+ "trial_params": null
1275
+ }