jondurbin commited on
Commit
867b017
1 Parent(s): 1d8ca34

Upload folder using huggingface_hub

Browse files
config.json CHANGED
@@ -1,5 +1,5 @@
1
  {
2
- "_name_or_path": "/workspace/airoboros-uncensored-13b",
3
  "architectures": [
4
  "LlamaForCausalLM"
5
  ],
1
  {
2
+ "_name_or_path": "/workspace/llama-13b",
3
  "architectures": [
4
  "LlamaForCausalLM"
5
  ],
pytorch_model-00001-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:39a2a1d61ccb8bfc83ec95c692ed8044a7c6e0e4e0c9c2f3fa69a45903c6a10a
3
  size 9956543883
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:d54aae549953530da18657d292a4346ba773083f2bcb70cbbf0e721d1dd1beda
3
  size 9956543883
pytorch_model-00002-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:85522380b06b94e1ed8b969b671aea2d6da22e7bff2b02cb3ee1b6cdf99cc4d6
3
  size 9940856385
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:e25a2bb1593cbfec2f5a56e6988c091e3e2562f968be472a91db49377140ebc2
3
  size 9940856385
pytorch_model-00003-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:8ee5ba0e5e4423c7ccd20f392e4c89c40be8f421ef802a023e7a8197745a650c
3
  size 9940856943
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:1251c97ec47a92e1f343c23a2b502a2b77a8a159fbb9b71faa918cc718edec4e
3
  size 9940856943
pytorch_model-00004-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:054257127ba7f20f6e29cd80e50e1c6fbea783a4a03a66172a902734ee8482d9
3
  size 9867415289
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:b88b3720ef1bcd1750f5a9c013a740bcf3e8b56f8e1664ca3dc82dc265302ac4
3
  size 9867415289
pytorch_model-00005-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:0e759e2293df2a5a27d967c0a0dcc2d8f0ad382cf946c41d2643a6633f3d3497
3
  size 9867456961
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:867b5ede76b1565c71aa1fb5e8b20194cb6d876f9895f72953a72eb7e0ea323b
3
  size 9867456961
pytorch_model-00006-of-00006.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:8d056b40f5e4303e9f51c0bef698ea23a3111ad1672bcd1413691097759e6978
3
  size 2490476207
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:ca30e4e4f63316dfc1a214c984e362a688d0bcac67574149dbbf54999da26275
3
  size 2490476207
trainer_state.json CHANGED
@@ -1,241 +1,2335 @@
1
  {
2
  "best_metric": null,
3
  "best_model_checkpoint": null,
4
- "epoch": 1.945945945945946,
5
- "global_step": 36,
6
  "is_hyper_param_search": false,
7
  "is_local_process_zero": true,
8
  "is_world_process_zero": true,
9
  "log_history": [
10
  {
11
- "epoch": 0.05,
12
- "learning_rate": 1e-05,
13
- "loss": 0.4805,
14
  "step": 1
15
  },
16
  {
17
- "epoch": 0.11,
18
- "learning_rate": 2e-05,
19
- "loss": 0.5187,
20
  "step": 2
21
  },
22
  {
23
- "epoch": 0.16,
24
- "learning_rate": 1.9957341762950346e-05,
25
- "loss": 0.4365,
26
  "step": 3
27
  },
28
  {
29
- "epoch": 0.22,
30
- "learning_rate": 1.982973099683902e-05,
31
- "loss": 0.4007,
32
  "step": 4
33
  },
34
  {
35
- "epoch": 0.27,
36
- "learning_rate": 1.961825643172819e-05,
37
- "loss": 0.3944,
38
  "step": 5
39
  },
40
  {
41
- "epoch": 0.32,
42
- "learning_rate": 1.932472229404356e-05,
43
- "loss": 0.3724,
44
  "step": 6
45
  },
46
  {
47
- "epoch": 0.38,
48
- "learning_rate": 1.8951632913550625e-05,
49
- "loss": 0.3217,
50
  "step": 7
51
  },
52
  {
53
- "epoch": 0.43,
54
- "learning_rate": 1.8502171357296144e-05,
55
- "loss": 0.3093,
56
  "step": 8
57
  },
58
  {
59
- "epoch": 0.49,
60
- "learning_rate": 1.7980172272802398e-05,
61
- "loss": 0.3106,
62
  "step": 9
63
  },
64
  {
65
- "epoch": 0.54,
66
- "learning_rate": 1.7390089172206594e-05,
67
- "loss": 0.306,
68
  "step": 10
69
  },
70
  {
71
- "epoch": 0.59,
72
- "learning_rate": 1.6736956436465573e-05,
73
- "loss": 0.313,
74
  "step": 11
75
  },
76
  {
77
- "epoch": 0.65,
78
- "learning_rate": 1.6026346363792565e-05,
79
- "loss": 0.3213,
80
  "step": 12
81
  },
82
  {
83
- "epoch": 0.7,
84
- "learning_rate": 1.526432162877356e-05,
85
- "loss": 0.2503,
86
  "step": 13
87
  },
88
  {
89
- "epoch": 0.76,
90
- "learning_rate": 1.4457383557765385e-05,
91
- "loss": 0.271,
92
  "step": 14
93
  },
94
  {
95
- "epoch": 0.81,
96
- "learning_rate": 1.3612416661871532e-05,
97
- "loss": 0.2319,
98
  "step": 15
99
  },
100
  {
101
- "epoch": 0.86,
102
- "learning_rate": 1.2736629900720832e-05,
103
- "loss": 0.2549,
104
  "step": 16
105
  },
106
  {
107
- "epoch": 0.92,
108
- "learning_rate": 1.1837495178165706e-05,
109
- "loss": 0.2571,
110
  "step": 17
111
  },
112
  {
113
- "epoch": 0.97,
114
- "learning_rate": 1.092268359463302e-05,
115
- "loss": 0.2518,
116
  "step": 18
117
  },
118
  {
119
- "epoch": 1.03,
120
- "learning_rate": 1e-05,
121
- "loss": 0.2384,
122
  "step": 19
123
  },
124
  {
125
- "epoch": 1.08,
126
- "learning_rate": 9.07731640536698e-06,
127
- "loss": 0.1869,
128
  "step": 20
129
  },
130
  {
131
- "epoch": 1.14,
132
- "learning_rate": 8.162504821834296e-06,
133
- "loss": 0.2296,
134
  "step": 21
135
  },
136
  {
137
- "epoch": 1.19,
138
- "learning_rate": 7.263370099279173e-06,
139
- "loss": 0.2035,
140
  "step": 22
141
  },
142
  {
143
- "epoch": 1.24,
144
- "learning_rate": 6.387583338128471e-06,
145
- "loss": 0.1887,
146
  "step": 23
147
  },
148
  {
149
- "epoch": 1.3,
150
- "learning_rate": 5.542616442234618e-06,
151
- "loss": 0.19,
152
  "step": 24
153
  },
154
  {
155
- "epoch": 1.35,
156
- "learning_rate": 4.7356783712264405e-06,
157
- "loss": 0.187,
158
  "step": 25
159
  },
160
  {
161
- "epoch": 1.41,
162
- "learning_rate": 3.973653636207437e-06,
163
- "loss": 0.1957,
164
  "step": 26
165
  },
166
  {
167
- "epoch": 1.46,
168
- "learning_rate": 3.2630435635344283e-06,
169
- "loss": 0.1932,
170
  "step": 27
171
  },
172
  {
173
- "epoch": 1.51,
174
- "learning_rate": 2.6099108277934105e-06,
175
- "loss": 0.2026,
176
  "step": 28
177
  },
178
  {
179
- "epoch": 1.57,
180
- "learning_rate": 2.019827727197605e-06,
181
- "loss": 0.1922,
182
  "step": 29
183
  },
184
  {
185
- "epoch": 1.62,
186
- "learning_rate": 1.4978286427038602e-06,
187
- "loss": 0.1889,
188
  "step": 30
189
  },
190
  {
191
- "epoch": 1.68,
192
- "learning_rate": 1.0483670864493777e-06,
193
- "loss": 0.2075,
194
  "step": 31
195
  },
196
  {
197
- "epoch": 1.73,
198
- "learning_rate": 6.752777059564431e-07,
199
- "loss": 0.1633,
200
  "step": 32
201
  },
202
  {
203
- "epoch": 1.78,
204
- "learning_rate": 3.817435682718096e-07,
205
- "loss": 0.158,
206
  "step": 33
207
  },
208
  {
209
- "epoch": 1.84,
210
- "learning_rate": 1.7026900316098217e-07,
211
- "loss": 0.1605,
212
  "step": 34
213
  },
214
  {
215
- "epoch": 1.89,
216
- "learning_rate": 4.2658237049655325e-08,
217
- "loss": 0.1666,
218
  "step": 35
219
  },
220
  {
221
- "epoch": 1.95,
222
- "learning_rate": 0.0,
223
- "loss": 0.1882,
224
  "step": 36
225
  },
226
  {
227
- "epoch": 1.95,
228
- "step": 36,
229
- "total_flos": 1.8313009197744128e+17,
230
- "train_loss": 0.26231372563375366,
231
- "train_runtime": 5201.7559,
232
- "train_samples_per_second": 0.899,
233
- "train_steps_per_second": 0.007
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
234
  }
235
  ],
236
- "max_steps": 36,
237
- "num_train_epochs": 2,
238
- "total_flos": 1.8313009197744128e+17,
239
  "trial_name": null,
240
  "trial_params": null
241
  }
1
  {
2
  "best_metric": null,
3
  "best_model_checkpoint": null,
4
+ "epoch": 2.988235294117647,
5
+ "global_step": 381,
6
  "is_hyper_param_search": false,
7
  "is_local_process_zero": true,
8
  "is_world_process_zero": true,
9
  "log_history": [
10
  {
11
+ "epoch": 0.01,
12
+ "learning_rate": 1.25e-06,
13
+ "loss": 0.9385,
14
  "step": 1
15
  },
16
  {
17
+ "epoch": 0.02,
18
+ "learning_rate": 2.5e-06,
19
+ "loss": 0.9588,
20
  "step": 2
21
  },
22
  {
23
+ "epoch": 0.02,
24
+ "learning_rate": 3.7500000000000005e-06,
25
+ "loss": 0.8227,
26
  "step": 3
27
  },
28
  {
29
+ "epoch": 0.03,
30
+ "learning_rate": 5e-06,
31
+ "loss": 0.7846,
32
  "step": 4
33
  },
34
  {
35
+ "epoch": 0.04,
36
+ "learning_rate": 6.25e-06,
37
+ "loss": 0.7867,
38
  "step": 5
39
  },
40
  {
41
+ "epoch": 0.05,
42
+ "learning_rate": 7.500000000000001e-06,
43
+ "loss": 0.7457,
44
  "step": 6
45
  },
46
  {
47
+ "epoch": 0.05,
48
+ "learning_rate": 8.750000000000001e-06,
49
+ "loss": 0.7486,
50
  "step": 7
51
  },
52
  {
53
+ "epoch": 0.06,
54
+ "learning_rate": 1e-05,
55
+ "loss": 0.7079,
56
  "step": 8
57
  },
58
  {
59
+ "epoch": 0.07,
60
+ "learning_rate": 1.125e-05,
61
+ "loss": 0.6741,
62
  "step": 9
63
  },
64
  {
65
+ "epoch": 0.08,
66
+ "learning_rate": 1.25e-05,
67
+ "loss": 0.6693,
68
  "step": 10
69
  },
70
  {
71
+ "epoch": 0.09,
72
+ "learning_rate": 1.375e-05,
73
+ "loss": 0.6629,
74
  "step": 11
75
  },
76
  {
77
+ "epoch": 0.09,
78
+ "learning_rate": 1.5000000000000002e-05,
79
+ "loss": 0.647,
80
  "step": 12
81
  },
82
  {
83
+ "epoch": 0.1,
84
+ "learning_rate": 1.6250000000000002e-05,
85
+ "loss": 0.6316,
86
  "step": 13
87
  },
88
  {
89
+ "epoch": 0.11,
90
+ "learning_rate": 1.7500000000000002e-05,
91
+ "loss": 0.6233,
92
  "step": 14
93
  },
94
  {
95
+ "epoch": 0.12,
96
+ "learning_rate": 1.8750000000000002e-05,
97
+ "loss": 0.6264,
98
  "step": 15
99
  },
100
  {
101
+ "epoch": 0.13,
102
+ "learning_rate": 2e-05,
103
+ "loss": 0.617,
104
  "step": 16
105
  },
106
  {
107
+ "epoch": 0.13,
108
+ "learning_rate": 1.9999629591162658e-05,
109
+ "loss": 0.6023,
110
  "step": 17
111
  },
112
  {
113
+ "epoch": 0.14,
114
+ "learning_rate": 1.9998518392091163e-05,
115
+ "loss": 0.5996,
116
  "step": 18
117
  },
118
  {
119
+ "epoch": 0.15,
120
+ "learning_rate": 1.9996666485105115e-05,
121
+ "loss": 0.5939,
122
  "step": 19
123
  },
124
  {
125
+ "epoch": 0.16,
126
+ "learning_rate": 1.999407400739705e-05,
127
+ "loss": 0.5945,
128
  "step": 20
129
  },
130
  {
131
+ "epoch": 0.16,
132
+ "learning_rate": 1.9990741151022302e-05,
133
+ "loss": 0.5871,
134
  "step": 21
135
  },
136
  {
137
+ "epoch": 0.17,
138
+ "learning_rate": 1.9986668162884763e-05,
139
+ "loss": 0.5918,
140
  "step": 22
141
  },
142
  {
143
+ "epoch": 0.18,
144
+ "learning_rate": 1.9981855344718587e-05,
145
+ "loss": 0.5829,
146
  "step": 23
147
  },
148
  {
149
+ "epoch": 0.19,
150
+ "learning_rate": 1.997630305306586e-05,
151
+ "loss": 0.5715,
152
  "step": 24
153
  },
154
  {
155
+ "epoch": 0.2,
156
+ "learning_rate": 1.997001169925015e-05,
157
+ "loss": 0.5776,
158
  "step": 25
159
  },
160
  {
161
+ "epoch": 0.2,
162
+ "learning_rate": 1.996298174934608e-05,
163
+ "loss": 0.5663,
164
  "step": 26
165
  },
166
  {
167
+ "epoch": 0.21,
168
+ "learning_rate": 1.9955213724144754e-05,
169
+ "loss": 0.5655,
170
  "step": 27
171
  },
172
  {
173
+ "epoch": 0.22,
174
+ "learning_rate": 1.994670819911521e-05,
175
+ "loss": 0.5593,
176
  "step": 28
177
  },
178
  {
179
+ "epoch": 0.23,
180
+ "learning_rate": 1.9937465804361783e-05,
181
+ "loss": 0.5597,
182
  "step": 29
183
  },
184
  {
185
+ "epoch": 0.24,
186
+ "learning_rate": 1.9927487224577402e-05,
187
+ "loss": 0.5573,
188
  "step": 30
189
  },
190
  {
191
+ "epoch": 0.24,
192
+ "learning_rate": 1.99167731989929e-05,
193
+ "loss": 0.5485,
194
  "step": 31
195
  },
196
  {
197
+ "epoch": 0.25,
198
+ "learning_rate": 1.990532452132223e-05,
199
+ "loss": 0.5541,
200
  "step": 32
201
  },
202
  {
203
+ "epoch": 0.26,
204
+ "learning_rate": 1.9893142039703662e-05,
205
+ "loss": 0.5403,
206
  "step": 33
207
  },
208
  {
209
+ "epoch": 0.27,
210
+ "learning_rate": 1.9880226656636977e-05,
211
+ "loss": 0.5484,
212
  "step": 34
213
  },
214
  {
215
+ "epoch": 0.27,
216
+ "learning_rate": 1.986657932891657e-05,
217