End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -1,29 +1,29 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.5532283186912537,
-    "eval_rouge1": 0.3696,
+    "eval_loss": 0.5351393818855286,
+    "eval_rouge1": 0.3585,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.3694,
-    "eval_rougeLsum": 0.3713,
-    "eval_runtime": 112.3113,
+    "eval_rougeL": 0.3555,
+    "eval_rougeLsum": 0.357,
+    "eval_runtime": 113.0854,
     "eval_samples": 747,
-    "eval_samples_per_second": 6.651,
-    "eval_steps_per_second": 0.214,
+    "eval_samples_per_second": 6.606,
+    "eval_steps_per_second": 0.212,
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5728267431259155,
-    "predict_rouge1": 0.4618,
+    "predict_loss": 0.5551252961158752,
+    "predict_rouge1": 0.4427,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4613,
-    "predict_rougeLsum": 0.4613,
-    "predict_runtime": 556.0875,
+    "predict_rougeL": 0.4411,
+    "predict_rougeLsum": 0.4407,
+    "predict_runtime": 556.1807,
     "predict_samples": 3737,
-    "predict_samples_per_second": 6.72,
+    "predict_samples_per_second": 6.719,
     "predict_steps_per_second": 0.21,
-    "total_flos": 7.502224981312512e+16,
-    "train_loss": 0.9166960628191452,
-    "train_runtime": 5169.5099,
+    "total_flos": 7.531884760915354e+16,
+    "train_loss": 0.8373744595297635,
+    "train_runtime": 5174.0873,
     "train_samples": 14290,
-    "train_samples_per_second": 13.821,
-    "train_steps_per_second": 1.728
+    "train_samples_per_second": 13.809,
+    "train_steps_per_second": 1.727
 }

eval_results.json

@@ -1,13 +1,13 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.5532283186912537,
-    "eval_rouge1": 0.3696,
+    "eval_loss": 0.5351393818855286,
+    "eval_rouge1": 0.3585,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.3694,
-    "eval_rougeLsum": 0.3713,
-    "eval_runtime": 112.3113,
+    "eval_rougeL": 0.3555,
+    "eval_rougeLsum": 0.357,
+    "eval_runtime": 113.0854,
     "eval_samples": 747,
-    "eval_samples_per_second": 6.651,
-    "eval_steps_per_second": 0.214
+    "eval_samples_per_second": 6.606,
+    "eval_steps_per_second": 0.212
 }

generated_predictions.txt

@@ -1,12 +1,12 @@
 karena
 3
-sudah
+baik
 pemain
 kami
 anda
 semua
 u
-)
+apa
 permainan
 saja
 tidak
@@ -20,13 +20,13 @@ s
 
 kamu
 cara
-4
-hanya
+dapat
+karena
 bisa
 0
 bisa
-saja
-.
+a
+pemain
 satu
 seperti
 ,
@@ -36,15 +36,15 @@ ada
 membuat
 dengan
 .
-hal
-ada
+saja
+pemain
 .
 bisa
 ,
 dan
-permainan
+apa
 lebih
-tersebut
+cara
 8
 yang
 tersebut
@@ -53,18 +53,18 @@ yang
 oleh
 juga
 9
-dengan
+dapat
 ,
-:
-ini
-melakukan
+memiliki
+7
+t
 -
 ,
 maka
 yang
 pada
 saya
-adalah
+untuk
 dapat
 9
 tidak
@@ -75,19 +75,19 @@ kami
 sebagai
 sudah
 
-baik
+6
 atau
 8
 (
-telah
+salah
 orang
 yang
 juga
 maka
 dari
-cara
-menjadi
-0
+)
+secara
+-
 baik
 2
 sebagai
@@ -100,19 +100,19 @@ hal
 
 kami
 hanya
-di
+menggunakan
 oleh
-memiliki
-dan
+orang
+7
 harus
 .
 .
-namun
+uang
 1
 dengan
 untuk
-hal
-sebagai
+sudah
+sudah
 tersebut
 ini
 adalah
@@ -122,7 +122,7 @@ i
 2
 dari
 oleh
-juga
+kita
 lebih
 ,
 
@@ -136,29 +136,29 @@ melakukan
 yang
 sudah
 /
-5
+maka
 
 dalam
-a
+ini
 .
 untuk
 ke
 baik
-nya
+bisa
 3
 beberapa
-lebih
+dapat
 s
 cara
 juga
-besar
+ingin
 online
-menggunakan
+karena
 ,
 0
-tersebut
+saja
 ke
-game
+memiliki
 nya
 
 tidak
@@ -167,20 +167,20 @@ lebih
 ,
 (
 dengan
-itu
+9
 tidak
 itu
 ,
 itu
 ,
-hanya
+6
 -
 satu
 banyak
 s
 kita
 bisa
-hal
+dengan
 slot
 ?
 kamu
@@ -190,7 +190,7 @@ hal
 anda
 dan
 atau
-oleh
+(
 nya
 dan
 saya
@@ -204,8 +204,8 @@ ini
 6
 anda
 orang
-beberapa
-,
+saya
+kan
 .
 ,
 9
@@ -215,15 +215,15 @@ an
 
 anda
 sudah
-an
+beberapa
 para
 9
 atau
-saat
+k
 1
 sudah
-e
-itu
+slot
+menggunakan
 juga
 ini
 atau
@@ -237,7 +237,7 @@ yang
 dan
 ke
 ini
-dalam
+7
 bisa
 8
 d
@@ -253,12 +253,12 @@ ke
 /
 dan
 lebih
-8
+jika
 atau
 9
 nya
 anda
-membuat
+cara
 untuk
 satu
 
@@ -266,7 +266,7 @@ beberapa
 4
 banyak
 di
-9
+6
 6
 )
 dari
@@ -276,33 +276,33 @@ untuk
 -
 0
 beberapa
-ada
+pada
 0
 beberapa
 untuk
 ,
 7
 :
-besar
+salah
 seperti
 oleh
-baik
+nya
 /
 saja
-bagi
-poker
+m
+i
 permainan
 d
 tersebut
 ini
-
-1
+7
+a
 nya
-dalam
-uang
-sudah
-di
 -
+i
+-
+di
+:
 juga
 banyak
 maka
@@ -310,37 +310,37 @@ maka
 ?
 -
 bisa
-kan
-3
+hanya
+telah
 ini
 anda
-3
+jadi
 dari
 3
-yang
+judi
 
 bisa
-9
+cara
 jika
-namun
+slot
 di
 harus
 ada
 situs
-o
+lain
 juga
-jika
-banyak
-itu
+menjadi
+untuk
+membuat
 tersebut
 untuk
 
 ini
-satu
+sudah
 
 0
-membuat
-satu
+poker
+bermain
 .
 dan
 kami
@@ -349,7 +349,7 @@ membuat
 5
 
 
-9
+sebagai
 satu
 9
 ?
@@ -358,31 +358,31 @@ di
 dari
 i
 
-dengan
-u
-itu
+8
+"
+situs
 situs
 2
-membuat
-tidak
+sudah
+-
 di
 1
 i
 memiliki
-apa
+t
 2
 adalah
 kita
 
-pada
+adalah
 secara
 .
-t
+5
 ada
 sebagai
 3
-judi
-untuk
+telah
+t
 bisa
 anda
 .
@@ -393,11 +393,11 @@ tidak
 bisa
 
 7
--
+permainan
 hanya
 an
 untuk
-sangat
+harus
 para
 dari
 telah
@@ -408,27 +408,27 @@ beberapa
 untuk
 tersebut
 i
-9
+
 oleh
 sangat
 saat
 besar
-7
+judi
 
-bisa
+)
 yang
 harus
 mendapatkan
 d
 tidak
-?
-
-sangat
+game
+1
+poker
 -
-besar
+d
 juga
 harus
-di
+a
 bisa
 lebih
 banyak
@@ -442,28 +442,28 @@ satu
 membuat
 online
 akan
-saya
+"
 juga
 an
 
-baik
+ada
 (
-t
+k
 seperti
 lain
-(
+saya
 jika
 ini
 akan
-game
-dengan
+tidak
+ini
 sebagai
 dan
 e
 yang
 
 ini
-u
+salah
 1
 ,
 )
@@ -473,14 +473,14 @@ dapat
 /
 1
 permainan
-.
+dapat
 di
 ini
 namun
-saya
+bahwa
 
-dengan
-oleh
+kamu
+5
 dan
 4
 itu
@@ -497,43 +497,43 @@ akan
 online
 tersebut
 0
-tahun
+e
 i
 –
 memiliki
 kami
 juga
-oleh
+"
 1
 dan
 untuk
 yang
-para
+pemain
 untuk
 dan
 dengan
-7
+menjadi
 8
 saya
 
 dari
 nya
-ke
+karena
 secara
-baik
+sangat
 2
 nya
-,
+bagi
 tidak
 dan
-4
-slot
+dapat
+harus
 ini
 permainan
-e
+kami
 nya
 ke
-s
+(
 s
 sudah
 kamu
@@ -543,23 +543,23 @@ mereka
 .
 nya
 untuk
-ke
+hanya
 anda
 sebagai
 dan
 kami
-bisa
+u
 dari
-seperti
+8
 di
 harus
 akan
 u
-pada
+2
 3
-oleh
+satu
 t
-6
+cara
 7
 online
 .
@@ -569,18 +569,18 @@ mereka
 yang
 
 dari
-memiliki
-8
+tahun
+m
 i
 anda
-,
+tersebut
 .
 "
 mereka
 cara
 beberapa
-ada
-8
+i
+beberapa
 
 oleh
 untuk
@@ -591,12 +591,12 @@ a
 1
 ada
 tahun
-melakukan
-ini
+tersebut
+ingin
 saya
-hal
+yang
 
-"
+bisa
 online
 nya
 hanya
@@ -604,15 +604,15 @@ baik
 dengan
 nya
 mereka
-satu
+game
 (
-membuat
+kamu
 i
 situs
 .
 lebih
 akan
-0
+seperti
 adalah
 1
 karena
@@ -626,14 +626,14 @@ indonesia
 juga
 -
 tidak
-orang
+oleh
 1
 2
 p
-yang
-apa
+melakukan
+hal
 9
-lebih
+slot
 5
 orang
 waktu
@@ -645,30 +645,30 @@ bahwa
 pada
 
 slot
-para
-tersebut
+maka
+akan
 2
 sangat
-dengan
+d
 kamu
 ?
 mereka
-o
+.
 :
 secara
 baik
 kita
 tentang
-maka
+indonesia
 sebagai
 bisa
-bahwa
+online
 s
 tidak
 -
-menjadi
+oleh
 salah
-indonesia
+d
 -
 9
 mereka
@@ -676,18 +676,18 @@ mereka
 u
 ,
 secara
-bagi
+para
 sebagai
 adalah
 bermain
 kita
 dalam
-itu
+adalah
 lebih
 kita
 dalam
 dalam
-indonesia
+6
 adalah
 
 tidak
@@ -705,40 +705,40 @@ s
 di
 ke
 yang
-akan
+situs
 di
 membuat
-anda
+d
 kita
 menjadi
-baik
+/
 online
 nya
 bermain
 beberapa
 karena
 ?
-mudah
+beberapa
 
 kita
 :
 
 online
 lebih
-bermain
+slot
 ini
-sebagai
+judi
 u
 poker
 yang
 -
 i
-bahwa
+4
 (
 itu
 juga
 5
-dengan
+salah
 -
 dalam
 
@@ -747,23 +747,23 @@ kamu
 juga
 mereka
 orang
-tidak
+lain
 di
 di
 jika
-harus
-ke
+satu
+(
 bisa
 indonesia
 :
 judi
 saat
-u
+indonesia
 nya
 e
 mereka
-"
-kami
+u
+k
 yang
 4
 
@@ -776,25 +776,25 @@ permainan
 ?
 lain
 lebih
-uang
+bisnis
 juga
 2
-kan
+6
 
 1
-yang
+anda
 yang
 di
 3
 kami
-satu
+secara
 
-kami
-pemain
+baik
+mungkin
 (
 -
 di
-itu
+melakukan
 untuk
 game
 
@@ -814,17 +814,17 @@ s
 k
 untuk
 1
-atau
-k
-jika
+dapat
+sebagai
+mereka
 e
 
 adalah
 namun
-atau
+e
 i
-
-o
+oleh
+m
 dari
 n
 akan
@@ -835,16 +835,16 @@ sangat
 dalam
 (
 ,
-di
+oleh
 ,
-perlu
+o
 apa
 2
 kita
 orang
 satu
 dari
-s
+situs
 beberapa
 online
 9
@@ -852,24 +852,24 @@ hanya
 adalah
 9
 bahwa
-8
+cara
 
 )
 nya
-sangat
-4
-indonesia
-saya
-4
+"
 4
+/
+situs
+/
+lebih
 an
-2
-an
+saya
+dengan
 online
 untuk
 untuk
 ,
-mereka
+itu
 "
 
 ini
@@ -879,26 +879,26 @@ saya
 :
 memiliki
 tersebut
-bahwa
+5
 .
-harus
+kan
 ?
 lain
 e
-3
+bahwa
 beberapa
-tidak
+
 dan
 6
 hal
-a
+.
 saat
 oleh
 bagi
 kan
 hal
 akan
-dari
+juga
 ,
 s
 memiliki
@@ -907,7 +907,7 @@ atau
 online
 5
 1
-o
+bisa
 dan
 anda
 bisa
@@ -916,18 +916,18 @@ dalam
 ,
 dapat
 untuk
-baik
+maka
 online
 banyak
 1
 dari
 1
-karena
+banyak
 itu
 an
 1
 "
-di
+nya
 )
 t
 nya
@@ -938,7 +938,7 @@ tidak
 :
 :
 pada
-poker
+atau
 jika
 tidak
 di
@@ -949,7 +949,7 @@ sudah
 k
 anda
 ,
-/
+dapat
 1
 di
 lebih
@@ -958,30 +958,30 @@ satu
 juga
 orang
 e
-bisa
+cara
 ada
 akan
 secara
 adalah
 dengan
-nya
+namun
 s
-4
+an
 online
 telah
 
 1
-membuat
+t
 anda
 di
 bahwa
-8
+judi
 ini
 satu
-melakukan
+dapat
 ingin
 /
-e
+yang
 ini
 juga
 lebih
@@ -990,14 +990,14 @@ a
 ke
 juga
 8
-seperti
+kamu
 orang
 8
 ,
-online
+lebih
 online
 salah
-beberapa
+secara
 tidak
 9
 dapat
@@ -1006,51 +1006,51 @@ dari
 
 
 akan
-dari
+bisa
 bagi
 o
 ini
 .
-nya
+:
 9
 0
 ini
 ini
-t
+an
 tahun
 k
 
 atau
 /
-itu
-e
+memiliki
+ini
 9
 jika
 ada
 t
 3
-6
+salah
 apa
 menjadi
 bahwa
-bermain
+uang
 pada
 untuk
 /
-/
+mereka
 a
 ke
-bahwa
+saat
 banyak
-.
 yang
-bisnis
-ada
+yang
+m
+)
 dapat
 ada
 ,
+akan
 jika
-adalah
 juga
 dari
 dan
@@ -1060,16 +1060,16 @@ waktu
 i
 ada
 atau
-tidak
-u
+a
+salah
 sebagai
+yang
 
-
-/
-.
+an
+di
 saat
 -
-semua
+besar
 untuk
 
 cara
@@ -1077,25 +1077,25 @@ cara
 dapat
 banyak
 judi
-atau
-harus
+itu
+hal
 saat
 jika
 pada
 (
 di
 banyak
-8
+
 akan
 atau
-e
+)
 
-ke
+karena
 dengan
 sebagai
 5
 sebagai
-mereka
+karena
 permainan
 nya
 mereka
@@ -1104,7 +1104,7 @@ dengan
 lebih
 /
 bisa
-namun
+saat
 ?
 banyak
 ada
@@ -1122,7 +1122,7 @@ dapat
 saat
 sangat
 juga
-setiap
+)
 kita
 a
 -
@@ -1132,9 +1132,9 @@ e
 ini
 ke
 dengan
-0
+an
 bisa
-memiliki
+sangat
 orang
 atau
 saat
@@ -1142,38 +1142,38 @@ saat
 secara
 ke
 harus
-u
+yang
 9
 menjadi
-kan
+baik
 9
 :
-hal
+bagi
 i
 menggunakan
 0
 t
-)
+o
 jika
 ,
 para
 ada
 (
-kami
 hanya
+?
 ini
-itu
+(
 s
 banyak
-lain
-waktu
+8
+m
 4
 atau
 "
 atau
 :
 online
-8
+saya
 yang
 untuk
 
@@ -1185,38 +1185,38 @@ adalah
 hanya
 -
 dari
-untuk
+yang
 oleh
 u
 "
 di
 1
+terbaik
 indonesia
-secara
 dalam
 0
-i
+s
 ,
 
 
 ke
-menjadi
+/
 
 untuk
 t
 saat
 d
 kita
-dan
-hal
-0
-?
-bermain
+dan
+hal
+saya
+tersebut
+saja
 anda
-2
+para
 )
 online
-a
+lebih
 akan
 akan
 dengan
@@ -1229,23 +1229,23 @@ kami
 .
 maka
 itu
-membuat
-
+bagi
+ini
 atau
 
 untuk
 i
 s
-kamu
+-
 atau
 
 saja
 "
-ada
-seperti
+permainan
+itu
 dapat
 yang
-(
+u
 dalam
 adalah
 slot
@@ -1255,7 +1255,7 @@ juga
 satu
 7
 online
-baik
+para
 di
 (
 poker
@@ -1267,27 +1267,27 @@ kita
 dari
 t
 karena
-(
+kamu
 anda
 dan
-bahwa
+seperti
 )
 yang
 memiliki
-akan
+kami
 satu
 4
 sudah
-a
+o
 1
 namun
-karena
+dapat
 tersebut
 di
 dari
-orang
+situs
 banyak
-judi
+bagi
 memiliki
 k
 anda
@@ -1299,46 +1299,46 @@ hal
 anda
 nya
 bisa
-nya
-1
-menggunakan
+t
+lain
+saya
 atau
 ada
 di
 
 orang
 tidak
-saja
+harus
 1
 dengan
 hanya
 orang
 :
-maka
+beberapa
 sangat
 .
 1
 kami
-menggunakan
+saat
 s
 adalah
 bisa
-baik
+(
 online
 juga
 o
 
-.
+–
 harus
-9
+an
 0
 sangat
-bermain
+?
 itu
 orang
 s
 -
-dengan
+ini
 sangat
 baik
 dengan
@@ -1353,7 +1353,7 @@ pada
 .
 di
 yang
-7
+o
 k
 s
 ,
@@ -1363,22 +1363,22 @@ k
 banyak
 .
 s
-besar
+maka
 yang
 menggunakan
-kamu
+?
 jika
 juga
 /
-adalah
+k
 akan
 "
 .
 0
 bisnis
-
+membuat
 2
-saya
+4
 dengan
 bisa
 
@@ -1399,24 +1399,24 @@ di
 online
 atau
 nya
-bagi
-semua
+apa
+poker
 .
 uang
 
 itu
 (
-bagi
+yang
 dari
 game
 akan
--
+menjadi
 oleh
-)
+harus
 "
-1
+d
 kamu
-untuk
+9
 sangat
 ke
 adalah
@@ -1430,15 +1430,15 @@ i
 5
 tidak
 7
-para
-secara
+pemain
+online
 adalah
 bisa
 cara
 orang
 kami
 
-
+apa
 s
 dengan
 a
@@ -1447,12 +1447,12 @@ a
 menjadi
 6
 untuk
-dengan
+?
 hal
 o
-secara
+atau
 dan
-jika
+itu
 ,
 adalah
 2
@@ -1462,26 +1462,26 @@ kan
 secara
 satu
 -
-"
+t
 yang
 dapat
 pada
 sudah
 adalah
 dari
-menggunakan
+p
 
-dengan
+besar
 kan
-semua
+telah
 di
 "
 bisa
-yang
+baik
 maka
 satu
-untuk
-nya
+
+d
 -
 beberapa
 judi
@@ -1495,12 +1495,12 @@ itu
 (
 kami
 seperti
-ini
+bisnis
 
 adalah
-seperti
+4
 permainan
-di
+akan
 i
 harus
 bisa
@@ -1509,7 +1509,7 @@ cara
 2
 ,
 harus
-tahun
+bagi
 di
 
 
@@ -1529,10 +1529,10 @@ saya
 di
 di
 kami
-seperti
-"
-i
+tidak
 salah
+(
+baik
 tersebut
 .
 nya
@@ -1547,21 +1547,21 @@ karena
 dan
 sangat
 
-salah
+an
 kita
 mereka
 0
-anda
+dapat
 d
 kan
 -
 bisa
-u
+beberapa
 9
 ,
-karena
+slot
 
-(
+jika
 ada
 baru
 dari
@@ -1571,7 +1571,7 @@ situs
 oleh
 bermain
 nya
-atau
+tahun
 .
 dalam
 "
@@ -1580,7 +1580,7 @@ anda
 itu
 dari
 adalah
-slot
+mendapatkan
 juga
 anda
 ada
@@ -1593,27 +1593,27 @@ ada
 0
 
 ini
-atau
+lebih
 dari
 an
 hanya
-cara
+harus
 beberapa
 satu
 telah
-salah
+lain
 1
 untuk
 oleh
 
-dengan
-seperti
+t
+saja
 bisa
 
 saja
 saat
 dan
-
+kami
 oleh
 uang
 adalah
@@ -1622,12 +1622,12 @@ dan
 -
 membuat
 ,
--
+slot
 hanya
 secara
 
 satu
-:
+memiliki
 bisa
 nya
 atau
@@ -1636,34 +1636,34 @@ t
 
 2
 ?
-an
+kamu
 anda
 2
 /
-e
-memiliki
+seperti
+kita
 online
-i
+judi
 akan
 pada
 harus
 untuk
 dari
 3
-menggunakan
+-
 s
 0
 cara
 dengan
 adalah
-4
+hal
 yang
 
-3
-
-pada
+orang
+indonesia
+t
 di
-0
+an
 oleh
 itu
 lebih
@@ -1681,9 +1681,9 @@ sudah
 hal
 .
 pada
-apa
-tahun
-dengan
+seperti
+ingin
+anda
 lebih
 bahwa
 1
@@ -1692,37 +1692,37 @@ i
 tidak
 dengan
 di
-semua
-bagi
-mereka
-indonesia
+besar
+akan
 bahwa
+indonesia
+baik
 dari
 untuk
-.
+beberapa
 i
 ada
 -
 juga
 ke
 anda
-sebagai
+9
 dengan
 e
-sebagai
+akan
 anda
 harus
 beberapa
-menjadi
+dapat
 dapat
 ?
 tersebut
 bagi
 0
-s
+i
 game
-7
-orang
+k
+"
 judi
 anda
 ini
@@ -1730,12 +1730,12 @@ banyak
 bisa
 harus
 atau
-a
+sebagai
 online
-seperti
-orang
-namun
-ke
+kan
+jika
+untuk
+9
 -
 jika
 satu
@@ -1744,8 +1744,8 @@ bahwa
 s
 beberapa
 t
-membuat
-ini
+i
+a
 
 cara
 2
@@ -1755,85 +1755,85 @@ kami
 .
 .
 sangat
-"
+secara
 yang
 nya
-d
-hal
+saja
+seperti
 "
-situs
-.
+u
+saja
 adalah
 untuk
-nya
+online
 sudah
-4
-bermain
+hal
+
 s
 itu
 
 1
 "
 online
-hanya
+juga
 judi
-k
+seperti
 sangat
 kan
 online
 dari
 memiliki
 dan
-telah
+mungkin
 mereka
-1
+akan
 hal
 )
 dalam
-a
-permainan
+?
+?
 ke
-dengan
+setiap
 
 .
 u
 permainan
-4
-kamu
+t
+baik
 bisa
-u
+lain
 e
-memiliki
+d
 karena
-bermain
+lain
 t
 tersebut
-menjadi
+oleh
 namun
-?
-kamu
+atau
+hanya
 /
 pada
 
 
-oleh
+:
 nya
 jadi
 dari
-bahwa
+a
 dengan
 permainan
 salah
-hal
+–
 dan
 0
 orang
 dengan
 2
-itu
+menggunakan
 4
 online
-online
+(
 3
 kamu
 ke
@@ -1841,55 +1841,55 @@ karena
 2
 atau
 6
-dalam
+9
 tersebut
 mereka
 
-poker
+7
 yang
 "
+menggunakan
 anda
-anda
-saya
-kamu
+membuat
+9
 8
-1
+adalah
 atau
 
 lebih
 banyak
 judi
 :
-situs
+salah
 s
-yang
+tersebut
 itu
 ke
 ?
 6
-tidak
-baik
+ada
+anda
 1
-
-yang
-untuk
+jadi
+indonesia
+pada
 dan
 bahwa
 tidak
 ,
-di
-i
+kan
+9
 tidak
 hanya
-"
+?
 -
 7
 dengan
 memiliki
 online
 saya
-saja
-,
+indonesia
+kami
 saja
 0
 telah
@@ -1897,7 +1897,7 @@ anda
 oleh
 .
 
-menjadi
+9
 tersebut
 
 menggunakan
@@ -1905,28 +1905,28 @@ menggunakan
 atau
 kamu
 yang
-salah
+anda
 online
 ini
 maka
-akan
+t
 4
 5
 permainan
 di
 dengan
-adalah
+semua
 t
 tersebut
-seperti
+memiliki
 ,
 sebagai
 dalam
-1
-bermain
+membuat
+6
 anda
 
-1
+tersebut
 baik
 besar
 i
@@ -1940,19 +1940,19 @@ hal
 2
 situs
 .
-
+mendapatkan
 menjadi
 melakukan
 indonesia
 pada
 /
 mereka
-
+uang
 orang
 
 0
 untuk
-4
+hal
 memiliki
 (
 namun
@@ -1960,14 +1960,14 @@ tidak
 mereka
 hanya
 kamu
-u
+seperti
 .
 
 semua
 anda
 tersebut
 lain
-menggunakan
+seperti
 .
 tidak
 dalam
@@ -1975,30 +1975,30 @@ bahwa
 ,
 saat
 
-game
+:
 dapat
-di
+kamu
 "
 harus
 "
 nya
 
 dari
-an
+pemain
 atau
 4
 tersebut
 ke
 ini
-)
+menjadi
 lebih
-harga
+perlu
 saja
 s
-oleh
+terbaik
 kamu
 -
-1
+nya
 ke
 7
 sebagai
@@ -2012,29 +2012,29 @@ atau
 harus
 adalah
 memiliki
-9
-1
+kami
+kamu
 "
 orang
 
 -
-di
+lain
 akan
 kamu
 untuk
-,
-
+slot
+lebih
 akan
-kita
+mudah
 nya
 saya
-kami
+besar
 7
 dengan
 
-akan
-"
-3
+pada
+saat
+jika
 pada
 di
 
@@ -2051,43 +2051,43 @@ i
 e
 .
 pada
-k
+bermain
 dengan
 kamu
 nya
 sangat
 1
 membuat
-adalah
+saat
 tidak
-uang
+game
 nya
 e
 4
 9
 mereka
-0
+u
 ke
 adalah
 
 .
 yang
-besar
+k
 ke
-untuk
+baik
 
 saya
 besar
-apa
+game
 ini
-yang
-6
+dapat
+salah
 i
 a
-u
+besar
 2
 satu
-4
+seperti
 1
 anda
 untuk
@@ -2097,16 +2097,16 @@ mendapatkan
 dan
 cara
 kan
-saya
+namun
 ada
-anda
-itu
+situs
+adalah
 dan
 e
 lebih
 itu
 mereka
-permainan
+an
 jika
 permainan
 ini
@@ -2120,12 +2120,12 @@ online
 1
 untuk
 i
-jika
+)
 (
 .
 untuk
 an
-seperti
+4
 ke
 pada
 slot
@@ -2133,11 +2133,11 @@ slot
 kita
 mereka
 
-baik
+pemain
 u
 -
 
--
+6
 adalah
 ,
 untuk
@@ -2148,65 +2148,65 @@ an
 online
 namun
 seperti
-ke
+slot
 )
 jika
 seperti
 
 harus
-d
+secara
 nya
 
 bisa
 mereka
-
+untuk
 -
 "
-mendapatkan
+7
 5
 lebih
-mereka
-maka
+kita
+7
 
 untuk
 )
 
-0
+,
 ,
 menjadi
 saya
 -
-untuk
-.
+anda
 .
+7
 yang
-saat
+di
 memiliki
-melakukan
+
 lebih
-baru
+p
 untuk
 "
 ada
-besar
+bahwa
 hanya
 mereka
-ada
+)
 poker
 banyak
 ada
 dengan
 dan
 ?
-juga
+u
 ,
 nya
 dari
 -
 di
 s
-:
-menjadi
+kita
+saya
 yang
 mereka
 s
@@ -2215,14 +2215,14 @@ bermain
 jika
 7
 tidak
-m
+itu
 tidak
 5
-indonesia
+kami
 1
-8
+sangat
 u
-atau
+k
 adalah
 0
 2
@@ -2246,7 +2246,7 @@ dalam
 para
 dari
 /
-.
+akan
 dengan
 menjadi
 saya
@@ -2256,16 +2256,16 @@ dalam
 online
 saya
 2
-lain
-untuk
+slot
+besar
 ,
 1
 dapat
-?
+9
 a
 online
 an
-k
+harus
 
 ?
 dan
@@ -2279,7 +2279,7 @@ pada
 2
 menjadi
 dapat
-dan
+game
 di
 
 u
@@ -2296,7 +2296,7 @@ orang
 adalah
 satu
 nya
-slot
+.
 online
 8
 untuk
@@ -2310,8 +2310,8 @@ ini
 jika
 untuk
 dari
-memiliki
-itu
+cara
+satu
 untuk
 sangat
 0
@@ -2321,14 +2321,14 @@ akan
 jika
 ?
 bahwa
-online
-4
+juga
+orang
 bisa
-e
+cara
 )
 dan
 oleh
-bisa
+online
 lebih
 0
 
@@ -2345,7 +2345,7 @@ kamu
 )
 kita
 
-"
+slot
 online
 di
 sudah
@@ -2357,38 +2357,38 @@ untuk
 untuk
 pada
 untuk
-saya
+situs
 ,
 judi
 mendapatkan
-satu
+4
 online
 
-bahwa
-k
+satu
+kan
 untuk
 dalam
-7
+kamu
 5
 oleh
 ,
 
-n
+dalam
 ada
 bisa
 akan
 karena
 saya
 
-online
+lain
 baik
 atau
 an
 6
 .
 indonesia
-anda
-8
+telah
+orang
 
 nya
 lebih
@@ -2396,18 +2396,18 @@ lebih
 anda
 ke
 juga
-jika
+"
 :
 kita
 memiliki
 adalah
 
-kami
+k
 dengan
 )
 anda
 i
-"
+a
 yang
 ,
 k
@@ -2419,54 +2419,54 @@ baik
 dan
 judi
 5
-hal
+kami
 juga
 online
 para
 :
 ini
-sangat
+?
 2
 bisa
 d
-untuk
+dengan
 dan
-4
-(
+kita
+dapat
 lain
 (
 secara
-dapat
+memiliki
 yang
-saja
+salah
 oleh
 .
 atau
-satu
+2
 untuk
-waktu
+,
 ada
 itu
 nya
-adalah
+bagi
 2
 atau
 yang
-i
+hal
 menjadi
 mereka
 e
 
 ini
 dapat
-nya
+dalam
 oleh
 -
 
 0
+itu
 adalah
-adalah
-2
+sebagai
 -
 ?
 dalam
@@ -2477,82 +2477,82 @@ memiliki
 cara
 ini
 di
-setiap
+dapat
 memiliki
 di
 
 dalam
 dengan
-3
+9
 dapat
 lebih
 akan
 yang
-seperti
+"
 untuk
 (
-kami
+d
 yang
 ke
 
-4
+para
 lebih
 karena
 menjadi
 kita
 -
 ada
-maka
+cara
 s
 an
 untuk
 lebih
-8
-di
+semua
+menjadi
 yang
 sangat
 
 5
-anda
+di
 .
 kan
 ,
-?
+tersebut
 salah
 ini
 -
-3
+:
 menjadi
 yang
 sebagai
 melakukan
 saat
-5
+perlu
 yang
 
 1
 ,
 untuk
 
-permainan
+sebagai
 yang
 
-.
+o
 orang
 0
 jika
 bisa
 atau
-)
-bahwa
+banyak
+:
 anda
 memiliki
 hanya
 mereka
-"
+e
 bahwa
-"
-hal
+6
+saya
 ada
 9
 jika
@@ -2562,15 +2562,15 @@ tersebut
 -
 )
 besar
-maka
+6
 s
 dalam
 
 anda
 karena
-tidak
-jadi
-di
+akan
+semua
+bahwa
 akan
 tidak
 indonesia
@@ -2579,24 +2579,24 @@ di
 d
 dan
 s
-
+bermain
 orang
--
+dari
 bisa
 9
 untuk
 di
 :
-sudah
+mereka
 dari
 1
-
+ini
 /
 hal
 .
 yang
 tersebut
-sangat
+banyak
 saja
 
 harus
@@ -2604,8 +2604,8 @@ yang
 saja
 para
 dan
-oleh
-namun
+kita
+baik
 tersebut
 sebagai
 waktu
@@ -2627,21 +2627,21 @@ s
 
 mereka
 
-hanya
+permainan
 kami
 pada
 ,
 dan
 i
-situs
+d
 0
 an
 yang
-"
+sangat
 di
 .
 
-menggunakan
+kamu
 d
 yang
 menjadi
@@ -2664,12 +2664,12 @@ itu
 atau
 1
 beberapa
-bermain
+sangat
 untuk
 juga
 4
 bisa
-game
+beberapa
 dengan
 ada
 ada
@@ -2683,26 +2683,26 @@ r
 online
 2
 ,
-ada
-mereka
+2
+u
 ini
 3
 .
-(
+mereka
 ini
 kita
 apa
-judi
+ini
 sangat
-e
+
 dalam
 yang
-7
+s
 s
 menjadi
 ini
 
-banyak
+menjadi
 di
 i
 e
@@ -2712,27 +2712,27 @@ ini
 untuk
 dalam
 :
-(
+t
 seperti
 
 yang
 
 karena
-cara
+harus
 
 untuk
-seperti
+3
 dapat
 3
 
 i
-dalam
+bahwa
 adalah
 ini
 ini
-"
+an
 dalam
-oleh
+judi
 dengan
 dan
 e
@@ -2745,7 +2745,7 @@ tidak
 pada
 mereka
 pada
-juga
+menjadi
 3
 kita
 memiliki
@@ -2753,19 +2753,19 @@ di
 sebagai
 pada
 tahun
-maka
+slot
 mendapatkan
 
 u
 ,
 1
 semua
-menjadi
-2
+e
+maka
 i
 nya
 bisa
-oleh
+8
 :
 slot
 bagi
@@ -2774,14 +2774,14 @@ ada
 tidak
 karena
 e
-para
-dan
+bisnis
+bermain
 bisa
 bisa
 tidak
 dalam
 ini
-5
+"
 
 tersebut
 ke
@@ -2802,8 +2802,8 @@ e
 atau
 di
 jika
-membuat
-kita
+t
+saat
 -
 1
 bisa
@@ -2813,17 +2813,17 @@ tidak
 2
 /
 oleh
-online
+dari
 
-anda
+-
 jika
-tidak
+itu
 dari
 di
 (
 dalam
 beberapa
-salah
+1
 ,
 seperti
 judi
@@ -2831,7 +2831,7 @@ tidak
 anda
 lebih
 yang
-telah
+para
 harus
 ,
 di
@@ -2842,7 +2842,7 @@ memiliki
 dari
 tidak
 dengan
-karena
+:
 :
 untuk
 oleh
@@ -2852,15 +2852,15 @@ e
 dari
 2
 
-salah
+kamu
 "
-dari
-tentang
+perlu
+poker
 dari
 9
 banyak
 anda
-u
+dalam
 lain
 kamu
 yang
@@ -2880,18 +2880,18 @@ s
 di
 yang
 dalam
-kami
+n
 
 ini
 karena
 s
 ini
 baik
-namun
+bisnis
 ,
-3
+sudah
 juga
-hanya
+a
 online
 ini
 itu
@@ -2918,28 +2918,28 @@ ke
 0
 uang
 saya
-satu
+.
 tahun
 a
 atau
 untuk
-pada
+7
 ,
 kamu
-saat
+hal
 jika
 dengan
-seperti
+besar
 memiliki
-bahwa
+saja
 kami
 sangat
 dan
-untuk
-dengan
-para
+nya
+harus
+poker
 kan
-akan
+pada
 itu
 yang
 nya
@@ -2948,29 +2948,29 @@ orang
 saat
 9
 7
-yang
+di
 orang
-besar
+kami
 5
 jika
 
 ke
-sangat
+e
 ke
 
-dapat
+nya
 
 anda
 apa
 ini
 sangat
-an
+kamu
 dari
 e
-anda
+an
 yang
 dari
-sudah
+orang
 
 jadi
 bahwa
@@ -2980,52 +2980,52 @@ banyak
 indonesia
 a
 anda
-salah
+
 anda
 /
-ada
-ada
+ke
+mereka
 d
 
-indonesia
-e
+3
+bahwa
 masih
 ada
 baik
-di
+n
 ,
-menjadi
+1
 s
 anda
 yang
-hanya
+8
 sudah
 ini
-kami
+kamu
 karena
-kan
-
+?
+mendapatkan
 
 an
 juga
-dengan
-karena
+situs
+situs
 atau
-5
+membuat
 kamu
 
-akan
+
 sangat
 yang
-mereka
+dengan
 2
 :
 ada
 nya
-saya
-kami
+4
+menjadi
 membuat
-1
+itu
 tidak
 cara
 s
@@ -3033,12 +3033,12 @@ menjadi
 banyak
 
 lebih
-ini
+-
 5
-baik
-indonesia
+bahwa
+hal
 nya
-bisa
+tidak
 hal
 yang
 untuk
@@ -3049,7 +3049,7 @@ beberapa
 sebagai
 tidak
 s
-
+menggunakan
 0
 hanya
 .
@@ -3057,25 +3057,25 @@ hanya
 dengan
 4
 sudah
-/
+an
 s
-8
+situs
 dengan
 sebagai
-ini
-)
+indonesia
+:
 di
 kita
-:
+9
 2
 i
 )
 pada
 tersebut
 online
-seperti
+4
 tidak
-3
+cara
 dapat
 s
 kan
@@ -3085,19 +3085,19 @@ anda
 cara
 untuk
 ini
-)
+/
 kamu
 harus
-permainan
+slot
 itu
 maka
-ada
+online
 yang
 bahwa
 tidak
 dapat
 yang
-.
+ke
 8
 dapat
 dari
@@ -3112,14 +3112,14 @@ lain
 a
 ?
 oleh
-kita
-permainan
+)
+/
 bisa
-hanya
+bermain
 tidak
 untuk
 nya
-)
+sebagai
 .
 /
 0
@@ -3129,46 +3129,46 @@ di
 saat
 di
 ada
-apa
-a
-:
-5
+akan
+judi
+sebagai
+telah
 poker
 bisa
 beberapa
 situs
-melakukan
+seperti
 saya
 orang
 
 -
 dengan
-an
+sudah
 atau
 para
 anda
 banyak
 itu
-nya
-adalah
+lebih
+juga
 dan
-s
+bahwa
 kamu
 karena
-besar
-baik
-ke
+mendapatkan
+oleh
+8
 online
 adalah
 untuk
 
 dalam
-dengan
+6
 dengan
 cara
 dengan
-an
-slot
+bisnis
+seperti
 8
 dalam
 orang
@@ -3177,12 +3177,12 @@ ke
 di
 orang
 7
-–
+dalam
 saja
 indonesia
 k
-game
-6
+indonesia
+telah
 dengan
 akan
 nya
@@ -3191,12 +3191,12 @@ hal
 8
 
 .
-kami
+besar
 itu
 a
 cara
 .
-"
+semua
 tidak
 s
 ,
@@ -3204,15 +3204,15 @@ nya
 karena
 permainan
 dengan
-(
-4
+ada
+beberapa
 banyak
 kita
 .
 i
 secara
-k
-4
+di
+kamu
 ini
 karena
 banyak
@@ -3221,12 +3221,12 @@ atau
 nya
 adalah
 2
-bisnis
+tahun
 9
 yang
-kamu
-tersebut
-adalah
+dalam
+menjadi
+dan
 
 nya
 lebih
@@ -3237,9 +3237,9 @@ salah
 akan
 memiliki
 a
-saya
+indonesia
 kami
-:
+4
 2
 memiliki
 :
@@ -3248,69 +3248,69 @@ menjadi
 yang
 oleh
 akan
-satu
-kamu
-hal
-sebagai
+lain
+k
+pada
+9
 tidak
 dalam
 oleh
 lain
 untuk
 memiliki
-
+dengan
 jika
 ,
 yang
 ada
-1
+an
 saat
 dan
 itu
 
-kita
+uang
 untuk
 
 yang
-adalah
+2
 ,
 poker
-u
+maka
 akan
 dengan
-mereka
+judi
 ada
 jadi
-1
+satu
 0
 ke
 kita
-slot
+bisnis
 .
 -
+oleh
 yang
-yang
-poker
+9
 permainan
 
 mereka
 dengan
-ke
+banyak
 nya
 orang
-k
+permainan
 dengan
 "
-secara
+a
 an
 hanya
 
 jika
-
+oleh
 t
 sudah
 adalah
-ke
+banyak
 beberapa
 0
 a
@@ -3318,18 +3318,18 @@ m
 yang
 itu
 dari
-situs
+i
 jika
 e
 .
 
 membuat
 1
-4
+saat
 dan
 lebih
 ke
-akan
+indonesia
 memiliki
 saya
 4
@@ -3339,7 +3339,7 @@ ada
 online
 cara
 2
-apa
+lain
 
 0
 situs
@@ -3348,12 +3348,12 @@ tidak
 telah
 2
 5
-/
+situs
 apa
 
 lebih
-oleh
-menjadi
+untuk
+4
 baik
 0
 8
@@ -3363,12 +3363,12 @@ e
 
 judi
 menjadi
-5
+9
 
 "
 (
 i
-hal
+namun
 ,
 dalam
 yang
@@ -3378,8 +3378,8 @@ satu
 a
 pada
 
-akan
-4
+baru
+hal
 cara
 bisa
 sudah
@@ -3391,39 +3391,39 @@ e
 sangat
 (
 bisa
-poker
-/
+salah
+situs
 bisa
 -
 yang
-6
+u
 bahwa
-baru
+maka
 tidak
 di
-8
+kita
 -
-mereka
+membuat
 bermain
-adalah
+oleh
 dengan
-salah
+-
 saja
-anda
+6
 s
 anda
-cara
+an
 9
 sebagai
 salah
 cara
 besar
-judi
+seperti
 -
-cara
+salah
 menjadi
 5
-9
+7
 dan
 
 5
@@ -3443,12 +3443,12 @@ saya
 online
 bisa
 karena
-game
-bagi
+telah
+s
 uang
 jika
 (
-dengan
+anda
 0
 anda
 sudah
@@ -3462,32 +3462,32 @@ situs
 -
 3
 cara
-1
+sudah
 satu
 lebih
 bahwa
 
-e
+saat
 di
 online
 6
 sangat
 harus
 di
-bermain
+?
 3
 0
 bisa
 dari
 
-dapat
+online
 permainan
 ,
 0
 yang
 nya
 akan
-dalam
+maka
 oleh
 1
 memiliki
@@ -3506,11 +3506,11 @@ dan
 dan
 bermain
 bisa
-uang
+1
 dapat
 dengan
 e
-hanya
+bahwa
 dari
 saat
 kamu
@@ -3521,24 +3521,24 @@ m
 bisa
 permainan
 banyak
-(
+a
 an
 hanya
 sangat
 adalah
-ini
+a
 adalah
 5
 mereka
 dan
 .
-judi
+an
 pada
 a
 situs
 seperti
 i
-i
+hanya
 untuk
 pada
 lebih
@@ -3551,7 +3551,7 @@ lebih
 
 seperti
 online
-5
+harus
 dari
 4
 .
@@ -3561,12 +3561,12 @@ juga
 dan
 t
 
-akan
+waktu
 bahwa
-ingin
+n
 
 i
-2
+seperti
 banyak
 hanya
 di
@@ -3580,32 +3580,32 @@ tidak
 untuk
 
 9
-banyak
+k
 :
 saya
-a
-mudah
-kita
+indonesia
+namun
+judi
 juga
 di
 untuk
 s
 lebih
-permainan
+salah
 sangat
 seperti
 "
 )
 hal
-harus
+sangat
 ?
 anda
 5
-cara
+seperti
 3
 k
 ?
-tersebut
+secara
 oleh
 ada
 0
@@ -3626,13 +3626,13 @@ yang
 online
 ,
 1
-kami
+membuat
 jika
-kamu
+game
 cara
 oleh
 kami
-secara
+poker
 banyak
 ke
 ke
@@ -3645,24 +3645,24 @@ s
 akan
 itu
 sangat
-sangat
+uang
 telah
-k
+,
 
 seperti
 bahwa
 ke
 bisa
 pada
-maka
+banyak
 ada
 bisa
-7
+
 banyak
-perlu
+
 tahun
 
-ini
+
 dengan
 sebagai
 dari
@@ -3671,23 +3671,23 @@ sangat
 sebagai
 dalam
 menggunakan
-di
-t
-dapat
-cara
+atau
+akan
+ke
+7
 pada
 slot
-)
+dapat
 
 s
 online
 dari
 e
 bisa
-bagi
+para
 a
-6
-,
+indonesia
+beberapa
 maka
 .
 )
@@ -3714,13 +3714,13 @@ banyak
 yang
 (
 dengan
-e
-poker
+9
+bermain
 bahwa
 karena
 0
-sudah
-hanya
+satu
+hal
 sebagai
 pada
 k
@@ -3728,7 +3728,7 @@ mereka
 bisa
 di
 seperti
--
+d
 dari
 sangat
 kamu

predict_results.json

@@ -1,12 +1,12 @@
 {
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5728267431259155,
-    "predict_rouge1": 0.4618,
+    "predict_loss": 0.5551252961158752,
+    "predict_rouge1": 0.4427,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4613,
-    "predict_rougeLsum": 0.4613,
-    "predict_runtime": 556.0875,
+    "predict_rougeL": 0.4411,
+    "predict_rougeLsum": 0.4407,
+    "predict_runtime": 556.1807,
     "predict_samples": 3737,
-    "predict_samples_per_second": 6.72,
+    "predict_samples_per_second": 6.719,
     "predict_steps_per_second": 0.21
 }

train_results.json

@@ -1,9 +1,9 @@
 {
     "epoch": 5.0,
-    "total_flos": 7.502224981312512e+16,
-    "train_loss": 0.9166960628191452,
-    "train_runtime": 5169.5099,
+    "total_flos": 7.531884760915354e+16,
+    "train_loss": 0.8373744595297635,
+    "train_runtime": 5174.0873,
     "train_samples": 14290,
-    "train_samples_per_second": 13.821,
-    "train_steps_per_second": 1.728
+    "train_samples_per_second": 13.809,
+    "train_steps_per_second": 1.727
 }

trainer_state.json

@@ -10,112 +10,112 @@
   "log_history": [
     {
       "epoch": 1.0,
-      "grad_norm": 5.201539516448975,
+      "grad_norm": 7.113146781921387,
       "learning_rate": 4e-05,
-      "loss": 1.3998,
+      "loss": 1.2329,
       "step": 1787
     },
     {
       "epoch": 1.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6384263634681702,
-      "eval_rouge1": 0.3848,
+      "eval_loss": 0.5976304411888123,
+      "eval_rouge1": 0.3912,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3845,
-      "eval_rougeLsum": 0.3857,
-      "eval_runtime": 115.2126,
-      "eval_samples_per_second": 6.484,
-      "eval_steps_per_second": 0.208,
+      "eval_rougeL": 0.3916,
+      "eval_rougeLsum": 0.392,
+      "eval_runtime": 114.4182,
+      "eval_samples_per_second": 6.529,
+      "eval_steps_per_second": 0.21,
       "step": 1787
     },
     {
       "epoch": 2.0,
-      "grad_norm": 1.993088722229004,
+      "grad_norm": 1.9403228759765625,
       "learning_rate": 3e-05,
-      "loss": 0.8601,
+      "loss": 0.7952,
       "step": 3574
     },
     {
       "epoch": 2.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5792745351791382,
-      "eval_rouge1": 0.391,
+      "eval_loss": 0.5580247044563293,
+      "eval_rouge1": 0.3919,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.391,
-      "eval_rougeLsum": 0.3923,
-      "eval_runtime": 112.3658,
-      "eval_samples_per_second": 6.648,
+      "eval_rougeL": 0.3921,
+      "eval_rougeLsum": 0.3921,
+      "eval_runtime": 112.1899,
+      "eval_samples_per_second": 6.658,
       "eval_steps_per_second": 0.214,
       "step": 3574
     },
     {
       "epoch": 3.0,
-      "grad_norm": 1.5980020761489868,
+      "grad_norm": 1.7163584232330322,
       "learning_rate": 2e-05,
-      "loss": 0.7972,
+      "loss": 0.7407,
       "step": 5361
     },
     {
       "epoch": 3.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5575756430625916,
-      "eval_rouge1": 0.3776,
+      "eval_loss": 0.5366058945655823,
+      "eval_rouge1": 0.3893,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3767,
-      "eval_rougeLsum": 0.3768,
-      "eval_runtime": 112.6817,
-      "eval_samples_per_second": 6.629,
+      "eval_rougeL": 0.3879,
+      "eval_rougeLsum": 0.3866,
+      "eval_runtime": 112.7826,
+      "eval_samples_per_second": 6.623,
       "eval_steps_per_second": 0.213,
       "step": 5361
     },
     {
       "epoch": 4.0,
-      "grad_norm": 3.543159246444702,
+      "grad_norm": 2.9489381313323975,
       "learning_rate": 1e-05,
-      "loss": 0.7698,
+      "loss": 0.7152,
       "step": 7148
     },
     {
       "epoch": 4.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5619614720344543,
-      "eval_rouge1": 0.3579,
+      "eval_loss": 0.5401661992073059,
+      "eval_rouge1": 0.354,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3565,
-      "eval_rougeLsum": 0.3592,
-      "eval_runtime": 112.2967,
-      "eval_samples_per_second": 6.652,
-      "eval_steps_per_second": 0.214,
+      "eval_rougeL": 0.3512,
+      "eval_rougeLsum": 0.3523,
+      "eval_runtime": 112.9681,
+      "eval_samples_per_second": 6.612,
+      "eval_steps_per_second": 0.212,
       "step": 7148
     },
     {
       "epoch": 5.0,
-      "grad_norm": 3.1870193481445312,
+      "grad_norm": 2.7675414085388184,
       "learning_rate": 0.0,
-      "loss": 0.7566,
+      "loss": 0.7029,
       "step": 8935
     },
     {
       "epoch": 5.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5532283186912537,
-      "eval_rouge1": 0.3696,
+      "eval_loss": 0.5351393818855286,
+      "eval_rouge1": 0.3585,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3694,
-      "eval_rougeLsum": 0.3713,
-      "eval_runtime": 112.5191,
-      "eval_samples_per_second": 6.639,
-      "eval_steps_per_second": 0.213,
+      "eval_rougeL": 0.3555,
+      "eval_rougeLsum": 0.357,
+      "eval_runtime": 113.5022,
+      "eval_samples_per_second": 6.581,
+      "eval_steps_per_second": 0.211,
       "step": 8935
     },
     {
       "epoch": 5.0,
       "step": 8935,
-      "total_flos": 7.502224981312512e+16,
-      "train_loss": 0.9166960628191452,
-      "train_runtime": 5169.5099,
-      "train_samples_per_second": 13.821,
-      "train_steps_per_second": 1.728
+      "total_flos": 7.531884760915354e+16,
+      "train_loss": 0.8373744595297635,
+      "train_runtime": 5174.0873,
+      "train_samples_per_second": 13.809,
+      "train_steps_per_second": 1.727
     }
   ],
   "logging_steps": 500,
@@ -123,7 +123,7 @@
   "num_input_tokens_seen": 0,
   "num_train_epochs": 5,
   "save_steps": 500,
-  "total_flos": 7.502224981312512e+16,
+  "total_flos": 7.531884760915354e+16,
   "train_batch_size": 8,
   "trial_name": null,
   "trial_params": null