End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -1,29 +1,29 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.5829301476478577,
-    "eval_rouge1": 0.4334,
+    "eval_loss": 0.5655565857887268,
+    "eval_rouge1": 0.4188,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4324,
-    "eval_rougeLsum": 0.4298,
-    "eval_runtime": 112.8129,
+    "eval_rougeL": 0.4161,
+    "eval_rougeLsum": 0.4157,
+    "eval_runtime": 113.3399,
     "eval_samples": 750,
-    "eval_samples_per_second": 6.648,
-    "eval_steps_per_second": 0.213,
+    "eval_samples_per_second": 6.617,
+    "eval_steps_per_second": 0.212,
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5984877943992615,
-    "predict_rouge1": 0.4583,
+    "predict_loss": 0.5812939405441284,
+    "predict_rouge1": 0.4476,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.458,
-    "predict_rougeLsum": 0.4573,
-    "predict_runtime": 551.561,
+    "predict_rougeL": 0.4475,
+    "predict_rougeLsum": 0.4461,
+    "predict_runtime": 556.1121,
     "predict_samples": 3762,
-    "predict_samples_per_second": 6.821,
-    "predict_steps_per_second": 0.214,
-    "total_flos": 7.546206748253184e+16,
-    "train_loss": 0.9099474502024327,
-    "train_runtime": 5183.9644,
+    "predict_samples_per_second": 6.765,
+    "predict_steps_per_second": 0.212,
+    "total_flos": 7.576040408207155e+16,
+    "train_loss": 0.8314367408773836,
+    "train_runtime": 5188.459,
     "train_samples": 14262,
-    "train_samples_per_second": 13.756,
-    "train_steps_per_second": 1.72
+    "train_samples_per_second": 13.744,
+    "train_steps_per_second": 1.718
 }

eval_results.json

@@ -1,13 +1,13 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.5829301476478577,
-    "eval_rouge1": 0.4334,
+    "eval_loss": 0.5655565857887268,
+    "eval_rouge1": 0.4188,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4324,
-    "eval_rougeLsum": 0.4298,
-    "eval_runtime": 112.8129,
+    "eval_rougeL": 0.4161,
+    "eval_rougeLsum": 0.4157,
+    "eval_runtime": 113.3399,
     "eval_samples": 750,
-    "eval_samples_per_second": 6.648,
-    "eval_steps_per_second": 0.213
+    "eval_samples_per_second": 6.617,
+    "eval_steps_per_second": 0.212
 }

generated_predictions.txt

@@ -2,12 +2,12 @@ k
 beberapa
 2
 dengan
-karena
+adalah
 k
 adalah
 dan
 t
-t
+sangat
 )
 sudah
 orang
@@ -20,15 +20,15 @@ harus
 8
 juga
 
-kamu
+d
 "
 judi
 adalah
 membuat
-bisnis
-dapat
+melakukan
+judi
 dengan
-4
+semua
 2
 6
 juga
@@ -36,29 +36,29 @@ bagi
 judi
 0
 karena
-/
+2
 3
 -
 semua
-4
+bisa
 -
-secara
+baik
 3
 1
-seperti
+(
 situs
 dan
-di
+9
 menjadi
 pada
 ke
 dari
-salah
+slot
 beberapa
 sangat
 
 juga
-bermain
+an
 karena
 n
 jika
@@ -67,12 +67,12 @@ ada
 :
 1
 membuat
-bisnis
 -
-poker
+-
+
 satu
 lebih
-
+dan
 .
 .
 dalam
@@ -82,17 +82,17 @@ ini
 permainan
 
 /
-baik
+oleh
 
 pada
 banyak
 -
-tahun
+maka
 tersebut
 satu
-lebih
+salah
 sangat
-melakukan
+"
 situs
 mereka
 banyak
@@ -105,9 +105,9 @@ sangat
 dari
 s
 juga
-sudah
+satu
 kita
-dengan
+slot
 
 dari
 
@@ -121,12 +121,12 @@ pada
 dalam
 s
 dari
-.
+mendapatkan
 dari
 dan
 bisa
 permainan
-nya
+kan
 dan
 dan
 mereka
@@ -134,7 +134,7 @@ lebih
 kamu
 8
 
-u
+e
 dari
 dan
 lebih
@@ -146,32 +146,32 @@ anda
 atau
 besar
 lebih
-u
-secara
+t
+baik
 di
 :
 5
 
-i
+beberapa
 oleh
-atau
+"
 kita
 bisa
-harus
-:
+tersebut
+seperti
 dan
 untuk
 ,
 4
 kan
-bisnis
+5
 di
 d
-poker
+permainan
 baik
-ke
-bisa
-adalah
+mereka
+6
+nya
 u
 7
 nya
@@ -180,7 +180,7 @@ dalam
 dari
 kamu
 ke
-karena
+untuk
 dengan
 beberapa
 1
@@ -189,7 +189,7 @@ beberapa
 dari
 saya
 1
-saja
+lain
 anda
 dan
 menjadi
@@ -200,7 +200,7 @@ sudah
 
 4
 dari
-sudah
+para
 nya
 anda
 dan
@@ -211,7 +211,7 @@ an
 (
 namun
 hanya
-d
+dapat
 cara
 
 atau
@@ -219,8 +219,8 @@ di
 itu
 6
 dan
-hanya
-4
+orang
+tersebut
 tidak
 -
 2
@@ -230,8 +230,8 @@ anda
 adalah
 4
 harus
-4
-untuk
+terbaik
+t
 saat
 di
 kamu
@@ -240,9 +240,9 @@ kamu
 harus
 mendapatkan
 3
-3
+cara
 di
-orang
+
 1
 satu
 .
@@ -258,7 +258,7 @@ dengan
 ada
 oleh
 adalah
--
+
 ini
 beberapa
 yang
@@ -271,7 +271,7 @@ besar
 bahwa
 yang
 untuk
-di
+itu
 atau
 hal
 situs
@@ -282,20 +282,20 @@ cara
 juga
 dalam
 orang
-harus
+saat
 beberapa
 online
 ini
-situs
+para
 membuat
 pada
-dan
+r
 tersebut
-lain
+d
 2
 dan
 situs
-/
+sudah
 satu
 i
 nya
@@ -316,23 +316,23 @@ bahwa
 orang
 lebih
 nya
-m
+p
 i
-dengan
+kami
 0
 dan
 ,
 
 juga
 untuk
-0
+saat
 untuk
 2
 dapat
-saja
+dan
 yang
 untuk
-di
+u
 dengan
 
 di
@@ -343,24 +343,24 @@ banyak
 /
 dapat
 seperti
-:
+harus
 5
 dan
 -
 4
 hal
 dengan
-d
+6
 kami
 4
 e
 tidak
 sudah
-5
+2
 
-untuk
+menjadi
 saya
-,
+hanya
 dalam
 hal
 banyak
@@ -371,12 +371,12 @@ lebih
 sebagai
 bahwa
 itu
-kami
+seperti
 .
 i
 
 yang
-membuat
+7
 ada
 dengan
 s
@@ -390,8 +390,8 @@ juga
 3
 saat
 8
-membuat
-uang
+-
+mendapatkan
 yang
 dari
 permainan
@@ -417,12 +417,12 @@ tidak
 tidak
 karena
 pada
-saya
+situs
 orang
 itu
 dengan
 permainan
-harus
+/
 itu
 untuk
 anda
@@ -436,11 +436,11 @@ permainan
 bermain
 permainan
 nya
-3
+judi
 ?
-semua
+menggunakan
 akan
-yang
+kami
 dalam
 dari
 akan
@@ -463,17 +463,17 @@ bahwa
 dalam
 5
 (
-bisnis
+,
 .
 ini
-judi
+8
 bahwa
 5
 .
 telah
 indonesia
-indonesia
-s
+6
+maka
 0
 saja
 
@@ -485,15 +485,15 @@ saya
 4
 hanya
 cara
-tersebut
-menggunakan
+membuat
+bagi
 "
 banyak
 memiliki
 
 -
 kan
-memiliki
+situs
 sangat
 0
 orang
@@ -506,15 +506,15 @@ harus
 a
 
 ,
-dalam
-menggunakan
+pada
+bermain
 2
-orang
+:
 k
-dan
+
 satu
 memiliki
-kan
+pemain
 secara
 a
 permainan
@@ -531,14 +531,14 @@ bisa
 dengan
 
 e
-bermain
-hanya
-oleh
+kamu
+"
+–
 
 game
 yang
-harus
-5
+dengan
+menjadi
 sangat
 atau
 ada
@@ -553,26 +553,26 @@ besar
 tahun
 /
 cara
-ada
+saja
 2
 anda
 sudah
 juga
-5
-7
+besar
+hal
 menjadi
 2
 besar
-7
+5
 juga
 bermain
 jadi
 salah
 yang
 ke
-oleh
 dapat
-online
+dapat
+kan
 orang
 dengan
 sudah
@@ -591,19 +591,19 @@ membuat
 itu
 bahwa
 
-"
-e
+saat
+indonesia
 atau
 cara
 
-dan
+sebagai
 -
 mereka
-ini
+u
 
 i
 k
-3
+ingin
 mereka
 s
 menjadi
@@ -611,7 +611,7 @@ menjadi
 i
 lebih
 ingin
-,
+menjadi
 -
 "
 )
@@ -619,11 +619,11 @@ anda
 .
 mereka
 karena
-akan
+an
 1
 anda
 cara
-2
+a
 ada
 orang
 untuk
@@ -631,27 +631,27 @@ bisa
 dengan
 permainan
 anda
-maka
+bahwa
 ini
-situs
+slot
 seperti
 kita
 yang
 /
 saat
 
-d
+permainan
 telah
 dengan
 
 dengan
-anda
+k
 ,
 dari
-itu
+juga
 dapat
-3
-0
+(
+k
 banyak
 sudah
 dapat
@@ -663,16 +663,16 @@ bagi
 yang
 ,
 i
-jika
+pada
 bisa
 9
-u
+saja
 
 tidak
 yang
 indonesia
 yang
-menggunakan
+jika
 bagi
 tidak
 sangat
@@ -680,11 +680,11 @@ atau
 sudah
 
 tidak
-:
+bisa
 dengan
-poker
-?
-baik
+online
+sudah
+besar
 kan
 yang
 atau
@@ -692,33 +692,33 @@ untuk
 
 dengan
 .
-5
+u
 sudah
 satu
 
 3
-juga
+hanya
 online
 besar
-
-slot
+poker
+?
 adalah
-tersebut
+cara
 sudah
-yang
+4
 baik
 bisnis
 atau
 dengan
-saya
-dari
+orang
+4
 tidak
-para
+itu
 
 ke
 .
 pada
-,
+-
 9
 e
 ini
@@ -728,29 +728,29 @@ online
 
 dapat
 0
-membuat
+slot
 untuk
 menjadi
-mendapatkan
+
 yang
 anda
 dengan
 atau
 mereka
-slot
-sangat
+menggunakan
+secara
 saat
 tahun
 
-sangat
+harus
 cara
-dan
+di
 adalah
 adalah
-6
+
 (
 -
-
+kamu
 atau
 ,
 kami
@@ -761,8 +761,8 @@ membuat
 1
 ada
 nya
-/
-kita
+4
+sebagai
 di
 bermain
 lebih
@@ -782,7 +782,7 @@ pada
 banyak
 para
 k
-9
+judi
 bisa
 anda
 ,
@@ -796,7 +796,7 @@ dapat
 sangat
 cara
 untuk
-juga
+dalam
 dan
 anda
 sebagai
@@ -805,22 +805,22 @@ yang
 harus
 1
 satu
-2
+orang
 tidak
 
 indonesia
 an
 .
 satu
-tidak
+akan
 itu
 dapat
-juga
+7
 adalah
 yang
 beberapa
 situs
-mereka
+memiliki
 0
 ,
 satu
@@ -828,9 +828,9 @@ satu
 tidak
 yang
 sangat
-pada
+indonesia
 game
-t
+secara
 ini
 
 
@@ -847,34 +847,34 @@ hanya
 semua
 hanya
 ,
-d
+?
 karena
 juga
 dengan
 situs
-harus
+6
 itu
 8
 situs
-melakukan
-telah
+pada
+.
 nya
 1
 kita
-uang
-di
+banyak
+yang
 an
 di
 sebagai
 8
 sebagai
-di
+atau
 ,
-mereka
+apa
 -
 
 kita
-sebagai
+slot
 kami
 lebih
 lebih
@@ -886,7 +886,7 @@ jika
 0
 oleh
 ,
-menjadi
+harus
 indonesia
 
 nya
@@ -898,18 +898,18 @@ cara
 jika
 a
 -
-memiliki
+cara
 judi
 atau
-permainan
-untuk
+online
+anda
 hal
 akan
 online
 u
-i
+untuk
 dapat
-t
+menjadi
 t
 5
 dengan
@@ -921,46 +921,46 @@ permainan
 banyak
 bisa
 yang
-5
+a
 besar
 :
 bermain
 
-tidak
+itu
 mereka
 melakukan
 ke
-tersebut
+satu
 
-indonesia
+kita
 seperti
-permainan
-u
+akan
+salah
 oleh
-mereka
+lebih
 
 bisa
 saja
 0
-bagi
+)
 
 poker
 saja
-beberapa
+salah
 )
 bisa
 secara
-memiliki
-:
+cara
+game
 3
 slot
 
-nya
+bisa
 1
 memiliki
 1
--
-banyak
+,
+telah
 bisa
 situs
 
@@ -969,13 +969,13 @@ untuk
 karena
 1
 8
-itu
-akan
+
+semua
 yang
 sangat
 satu
 untuk
-mereka
+semua
 di
 baru
 0
@@ -993,33 +993,33 @@ judi
 ke
 memiliki
 4
-saja
+secara
 slot
-karena
+i
 ke
 jika
 lebih
 kamu
-7
+6
 akan
 ini
 menjadi
-akan
+baru
 itu
 dan
 an
-di
+saja
 1
 juga
 salah
-itu
-.
+tidak
+ini
 juga
 kamu
 yang
 7
 ke
-salah
+mendapatkan
 
 
 ,
@@ -1027,17 +1027,17 @@ online
 
 orang
 bahwa
-:
-dalam
+nya
+bermain
 semua
 saja
 online
-indonesia
+bermain
 an
 oleh
 oleh
 lebih
-?
+baik
 adalah
 k
 t
@@ -1051,13 +1051,13 @@ banyak
 memiliki
 0
 5
-kamu
+7
 salah
 )
 saya
 ini
 )
-jadi
+karena
 akan
 dalam
 bisa
@@ -1066,13 +1066,13 @@ indonesia
 5
 :
 (
-secara
-lebih
-membuat
-dan
+yang
 judi
-sebagai
-sebagai
+5
+dan
+sangat
+lebih
+e
 
 
 dengan
@@ -1082,7 +1082,7 @@ ini
 jika
 
 anda
-semua
+maka
 di
 
 ke
@@ -1090,26 +1090,26 @@ online
 
 pada
 secara
-kita
+situs
 online
 mudah
 .
 ,
 s
 sebagai
-
-oleh
+kan
+:
 sangat
 jika
-mendapatkan
+2
 kami
-seperti
+hal
 t
 
 situs
-yang
+judi
 dapat
-membuat
+6
 membuat
 yang
 nya
@@ -1118,27 +1118,27 @@ membuat
 seperti
 juga
 .
-kan
-ada
+m
+
 juga
+
 1
-1
-banyak
+uang
 bisa
 nya
 
-ke
+jika
 sebagai
-an
+poker
 itu
 dan
 sudah
 online
 indonesia
 ,
-4
+kita
 mereka
-membuat
+hal
 salah
 menjadi
 judi
@@ -1150,7 +1150,7 @@ bisnis
 
 untuk
 jika
-tersebut
+seperti
 -
 kita
 
@@ -1170,7 +1170,7 @@ untuk
 
 3
 5
-a
+baik
 dan
 -
 itu
@@ -1179,51 +1179,51 @@ itu
 ini
 
 )
-ingin
-1
+untuk
+sangat
 hal
 
 "
 .
 pada
 ini
-sebagai
+bahwa
 secara
 cara
 itu
-tersebut
+sebagai
 cara
-memiliki
-orang
+ini
+harus
 di
 5
 yang
 "
-yang
+d
 cara
 sangat
 
-pada
+ada
 mereka
 situs
-para
+uang
 orang
-tersebut
-kan
+jika
+kami
 a
-ini
+uang
 menjadi
 yang
 akan
 salah
-ke
+oleh
 bisa
 banyak
 
 1
 0
 .
-kan
+besar
 .
 6
 
@@ -1232,7 +1232,7 @@ dan
 dan
 untuk
 saat
-/
+maka
 dari
 atau
 .
@@ -1240,76 +1240,76 @@ di
 (
 menjadi
 
-membuat
+7
 
 4
 
-oleh
-hanya
+karena
+9
 i
 bisa
 anda
 dapat
 bahwa
-hanya
-memiliki
+judi
+bermain
 :
 -
 
-kami
+"
 1
 ke
-
+akan
 pada
-para
+uang
 hanya
-salah
+secara
 dan
 "
 online
-,
-bisa
+di
+akan
 )
 di
 2
 
 )
-akan
+judi
 banyak
 oleh
 dari
 nya
 maka
 0
-membuat
+.
 -
 tidak
 0
 ,
 dengan
-secara
+saya
 cara
-menggunakan
+/
 
 sebagai
 4
 atau
 ke
 dari
-u
+maka
 salah
 online
 uang
 "
 cara
-tersebut
-permainan
+sebagai
+semua
 dari
 jika
 dapat
 harus
 
-seperti
+membuat
 di
 tersebut
 di
@@ -1324,67 +1324,67 @@ oleh
 saya
 beberapa
 memiliki
-dengan
+yang
 dengan
 banyak
 dan
 dapat
-p
+2
 .
-k
+masih
 "
-mudah
+secara
 
 7
-2
-)
+hal
+secara
 harus
 situs
 seperti
 5
 dari
-o
+besar
 yang
 dalam
 ,
 mereka
 lebih
 saat
-4
+besar
 kamu
-r
+besar
 bisa
-atau
+kamu
 seperti
 anda
 satu
 bisa
-oleh
-?
+sudah
+satu
 pada
 
 banyak
 menjadi
 dan
-semua
+dalam
 saya
 akan
 itu
 bahwa
-adalah
+lebih
 anda
-tersebut
+harus
 ini
-i
+
 nya
 yang
 0
 juga
 adalah
-dari
+hanya
 bahwa
-3
-sangat
+4
+saja
 untuk
 s
 
@@ -1394,22 +1394,22 @@ pada
 nya
 e
 .
-ada
+i
 /
-lebih
-kamu
+e
+u
 tersebut
-telah
+6
 yang
 harus
 saja
-harus
+besar
 kan
 cara
 ada
 nya
 adalah
-dapat
+)
 satu
 sangat
 satu
@@ -1439,11 +1439,11 @@ pada
 (
 di
 semua
-tidak
+para
 online
-(
-?
-1
+harus
+tersebut
+karena
 yang
 d
 permainan
@@ -1451,7 +1451,7 @@ jika
 nya
 juga
 satu
-karena
+cara
 ,
 slot
 situs
@@ -1464,7 +1464,7 @@ seperti
 situs
 ,
 adalah
-orang
+beberapa
 kami
 
 secara
@@ -1474,7 +1474,7 @@ yang
 saya
 adalah
 online
-t
+kami
 nya
 untuk
 telah
@@ -1483,11 +1483,11 @@ karena
 (
 memiliki
 adalah
-i
-mudah
+kan
+poker
 ,
-karena
-salah
+ada
+indonesia
 nya
 harus
 t
@@ -1498,7 +1498,7 @@ ini
 juga
 ini
 2
-/
+s
 
 kami
 :
@@ -1509,12 +1509,12 @@ sudah
 d
 ,
 ,
-,
+yang
 ,
 
 ,
 -
-judi
+seperti
 anda
 atau
 
@@ -1523,58 +1523,58 @@ banyak
 
 seperti
 dari
-.
-7
+satu
+game
 anda
 dalam
-ke
+saya
 sudah
 dalam
-nya
+dalam
 "
 adalah
 pada
 :
 6
-hanya
+9
 menjadi
 ini
--
-menggunakan
-waktu
+(
+di
+mereka
 0
 adalah
 dari
 yang
-banyak
-situs
+seperti
+judi
 di
 dengan
 akan
-"
-slot
+hal
+sebagai
 ,
 judi
 (
-karena
+9
 bisa
-ke
+mereka
 dapat
 satu
 tidak
 adalah
-indonesia
-k
+kamu
+d
 tidak
-nya
+dalam
 bisa
 indonesia
 0
 satu
 dari
-itu
+ke
 lain
-–
+perlu
 poker
 yang
 nya
@@ -1585,18 +1585,18 @@ saya
 namun
 .
 bisa
-salah
-nya
+mereka
+adalah
 9
-hanya
+bermain
 dapat
 5
-kan
+telah
 bisa
 :
 ,
 .
-0
+dalam
 memiliki
 )
 tidak
@@ -1607,20 +1607,20 @@ yang
 adalah
 banyak
 dengan
-7
+ada
 kan
 oleh
 di
 
 maka
 "
-2
+9
 0
-ke
+a
 )
 tidak
 anda
-indonesia
+besar
 bahwa
 poker
 1
@@ -1628,7 +1628,7 @@ kita
 adalah
 ,
 5
-jika
+dan
 ini
 dan
 adalah
@@ -1637,7 +1637,7 @@ beberapa
 tersebut
 
 bermain
-menjadi
+harus
 satu
 3
 ,
@@ -1656,7 +1656,7 @@ akan
 1
 2
 -
-akan
+1
 dapat
 judi
 atau
@@ -1667,7 +1667,7 @@ bermain
 para
 dari
 yang
-sangat
+saat
 dapat
 ada
 dapat
@@ -1688,9 +1688,9 @@ lebih
 nya
 di
 6
-6
+nya
 tidak
-4
+a
 permainan
 
 /
@@ -1698,9 +1698,9 @@ atau
 adalah
 itu
 4
-pada
-nya
-)
+n
+ada
+kamu
 untuk
 dan
 poker
@@ -1711,20 +1711,20 @@ dalam
 yang
 
 untuk
-tidak
+5
 saat
-ke
-pada
+lebih
 pada
+karena
 akan
 itu
-dalam
+tahun
 atau
 :
 satu
 s
 cara
-a
+namun
 pada
 dan
 tersebut
@@ -1733,18 +1733,18 @@ itu
 dan
 1
 online
-besar
+maka
 
 ini
 hanya
-tidak
+uang
 e
 -
 nya
 lebih
-bermain
+poker
 hal
-memiliki
+game
 karena
 yang
 adalah
@@ -1757,28 +1757,28 @@ seperti
 saya
 0
 bisa
-juga
+tidak
 ada
 atau
 yang
 hanya
 d
 pada
-bahwa
-permainan
+situs
+d
 k
-hanya
+judi
 menjadi
 banyak
 bisa
-lain
+pada
 atau
 (
 bisa
 mereka
 d
 8
-sebagai
+saat
 ke
 ada
 untuk
@@ -1788,38 +1788,38 @@ ini
 untuk
 0
 yang
-sudah
+saja
 bisa
 tidak
-kami
+pemain
 online
 s
-juga
-telah
+u
+sebagai
 kami
 karena
 bahwa
-i
+(
 besar
-nya
+untuk
 ke
-saja
+membuat
 atau
 -
-dari
+dengan
 atau
 "
-0
+mereka
 sudah
 0
 dan
 5
 bisnis
-cara
+4
 s
 dengan
 atau
-6
+besar
 beberapa
 saat
 "
@@ -1833,8 +1833,8 @@ mereka
 5
 dan
 maka
-mereka
-k
+3
+9
 nya
 uang
 0
@@ -1849,10 +1849,10 @@ salah
 membuat
 )
 
-2
-indonesia
+pada
+saat
 secara
-p
+bagi
 bagi
 untuk
 4
@@ -1860,13 +1860,13 @@ juga
 
 .
 .
-online
-a
-.
+sudah
+orang
+dengan
 mereka
 1
 tidak
-apa
+tahun
 ke
 bisa
 juga
@@ -1877,7 +1877,7 @@ tidak
 sebagai
 ini
 anda
-waktu
+s
 cara
 online
 cara
@@ -1889,11 +1889,11 @@ i
 2
 ke
 memiliki
-dan
+3
 jika
-orang
-sebagai
-7
+saat
+bahwa
+online
 sudah
 cara
 dapat
@@ -1907,50 +1907,50 @@ mereka
 )
 seperti
 atau
-indonesia
+6
 2
 :
 sangat
-menggunakan
+maka
 ini
 dan
-tersebut
+
 dan
 harus
 di
-(
-judi
+para
+sebagai
 ada
 i
-beberapa
+slot
 harus
 harus
-para
-m
+seperti
+k
 0
 bermain
 di
 bisa
 adalah
+atau
+dalam
 dapat
-game
-ada
 seperti
 seperti
 i
 -
-9
+:
 tersebut
-sangat
-online
-a
+lain
+,
+jadi
 kami
 s
 bahwa
 karena
 adalah
 karena
-memiliki
+dengan
 mungkin
 yang
 
@@ -1958,15 +1958,15 @@ yang
 harus
 besar
 membuat
-e
-pemain
+dalam
+dalam
 ke
-dan
+k
 dengan
 
-kamu
+satu
 
-beberapa
+poker
 ,
 untuk
 beberapa
@@ -1984,9 +1984,9 @@ mendapatkan
 menjadi
 bahwa
 pada
-karena
+kita
 p
-di
+untuk
 :
 baik
 lebih
@@ -2001,16 +2001,16 @@ judi
 9
 5
 atau
-ada
+saat
 dalam
 "
 .
 i
-yang
+ini
 satu
-jika
+memiliki
 lebih
-harus
+9
 
 3
 lebih
@@ -2018,22 +2018,22 @@ beberapa
 kamu
 saat
 kita
-membuat
-kami
+baik
+menggunakan
 mereka
 tersebut
 "
 6
 ,
-u
+7
 ke
 3
 dan
 -
-judi
+sebagai
 anda
-memiliki
-saat
+seperti
+2
 
 maka
 .
@@ -2042,32 +2042,32 @@ kamu
 
 7
 /
-u
+bermain
 kan
 anda
 juga
 pada
 2
-banyak
+)
+dalam
 dalam
-s
 hanya
 s
 ini
-1
-k
+bisa
+e
 dapat
 0
-maka
-e
+bahwa
+membuat
 baik
 ke
-bisa
+6
 dan
-
+7
 akan
-kita
-(
+poker
+ke
 bisa
 3
 .
@@ -2076,42 +2076,42 @@ adalah
 d
 -
 d
-banyak
+cara
 dan
 orang
 akan
 bisnis
-1
+ingin
 .
-?
+sudah
 memiliki
 
 dari
 melakukan
-banyak
+ke
 saya
-t
-7
+secara
+-
 anda
 sangat
 0
 untuk
 an
-jika
+bahwa
 9
 lebih
 anda
-7
+baik
 ke
 tidak
 :
 
 yang
-satu
+dari
 
-kan
+atau
 
-bahwa
+anda
 ke
 besar
 satu
@@ -2121,11 +2121,11 @@ secara
 ,
 itu
 7
-n
-
+bisnis
 
+-
 
-–
+waktu
 banyak
 2
 dan
@@ -2134,7 +2134,7 @@ cara
 -
 baik
 akan
-apa
+kamu
 ke
 (
 para
@@ -2153,34 +2153,34 @@ harus
 bisa
 saya
 sudah
-adalah
+satu
 tidak
-an
+situs
 
 
 menjadi
 6
 (
 menjadi
-secara
+t
 orang
 0
 anda
 cara
 dari
 8
-uang
+4
 an
 sebagai
-para
+7
 dengan
 :
-oleh
+saya
 s
 -
 adalah
-satu
-tidak
+beberapa
+memiliki
 1
 saya
 sudah
@@ -2190,21 +2190,21 @@ t
 hal
 kami
 untuk
-mereka
+lain
 d
 untuk
-anda
+kami
 memiliki
 anda
 ini
 para
-beberapa
+u
 juga
 kita
 kan
 
 menggunakan
-5
+sebagai
 hal
 seperti
 yang
@@ -2221,14 +2221,14 @@ anda
 anda
 bisa
 2
-ke
-beberapa
+,
+permainan
 
 untuk
 
 "
-(
-ada
+tersebut
+baik
 e
 menjadi
 -
@@ -2239,7 +2239,7 @@ telah
 mereka
 dengan
 atau
-)
+.
 dan
 dalam
 karena
@@ -2254,11 +2254,11 @@ oleh
 .
 pada
 lebih
-cara
-7
+orang
+maka
 ada
 
-baik
+indonesia
 bahwa
 yang
 1
@@ -2282,14 +2282,14 @@ cara
 dapat
 dan
 dapat
-:
-?
+harus
+7
 ,
 uang
 besar
 oleh
-saya
-di
+sudah
+bahwa
 anda
 ?
 memiliki
@@ -2300,18 +2300,18 @@ akan
 i
 di
 ,
-bisa
+ini
 yang
-saya
-e
-baik
+"
+memiliki
+t
 (
 dapat
 i
 sangat
 oleh
 saya
-permainan
+uang
 menjadi
 dengan
 untuk
@@ -2321,7 +2321,7 @@ anda
 i
 ada
 indonesia
-e
+sangat
 
 orang
 mereka
@@ -2329,29 +2329,29 @@ an
 
 hanya
 -
-ada
+lebih
 9
 pada
 an
 dalam
 )
-0
+1
 kami
 judi
 harus
 seperti
-?
+8
 nya
-kita
+pemain
 ini
-hanya
+sangat
 yang
-atau
+u
 dan
 slot
 8
 )
-e
+bahwa
 –
 
 jika
@@ -2366,16 +2366,16 @@ akan
 dengan
 itu
 
-yang
-uang
-
+d
+secara
+harus
 dengan
 saat
-kamu
-seperti
+t
+saya
 n
 saya
-lain
+online
 2
 dan
 yang
@@ -2384,13 +2384,13 @@ s
 ini
 4
 itu
-satu
+5
 cara
 yang
 
 .
 di
-menggunakan
+mendapatkan
 nya
 hal
 nya
@@ -2401,11 +2401,11 @@ yang
 ?
 oleh
 akan
-semua
+e
 secara
 di
-sangat
-
+i
+menjadi
 2
 menjadi
 2
@@ -2413,34 +2413,34 @@ poker
 i
 beberapa
 d
-bahwa
-dan
+cara
+besar
 saja
-4
+hanya
 an
 nya
 dari
-saja
+akan
 ,
-banyak
-beberapa
-nya
+secara
+secara
+adalah
 an
 secara
-akan
+membuat
 di
 untuk
 
-?
+saja
 itu
 
-karena
+membuat
 semua
-anda
+atau
 itu
 
 kami
-anda
+dengan
 8
 cara
 hal
@@ -2448,9 +2448,9 @@ pada
 saat
 4
 0
-mereka
 "
-?
+"
+perlu
 adalah
 sebagai
 dan
@@ -2458,7 +2458,7 @@ di
 secara
 bisa
 :
-/
+menggunakan
 ,
 yang
 "
@@ -2468,8 +2468,8 @@ akan
 (
 anda
 
-masih
-"
+adalah
+sudah
 situs
 akan
 5
@@ -2479,40 +2479,40 @@ t
 besar
 oleh
 dan
-atau
-cara
+dengan
+8
 semua
 t
 kamu
-secara
+telah
 anda
 ini
 jika
 tahun
 game
 untuk
-
+hal
 adalah
 akan
-an
-salah
+kamu
+d
 k
-8
+7
 tidak
 atau
 kan
 (
 di
-hal
-poker
+sebagai
+lain
 dapat
 8
 k
-bahwa
+online
 bahwa
 7
 bisa
-sudah
+cara
 bisa
 mereka
 yang
@@ -2523,7 +2523,7 @@ kamu
 dapat
 
 dalam
-untuk
+bahwa
 )
 bahwa
 akan
@@ -2531,42 +2531,42 @@ mereka
 lain
 "
 tidak
-1
+dapat
 di
 dari
 kita
-salah
+dengan
 akan
 0
 bisa
 
 ,
-seperti
+kamu
 i
 itu
 kami
-2
+ke
 
 harus
 juga
 uang
 secara
-bisa
+nya
 anda
-membuat
+hanya
 besar
 9
 0
 saat
 4
 para
-sebagai
-namun
+hal
+u
 satu
 situs
 kami
 di
-situs
+kami
 situs
 pada
 i
@@ -2581,19 +2581,19 @@ situs
 sudah
 itu
 )
-4
+indonesia
 lebih
 karena
 akan
 5
-salah
+maka
 sangat
 lebih
 0
 bermain
-para
+memiliki
 saat
-di
+perlu
 salah
 0
 dapat
@@ -2601,9 +2601,9 @@ dapat
 tersebut
 satu
 itu
-sudah
+hanya
 beberapa
-ke
+anda
 kan
 tidak
 "
@@ -2614,12 +2614,12 @@ ini
 ?
 situs
 ada
-(
+cara
 nya
 
 )
 beberapa
-lebih
+karena
 dengan
 
 bisa
@@ -2629,14 +2629,14 @@ namun
 /
 
 indonesia
-sangat
+saat
 p
 kami
 cara
 1
-hal
+poker
 lebih
-juga
+online
 dapat
 permainan
 kan
@@ -2645,14 +2645,14 @@ juga
 di
 0
 .
-s
+online
 
 /
-bahwa
+kami
 cara
 menggunakan
 5
-1
+harus
 
 
 situs
@@ -2668,13 +2668,13 @@ dari
 seperti
 
 
-:
+tersebut
 di
 dengan
 anda
 situs
 2
-dalam
+s
 kamu
 
 hal
@@ -2690,51 +2690,51 @@ akan
 dari
 bisa
 dalam
-k
-satu
+hanya
+indonesia
 yang
 4
 membuat
-
+orang
 seperti
-lebih
+menggunakan
 mendapatkan
 itu
-an
+dengan
 tidak
 
-tidak
+sebagai
 akan
 )
 -
-
+game
 
 dengan
-dan
+mendapatkan
 "
 situs
-dengan
+namun
 :
-cara
+permainan
 banyak
-2
+,
 s
 dalam
 s
-bahwa
-lebih
+/
+karena
 ke
 pada
 slot
 5
 2
 baik
-di
+2
 ke
 adalah
 -
-2
-membuat
+sebagai
+waktu
 kami
 sebagai
 8
@@ -2743,17 +2743,17 @@ kita
 tahun
 s
 yang
-yang
+saja
 yang
 5
 bisa
 satu
-judi
+4
 bisa
 u
 an
 t
-8
+tersebut
 4
 )
 dengan
@@ -2766,14 +2766,14 @@ ke
 menjadi
 banyak
 lain
-an
+secara
 lebih
 0
 akan
 mereka
-membuat
-slot
-3
+hanya
+pemain
+orang
 itu
 )
 untuk
@@ -2785,16 +2785,16 @@ a
 slot
 baik
 hal
-,
+pada
 tersebut
-dan
-untuk
+t
+namun
 dengan
 u
 
 bisa
 3
-
+sangat
 3
 saya
 -
@@ -2810,10 +2810,10 @@ kan
 di
 lebih
 anda
-situs
+sangat
 s
 lebih
-karena
+kan
 
 mereka
 dari
@@ -2821,67 +2821,67 @@ dari
 adalah
 0
 situs
-"
+anda
 .
 
 ini
-
-membuat
+ingin
+karena
 nya
 jika
-juga
+i
 dan
 bahwa
 banyak
 harus
-bermain
-seperti
+baik
+sebagai
 1
 menjadi
 .
 dengan
-orang
+permainan
 dalam
 seperti
 beberapa
 ada
-poker
-seperti
+yang
+satu
 i
 tidak
 kami
-ke
-:
+karena
+saya
 
-salah
+besar
 0
 e
 di
-8
+oleh
 tidak
 cara
 0
 kami
 banyak
 juga
-dengan
+adalah
 t
 judi
+3
 untuk
-untuk
-sebagai
+k
 juga
 
 (
 saya
 bisa
-beberapa
-.
+satu
+?
 juga
 di
 orang
 tidak
-kamu
+k
 :
 harus
 tidak
@@ -2890,14 +2890,14 @@ tidak
 6
 1
 4
-an
+3
 orang
 7
 anda
-baik
+tahun
 apa
 -
-para
+kamu
 ,
 kami
 yang
@@ -2907,38 +2907,38 @@ ini
 
 saja
 nya
-kami
-hal
+8
+/
 i
 beberapa
 
-salah
+besar
 menjadi
 yang
 0
-,
+saja
 kita
-online
+lebih
 online
 8
 saja
 adalah
 ?
-satu
+kamu
 sudah
 satu
 atau
-secara
+hal
 tidak
 3
-jika
+memiliki
 
 orang
 ke
 jika
 lebih
 karena
-juga
+lebih
 9
 -
 jadi
@@ -2950,10 +2950,10 @@ satu
 3
 ,
 yang
-e
 jika
+baik
 /
-
+menggunakan
 mereka
 i
 saat
@@ -2963,29 +2963,29 @@ kami
 pada
 pada
 untuk
-maka
+o
 di
-3
+?
 sudah
 situs
 tersebut
 ,
 dapat
-u
+kamu
 dalam
-ini
-jadi
+2
+d
 i
 )
 (
 9
 namun
-bagi
-ada
 dapat
-jika
+lebih
+permainan
+poker
 di
-online
+m
 untuk
 3
 seperti
@@ -2993,7 +2993,7 @@ baik
 
 
 saat
-di
+slot
 maka
 
 untuk
@@ -3004,7 +3004,7 @@ satu
 hal
 akan
 pada
-
+.
 n
 )
 )
@@ -3016,7 +3016,7 @@ i
 menjadi
 dari
 pada
-kamu
+beberapa
 satu
 online
 ?
@@ -3025,27 +3025,27 @@ sebagai
 tidak
 saat
 orang
-kita
+5
+bisa
 untuk
-nya
-3
+an
 tidak
-2
+:
 mereka
 oleh
 dengan
 situs
 
-telah
+adalah
 a
 saat
 ,
--
+ini
 /
 cara
 dari
-untuk
-terbaik
+orang
+p
 pada
 bisa
 ,
@@ -3055,16 +3055,16 @@ akan
 di
 untuk
 di
-harus
+e
 judi
 dapat
 banyak
-.
+banyak
 .
 menjadi
 akan
 tentang
-karena
+t
 menjadi
 online
 oleh
@@ -3072,11 +3072,11 @@ satu
 dalam
 2
 anda
-di
-anda
 tahun
+anda
+indonesia
 adalah
-hal
+/
 sudah
 ,
 
@@ -3092,9 +3092,9 @@ judi
 itu
 ada
 atau
-5
+besar
 kita
-membuat
+secara
 
 kamu
 secara
@@ -3107,7 +3107,7 @@ untuk
 
 itu
 -
-anda
+judi
 nya
 cara
 
@@ -3131,10 +3131,10 @@ adalah
 beberapa
 sebagai
 :
-baik
+nya
 )
 s
-online
+lebih
 atau
 
 banyak
@@ -3145,8 +3145,8 @@ slot
 online
 s
 ini
-:
-nya
+tersebut
+menggunakan
 tidak
 ,
 memiliki
@@ -3155,7 +3155,7 @@ s
 
 secara
 p
-sangat
+kami
 sebagai
 
 tidak
@@ -3163,31 +3163,31 @@ banyak
 .
 6
 adalah
-dan
+permainan
 mereka
 jika
 online
 sudah
 
-dari
+menjadi
 di
 anda
 juga
 sebagai
-anda
+bahwa
 baik
 5
 u
-satu
+tersebut
 menjadi
 saya
 2
-kan
+melakukan
 1
-mereka
+(
 dan
 an
-hanya
+membuat
 pada
 memiliki
 adalah
@@ -3197,35 +3197,35 @@ bisa
 seperti
 
 untuk
-/
+3
 cara
 anda
 hal
 d
 a
 -
-situs
+menggunakan
 4
 dan
 2
-di
+ingin
 .
-di
+nya
 k
 anda
 bisa
-maka
-besar
+untuk
+akan
 dengan
-d
+u
 
-harus
+(
 permainan
 pada
 karena
 
-maka
-hal
+hanya
+harga
 tidak
 sangat
 bahwa
@@ -3234,11 +3234,11 @@ di
 game
 d
 satu
-k
+situs
 ,
 :
-oleh
-1
+harga
+online
 seperti
 nya
 .
@@ -3252,20 +3252,20 @@ lain
 
 )
 online
-0
+tentang
 akan
-
-sebagai
-dengan
+uang
+kan
+kamu
 4
 hal
-mereka
+banyak
 e
 4
 tidak
 saat
 
-d
+dari
 0
 ,
 nya
@@ -3292,19 +3292,19 @@ atau
 e
 banyak
 mereka
-itu
+orang
 tidak
 judi
-karena
+8
 
 dapat
-kamu
+
 yang
 dengan
 semua
 game
-cara
-semua
+an
+namun
 itu
 .
 ,
@@ -3322,42 +3322,42 @@ dengan
 dan
 7
 satu
-,
+besar
 5
 namun
 3
 bisa
-?
+7
 ,
 anda
 ini
 
 dari
 e
-beberapa
+lain
 dengan
 permainan
 adalah
 itu
-waktu
+dapat
 )
 secara
 dan
-dan
+bahwa
 anda
 adalah
-
+karena
 ?
 "
 2
 u
 5
 baik
-anda
+0
 menjadi
 
 adalah
-jika
+orang
 lebih
 
 
@@ -3366,36 +3366,36 @@ pada
 dalam
 "
 -
-ke
+sudah
 indonesia
-melakukan
+judi
 oleh
 juga
 lebih
 5
 nya
 dengan
-secara
+harus
 4
 mereka
 yang
-kami
-adalah
+karena
+pada
 3
 0
 saya
 .
 pada
 dari
-telah
-kita
+anda
+an
 )
 di
 0
 di
 .
 e
-u
+besar
 di
 dan
 bahwa
@@ -3403,14 +3403,14 @@ bahwa
 di
 t
 anda
-atau
+o
 saya
 di
-dengan
+akan
 tidak
 
 hal
-beberapa
+kita
 7
 itu
 lebih
@@ -3421,7 +3421,7 @@ indonesia
 kami
 5
 membuat
-6
+t
 pada
 sangat
 juga
@@ -3431,7 +3431,7 @@ akan
 :
 an
 
-yang
+hanya
 
 cara
 dan
@@ -3456,10 +3456,10 @@ bisa
 untuk
 nya
 -
-banyak
+dapat
 baru
 karena
-adalah
+dari
 dengan
 1
 untuk
@@ -3467,10 +3467,10 @@ permainan
 ,
 anda
 ke
-di
+semua
 )
-judi
-online
+saat
+pada
 
 situs
 sudah
@@ -3478,21 +3478,21 @@ atau
 ini
 ada
 ,
-7
-salah
+beberapa
+para
 itu
-membuat
-4
+k
+5
 kami
 5
 ada
-dan
+bagi
 dan
 dengan
-4
+7
 dengan
 situs
-waktu
+atau
 saat
 tidak
 .
@@ -3500,7 +3500,7 @@ kita
 tersebut
 ,
 dalam
-tersebut
+6
 anda
 1
 ini
@@ -3510,7 +3510,7 @@ a
 banyak
 2
 orang
-dapat
+ke
 
 jika
 an
@@ -3528,39 +3528,39 @@ an
 mereka
 di
 hal
-beberapa
+bahwa
 lain
-namun
+maka
 
 adalah
 bisa
 satu
-ada
+tersebut
 saat
-"
-karena
-besar
+1
+lebih
+ke
 )
-online
+ke
 atau
-p
-dari
+mendapatkan
+-
 dapat
 lain
-adalah
-saat
+1
+di
 dan
 itu
 i
 jika
-sudah
+namun
 permainan
 ,
 ini
 karena
 di
 pada
-saat
+cara
 dan
 indonesia
 hal
@@ -3572,11 +3572,11 @@ sangat
 online
 .
 jika
-satu
+an
 .
 dari
 a
-juga
+/
 saya
 apa
 beberapa
@@ -3585,13 +3585,13 @@ pada
 1
 (
 ?
-)
+(
 
 1
 juga
-(
+ke
 satu
-kamu
+situs
 online
 ke
 yang
@@ -3606,15 +3606,15 @@ saja
 pada
 satu
 2
-5
+3
 
-permainan
-masih
+beberapa
+juga
 ?
 di
 3
 0
-
+lain
 .
 /
 yang
@@ -3625,17 +3625,17 @@ an
 ke
 
 bahwa
-ke
+banyak
 baik
-poker
+menggunakan
 saja
-mendapatkan
+oleh
 an
 5
-melakukan
+para
 tidak
 1
-orang
+)
 yang
 dengan
 pada
@@ -3646,7 +3646,7 @@ memiliki
 hal
 untuk
 maka
-online
+sebagai
 
 ke
 7
@@ -3654,20 +3654,20 @@ ke
 (
 kan
 pada
-(
+3
 
 t
 nya
 slot
-adalah
+0
 jika
 ?
-0
+e
 pada
 banyak
 .
-saat
-bahwa
+oleh
+tersebut
 ke
 membuat
 nya
@@ -3676,17 +3676,17 @@ e
 karena
 anda
 sudah
-saya
+salah
 
 di
 online
-permainan
+kan
 1
-an
+7
 salah
 untuk
 nya
-adalah
+akan
 online
 ada
 memiliki
@@ -3704,17 +3704,17 @@ an
 
 ke
 orang
-cara
+"
 untuk
 di
 hanya
 tidak
-d
+
 anda
 baru
-saya
-membuat
-3
+"
+sebagai
+4
 9
 di
 tersebut
@@ -3726,16 +3726,16 @@ dengan
 dan
 dapat
 itu
-s
+jika
 perlu
 1
 i
 dengan
 i
-t
+a
 -
-(
-slot
+seperti
+situs
 dengan
 kamu
 dengan
@@ -3744,7 +3744,7 @@ i
 "
 untuk
 hal
-8
+orang
 anda
 kita
 3
@@ -3753,10 +3753,10 @@ anda
 dengan
 dapat
 s
-bahwa
+sebagai
 
 hal
-uang
+lebih
 kami
 3
 poker

predict_results.json

@@ -1,12 +1,12 @@
 {
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5984877943992615,
-    "predict_rouge1": 0.4583,
+    "predict_loss": 0.5812939405441284,
+    "predict_rouge1": 0.4476,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.458,
-    "predict_rougeLsum": 0.4573,
-    "predict_runtime": 551.561,
+    "predict_rougeL": 0.4475,
+    "predict_rougeLsum": 0.4461,
+    "predict_runtime": 556.1121,
     "predict_samples": 3762,
-    "predict_samples_per_second": 6.821,
-    "predict_steps_per_second": 0.214
+    "predict_samples_per_second": 6.765,
+    "predict_steps_per_second": 0.212
 }

train_results.json

@@ -1,9 +1,9 @@
 {
     "epoch": 5.0,
-    "total_flos": 7.546206748253184e+16,
-    "train_loss": 0.9099474502024327,
-    "train_runtime": 5183.9644,
+    "total_flos": 7.576040408207155e+16,
+    "train_loss": 0.8314367408773836,
+    "train_runtime": 5188.459,
     "train_samples": 14262,
-    "train_samples_per_second": 13.756,
-    "train_steps_per_second": 1.72
+    "train_samples_per_second": 13.744,
+    "train_steps_per_second": 1.718
 }

trainer_state.json

@@ -10,112 +10,112 @@
   "log_history": [
     {
       "epoch": 1.0,
-      "grad_norm": 2.067873001098633,
+      "grad_norm": 1.6311372518539429,
       "learning_rate": 4e-05,
-      "loss": 1.3917,
+      "loss": 1.2271,
       "step": 1783
     },
     {
       "epoch": 1.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6615284085273743,
-      "eval_rouge1": 0.5471,
+      "eval_loss": 0.6274559497833252,
+      "eval_rouge1": 0.491,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.5464,
-      "eval_rougeLsum": 0.5441,
-      "eval_runtime": 113.2569,
-      "eval_samples_per_second": 6.622,
-      "eval_steps_per_second": 0.212,
+      "eval_rougeL": 0.4864,
+      "eval_rougeLsum": 0.4859,
+      "eval_runtime": 113.872,
+      "eval_samples_per_second": 6.586,
+      "eval_steps_per_second": 0.211,
       "step": 1783
     },
     {
       "epoch": 2.0,
-      "grad_norm": 1.6221102476119995,
+      "grad_norm": 1.6894285678863525,
       "learning_rate": 3e-05,
-      "loss": 0.854,
+      "loss": 0.7893,
       "step": 3566
     },
     {
       "epoch": 2.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6180859208106995,
-      "eval_rouge1": 0.4511,
+      "eval_loss": 0.5954805612564087,
+      "eval_rouge1": 0.4382,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4501,
-      "eval_rougeLsum": 0.4463,
-      "eval_runtime": 112.5406,
-      "eval_samples_per_second": 6.664,
-      "eval_steps_per_second": 0.213,
+      "eval_rougeL": 0.4358,
+      "eval_rougeLsum": 0.4345,
+      "eval_runtime": 114.0151,
+      "eval_samples_per_second": 6.578,
+      "eval_steps_per_second": 0.21,
       "step": 3566
     },
     {
       "epoch": 3.0,
-      "grad_norm": 1.800586462020874,
+      "grad_norm": 2.1006124019622803,
       "learning_rate": 2e-05,
-      "loss": 0.7905,
+      "loss": 0.7347,
       "step": 5349
     },
     {
       "epoch": 3.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5925126671791077,
-      "eval_rouge1": 0.421,
+      "eval_loss": 0.5738495588302612,
+      "eval_rouge1": 0.4461,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4197,
-      "eval_rougeLsum": 0.4168,
-      "eval_runtime": 112.6751,
-      "eval_samples_per_second": 6.656,
-      "eval_steps_per_second": 0.213,
+      "eval_rougeL": 0.4432,
+      "eval_rougeLsum": 0.4417,
+      "eval_runtime": 113.8613,
+      "eval_samples_per_second": 6.587,
+      "eval_steps_per_second": 0.211,
       "step": 5349
     },
     {
       "epoch": 4.0,
-      "grad_norm": 1.7010269165039062,
+      "grad_norm": 1.6685503721237183,
       "learning_rate": 1e-05,
-      "loss": 0.7624,
+      "loss": 0.7084,
       "step": 7132
     },
     {
       "epoch": 4.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5808362364768982,
-      "eval_rouge1": 0.438,
+      "eval_loss": 0.5617851614952087,
+      "eval_rouge1": 0.4416,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4378,
-      "eval_rougeLsum": 0.433,
-      "eval_runtime": 112.7701,
-      "eval_samples_per_second": 6.651,
-      "eval_steps_per_second": 0.213,
+      "eval_rougeL": 0.4409,
+      "eval_rougeLsum": 0.4389,
+      "eval_runtime": 113.0623,
+      "eval_samples_per_second": 6.634,
+      "eval_steps_per_second": 0.212,
       "step": 7132
     },
     {
       "epoch": 5.0,
-      "grad_norm": 1.4592366218566895,
+      "grad_norm": 1.329140543937683,
       "learning_rate": 0.0,
-      "loss": 0.751,
+      "loss": 0.6976,
       "step": 8915
     },
     {
       "epoch": 5.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.5829301476478577,
-      "eval_rouge1": 0.4334,
+      "eval_loss": 0.5655565857887268,
+      "eval_rouge1": 0.4188,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4324,
-      "eval_rougeLsum": 0.4298,
-      "eval_runtime": 112.6735,
-      "eval_samples_per_second": 6.656,
-      "eval_steps_per_second": 0.213,
+      "eval_rougeL": 0.4161,
+      "eval_rougeLsum": 0.4157,
+      "eval_runtime": 113.3074,
+      "eval_samples_per_second": 6.619,
+      "eval_steps_per_second": 0.212,
       "step": 8915
     },
     {
       "epoch": 5.0,
       "step": 8915,
-      "total_flos": 7.546206748253184e+16,
-      "train_loss": 0.9099474502024327,
-      "train_runtime": 5183.9644,
-      "train_samples_per_second": 13.756,
-      "train_steps_per_second": 1.72
+      "total_flos": 7.576040408207155e+16,
+      "train_loss": 0.8314367408773836,
+      "train_runtime": 5188.459,
+      "train_samples_per_second": 13.744,
+      "train_steps_per_second": 1.718
     }
   ],
   "logging_steps": 500,
@@ -123,7 +123,7 @@
   "num_input_tokens_seen": 0,
   "num_train_epochs": 5,
   "save_steps": 500,
-  "total_flos": 7.546206748253184e+16,
+  "total_flos": 7.576040408207155e+16,
   "train_batch_size": 8,
   "trial_name": null,
   "trial_params": null