End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -0,0 +1,29 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.5829301476478577,
+    "eval_rouge1": 0.4334,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.4324,
+    "eval_rougeLsum": 0.4298,
+    "eval_runtime": 112.8129,
+    "eval_samples": 750,
+    "eval_samples_per_second": 6.648,
+    "eval_steps_per_second": 0.213,
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5984877943992615,
+    "predict_rouge1": 0.4583,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.458,
+    "predict_rougeLsum": 0.4573,
+    "predict_runtime": 551.561,
+    "predict_samples": 3762,
+    "predict_samples_per_second": 6.821,
+    "predict_steps_per_second": 0.214,
+    "total_flos": 7.546206748253184e+16,
+    "train_loss": 0.9099474502024327,
+    "train_runtime": 5183.9644,
+    "train_samples": 14262,
+    "train_samples_per_second": 13.756,
+    "train_steps_per_second": 1.72
+}

eval_results.json

@@ -0,0 +1,13 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.5829301476478577,
+    "eval_rouge1": 0.4334,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.4324,
+    "eval_rougeLsum": 0.4298,
+    "eval_runtime": 112.8129,
+    "eval_samples": 750,
+    "eval_samples_per_second": 6.648,
+    "eval_steps_per_second": 0.213
+}

generated_predictions.txt

@@ -0,0 +1,3762 @@
+k
+beberapa
+2
+dengan
+karena
+k
+adalah
+dan
+t
+t
+)
+sudah
+orang
+ada
+di
+
+.
+harus
+7
+8
+juga
+
+kamu
+"
+judi
+adalah
+membuat
+bisnis
+dapat
+dengan
+4
+2
+6
+juga
+bagi
+judi
+0
+karena
+/
+3
+-
+semua
+4
+-
+secara
+3
+1
+seperti
+situs
+dan
+di
+menjadi
+pada
+ke
+dari
+salah
+beberapa
+sangat
+
+juga
+bermain
+karena
+n
+jika
+sebagai
+ada
+:
+1
+membuat
+bisnis
+-
+poker
+satu
+lebih
+
+.
+.
+dalam
+)
+dari
+ini
+permainan
+
+/
+baik
+
+pada
+banyak
+-
+tahun
+tersebut
+satu
+lebih
+sangat
+melakukan
+situs
+mereka
+banyak
+atau
+bisa
+untuk
+kan
+itu
+sangat
+dari
+s
+juga
+sudah
+kita
+dengan
+
+dari
+
+
+dari
+8
+ada
+memiliki
+jika
+pada
+dalam
+s
+dari
+.
+dari
+dan
+bisa
+permainan
+nya
+dan
+dan
+mereka
+lebih
+kamu
+8
+
+u
+dari
+dan
+lebih
+anda
+/
+-
+3
+.
+atau
+besar
+lebih
+u
+secara
+di
+:
+5
+
+i
+oleh
+atau
+kita
+bisa
+harus
+:
+dan
+untuk
+,
+4
+kan
+bisnis
+di
+d
+poker
+baik
+ke
+bisa
+adalah
+u
+7
+nya
+di
+dalam
+dari
+kamu
+ke
+karena
+dengan
+beberapa
+1
+
+
+dari
+saya
+1
+saja
+anda
+dan
+menjadi
+seperti
+online
+yang
+sudah
+
+4
+dari
+sudah
+nya
+anda
+dan
+dari
+.
+kita
+an
+(
+namun
+hanya
+d
+cara
+
+atau
+di
+itu
+6
+dan
+hanya
+4
+tidak
+-
+2
+1
+menggunakan
+anda
+adalah
+4
+harus
+4
+untuk
+saat
+di
+kamu
+0
+
+harus
+mendapatkan
+3
+3
+di
+orang
+1
+satu
+.
+tersebut
+menjadi
+di
+1
+
+telah
+cara
+untuk
+dengan
+ada
+oleh
+adalah
+-
+ini
+beberapa
+yang
+yang
+,
+yang
+bisa
+besar
+
+bahwa
+yang
+untuk
+di
+atau
+hal
+situs
+(
+i
+k
+cara
+juga
+dalam
+orang
+harus
+beberapa
+online
+ini
+situs
+membuat
+pada
+dan
+tersebut
+lain
+2
+dan
+situs
+/
+satu
+i
+nya
+seperti
+:
+7
+kami
+juga
+nya
+2
+anda
+yang
+tersebut
+yang
+kan
+s
+bahwa
+orang
+lebih
+nya
+m
+i
+dengan
+0
+dan
+,
+
+juga
+untuk
+0
+untuk
+2
+dapat
+saja
+yang
+untuk
+di
+dengan
+
+di
+:
+ini
+juga
+banyak
+/
+dapat
+seperti
+:
+5
+dan
+-
+4
+hal
+dengan
+d
+kami
+4
+e
+tidak
+sudah
+5
+
+untuk
+saya
+,
+dalam
+hal
+banyak
+jika
+tidak
+0
+lebih
+sebagai
+bahwa
+itu
+kami
+.
+i
+
+yang
+membuat
+ada
+dengan
+s
+0
+
+dan
+satu
+permainan
+kita
+juga
+3
+saat
+8
+membuat
+uang
+yang
+dari
+permainan
+2
+adalah
+(
+pada
+anda
+5
+(
+sudah
+di
+
+oleh
+maka
+
+permainan
+dalam
+nya
+kita
+
+tidak
+tidak
+karena
+pada
+saya
+orang
+itu
+dengan
+permainan
+harus
+itu
+untuk
+anda
+harus
+ingin
+jika
+adalah
+2
+dan
+permainan
+bermain
+permainan
+nya
+3
+?
+semua
+akan
+yang
+dalam
+dari
+akan
+:
+lebih
+
+?
+karena
+
+a
+nya
+menggunakan
+dan
+3
+karena
+dan
+terbaik
+s
+bahwa
+dalam
+5
+(
+bisnis
+.
+ini
+judi
+bahwa
+5
+.
+telah
+indonesia
+indonesia
+s
+0
+saja
+
+3
+e
+(
+pada
+saya
+4
+hanya
+cara
+tersebut
+menggunakan
+"
+banyak
+memiliki
+
+-
+kan
+memiliki
+sangat
+0
+orang
+s
+t
+anda
+ke
+yang
+harus
+a
+
+,
+dalam
+menggunakan
+2
+orang
+k
+dan
+satu
+memiliki
+kan
+secara
+a
+permainan
+
+online
+anda
+itu
+untuk
+yang
+itu
+dapat
+ada
+bisa
+dengan
+
+e
+bermain
+hanya
+oleh
+
+game
+yang
+harus
+5
+sangat
+atau
+ada
+
+mereka
+ke
+ada
+di
+untuk
+
+besar
+tahun
+/
+cara
+ada
+2
+anda
+sudah
+juga
+5
+7
+menjadi
+2
+besar
+7
+juga
+bermain
+jadi
+salah
+yang
+ke
+oleh
+dapat
+online
+orang
+dengan
+sudah
+1
+dan
+ini
+0
+ada
+
+an
+telah
+saya
+seperti
+kamu
+membuat
+itu
+bahwa
+
+"
+e
+atau
+cara
+
+dan
+-
+mereka
+ini
+
+i
+k
+3
+mereka
+s
+menjadi
+9
+i
+lebih
+ingin
+,
+-
+"
+)
+anda
+.
+mereka
+karena
+akan
+1
+anda
+cara
+2
+ada
+orang
+untuk
+bisa
+dengan
+permainan
+anda
+maka
+ini
+situs
+seperti
+kita
+yang
+/
+saat
+
+d
+telah
+dengan
+
+dengan
+anda
+,
+dari
+itu
+dapat
+3
+0
+banyak
+sudah
+dapat
+(
+kita
+dalam
+dengan
+bagi
+yang
+,
+i
+jika
+bisa
+9
+u
+
+tidak
+yang
+indonesia
+yang
+menggunakan
+bagi
+tidak
+sangat
+atau
+sudah
+
+tidak
+:
+dengan
+poker
+?
+baik
+kan
+yang
+atau
+untuk
+
+dengan
+.
+5
+sudah
+satu
+
+3
+juga
+online
+besar
+
+slot
+adalah
+tersebut
+sudah
+yang
+baik
+bisnis
+atau
+dengan
+saya
+dari
+tidak
+para
+
+ke
+.
+pada
+,
+9
+e
+ini
+"
+
+online
+
+dapat
+0
+membuat
+untuk
+menjadi
+mendapatkan
+yang
+anda
+dengan
+atau
+mereka
+slot
+sangat
+saat
+tahun
+
+sangat
+cara
+dan
+adalah
+adalah
+6
+(
+-
+
+atau
+,
+kami
+untuk
+untuk
+untuk
+membuat
+1
+ada
+nya
+/
+kita
+di
+bermain
+lebih
+jika
+hal
+(
+"
+poker
+8
+dan
+1
+:
+2
+itu
+lain
+pada
+banyak
+para
+k
+9
+bisa
+anda
+,
+menjadi
+nya
+
+di
+situs
+2
+dapat
+sangat
+cara
+untuk
+juga
+dan
+anda
+sebagai
+yang
+
+harus
+1
+satu
+2
+tidak
+
+indonesia
+an
+.
+satu
+tidak
+itu
+dapat
+juga
+adalah
+yang
+beberapa
+situs
+mereka
+0
+,
+satu
+
+tidak
+yang
+sangat
+pada
+game
+t
+ini
+
+
+bahwa
+di
+dalam
+-
+situs
+a
+game
+saja
+hanya
+
+semua
+hanya
+,
+d
+karena
+juga
+dengan
+situs
+harus
+itu
+8
+situs
+melakukan
+telah
+nya
+1
+kita
+uang
+di
+an
+di
+sebagai
+8
+sebagai
+di
+,
+mereka
+-
+
+kita
+sebagai
+kami
+lebih
+lebih
+dalam
+untuk
+nya
+dan
+jika
+0
+oleh
+,
+menjadi
+indonesia
+
+nya
+an
+pada
+k
+
+cara
+jika
+a
+-
+memiliki
+judi
+atau
+permainan
+untuk
+hal
+akan
+online
+u
+i
+dapat
+t
+t
+5
+dengan
+harus
+yang
+.
+7
+permainan
+banyak
+bisa
+yang
+5
+besar
+:
+bermain
+
+tidak
+mereka
+melakukan
+ke
+tersebut
+
+indonesia
+seperti
+permainan
+u
+oleh
+mereka
+
+bisa
+saja
+0
+bagi
+
+poker
+saja
+beberapa
+)
+bisa
+secara
+memiliki
+:
+3
+slot
+
+nya
+1
+memiliki
+1
+-
+banyak
+bisa
+situs
+
+kita
+untuk
+karena
+1
+8
+itu
+akan
+yang
+sangat
+satu
+untuk
+mereka
+di
+baru
+0
+ini
+secara
+saja
+apa
+jika
+salah
+apa
+seperti
+untuk
+yang
+judi
+ke
+memiliki
+4
+saja
+slot
+karena
+ke
+jika
+lebih
+kamu
+7
+akan
+ini
+menjadi
+akan
+itu
+dan
+an
+di
+1
+juga
+salah
+itu
+.
+juga
+kamu
+yang
+7
+ke
+salah
+
+
+,
+online
+
+orang
+bahwa
+:
+dalam
+semua
+saja
+online
+indonesia
+an
+oleh
+oleh
+lebih
+?
+adalah
+k
+t
+
+karena
+cara
+)
+
+5
+banyak
+memiliki
+0
+5
+kamu
+salah
+)
+saya
+ini
+)
+jadi
+akan
+dalam
+bisa
+
+indonesia
+5
+:
+(
+secara
+lebih
+membuat
+dan
+judi
+sebagai
+sebagai
+
+
+dengan
+:
+saya
+ini
+jika
+
+anda
+semua
+di
+
+ke
+online
+
+pada
+secara
+kita
+online
+mudah
+.
+,
+s
+sebagai
+
+oleh
+sangat
+jika
+mendapatkan
+kami
+seperti
+t
+
+situs
+yang
+dapat
+membuat
+membuat
+yang
+nya
+pada
+membuat
+seperti
+juga
+.
+kan
+ada
+juga
+1
+1
+banyak
+bisa
+nya
+
+ke
+sebagai
+an
+itu
+dan
+sudah
+online
+indonesia
+,
+4
+mereka
+membuat
+salah
+menjadi
+judi
+dan
+
+pada
+bisnis
+,
+
+untuk
+jika
+tersebut
+-
+kita
+
+-
+besar
+membuat
+cara
+bisa
+dan
+ke
+ini
+
+di
+t
+adalah
+untuk
+
+3
+5
+a
+dan
+-
+itu
+.
+)
+ini
+
+)
+ingin
+1
+hal
+
+"
+.
+pada
+ini
+sebagai
+secara
+cara
+itu
+tersebut
+cara
+memiliki
+orang
+di
+5
+yang
+"
+yang
+cara
+sangat
+
+pada
+mereka
+situs
+para
+orang
+tersebut
+kan
+a
+ini
+menjadi
+yang
+akan
+salah
+ke
+bisa
+banyak
+
+1
+0
+.
+kan
+.
+6
+
+dan
+?
+dan
+untuk
+saat
+/
+dari
+atau
+.
+di
+(
+menjadi
+
+membuat
+
+4
+
+oleh
+hanya
+i
+bisa
+anda
+dapat
+bahwa
+hanya
+memiliki
+:
+-
+
+kami
+1
+ke
+
+pada
+para
+hanya
+salah
+dan
+"
+online
+,
+bisa
+)
+di
+2
+
+)
+akan
+banyak
+oleh
+dari
+nya
+maka
+0
+membuat
+-
+tidak
+0
+,
+dengan
+secara
+cara
+menggunakan
+
+sebagai
+4
+atau
+ke
+dari
+u
+salah
+online
+uang
+"
+cara
+tersebut
+permainan
+dari
+jika
+dapat
+harus
+
+seperti
+di
+tersebut
+di
+
+lain
+7
+akan
+
+ke
+satu
+oleh
+saya
+beberapa
+memiliki
+dengan
+dengan
+banyak
+dan
+dapat
+p
+.
+k
+"
+mudah
+
+7
+2
+)
+harus
+situs
+seperti
+5
+dari
+o
+yang
+dalam
+,
+mereka
+lebih
+saat
+4
+kamu
+r
+bisa
+atau
+seperti
+anda
+satu
+bisa
+oleh
+?
+pada
+
+banyak
+menjadi
+dan
+semua
+saya
+akan
+itu
+bahwa
+adalah
+anda
+tersebut
+ini
+i
+nya
+yang
+0
+juga
+adalah
+dari
+bahwa
+3
+sangat
+untuk
+s
+
+dalam
+tersebut
+pada
+nya
+e
+.
+ada
+/
+lebih
+kamu
+tersebut
+telah
+yang
+harus
+saja
+harus
+kan
+cara
+ada
+nya
+adalah
+dapat
+satu
+sangat
+satu
+anda
+lebih
+hal
+sudah
+di
+maka
+ke
+mereka
+dari
+kami
+harus
+namun
+9
+(
+k
+dalam
+,
+:
+)
+adalah
+.
+menjadi
+pada
+(
+di
+semua
+tidak
+online
+(
+?
+1
+yang
+d
+permainan
+jika
+nya
+juga
+satu
+karena
+,
+slot
+situs
+juga
+harus
+seperti
+
+0
+(
+situs
+,
+adalah
+orang
+kami
+
+secara
+adalah
+
+yang
+saya
+adalah
+online
+t
+nya
+untuk
+telah
+-
+karena
+(
+memiliki
+adalah
+i
+mudah
+,
+karena
+salah
+nya
+harus
+t
+dalam
+
+ini
+5
+juga
+ini
+2
+/
+
+kami
+:
+"
+sudah
+
+
+d
+,
+,
+,
+,
+
+,
+-
+judi
+anda
+atau
+
+dapat
+banyak
+
+seperti
+dari
+.
+7
+anda
+dalam
+ke
+sudah
+dalam
+nya
+"
+adalah
+pada
+:
+6
+hanya
+menjadi
+ini
+-
+menggunakan
+waktu
+0
+adalah
+dari
+yang
+banyak
+situs
+di
+dengan
+akan
+"
+slot
+,
+judi
+(
+karena
+bisa
+ke
+dapat
+satu
+tidak
+adalah
+indonesia
+k
+tidak
+nya
+bisa
+indonesia
+0
+satu
+dari
+itu
+lain
+–
+poker
+yang
+nya
+namun
+.
+d
+saya
+namun
+.
+bisa
+salah
+nya
+9
+hanya
+dapat
+5
+kan
+bisa
+:
+,
+.
+0
+memiliki
+)
+tidak
+0
+jadi
+dan
+yang
+adalah
+banyak
+dengan
+7
+kan
+oleh
+di
+
+maka
+"
+2
+0
+ke
+)
+tidak
+anda
+indonesia
+bahwa
+poker
+1
+kita
+adalah
+,
+5
+jika
+ini
+dan
+adalah
+ada
+beberapa
+tersebut
+
+bermain
+menjadi
+satu
+3
+,
+judi
+banyak
+ini
+pada
+,
+saat
+,
+karena
+e
+poker
+akan
+-
+1
+2
+-
+akan
+dapat
+judi
+atau
+satu
+dalam
+namun
+bermain
+para
+dari
+yang
+sangat
+dapat
+ada
+dapat
+yang
+.
+online
+)
+karena
+untuk
+yang
+juga
+t
+telah
+adalah
+,
+tidak
+lebih
+nya
+di
+6
+6
+tidak
+4
+permainan
+
+/
+atau
+adalah
+itu
+4
+pada
+nya
+)
+untuk
+dan
+poker
+u
+banyak
+
+dalam
+yang
+
+untuk
+tidak
+saat
+ke
+pada
+pada
+akan
+itu
+dalam
+atau
+:
+satu
+s
+cara
+a
+pada
+dan
+tersebut
+itu
+.
+dan
+1
+online
+besar
+
+ini
+hanya
+tidak
+e
+-
+nya
+lebih
+bermain
+hal
+memiliki
+karena
+yang
+adalah
+0
+-
+bahwa
+salah
+ada
+seperti
+saya
+0
+bisa
+juga
+ada
+atau
+yang
+hanya
+d
+pada
+bahwa
+permainan
+k
+hanya
+menjadi
+banyak
+bisa
+lain
+atau
+(
+bisa
+mereka
+d
+8
+sebagai
+ke
+ada
+untuk
+dapat
+dengan
+ini
+untuk
+0
+yang
+sudah
+bisa
+tidak
+kami
+online
+s
+juga
+telah
+kami
+karena
+bahwa
+i
+besar
+nya
+ke
+saja
+atau
+-
+dari
+atau
+"
+0
+sudah
+0
+dan
+5
+bisnis
+cara
+s
+dengan
+atau
+6
+beberapa
+saat
+"
+1
+bisa
+tersebut
+jika
+"
+
+mereka
+5
+dan
+maka
+mereka
+k
+nya
+uang
+0
+anda
+4
+banyak
+3
+dengan
+
+nya
+salah
+membuat
+)
+
+2
+indonesia
+secara
+p
+bagi
+untuk
+4
+juga
+
+.
+.
+online
+a
+.
+mereka
+1
+tidak
+apa
+ke
+bisa
+juga
+,
+.
+dan
+tidak
+sebagai
+ini
+anda
+waktu
+cara
+online
+cara
+satu
+dan
+jika
+hal
+i
+2
+ke
+memiliki
+dan
+jika
+orang
+sebagai
+7
+sudah
+cara
+dapat
+lebih
+besar
+adalah
+anda
+dengan
+
+mereka
+)
+seperti
+atau
+indonesia
+2
+:
+sangat
+menggunakan
+ini
+dan
+tersebut
+dan
+harus
+di
+(
+judi
+ada
+i
+beberapa
+harus
+harus
+para
+m
+0
+bermain
+di
+bisa
+adalah
+dapat
+game
+ada
+seperti
+seperti
+i
+-
+9
+tersebut
+sangat
+online
+a
+kami
+s
+bahwa
+karena
+adalah
+karena
+memiliki
+mungkin
+yang
+
+.
+harus
+besar
+membuat
+e
+pemain
+ke
+dan
+dengan
+
+kamu
+
+beberapa
+,
+untuk
+beberapa
+lain
+itu
+dan
+9
+i
+kami
+mereka
+di
+sebagai
+mendapatkan
+.
+menjadi
+bahwa
+pada
+karena
+p
+di
+:
+baik
+lebih
+salah
+satu
+3
+(
+memiliki
+9
+lebih
+judi
+9
+5
+atau
+ada
+dalam
+"
+.
+i
+yang
+satu
+jika
+lebih
+harus
+
+3
+lebih
+beberapa
+kamu
+saat
+kita
+membuat
+kami
+mereka
+tersebut
+"
+6
+,
+u
+ke
+3
+dan
+-
+judi
+anda
+memiliki
+saat
+
+maka
+.
+"
+kamu
+
+7
+/
+u
+kan
+anda
+juga
+pada
+2
+banyak
+dalam
+s
+hanya
+s
+ini
+1
+k
+dapat
+0
+maka
+e
+baik
+ke
+bisa
+dan
+
+akan
+kita
+(
+bisa
+3
+.
+adalah
+5
+d
+-
+d
+banyak
+dan
+orang
+akan
+bisnis
+1
+.
+?
+memiliki
+
+dari
+melakukan
+banyak
+saya
+t
+7
+anda
+sangat
+0
+untuk
+an
+jika
+9
+lebih
+anda
+7
+ke
+tidak
+:
+
+yang
+satu
+
+kan
+
+bahwa
+ke
+besar
+satu
+
+5
+secara
+,
+itu
+7
+n
+
+
+
+–
+banyak
+2
+dan
+satu
+cara
+-
+baik
+akan
+apa
+ke
+(
+para
+hal
+juga
+
+0
+,
+anda
+an
+sebagai
+-
+
+s
+harus
+bisa
+saya
+sudah
+adalah
+tidak
+an
+
+
+menjadi
+6
+(
+menjadi
+secara
+orang
+0
+anda
+cara
+dari
+8
+uang
+an
+sebagai
+para
+dengan
+:
+oleh
+s
+-
+adalah
+satu
+tidak
+1
+saya
+sudah
+memiliki
+ini
+t
+hal
+kami
+untuk
+mereka
+d
+untuk
+anda
+memiliki
+anda
+ini
+para
+beberapa
+juga
+kita
+kan
+
+menggunakan
+5
+hal
+seperti
+yang
+satu
+sangat
+nya
+hal
+dan
+untuk
+pada
+permainan
+anda
+
+anda
+bisa
+2
+ke
+beberapa
+
+untuk
+
+"
+(
+ada
+e
+menjadi
+-
+dari
+i
+3
+telah
+mereka
+dengan
+atau
+)
+dan
+dalam
+karena
+
+dari
+maka
+melakukan
+permainan
+dalam
+s
+oleh
+.
+pada
+lebih
+cara
+7
+ada
+
+baik
+bahwa
+yang
+1
+9
+telah
+banyak
+online
+4
+salah
+banyak
+mudah
+0
+:
+8
+
+dari
+situs
+,
+dengan
+cara
+dapat
+dan
+dapat
+:
+?
+,
+uang
+besar
+oleh
+saya
+di
+anda
+?
+memiliki
+tidak
+an
+akan
+
+i
+di
+,
+bisa
+yang
+saya
+e
+baik
+(
+dapat
+i
+sangat
+oleh
+saya
+permainan
+menjadi
+dengan
+untuk
+lebih
+beberapa
+anda
+i
+ada
+indonesia
+e
+
+orang
+mereka
+an
+
+hanya
+-
+ada
+9
+pada
+an
+dalam
+)
+0
+kami
+judi
+harus
+seperti
+?
+nya
+kita
+ini
+hanya
+yang
+atau
+dan
+slot
+8
+)
+e
+–
+
+jika
+3
+ke
+
+bermain
+dari
+game
+akan
+
+dengan
+itu
+
+yang
+uang
+
+dengan
+saat
+kamu
+seperti
+n
+saya
+lain
+2
+dan
+yang
+s
+
+ini
+4
+itu
+satu
+cara
+yang
+
+.
+di
+menggunakan
+nya
+hal
+nya
+ke
+4
+dalam
+yang
+?
+oleh
+akan
+semua
+secara
+di
+sangat
+
+2
+menjadi
+2
+poker
+i
+beberapa
+d
+bahwa
+dan
+saja
+4
+an
+nya
+dari
+saja
+,
+banyak
+beberapa
+nya
+an
+secara
+akan
+di
+untuk
+
+?
+itu
+
+karena
+semua
+anda
+itu
+
+kami
+anda
+8
+cara
+hal
+pada
+saat
+4
+0
+mereka
+"
+?
+adalah
+sebagai
+dan
+di
+secara
+bisa
+:
+/
+,
+yang
+"
+dari
+sangat
+akan
+(
+anda
+
+masih
+"
+situs
+akan
+5
+anda
+permainan
+t
+besar
+oleh
+dan
+atau
+cara
+semua
+t
+kamu
+secara
+anda
+ini
+jika
+tahun
+game
+untuk
+
+adalah
+akan
+an
+salah
+k
+8
+tidak
+atau
+kan
+(
+di
+hal
+poker
+dapat
+8
+k
+bahwa
+bahwa
+7
+bisa
+sudah
+bisa
+mereka
+yang
+s
+yang
+kamu
+
+dapat
+
+dalam
+untuk
+)
+bahwa
+akan
+mereka
+lain
+"
+tidak
+1
+di
+dari
+kita
+salah
+akan
+0
+bisa
+
+,
+seperti
+i
+itu
+kami
+2
+
+harus
+juga
+uang
+secara
+bisa
+anda
+membuat
+besar
+9
+0
+saat
+4
+para
+sebagai
+namun
+satu
+situs
+kami
+di
+situs
+situs
+pada
+i
+yang
+2
+0
+,
+t
+u
+dalam
+situs
+sudah
+itu
+)
+4
+lebih
+karena
+akan
+5
+salah
+sangat
+lebih
+0
+bermain
+para
+saat
+di
+salah
+0
+dapat
+1
+tersebut
+satu
+itu
+sudah
+beberapa
+ke
+kan
+tidak
+"
+dan
+saat
+.
+ini
+?
+situs
+ada
+(
+nya
+
+)
+beberapa
+lebih
+dengan
+
+bisa
+online
+namun
+,
+/
+
+indonesia
+sangat
+p
+kami
+cara
+1
+hal
+lebih
+juga
+dapat
+permainan
+kan
+juga
+juga
+di
+0
+.
+s
+
+/
+bahwa
+cara
+menggunakan
+5
+1
+
+
+situs
+juga
+2
+bisa
+menjadi
+
+indonesia
+saat
+atau
+dari
+seperti
+
+
+:
+di
+dengan
+anda
+situs
+2
+dalam
+kamu
+
+hal
+maka
+ingin
+bisa
+sudah
+bahwa
+saya
+untuk
+akan
+:
+dari
+bisa
+dalam
+k
+satu
+yang
+4
+membuat
+
+seperti
+lebih
+mendapatkan
+itu
+an
+tidak
+
+tidak
+akan
+)
+-
+
+
+dengan
+dan
+"
+situs
+dengan
+:
+cara
+banyak
+2
+s
+dalam
+s
+bahwa
+lebih
+ke
+pada
+slot
+5
+2
+baik
+di
+ke
+adalah
+-
+2
+membuat
+kami
+sebagai
+8
+
+kita
+tahun
+s
+yang
+yang
+yang
+5
+bisa
+satu
+judi
+bisa
+u
+an
+t
+8
+4
+)
+dengan
+saya
+seperti
+
+e
+baik
+ke
+menjadi
+banyak
+lain
+an
+lebih
+0
+akan
+mereka
+membuat
+slot
+3
+itu
+)
+untuk
+judi
+4
+hal
+a
+7
+slot
+baik
+hal
+,
+tersebut
+dan
+untuk
+dengan
+u
+
+bisa
+3
+
+3
+saya
+-
+,
+juga
+dari
+,
+permainan
+2
+untuk
+s
+kan
+di
+lebih
+anda
+situs
+s
+lebih
+karena
+
+mereka
+dari
+,
+adalah
+0
+situs
+"
+.
+
+ini
+
+membuat
+nya
+jika
+juga
+dan
+bahwa
+banyak
+harus
+bermain
+seperti
+1
+menjadi
+.
+dengan
+orang
+dalam
+seperti
+beberapa
+ada
+poker
+seperti
+i
+tidak
+kami
+ke
+:
+
+salah
+0
+e
+di
+8
+tidak
+cara
+0
+kami
+banyak
+juga
+dengan
+t
+judi
+untuk
+untuk
+sebagai
+juga
+
+(
+saya
+bisa
+beberapa
+.
+juga
+di
+orang
+tidak
+kamu
+:
+harus
+tidak
+tidak
+1
+6
+1
+4
+an
+orang
+7
+anda
+baik
+apa
+-
+para
+,
+kami
+yang
+ini
+5
+2
+
+saja
+nya
+kami
+hal
+i
+beberapa
+
+salah
+menjadi
+yang
+0
+,
+kita
+online
+online
+8
+saja
+adalah
+?
+satu
+sudah
+satu
+atau
+secara
+tidak
+3
+jika
+
+orang
+ke
+jika
+lebih
+karena
+juga
+9
+-
+jadi
+online
+
+0
+kan
+satu
+3
+,
+yang
+e
+jika
+/
+
+mereka
+i
+saat
+.
+indonesia
+kami
+pada
+pada
+untuk
+maka
+di
+3
+sudah
+situs
+tersebut
+,
+dapat
+u
+dalam
+ini
+jadi
+i
+)
+(
+9
+namun
+bagi
+ada
+dapat
+jika
+di
+online
+untuk
+3
+seperti
+baik
+
+
+saat
+di
+maka
+
+untuk
+
+
+ke
+satu
+hal
+akan
+pada
+
+n
+)
+)
+lebih
+beberapa
+"
+3
+i
+menjadi
+dari
+pada
+kamu
+satu
+online
+?
+s
+sebagai
+tidak
+saat
+orang
+kita
+untuk
+nya
+3
+tidak
+2
+mereka
+oleh
+dengan
+situs
+
+telah
+a
+saat
+,
+-
+/
+cara
+dari
+untuk
+terbaik
+pada
+bisa
+,
+an
+1
+akan
+di
+untuk
+di
+harus
+judi
+dapat
+banyak
+.
+.
+menjadi
+akan
+tentang
+karena
+menjadi
+online
+oleh
+satu
+dalam
+2
+anda
+di
+anda
+tahun
+adalah
+hal
+sudah
+,
+
+(
+:
+dalam
+poker
+adalah
+cara
+kamu
+ada
+judi
+itu
+ada
+atau
+5
+kita
+membuat
+
+kamu
+secara
+di
+uang
+menjadi
+0
+judi
+untuk
+
+itu
+-
+anda
+nya
+cara
+
+)
+ke
+dapat
+karena
+0
+baik
+
+besar
+bisnis
+yang
+i
+,
+?
+-
+untuk
+tidak
+adalah
+beberapa
+sebagai
+:
+baik
+)
+s
+online
+atau
+
+banyak
+/
+itu
+.
+slot
+online
+s
+ini
+:
+nya
+tidak
+,
+memiliki
+s
+)
+
+secara
+p
+sangat
+sebagai
+
+tidak
+banyak
+.
+6
+adalah
+dan
+mereka
+jika
+online
+sudah
+
+dari
+di
+anda
+juga
+sebagai
+anda
+baik
+5
+u
+satu
+menjadi
+saya
+2
+kan
+1
+mereka
+dan
+an
+hanya
+pada
+memiliki
+adalah
+untuk
+itu
+bisa
+seperti
+
+untuk
+/
+cara
+anda
+hal
+d
+a
+-
+situs
+4
+dan
+2
+di
+.
+di
+k
+anda
+bisa
+maka
+besar
+dengan
+d
+
+harus
+permainan
+pada
+karena
+
+maka
+hal
+tidak
+sangat
+bahwa
+karena
+di
+game
+d
+satu
+k
+,
+:
+oleh
+1
+seperti
+nya
+.
+5
+online
+online
+itu
+dan
+i
+lain
+
+)
+online
+0
+akan
+
+sebagai
+dengan
+4
+hal
+mereka
+e
+4
+tidak
+saat
+
+d
+0
+,
+nya
+dan
+besar
+secara
+1
+sudah
+3
+dan
+banyak
+0
+2
+saja
+secara
+pada
+di
+ke
+9
+satu
+melakukan
+atau
+,
+e
+banyak
+mereka
+itu
+tidak
+judi
+karena
+
+dapat
+kamu
+yang
+dengan
+semua
+game
+cara
+semua
+itu
+.
+,
+bisa
+hanya
+yang
+4
+ke
+anda
+,
+atau
+lebih
+menjadi
+dengan
+dan
+7
+satu
+,
+5
+namun
+3
+bisa
+?
+,
+anda
+ini
+
+dari
+e
+beberapa
+dengan
+permainan
+adalah
+itu
+waktu
+)
+secara
+dan
+dan
+anda
+adalah
+
+?
+"
+2
+u
+5
+baik
+anda
+menjadi
+
+adalah
+jika
+lebih
+
+
+saat
+pada
+dalam
+"
+-
+ke
+indonesia
+melakukan
+oleh
+juga
+lebih
+5
+nya
+dengan
+secara
+4
+mereka
+yang
+kami
+adalah
+3
+0
+saya
+.
+pada
+dari
+telah
+kita
+)
+di
+0
+di
+.
+e
+u
+di
+dan
+bahwa
+/
+di
+t
+anda
+atau
+saya
+di
+dengan
+tidak
+
+hal
+beberapa
+7
+itu
+lebih
+baik
+secara
+bahwa
+indonesia
+kami
+5
+membuat
+6
+pada
+sangat
+juga
+(
+seperti
+akan
+:
+an
+
+yang
+
+cara
+dan
+karena
+
+semua
+hanya
+baik
+dari
+0
+itu
+dan
+yang
+tidak
+saat
+cara
+dengan
+anda
+anda
+yang
+bisa
+untuk
+nya
+-
+banyak
+baru
+karena
+adalah
+dengan
+1
+untuk
+permainan
+,
+anda
+ke
+di
+)
+judi
+online
+
+situs
+sudah
+atau
+ini
+ada
+,
+7
+salah
+itu
+membuat
+4
+kami
+5
+ada
+dan
+dan
+dengan
+4
+dengan
+situs
+waktu
+saat
+tidak
+.
+kita
+tersebut
+,
+dalam
+tersebut
+anda
+1
+ini
+juga
+.
+a
+banyak
+2
+orang
+dapat
+
+jika
+an
+dapat
+harus
+-
+kita
+mereka
+dalam
+oleh
+di
+permainan
+.
+an
+mereka
+di
+hal
+beberapa
+lain
+namun
+
+adalah
+bisa
+satu
+ada
+saat
+"
+karena
+besar
+)
+online
+atau
+p
+dari
+dapat
+lain
+adalah
+saat
+dan
+itu
+i
+jika
+sudah
+permainan
+,
+ini
+karena
+di
+pada
+saat
+dan
+indonesia
+hal
+online
+banyak
+pada
+saya
+sangat
+online
+.
+jika
+satu
+.
+dari
+a
+juga
+saya
+apa
+beberapa
+juga
+pada
+1
+(
+?
+)
+
+1
+juga
+(
+satu
+kamu
+online
+ke
+yang
+-
+karena
+sudah
+,
+juga
+0
+/
+saja
+pada
+satu
+2
+5
+
+permainan
+masih
+?
+di
+3
+0
+
+.
+/
+yang
+1
+jika
+memiliki
+an
+ke
+
+bahwa
+ke
+baik
+poker
+saja
+mendapatkan
+an
+5
+melakukan
+tidak
+1
+orang
+yang
+dengan
+pada
+:
+adalah
+sebagai
+memiliki
+hal
+untuk
+maka
+online
+
+ke
+7
+,
+(
+kan
+pada
+(
+
+t
+nya
+slot
+adalah
+jika
+?
+0
+pada
+banyak
+.
+saat
+bahwa
+ke
+membuat
+nya
+harus
+e
+karena
+anda
+sudah
+saya
+
+di
+online
+permainan
+1
+an
+salah
+untuk
+nya
+adalah
+online
+ada
+memiliki
+maka
+sebagai
+e
+adalah
+sudah
+akan
+2
+saat
+sudah
+mereka
+an
+
+ke
+orang
+cara
+untuk
+di
+hanya
+tidak
+d
+anda
+baru
+saya
+membuat
+3
+9
+di
+tersebut
+
+0
+mendapatkan
+dengan
+?
+dan
+dapat
+itu
+s
+perlu
+1
+i
+dengan
+i
+t
+-
+(
+slot
+dengan
+kamu
+dengan
+2
+i
+"
+untuk
+hal
+8
+anda
+kita
+3
+tidak
+anda
+dengan
+dapat
+s
+bahwa
+
+hal
+uang
+kami
+3
+poker

predict_results.json

@@ -0,0 +1,12 @@
+{
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5984877943992615,
+    "predict_rouge1": 0.4583,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.458,
+    "predict_rougeLsum": 0.4573,
+    "predict_runtime": 551.561,
+    "predict_samples": 3762,
+    "predict_samples_per_second": 6.821,
+    "predict_steps_per_second": 0.214
+}

train_results.json

@@ -0,0 +1,9 @@
+{
+    "epoch": 5.0,
+    "total_flos": 7.546206748253184e+16,
+    "train_loss": 0.9099474502024327,
+    "train_runtime": 5183.9644,
+    "train_samples": 14262,
+    "train_samples_per_second": 13.756,
+    "train_steps_per_second": 1.72
+}

trainer_state.json

@@ -0,0 +1,130 @@
+{
+  "best_metric": null,
+  "best_model_checkpoint": null,
+  "epoch": 5.0,
+  "eval_steps": 500,
+  "global_step": 8915,
+  "is_hyper_param_search": false,
+  "is_local_process_zero": true,
+  "is_world_process_zero": true,
+  "log_history": [
+    {
+      "epoch": 1.0,
+      "grad_norm": 2.067873001098633,
+      "learning_rate": 4e-05,
+      "loss": 1.3917,
+      "step": 1783
+    },
+    {
+      "epoch": 1.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6615284085273743,
+      "eval_rouge1": 0.5471,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.5464,
+      "eval_rougeLsum": 0.5441,
+      "eval_runtime": 113.2569,
+      "eval_samples_per_second": 6.622,
+      "eval_steps_per_second": 0.212,
+      "step": 1783
+    },
+    {
+      "epoch": 2.0,
+      "grad_norm": 1.6221102476119995,
+      "learning_rate": 3e-05,
+      "loss": 0.854,
+      "step": 3566
+    },
+    {
+      "epoch": 2.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6180859208106995,
+      "eval_rouge1": 0.4511,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4501,
+      "eval_rougeLsum": 0.4463,
+      "eval_runtime": 112.5406,
+      "eval_samples_per_second": 6.664,
+      "eval_steps_per_second": 0.213,
+      "step": 3566
+    },
+    {
+      "epoch": 3.0,
+      "grad_norm": 1.800586462020874,
+      "learning_rate": 2e-05,
+      "loss": 0.7905,
+      "step": 5349
+    },
+    {
+      "epoch": 3.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.5925126671791077,
+      "eval_rouge1": 0.421,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4197,
+      "eval_rougeLsum": 0.4168,
+      "eval_runtime": 112.6751,
+      "eval_samples_per_second": 6.656,
+      "eval_steps_per_second": 0.213,
+      "step": 5349
+    },
+    {
+      "epoch": 4.0,
+      "grad_norm": 1.7010269165039062,
+      "learning_rate": 1e-05,
+      "loss": 0.7624,
+      "step": 7132
+    },
+    {
+      "epoch": 4.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.5808362364768982,
+      "eval_rouge1": 0.438,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4378,
+      "eval_rougeLsum": 0.433,
+      "eval_runtime": 112.7701,
+      "eval_samples_per_second": 6.651,
+      "eval_steps_per_second": 0.213,
+      "step": 7132
+    },
+    {
+      "epoch": 5.0,
+      "grad_norm": 1.4592366218566895,
+      "learning_rate": 0.0,
+      "loss": 0.751,
+      "step": 8915
+    },
+    {
+      "epoch": 5.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.5829301476478577,
+      "eval_rouge1": 0.4334,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4324,
+      "eval_rougeLsum": 0.4298,
+      "eval_runtime": 112.6735,
+      "eval_samples_per_second": 6.656,
+      "eval_steps_per_second": 0.213,
+      "step": 8915
+    },
+    {
+      "epoch": 5.0,
+      "step": 8915,
+      "total_flos": 7.546206748253184e+16,
+      "train_loss": 0.9099474502024327,
+      "train_runtime": 5183.9644,
+      "train_samples_per_second": 13.756,
+      "train_steps_per_second": 1.72
+    }
+  ],
+  "logging_steps": 500,
+  "max_steps": 8915,
+  "num_input_tokens_seen": 0,
+  "num_train_epochs": 5,
+  "save_steps": 500,
+  "total_flos": 7.546206748253184e+16,
+  "train_batch_size": 8,
+  "trial_name": null,
+  "trial_params": null
+}