End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -0,0 +1,29 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.6086911559104919,
+    "eval_rouge1": 0.4049,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.4028,
+    "eval_rougeLsum": 0.4042,
+    "eval_runtime": 112.5016,
+    "eval_samples": 750,
+    "eval_samples_per_second": 6.667,
+    "eval_steps_per_second": 0.213,
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5869672894477844,
+    "predict_rouge1": 0.4417,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.4417,
+    "predict_rougeLsum": 0.442,
+    "predict_runtime": 559.1958,
+    "predict_samples": 3752,
+    "predict_samples_per_second": 6.71,
+    "predict_steps_per_second": 0.211,
+    "total_flos": 7.504414428893184e+16,
+    "train_loss": 0.9108390363342559,
+    "train_runtime": 5162.3558,
+    "train_samples": 14272,
+    "train_samples_per_second": 13.823,
+    "train_steps_per_second": 1.728
+}

eval_results.json

@@ -0,0 +1,13 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.6086911559104919,
+    "eval_rouge1": 0.4049,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.4028,
+    "eval_rougeLsum": 0.4042,
+    "eval_runtime": 112.5016,
+    "eval_samples": 750,
+    "eval_samples_per_second": 6.667,
+    "eval_steps_per_second": 0.213
+}

generated_predictions.txt

@@ -0,0 +1,3752 @@
+atau
+0
+ini
+bisa
+bisa
+ada
+saja
+yang
+t
+judi
+banyak
+akan
+seperti
+ke
+:
+-
+dari
+beberapa
+e
+)
+a
+2
+dapat
+judi
+menjadi
+9
+e
+untuk
+atau
+banyak
+sangat
+/
+bisa
+k
+dari
+slot
+bisa
+anda
+anda
+hal
+
+akan
+
+
+"
+dalam
+anda
+karena
+
+menggunakan
+0
+.
+dan
+i
+mereka
+menjadi
+9
+a
+ada
+an
+
+(
+ada
+online
+)
+untuk
+memiliki
+1
+itu
+
+ada
+dari
+.
+atau
+.
+?
+kita
+banyak
+:
+harus
+:
+6
+dapat
+k
+,
+orang
+bisa
+dan
+hal
+nya
+dari
+(
+lain
+2
+anda
+kita
+pemain
+ini
+dengan
+
+6
+atau
+satu
+para
+judi
+bisa
+atau
+harus
+tersebut
+sangat
+i
+k
+ke
+hal
+dari
+a
+sebagai
+dan
+satu
+ada
+dalam
+memiliki
+
+akan
+nya
+4
+2
+kita
+kita
+yang
+di
+:
+di
+baik
+secara
+mereka
+d
+menggunakan
+8
+menjadi
+satu
+tahun
+nya
+adalah
+dan
+ini
+adalah
+ke
+orang
+bisa
+menjadi
+saat
+dari
+dalam
+)
+situs
+lain
+tidak
+kan
+di
+-
+orang
+t
+adalah
+e
+secara
+s
+untuk
+?
+atau
+lebih
+tidak
+1
+cara
+sudah
+ini
+kita
+hal
+atau
+2
+permainan
+saja
+saya
+itu
+dapat
+untuk
+bisa
+menjadi
+7
+dapat
+tidak
+
+an
+
+tersebut
+:
+oleh
+2
+untuk
+dari
+karena
+online
+judi
+indonesia
+apa
+i
+:
+orang
+,
+bisnis
+tidak
+saja
+3
+jika
+judi
+itu
+s
+
+permainan
+mudah
+untuk
+t
+yang
+salah
+
+-
+dan
+satu
+nya
+apa
+6
+slot
+,
+adalah
+(
+-
+ke
+i
+lebih
+orang
+
+2
+menggunakan
+seperti
+beberapa
+3
+saat
+oleh
+sudah
+orang
+tersebut
+dengan
+tahun
+banyak
+bahwa
+
+9
+
+8
+hal
+ini
+karena
+2
+ke
+ke
+untuk
+,
+dalam
+t
+nya
+satu
+dalam
+saat
+dapat
+banyak
+bisa
+lebih
+kamu
+seperti
+akan
+6
+
+0
+.
+,
+dan
+cara
+bisa
+7
+dapat
+seperti
+e
+untuk
+tidak
+an
+untuk
+lebih
+sebagai
+harus
+dan
+)
+untuk
+dalam
+tersebut
+2
+nya
+menjadi
+permainan
+banyak
+0
+1
+beberapa
+)
+9
+satu
+d
+1
+6
+sangat
+saja
+,
+saya
+)
+
+hal
+permainan
+1
+mereka
+
+cara
+anda
+dari
+dari
+harus
+5
+anda
+nya
+.
+telah
+lebih
+tidak
+satu
+dan
+dengan
+
+-
+nya
+saya
+sangat
+9
+,
+akan
+baik
+dan
+menjadi
+dari
+dapat
+5
+1
+ada
+situs
+u
+baik
+ada
+ini
+0
+beberapa
+membuat
+s
+ini
+sangat
+5
+
+slot
+yang
+anda
+di
+baik
+
+0
+9
+/
+oleh
+9
+ada
+salah
+lebih
+6
+(
+
+oleh
+kan
+dalam
+s
+adalah
+adalah
+mereka
+dalam
+poker
+-
+
+anda
+i
+juga
+menjadi
+k
+atau
+bisa
+lebih
+adalah
+lebih
+bermain
+:
+lebih
+memiliki
+cara
+.
+dapat
+1
+3
+
+.
+,
+p
+)
+lebih
+seperti
+.
+,
+akan
+9
+oleh
+adalah
+situs
+
+harus
+
+itu
+beberapa
+u
+6
+satu
+8
+hal
+dari
+t
+2
+atau
+akan
+karena
+sudah
+uang
+oleh
+karena
+
+di
+ini
+bisa
+7
+k
+1
+atau
+tidak
+)
+hal
+e
+memiliki
+membuat
+akan
+namun
+itu
+anda
+saat
+0
+/
+untuk
+5
+juga
+waktu
+salah
+hal
+8
+4
+6
+
+
+banyak
+-
+.
+satu
+0
+0
+
+tersebut
+(
+memiliki
+slot
+saat
+salah
+6
+:
+dapat
+ini
+seperti
+(
+tersebut
+situs
+ke
+s
+jika
+saya
+-
+dengan
+akan
+(
+akan
+2
+secara
+uang
+0
+kami
+atau
+baik
+online
+.
+indonesia
+bisa
+dengan
+dalam
+u
+karena
+oleh
+mereka
+(
+
+
+orang
+.
+membuat
+bisa
+u
+tahun
+satu
+hal
+dan
+9
+2
+sudah
+adalah
+,
+game
+para
+dalam
+di
+"
+atau
+
+
+banyak
+oleh
+online
+saya
+kamu
+secara
+harus
+2
+oleh
+
+ke
+sudah
+orang
+8
+.
+bahwa
+dan
+yang
+dengan
+memiliki
+t
+uang
+atau
+3
+dapat
+
+judi
+cara
+/
+e
+saat
+sangat
+2
+,
+.
+
+s
+dan
+hanya
+dapat
+banyak
+akan
+indonesia
+akan
+.
+menggunakan
+mereka
+
+permainan
+
+indonesia
+atau
+dalam
+para
+i
+akan
+
+nya
+
+cara
+dengan
+bisa
+4
+dapat
+juga
+
+4
+
+4
+atau
+2
+1
+4
+kamu
+tersebut
+sebagai
+2
+.
+hanya
+.
+/
+1
+
+dalam
+telah
+bisa
+beberapa
+uang
+akan
+tidak
+1
+baik
+untuk
+tersebut
+situs
+e
+,
+dari
+mereka
+s
+kami
+an
+7
+an
+bahwa
+dari
+banyak
+kamu
+.
+5
+adalah
+atau
+saya
+
+oleh
+online
+baik
+(
+apa
+dan
+s
+)
+adalah
+saat
+juga
+/
+)
+tidak
+dengan
+
+itu
+situs
+pada
+untuk
+dalam
+:
+ada
+sudah
+9
+sudah
+dan
+ini
+8
+menjadi
+satu
+dari
+di
+1
+yang
+,
+an
+oleh
+cara
+,
+d
+mereka
+yang
+,
+itu
+adalah
+satu
+telah
+.
+itu
+m
+1
+hal
+-
+yang
+maka
+atau
+)
+d
+yang
+
+menggunakan
+cara
+2
+:
+memiliki
+situs
+3
+3
+seperti
+,
+slot
+dari
+sudah
+game
+,
+dari
+dalam
+akan
+7
+3
+dari
+dari
+d
+
+:
+game
+untuk
+mereka
+dengan
+dalam
+memiliki
+
+telah
+ini
+dapat
+satu
+atau
+u
+atau
+saya
+.
+.
+secara
+
+0
+dalam
+
+ini
+banyak
+dalam
+?
+mereka
+harus
+dalam
+dengan
+dari
+di
+ada
+indonesia
+?
+banyak
+itu
+juga
+
+,
+yang
+kamu
+tersebut
+situs
+di
+yang
+akan
+situs
+dan
+i
+hanya
+banyak
+besar
+4
+yang
+sangat
+kamu
+yang
+memiliki
+online
+e
+dan
+besar
+?
+5
+sudah
+-
+adalah
+nya
+dalam
+1
+dari
+saya
+-
+menjadi
+anda
+yang
+bahwa
+nya
+4
+itu
+
+
+lebih
+dalam
+uang
+ada
+yang
+judi
+yang
+an
+2
+sudah
+bisnis
+2
+nya
+oleh
+mereka
+harus
+pada
+membuat
+oleh
+3
+s
+bisa
+dapat
+,
+adalah
+saat
+)
+mereka
+-
+bisa
+
+ini
+d
+dengan
+4
+(
+2
+7
+para
+
+sebagai
+0
+3
+a
+bisa
+anda
+itu
+tersebut
+sebagai
+oleh
+yang
+di
+baik
+1
+4
+di
+atau
+1
+seperti
+banyak
+
+menjadi
+mendapatkan
+-
+t
+sebagai
+anda
+/
+m
+sebagai
+menjadi
+jika
+yang
+,
+dari
+di
+?
+nya
+?
+beberapa
+k
+orang
+?
+ada
+nya
+8
+8
+uang
+dalam
+di
+kan
+1
+dari
+beberapa
+:
+dan
+:
+s
+
+dapat
+ini
+ini
+
+permainan
+)
+0
+8
+saya
+anda
+satu
+.
+ini
+2
+(
+di
+dan
+bisa
+indonesia
+
+a
+satu
+3
+nya
+pada
+dapat
+waktu
+oleh
+/
+bahwa
+jika
+9
+satu
+atau
+untuk
+
+5
+pada
+:
+(
+ke
+-
+5
+dalam
+jika
+bisa
+
+
+3
+oleh
+
+
+orang
+.
+akan
+?
+/
+secara
+pada
+1
+poker
+memiliki
+karena
+nya
+hanya
+
+situs
+)
+7
+,
+m
+lebih
+an
+jika
+anda
+-
+anda
+harga
+indonesia
+anda
+itu
+hanya
+menjadi
+saja
+k
+adalah
+
+
+dari
+oleh
+atau
+yang
+saat
+dan
+besar
+indonesia
+ke
+saya
+semua
+adalah
+itu
+baru
+s
+adalah
+sudah
+adalah
+permainan
+,
+bisa
+kan
+maka
+sudah
+4
+poker
+
+untuk
+(
+menggunakan
+.
+,
+pada
+anda
+k
+judi
+?
+0
+melakukan
+bahwa
+anda
+saja
+
+tidak
+?
+3
+nya
+hal
+situs
+banyak
+ke
+yang
+a
+di
+indonesia
+saya
+banyak
+bisa
+
+memiliki
+8
+dan
+memiliki
+mudah
+yang
+"
+sebagai
+karena
+
+bermain
+juga
+0
+ini
+melakukan
+5
+2
+mendapatkan
+itu
+itu
+karena
+,
+
+salah
+indonesia
+e
+juga
+beberapa
+ada
+bisa
+.
+bisa
+i
+menjadi
+2
+0
+waktu
+itu
+di
+juga
+
+(
+banyak
+a
+i
+situs
+2
+hal
+
+3
+t
+juga
+dan
+anda
+2
+hal
+beberapa
+dan
+
+saya
+tidak
+2
+?
+,
+menjadi
+online
+ke
+beberapa
+untuk
+anda
+
+2
+mereka
+1
+cara
+?
+game
+permainan
+anda
+beberapa
+i
+,
+,
+salah
+beberapa
+lebih
+maka
+sangat
+secara
+
+5
+di
+dengan
+sudah
+:
+k
+akan
+hal
+
+6
+kamu
+
+harus
+2
+dan
+lebih
+hanya
+yang
+:
+
+baik
+bahwa
+.
+memiliki
+sangat
+para
+dengan
+"
+hanya
+sangat
+6
+namun
+0
+mereka
+dengan
+menjadi
+5
+secara
+judi
+
+menggunakan
+itu
+di
+secara
+
+membuat
+bisnis
+
+di
+kami
+a
+akan
+1
+di
+memiliki
+d
+4
+5
+beberapa
+cara
+bagi
+banyak
+tahun
+,
+anda
+akan
+dengan
+sangat
+hanya
+atau
+atau
+ini
+
+seperti
+"
+2
+.
+dan
+secara
+dapat
+kan
+yang
+nya
+s
+sebagai
+oleh
+
+dan
+di
+
+besar
+harus
+nya
+an
+menjadi
+besar
+untuk
+oleh
+yang
+maka
+kamu
+dalam
+s
+atau
+2
+8
+situs
+s
+adalah
+ini
+di
+memiliki
+lebih
+seperti
+untuk
+0
+jadi
+judi
+judi
+sebagai
+ini
+dan
+/
+lebih
+sebagai
+dalam
+tahun
+untuk
+
+,
+itu
+sangat
+tidak
+permainan
+k
+kita
+di
+s
+dari
+mereka
+kita
+poker
+sangat
+
+ini
+lebih
+judi
+ini
+dalam
+hanya
+
+sudah
+)
+seperti
+
+nya
+orang
+9
+harus
+7
+)
+dan
+anda
+kami
+2
+salah
+
+tidak
+dan
+ingin
+kami
+oleh
+orang
+:
+lebih
+uang
+slot
+)
+6
+salah
+dalam
+pada
+,
+adalah
+di
+banyak
+hal
+maka
+0
+orang
+judi
+lebih
+situs
+
+2
+membuat
+t
+di
+
+akan
+s
+permainan
+memiliki
+situs
+untuk
+k
+,
+saya
+pada
+atau
+di
+)
+mereka
+sangat
+judi
+dengan
+0
+mereka
+cara
+i
+sangat
+yang
+.
+5
+,
+k
+atau
+baik
+ke
+i
+
+banyak
+ada
+
+banyak
+
+atau
+oleh
+namun
+bisa
+0
+maka
+dengan
+
+)
+harus
+orang
+di
+bisa
+kami
+mereka
+permainan
+apa
+lebih
+cara
+saja
+anda
+
+,
+nya
+apa
+i
+besar
+1
+akan
+dan
+
+poker
+indonesia
+d
+
+ke
+0
+menggunakan
+menggunakan
+/
+
+)
+s
+online
+juga
+dari
+5
+di
+sangat
+ini
+-
+
+tersebut
+bermain
+(
+a
+8
+membuat
+menjadi
+
+
+,
+sangat
+s
+yang
+ke
+4
+karena
+ini
+dan
+/
+anda
+sudah
+saja
+/
+di
+seperti
+2
+beberapa
+kamu
+dari
+jika
+lain
+dari
+1
+mereka
+hanya
+dengan
+atau
+hanya
+
+8
+i
+3
+sebagai
+0
+?
+.
+
+semua
+karena
+memiliki
+
+tidak
+akan
+kamu
+
+.
+
+anda
+juga
+?
+9
+pada
+kan
+ada
+9
+pada
+
+kita
+kami
+saat
+juga
+(
+maka
+
+sebagai
+ini
+
+
+
+8
+bisa
+memiliki
+pada
+6
+online
+menggunakan
+i
+3
+adalah
+.
+,
+ini
+situs
+e
+menjadi
+
+sebagai
+ini
+ke
+untuk
+jadi
+ke
+-
+bahwa
+5
+lebih
+ini
+.
+bisa
+bahwa
+seperti
+dan
+
+.
+untuk
+atau
+
+ini
+dari
+mereka
+akan
+dari
+,
+0
+saat
+o
+anda
+banyak
+mereka
+:
+lebih
+:
+jadi
+yang
+yang
+nya
+6
+kita
+a
+bisa
+indonesia
+tersebut
+kami
+3
+-
+akan
+a
+untuk
+tahun
+-
+dapat
+4
+
+bisa
+banyak
+hal
+mereka
+pada
+7
+9
+0
+2
+situs
+dapat
+orang
+dan
+dengan
+e
+juga
+sangat
+cara
+yang
+anda
+sangat
+kamu
+
+juga
+indonesia
+dapat
+kami
+dapat
+3
+ada
+.
+.
+menjadi
+memiliki
+.
+,
+harus
+ini
+sudah
+anda
+3
+"
+:
+i
+saat
+tidak
+cara
+oleh
+ini
+akan
+saat
+akan
+baru
+"
+-
+besar
+dan
+di
+i
+jadi
+n
+kami
+jika
+banyak
+e
+
+dan
+itu
+,
+nya
+
+orang
+1
+.
+sangat
+,
+5
+permainan
+kami
+akan
+nya
+
+orang
+untuk
+harus
+mereka
+bermain
+.
+jika
+di
+dalam
+kamu
+)
+lebih
+0
+mereka
+bisa
+pada
+sangat
+online
+dan
+?
+atau
+menggunakan
+di
+tidak
+dalam
+
+4
+a
+nya
+u
+kami
+kan
+4
+adalah
+untuk
+salah
+dapat
+besar
+2
+untuk
+?
+bisa
+
+)
+uang
+bisa
+untuk
+,
+nya
+anda
+maka
+tidak
+bermain
+i
+0
+permainan
+satu
+memiliki
+1
+salah
+8
+membuat
+slot
+
+game
+e
+bisa
+di
+(
+judi
+s
+banyak
+.
+secara
+seperti
+sudah
+kamu
+banyak
+telah
+di
+ini
+2
+satu
+ke
+baik
+ada
+judi
+bisa
+situs
+itu
+seperti
+2
+slot
+di
+kita
+2
+dalam
+lebih
+atau
+,
+,
+6
+pada
+telah
+uang
+2
+game
+harus
+jika
+atau
+u
+lebih
+untuk
+melakukan
+seperti
+hanya
+nya
+akan
+"
+ini
+pemain
+pada
+:
+orang
+anda
+ini
+,
+melakukan
+orang
+di
+salah
+bisa
+anda
+jika
+akan
+u
+sebagai
+di
+n
+game
+
+juga
+dan
+–
+banyak
+ke
+itu
+,
+3
+yang
+lain
+d
+memiliki
+dari
+an
+)
+dalam
+akan
+dari
+bahwa
+para
+situs
+orang
+ada
+bisa
+tidak
+dan
+dan
+/
+slot
+harus
+saja
+
+7
+banyak
+situs
+bisa
+banyak
+4
+anda
+sebagai
+di
+0
+untuk
+orang
+banyak
+an
+tersebut
+untuk
+kita
+6
+anda
+s
+permainan
+juga
+seperti
+banyak
+bagi
+
+(
+lain
+untuk
+lebih
+lebih
+cara
+u
+para
+k
+di
+pada
+jika
+online
+hanya
+akan
+-
+lain
+s
+yang
+.
+orang
+)
+a
+ingin
+sebagai
+dengan
+2
+lebih
+yang
+s
+ke
+dari
+ini
+harus
+bahwa
+3
+adalah
+di
+bagi
+cara
+"
+1
+t
+tidak
+e
+dari
+pada
+situs
+i
+adalah
+untuk
+
+.
+bagi
+harus
+akan
+salah
+
+itu
+pada
+hal
+saja
+yang
+pemain
+2
+orang
+permainan
+
+akan
+-
+dan
+anda
+untuk
+bisa
+para
+itu
+an
+yang
+judi
+anda
+akan
+harus
+jika
+
+ke
+
+bisa
+dari
+1
+tersebut
+dalam
+
+di
+8
+karena
+indonesia
+online
+
+bisa
+banyak
+dan
+telah
+
+saja
+besar
+cara
+1
+3
+ini
+adalah
+itu
+4
+lebih
+itu
+sangat
+untuk
+karena
+seperti
+.
+jika
+dari
+memiliki
+hal
+cara
+0
+memiliki
+"
+tidak
+"
+-
+karena
+dan
+1
+,
+memiliki
+salah
+1
+untuk
+e
+t
+dengan
+.
+memiliki
+
+anda
+kan
+hal
+banyak
+ke
+kita
+
+adalah
+besar
+:
+baik
+yang
+pada
+orang
+.
+:
+-
+kita
+game
+
+yang
+0
+dari
+apa
+:
+u
+menjadi
+
+tersebut
+beberapa
+hal
+saat
+tersebut
+dari
+cara
+4
+menjadi
+saya
+nya
+:
+namun
+memiliki
+8
+4
+2
+ini
+tidak
+untuk
+anda
+1
+s
+d
+indonesia
+
+situs
+,
+anda
+seperti
+di
+nya
+-
+dalam
+)
+online
+,
+nya
+,
+saja
+)
+di
+yang
+8
+karena
+mereka
+seperti
+beberapa
+besar
+9
+
+namun
+8
+
+bisa
+t
+adalah
+)
+p
+memiliki
+
+saya
+kan
+0
+
+8
+harus
+kan
+yang
+sudah
+
+permainan
+nya
+.
+menggunakan
+online
+
+anda
+.
+ke
+dari
+saja
+(
+bisnis
+bermain
+akan
+ini
+menggunakan
+tersebut
+baru
+lebih
+1
+maka
+bahwa
+jika
+yang
+jika
+dapat
+s
+di
+dapat
+i
+3
+a
+sangat
+untuk
+/
+slot
+bahwa
+saja
+(
+harus
+banyak
+0
+memiliki
+-
+dengan
+dengan
+s
+pada
+-
+6
+t
+(
+1
+ada
+2
+k
+cara
+online
+pada
+2
+orang
+
+membuat
+yang
+kami
+bisa
+sangat
+cara
+ini
+dalam
+an
+memiliki
+t
+:
+beberapa
+ini
+
+bisa
+bahwa
+m
+dengan
+menjadi
+dan
+kan
+memiliki
+ke
+anda
+akan
+juga
+karena
+harus
+dengan
+0
+hal
+
+
+atau
+di
+,
+mendapatkan
+sangat
+
+yang
+)
+itu
+9
+juga
+sangat
+banyak
+0
+memiliki
+nya
+.
+-
+beberapa
+a
+hanya
+
+,
+harus
+d
+dari
+membuat
+lebih
+
+dapat
+tahun
+
+
+ke
+.
+dari
+5
+sudah
+e
+dan
+,
+s
+bahwa
+-
+
+atau
+k
+.
+secara
+cara
+ini
+0
+sebagai
+-
+dan
+salah
+harus
+(
+3
+ada
+?
+0
+lebih
+
+7
+tahun
+juga
+hal
+anda
+tidak
+dan
+tidak
+ada
+indonesia
+.
+4
+terbaik
+
+bisa
+0
+(
+seperti
+cara
+
+semua
+itu
+beberapa
+mereka
+namun
+o
+ini
+
+anda
+karena
+namun
+ini
+tidak
+9
+6
+-
+2
+pada
+pada
+s
+adalah
+orang
+
+sebagai
+sangat
+
+:
+memiliki
+menjadi
+lebih
+atau
+pada
+0
+/
+juga
+saya
+dan
+.
+saat
+s
+di
+kita
+kamu
+uang
+menjadi
+2
+)
+an
+
+di
+?
+-
+jika
+-
+tidak
+d
+mendapatkan
+)
+orang
+6
+pada
+u
+dari
+dapat
+situs
+jika
+(
+s
+2
+dengan
+9
+saja
+jika
+
+saat
+
+3
+mereka
+sangat
+ada
+e
+5
+membuat
+adalah
+karena
+mendapatkan
+1
+dan
+situs
+anda
+
+"
+.
+mudah
+ada
+membuat
+adalah
+
+itu
+:
+dan
+:
+membuat
+dan
+(
+memiliki
+
+juga
+i
+e
+sudah
+pada
+untuk
+4
+orang
+8
+t
+bahwa
+-
+4
+judi
+8
+9
+dan
+5
+3
+
+dalam
+dalam
+9
+saja
+d
+:
+
+7
+atau
+menjadi
+
+untuk
+dapat
+banyak
+untuk
+satu
+ke
+tidak
+akan
+pada
+oleh
+tersebut
+
+1
+hanya
+sangat
+sebagai
+beberapa
+.
+
+pada
+di
+sebagai
+ini
+yang
+sudah
+(
+0
+atau
+5
+.
+t
+2
+dan
+hal
+juga
+nya
+)
+nya
+lebih
+anda
+pada
+atau
+itu
+mereka
+orang
+,
+bahwa
+
+dan
+9
+orang
+u
+u
+kamu
+saya
+1
+adalah
+hal
+bisa
+.
+karena
+,
+bahwa
+juga
+dan
+itu
+,
+-
+)
+jika
+dengan
+dengan
+banyak
+2
+hanya
+telah
+jika
+juga
+nya
+.
+dengan
+para
+ke
+saya
+kita
+
+
+4
+ke
+jika
+ini
+mereka
+semua
+kita
+adalah
+3
+membuat
+s
+anda
+cara
+1
+pada
+sangat
+bisa
+dan
+:
+akan
+semua
+,
+seperti
+0
+ini
+bahwa
+dengan
+bisa
+
+nya
+,
+beberapa
+ada
+judi
+,
+s
+0
+akan
+kita
+nya
+-
+d
+kamu
+
+banyak
+d
+dengan
+s
+saja
+salah
+-
+untuk
+1
+2
+
+tersebut
+itu
+-
+satu
+saat
+dengan
+di
+sudah
+?
+ini
+itu
+oleh
+tahun
+a
+:
+satu
+akan
+
+a
+permainan
+
+masih
+yang
+pemain
+banyak
+kamu
+-
+8
+,
+1
+dengan
+
+.
+orang
+-
+5
+bisa
+di
+oleh
+dan
+bisa
+membuat
+bisnis
+9
+
+bermain
+
+kami
+nya
+satu
+dan
+lebih
+judi
+yang
+membuat
+dengan
+
+uang
+game
+ini
+kita
+ada
+dan
+tidak
+kamu
+an
+
+ke
+oleh
+bahwa
+yang
+u
+semua
+,
+dapat
+2
+saya
+3
+untuk
+telah
+3
+(
+adalah
+bisa
+nya
+orang
+yang
+beberapa
+harus
+a
+namun
+pada
+lebih
+
+s
+kamu
+(
+dan
+game
+ini
+5
+dari
+dalam
+itu
+pada
+di
+bisa
+bisa
+sudah
+membuat
+hal
+beberapa
+kami
+0
+menggunakan
+nya
+situs
+dan
+ini
+an
+cara
+bermain
+2
+sangat
+.
+dari
+m
+6
+jika
+(
+2
+permainan
+,
+jika
+satu
+untuk
+permainan
+pada
+dari
+an
+seperti
+ini
+t
+
+itu
+menjadi
+baik
+banyak
+s
+(
+harus
+anda
+,
+untuk
+itu
+1
+seperti
+dengan
+an
+salah
+dapat
+-
+orang
+8
+tersebut
+baik
+online
+k
+orang
+e
+itu
+
+(
+
+5
+pemain
+para
+9
+s
+karena
+anda
+t
+8
+pada
+orang
+ini
+
+?
+:
+telah
+i
+ada
+akan
+tersebut
+tidak
+ke
+bisa
+
+hanya
+seperti
+untuk
+?
+anda
+2
+
+sudah
+4
+online
+jika
+orang
+sangat
+ke
+online
+banyak
+yang
+dan
+
+atau
+itu
+atau
+dan
+menjadi
+
+8
+/
+ini
+-
+dengan
+ini
+baik
+pada
+yang
+dapat
+kami
+8
+
+.
+)
+nya
+saat
+akan
+tahun
+lain
+adalah
+juga
+
+.
+satu
+kita
+a
+nya
+ada
+d
+dengan
+seperti
+an
+saya
+hal
+dalam
+sudah
+salah
+5
+secara
+saat
+lebih
+sebagai
+tidak
+kami
+slot
+yang
+anda
+yang
+poker
+bermain
+ini
+menggunakan
+3
+hal
+ini
+dari
+saat
+u
+jika
+
+1
+untuk
+3
+nya
+harus
+kami
+,
+tidak
+juga
+akan
+anda
+atau
+1
+saya
+situs
+dan
+di
+kan
+:
+ini
+
+cara
+"
+yang
+ada
+2
+baik
+secara
+maka
+ingin
+r
+,
+yang
+sebagai
+k
+cara
+lain
+atau
+(
+sudah
+s
+online
+sudah
+lain
+judi
+membuat
+harus
+orang
+ada
+.
+e
+ke
+(
+0
+dapat
+sangat
+ada
+5
+satu
+tidak
+juga
+yang
+sebagai
+sudah
+kan
+cara
+-
+dalam
+dapat
+cara
+
+memiliki
+an
+0
+2
+(
+.
+s
+beberapa
+tidak
+4
+anda
+yang
+"
+kami
+yang
+di
+9
+dan
+besar
+bisa
+,
+e
+baik
+hal
+seperti
+
+atau
+.
+2
+harus
+sudah
+6
+
+mereka
+anda
+juga
+yang
+situs
+anda
+8
+bahwa
+bisa
+saat
+"
+2
+,
+karena
+dengan
+orang
+melakukan
+bisnis
+bahwa
+menjadi
+?
+7
+nya
+k
+itu
+
+bermain
+
+
+yang
+juga
+9
+5
+kami
+
+"
+yang
+kami
+kamu
+harus
+bahwa
+untuk
+?
+menjadi
+tersebut
+p
+orang
+hal
+-
+
+ini
+yang
+judi
+bisa
+karena
+5
+s
+,
+pemain
+saat
+-
+baik
+,
+banyak
+slot
+dari
+menggunakan
+
+besar
+kita
+tidak
+ke
+oleh
+untuk
+,
+
+orang
+seperti
+7
+bisa
+i
+itu
+ada
+satu
+.
+harus
+juga
+sangat
+1
+akan
+orang
+tidak
+tersebut
+,
+dapat
+.
+tersebut
+s
+jika
+yang
+?
+hal
+i
+1
+banyak
+
+-
+lain
+akan
+para
+oleh
+indonesia
+pemain
+para
+3
+sebagai
+:
+saya
+9
+ada
+judi
+.
+anda
+lebih
+online
+besar
+an
+indonesia
+para
+ini
+tersebut
+3
+poker
+dengan
+
+itu
+oleh
+2
+
+dengan
+indonesia
+k
+0
+satu
+juga
+dapat
+t
+o
+bisa
+juga
+ini
+judi
+-
+secara
+
+.
+ke
+0
+akan
+itu
+harus
+dalam
+8
+adalah
+
+
+1
+an
+)
+a
+pada
+telah
+karena
+harus
+itu
+dan
+5
+ini
+untuk
+karena
+
+dengan
+secara
+saat
+pada
+situs
+dalam
+t
+.
+itu
+i
+0
+melakukan
+kita
+bermain
+tersebut
+oleh
+tidak
+dan
+bahwa
+"
+:
+permainan
+sebagai
+k
+banyak
+hanya
+dengan
+mereka
+e
+salah
+kan
+hal
+yang
+itu
+adalah
+tersebut
+2
+saya
+dengan
+s
+atau
+akan
+online
+dan
+online
+tidak
+atau
+yang
+dan
+maka
+/
+
+nya
+ada
+ini
+)
+bahwa
+mereka
+kita
+jika
+bermain
+1
+2
+dapat
+an
+juga
+indonesia
+judi
+situs
+setiap
+pada
+-
+kita
+s
+satu
+memiliki
+6
+,
+i
+anda
+dengan
+
+sangat
+bisa
+anda
+judi
+yang
+banyak
+dengan
+2
+
+ini
+2
+untuk
+?
+judi
+kita
+a
+karena
+tidak
+ke
+di
+dapat
+memiliki
+karena
+,
+adalah
+"
+
+:
+salah
+0
+jika
+memiliki
+(
+untuk
+hanya
+banyak
+memiliki
+s
+judi
+dari
+2
+situs
+juga
+1
+karena
+itu
+
+hanya
+beberapa
+lebih
+/
+mereka
+9
+maka
+-
+d
+a
+anda
+
+0
+di
+tahun
+menggunakan
+-
+6
+7
+ini
+bermain
+juga
+saat
+saja
+situs
+mendapatkan
+i
+dalam
+adalah
+tersebut
+?
+online
+mereka
+di
+pada
+9
+membuat
+sudah
+kan
+dan
+dan
+sangat
+?
+ada
+poker
+atau
+i
+/
+8
+"
+judi
+u
+(
+hanya
+melakukan
+dan
+s
+-
+juga
+judi
+akan
+:
+bermain
+pada
+slot
+karena
+karena
+orang
+orang
+membuat
+banyak
+yang
+juga
+
+ke
+satu
+e
+itu
+lain
+4
+0
+i
+judi
+5
+seperti
+.
+7
+i
+-
+-
+online
+s
+dapat
+9
+membuat
+kan
+dari
+
+judi
+saya
+
+k
+kami
+karena
+(
+3
+secara
+hal
+nya
+akan
+,
+di
+an
+itu
+(
+adalah
+kami
+game
+dan
+game
+e
+adalah
+dapat
+beberapa
+.
+beberapa
+
+)
+game
+banyak
+dengan
+"
+0
+karena
+adalah
+1
+u
+di
+ke
+k
+1
+oleh
+-
+5
+karena
+indonesia
+nya
+jika
+di
+"
+(
+
+
+a
+menjadi
+0
+bisa
+3
+memiliki
+0
+:
+untuk
+8
+)
+:
+anda
+tersebut
+menjadi
+ada
+saat
+dan
+
+mereka
+atau
+dalam
+saya
+7
+ini
+.
+ada
+anda
+1
+d
+dan
+baru
+3
+e
+karena
+8
+
+e
+untuk
+bisa
+mereka
+dengan
+nya
+tidak
+nya
+
+lain
+saya
+5
+dari
+3
+ini
+anda
+dalam
+ada
+1
+besar
+5
+,
+0
+sebagai
+kan
+dan
+
+situs
+dapat
+3
+orang
+banyak
+pada
+(
+
+)
+adalah
+adalah
+lebih
+
+bahwa
+pada
+ada
+saja
+7
+pada
+(
+tidak
+bagi
+e
+di
+ini
+dalam
+(
+
+harus
+melakukan
+
+e
+hal
+saat
+ada
+dengan
+)
+juga
+bermain
+tahun
+dalam
+game
+
+hal
+memiliki
+jika
+5
+(
+
+poker
+dalam
+untuk
+adalah
+:
+5
+sebagai
+sebagai
+para
+itu
+hal
+akan
+telah
+tersebut
+d
+kita
+yang
+adalah
+yang
+
+anda
+kan
+
+tidak
+/
+4
+-
+i
+jika
+akan
+ini
+7
+i
+permainan
+bisa
+3
+akan
+/
+itu
+saat
+hal
+dari
+
+hanya
+para
+dalam
+karena
+5
+(
+
+kan
+bisa
+2
+karena
+sebagai
+kita
+kami
+besar
+saya
+baik
+u
+1
+akan
+)
+,
+e
+sebagai
+.
+
+sangat
+)
+:
+e
+kami
+seperti
+tidak
+1
+:
+judi
+itu
+judi
+akan
+mereka
+memiliki
+banyak
+anda
+itu
+mereka
+yang
+memiliki
+
+oleh
+tidak
+,
+ke
+akan
+dalam
+di
+namun
+7
+judi
+2
+tersebut
+t
+game
+adalah
+akan
+salah
+.
+untuk
+
+maka
+dengan
+i
+dengan
+atau
+s
+adalah
+5
+saja
+secara
+untuk
+"
+sudah
+2
+baik
+3
+i
+hanya
+?
+nya
+sudah
+saat
+bahwa
+menjadi
+sangat
+.
+juga
+memiliki
+judi
+i
+ada
+di
+tidak
+1
+atau
+kita
+adalah
+
+dengan
+ada
+d
+bisa
+oleh
+8
+6
+,
+kamu
+kita
+tersebut
+juga
+adalah
+pada
+
+saya
+orang
+.
+ini
+nya
+9
+tidak
+k
+
+mendapatkan
+seperti
+-
+saya
+dalam
+pada
+sangat
+itu
+7
+8
+saya
+telah

predict_results.json

@@ -0,0 +1,12 @@
+{
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5869672894477844,
+    "predict_rouge1": 0.4417,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.4417,
+    "predict_rougeLsum": 0.442,
+    "predict_runtime": 559.1958,
+    "predict_samples": 3752,
+    "predict_samples_per_second": 6.71,
+    "predict_steps_per_second": 0.211
+}

train_results.json

@@ -0,0 +1,9 @@
+{
+    "epoch": 5.0,
+    "total_flos": 7.504414428893184e+16,
+    "train_loss": 0.9108390363342559,
+    "train_runtime": 5162.3558,
+    "train_samples": 14272,
+    "train_samples_per_second": 13.823,
+    "train_steps_per_second": 1.728
+}

trainer_state.json

@@ -0,0 +1,130 @@
+{
+  "best_metric": null,
+  "best_model_checkpoint": null,
+  "epoch": 5.0,
+  "eval_steps": 500,
+  "global_step": 8920,
+  "is_hyper_param_search": false,
+  "is_local_process_zero": true,
+  "is_world_process_zero": true,
+  "log_history": [
+    {
+      "epoch": 1.0,
+      "grad_norm": 1.2715709209442139,
+      "learning_rate": 4e-05,
+      "loss": 1.3948,
+      "step": 1784
+    },
+    {
+      "epoch": 1.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6977941989898682,
+      "eval_rouge1": 0.3931,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3957,
+      "eval_rougeLsum": 0.3954,
+      "eval_runtime": 113.0189,
+      "eval_samples_per_second": 6.636,
+      "eval_steps_per_second": 0.212,
+      "step": 1784
+    },
+    {
+      "epoch": 2.0,
+      "grad_norm": 1.681906819343567,
+      "learning_rate": 3e-05,
+      "loss": 0.8544,
+      "step": 3568
+    },
+    {
+      "epoch": 2.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6352474689483643,
+      "eval_rouge1": 0.4133,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4123,
+      "eval_rougeLsum": 0.4139,
+      "eval_runtime": 112.0235,
+      "eval_samples_per_second": 6.695,
+      "eval_steps_per_second": 0.214,
+      "step": 3568
+    },
+    {
+      "epoch": 3.0,
+      "grad_norm": 1.5354632139205933,
+      "learning_rate": 2e-05,
+      "loss": 0.791,
+      "step": 5352
+    },
+    {
+      "epoch": 3.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6227346062660217,
+      "eval_rouge1": 0.4051,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4033,
+      "eval_rougeLsum": 0.4045,
+      "eval_runtime": 112.6518,
+      "eval_samples_per_second": 6.658,
+      "eval_steps_per_second": 0.213,
+      "step": 5352
+    },
+    {
+      "epoch": 4.0,
+      "grad_norm": 1.2380417585372925,
+      "learning_rate": 1e-05,
+      "loss": 0.7631,
+      "step": 7136
+    },
+    {
+      "epoch": 4.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6149293780326843,
+      "eval_rouge1": 0.3884,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3851,
+      "eval_rougeLsum": 0.3881,
+      "eval_runtime": 112.264,
+      "eval_samples_per_second": 6.681,
+      "eval_steps_per_second": 0.214,
+      "step": 7136
+    },
+    {
+      "epoch": 5.0,
+      "grad_norm": 1.1864808797836304,
+      "learning_rate": 0.0,
+      "loss": 0.7508,
+      "step": 8920
+    },
+    {
+      "epoch": 5.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6086911559104919,
+      "eval_rouge1": 0.4049,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4028,
+      "eval_rougeLsum": 0.4042,
+      "eval_runtime": 113.2506,
+      "eval_samples_per_second": 6.622,
+      "eval_steps_per_second": 0.212,
+      "step": 8920
+    },
+    {
+      "epoch": 5.0,
+      "step": 8920,
+      "total_flos": 7.504414428893184e+16,
+      "train_loss": 0.9108390363342559,
+      "train_runtime": 5162.3558,
+      "train_samples_per_second": 13.823,
+      "train_steps_per_second": 1.728
+    }
+  ],
+  "logging_steps": 500,
+  "max_steps": 8920,
+  "num_input_tokens_seen": 0,
+  "num_train_epochs": 5,
+  "save_steps": 500,
+  "total_flos": 7.504414428893184e+16,
+  "train_batch_size": 8,
+  "trial_name": null,
+  "trial_params": null
+}