End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:
@@ -18,10 +20,10 @@ should probably proofread and complete it, then remove this comment. -->
 This model is a fine-tuned version of [LazarusNLP/IndoNanoT5-base](https://huggingface.co/LazarusNLP/IndoNanoT5-base) on an unknown dataset.
 It achieves the following results on the evaluation set:
 - Loss: 1.2774
-- Rouge1: 0.6685
+- Rouge1: 0.403
 - Rouge2: 0.0
-- Rougel: 0.6677
-- Rougelsum: 0.6651
+- Rougel: 0.4021
+- Rougelsum: 0.405
 - Gen Len: 1.0
 
 ## Model description

all_results.json

@@ -1,29 +1,29 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 1.422324538230896,
-    "eval_rouge1": 0.4479,
+    "eval_loss": 1.2773828506469727,
+    "eval_rouge1": 0.403,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4447,
-    "eval_rougeLsum": 0.444,
-    "eval_runtime": 429.565,
+    "eval_rougeL": 0.4021,
+    "eval_rougeLsum": 0.405,
+    "eval_runtime": 437.1328,
     "eval_samples": 747,
-    "eval_samples_per_second": 1.739,
-    "eval_steps_per_second": 0.056,
+    "eval_samples_per_second": 1.709,
+    "eval_steps_per_second": 0.055,
     "predict_gen_len": 1.0,
-    "predict_loss": 1.4727340936660767,
-    "predict_rouge1": 0.4436,
+    "predict_loss": 1.331460952758789,
+    "predict_rouge1": 0.4132,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4428,
-    "predict_rougeLsum": 0.4441,
-    "predict_runtime": 2508.0418,
+    "predict_rougeL": 0.4119,
+    "predict_rougeLsum": 0.413,
+    "predict_runtime": 2272.9425,
     "predict_samples": 3761,
-    "predict_samples_per_second": 1.5,
-    "predict_steps_per_second": 0.047,
+    "predict_samples_per_second": 1.655,
+    "predict_steps_per_second": 0.052,
     "total_flos": 5.531847691862016e+16,
-    "train_loss": 2.4753322173661716,
-    "train_runtime": 5816.2827,
+    "train_loss": 2.267836908588495,
+    "train_runtime": 5835.4771,
     "train_samples": 14266,
-    "train_samples_per_second": 12.264,
-    "train_steps_per_second": 0.767
+    "train_samples_per_second": 12.224,
+    "train_steps_per_second": 0.764
 }

eval_results.json

@@ -1,13 +1,13 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 1.422324538230896,
-    "eval_rouge1": 0.4479,
+    "eval_loss": 1.2773828506469727,
+    "eval_rouge1": 0.403,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4447,
-    "eval_rougeLsum": 0.444,
-    "eval_runtime": 429.565,
+    "eval_rougeL": 0.4021,
+    "eval_rougeLsum": 0.405,
+    "eval_runtime": 437.1328,
     "eval_samples": 747,
-    "eval_samples_per_second": 1.739,
-    "eval_steps_per_second": 0.056
+    "eval_samples_per_second": 1.709,
+    "eval_steps_per_second": 0.055
 }

generated_predictions.txt

@@ -1,92 +1,92 @@
-saja
+a
 di
 dan
 untuk
-hal
-seperti
-9
+bahwa
 "
-semua
+9
+sangat
+besar
 
 untuk
-ada
-online
-?
+dapat
+lebih
+1
 atau
 adalah
 pada
-d
-kan
+k
+a
 
 2
-dan
-oleh
-banyak
+.
+saat
+jika
 yang
 dalam
 
-secara
-satu
+7
+sudah
 dengan
 di
-t
+
 ,
 .
-saat
-4
+sebagai
+?
 0
-membuat
+lain
+atau
 itu
-adalah
 
 di
 di
-baik
-8
+besar
+:
 1
 harus
-memiliki
+5
 tidak
-sudah
-situs
-3
+:
 9
+mereka
+/
 -
 akan
 lebih
-situs
+/
 yang
 untuk
 anda
-?
-itu
+t
+atau
 3
 k
-:
-beberapa
+memiliki
+game
 dengan
 yang
 di
 -
-t
+a
 atau
 situs
-a
+memiliki
 online
 jika
 0
-mereka
+indonesia
 untuk
-lebih
-k
+online
+6
 kamu
-adalah
-banyak
+para
+4
 adalah
 untuk
-)
-dan
-:
+banyak
+beberapa
+sudah
 1
 itu
 di
@@ -96,45 +96,45 @@ atau
 dari
 0
 nya
-beberapa
-hal
-baik
+saja
+4
+,
 menjadi
-mereka
+(
 0
 satu
 6
 sudah
 kita
+situs
 sebagai
-4
 ,
 pada
-ada
-seperti
-secara
+dapat
+besar
+t
 ini
-hal
+6
 dengan
 yang
 jika
-harus
-seperti
+sangat
+/
 
-ini
+namun
 untuk
-a
+harus
 -
 2
 kami
-:
+kita
 0
 dalam
 satu
 i
 adalah
-kita
-kami
+orang
+judi
 di
 dari
 
@@ -143,17 +143,17 @@ kita
 tersebut
 dalam
 para
-bermain
-5
-dalam
+game
+ada
+pada
 
-a
+7
 1
-(
-harus
+3
+saat
 bisa
-waktu
-para
+anda
+besar
 s
 dan
 
@@ -164,449 +164,449 @@ anda
 dan
 yang
 menjadi
-8
+oleh
 yang
 bisa
-indonesia
+salah
 bahwa
-dan
+game
 online
-bahwa
-tersebut
-satu
-juga
+anda
+dapat
+sudah
+i
 
-memiliki
+sudah
 1
-saya
+8
 yang
-cara
+"
 adalah
 
 dan
-saja
+a
 
 jika
-itu
+8
 
-saya
+seperti
 pada
-tersebut
+saat
 0
-cara
-adalah
-secara
-situs
-online
+orang
 pada
-untuk
+t
+hal
+juga
+dalam
+ini
 -
-uang
+di
 
 atau
-saja
+1
 ini
-oleh
-s
-"
+orang
+dapat
+ke
 itu
-judi
-juga
+k
+i
 2
-secara
-ke
-(
+indonesia
+lebih
+mereka
 1
 dengan
-bahwa
-salah
+/
+6
 
 .
 1
-anda
+0
 anda
 ini
 dengan
-saja
+a
 
-adalah
+itu
 6
 itu
-baik
+7
 ini
-tidak
+apa
 cara
-dapat
-2
-.
-
+tidak
+anda
+apa
 
-.
-4
 
+7
+9
+atau
 judi
-menggunakan
-online
+salah
+ada
 .
-satu
-sangat
+memiliki
+e
 untuk
-/
-bahwa
-besar
-menjadi
-hal
-orang
-t
+9
+judi
+6
+5
+sebagai
+sangat
+di
 
-saya
+t
 online
-maka
-juga
+lain
+atau
 anda
 3
-sangat
+saya
 
 
-online
-k
+lebih
+kita
 anda
 itu
-melakukan
+bagi
 saat
-memiliki
+sudah
 di
-saja
+kamu
 dan
-situs
-an
-dari
+9
+kami
+2
 .
 bisa
-cara
+telah
 
 ini
 juga
 adalah
-jika
-sebagai
+5
+an
 
-oleh
-i
+saat
+atau
 ini
-situs
+e
 anda
-u
-ke
-permainan
-3
-sebagai
-3
-(
+oleh
+karena
+beberapa
+jika
+situs
+5
+mereka
 pada
 untuk
-kita
-8
+:
+menjadi
 dan
-seperti
+membuat
 menjadi
-itu
-"
+juga
+4
 
 ini
 bisa
-situs
-9
+hal
+kamu
 banyak
-satu
-beberapa
+saat
+judi
 di
 dalam
 ,
-u
-juga
+bermain
+i
 di
-judi
-4
+kami
+/
 anda
-9
+an
 ke
 yang
 ,
 "
-8
-satu
+menjadi
+tersebut
 online
-situs
-dalam
+permainan
+m
 oleh
 0
-hal
+sebagai
 s
-satu
+saat
 
-kami
-mereka
+permainan
+(
 itu
-kan
-atau
-akan
+6
+i
+dalam
 saja
-dari
-harus
-melakukan
-banyak
+seperti
+orang
+poker
 banyak
-lebih
+(
+online
 itu
 
-e
+saat
 -
-sebagai
-oleh
-lebih
+an
+saat
+ke
 
 -
 
-yang
+e
 anda
 )
 9
-besar
-satu
+slot
+tersebut
 
 
 bisa
-0
-i
-5
+bermain
+karena
+:
 sudah
-secara
+a
 .
 2
 di
 (
 oleh
 untuk
-judi
+permainan
 lebih
 dengan
-oleh
+lagi
 yang
 untuk
 -
 
 )
-4
+/
 
 sudah
-i
-banyak
+uang
+)
 pada
-2
+dengan
 di
-seperti
-seperti
-saya
-dari
+"
+sangat
+
+nya
 atau
-kamu
+?
 pada
 ini
-)
+(
 oleh
-
+itu
 itu
 .
-3
-hanya
+5
+?
 itu
-karena
+)
 
 bisa
+bahwa
+besar
+"
+dengan
+e
 an
-salah
-bagi
-dan
-harus
-kami
-oleh
+satu
 anda
 
 dengan
-lebih
-bisa
+ke
+tidak
 "
 jika
 nya
-lebih
-kan
+s
+indonesia
 yang
-saja
-akan
+kan
+maka
 3
 lebih
 dari
 untuk
 nya
 nya
-oleh
+tersebut
 1
 adalah
-dalam
-juga
+"
+atau
 2
-seperti
-yang
+kita
+:
 dalam
-banyak
+)
 jika
-semua
+poker
 yang
 dari
 mereka
 1
-k
+t
 -
 2
 juga
-oleh
+saat
 itu
 
-saya
-tidak
+/
+akan
 s
 -
 )
 
 :
-saya
+)
 
-.
+"
 
-saya
+orang
 kami
-memiliki
+sudah
 -
-kamu
-situs
-bahwa
+t
+judi
+sebagai
 dapat
-d
-)
+t
+8
 itu
 tersebut
-a
+baik
 ini
-a
-9
+s
+sebagai
 yang
 untuk
 s
-bermain
+poker
 jika
-oleh
-sudah
-cara
+k
+satu
+harus
 nya
-)
-kita
+lebih
+mendapatkan
 anda
 -
-hanya
-an
+?
+?
 beberapa
 .
 atau
-dari
+adalah
 2
 di
-telah
+bagi
 dengan
 dan
-online
+lebih
 tidak
 
 memiliki
-cara
+orang
 nya
 bisa
-di
+para
 bisa
 1
 1
 -
 memiliki
 s
-3
-i
+mereka
+adalah
 dari
 banyak
-di
-judi
-mereka
+hanya
+permainan
+an
 dapat
-nya
+bisa
 (
-banyak
+menjadi
 )
-5
-e
+:
+tidak
 i
-baik
+t
 atau
-ini
-bermain
-nya
-online
+kan
+pada
+bisa
+dapat
 dan
 ,
 .
 yang
-seperti
-dalam
+hal
+pada
 dengan
 pada
 akan
-jika
-bahwa
+
+kami
 (
-slot
+menggunakan
 anda
 di
-akan
+melakukan
 yang
-k
+kamu
 untuk
 situs
-tersebut
-s
+satu
+dapat
 anda
 itu
 s
-lebih
-?
+dapat
+permainan
 0
-memiliki
-d
+satu
+5
 "
 1
-3
+jika
 
 tidak
-memiliki
-
 3
-karena
-7
-d
-sangat
-seperti
-adalah
-sudah
-satu
-menjadi
+
+jika
+6
+saja
+hanya
 satu
+hal
+itu
+memiliki
+oleh
+jika
+saat
 kan
 dari
 di
@@ -614,826 +614,826 @@ kami
 akan
 k
 untuk
-e
-6
-dapat
+saya
+u
+s
 dengan
-beberapa
-hal
-itu
+kami
+4
+juga
 akan
-jika
+menjadi
 2
-lebih
+banyak
 s
 dan
 0
-sudah
 oleh
-bagi
-banyak
-hal
-4
+cara
+s
+)
+adalah
+seperti
 yang
 tidak
 dengan
 dalam
-slot
-oleh
-/
+menggunakan
+8
+situs
 
 dan
-indonesia
+kan
 dari
-)
+mereka
 di
-hanya
+judi
 ,
-e
-ada
+sangat
+online
 ,
-e
+saya
 -
-3
-7
-itu
-k
-t
-?
+jika
+membuat
+adalah
+kan
+kan
+saja
 satu
 1
 
 pada
 )
 atau
-slot
-5
-cara
+bermain
+banyak
+orang
 adalah
-baik
+indonesia
 
 ada
-sudah
+memiliki
 saat
 
-u
-kamu
-tersebut
+slot
+kan
+satu
 atau
-beberapa
+?
 bisa
 menjadi
 
 dengan
-(
+3
 tidak
 saya
-6
+u
 dapat
 9
-4
+membuat
 dan
-bisa
+tidak
 -
 
-8
-/
+cara
+9
 untuk
-jika
-i
-/
-seperti
+e
+kamu
+baik
+membuat
 bisa
 saya
 nya
-saat
-mereka
-:
-bisa
-anda
-:
+cara
+(
+kita
+nya
+bahwa
+memiliki
 di
 
-)
+mereka
 menjadi
 2
 dan
 
 0
 nya
-anda
+2
 ini
 dan
-jika
-
-ada
-judi
+5
+slot
+a
+kami
 akan
-sudah
+satu
 ini
--
+uang
 lebih
 pada
 bisa
-s
-harus
+atau
+sangat
 tidak
 1
-memiliki
+satu
 ini
-itu
-jika
+juga
+menjadi
 .
 untuk
 i
-dalam
+adalah
 ini
-5
+:
 adalah
-anda
-4
-karena
+untuk
+/
+banyak
 juga
 yang
-:
+jika
 dengan
-)
-situs
+(
+sebagai
 
-kita
+satu
 .
-saya
+/
 ini
--
+0
 ke
 banyak
 dengan
-semua
-satu
+menggunakan
+menjadi
 s
 karena
-akan
+dalam
 i
 di
-sebagai
-yang
-para
+bahwa
+bermain
+pemain
 sudah
 dan
 di
-juga
+atau
 
-:
-8
+kita
+orang
 hal
-dapat
-:
-,
+kami
 sudah
+,
+satu
 .
-dalam
-"
-permainan
-lebih
-adalah
+kami
+sangat
+beberapa
+ke
+pada
 saat
-online
+judi
 
-saya
+9
 untuk
 itu
-secara
+k
 dalam
 ini
 ini
-beberapa
-juga
+orang
+9
 pada
-hanya
-situs
-1
+harus
+9
+besar
 
-)
+(
 adalah
 dari
-baik
+u
 karena
-(
+mereka
 akan
-di
-)
-hal
+.
+(
+"
 anda
-baik
-beberapa
+kan
+judi
 8
-kita
+:
 .
 itu
-ini
+7
 .
-hanya
-t
+?
+slot
 untuk
 besar
 0
-dari
-beberapa
-pada
-secara
+nya
 ?
-,
+adalah
+baik
+?
+menggunakan
 0
 
 yang
-akan
-akan
-kami
+nya
+tidak
+judi
 dari
-3
-ini
+mungkin
+1
 online
 :
 untuk
-nya
+6
 sangat
-lebih
+ke
 
-nya
-ada
-e
+bisa
+itu
+harus
 kita
 anda
-adalah
-sebagai
+itu
+/
 
 dan
-ini
-cara
-:
-
-secara
-hal
+dengan
+melakukan
+sudah
+karena
+membuat
+situs
 
-banyak
+(
 akan
 hanya
 3
-situs
+permainan
 hanya
-7
+k
 
 ada
-karena
-hanya
+ingin
+kamu
 seperti
 untuk
-(
+waktu
 nya
-kami
-memiliki
-kita
+s
+"
+:
 bisa
-1
+dari
 
-permainan
+saja
 i
 tidak
-judi
+beberapa
 dalam
 anda
 
 0
-3
+5
 memiliki
-d
-semua
+bermain
+ada
 banyak
-u
+:
 ,
 .
 pada
 akan
 1
 ke
-kami
-untuk
+baik
+sudah
 ,
-.
-a
+ingin
+salah
 juga
-sudah
-ini
-secara
+tersebut
+memiliki
+kan
 0
-indonesia
-u
+sebagai
+baik
 
 itu
 mereka
-
-beberapa
+6
+kami
 banyak
-hanya
-0
+kami
+a
 adalah
-ada
-sebagai
+slot
+/
 pada
 dan
-online
-)
+lebih
+(
 harus
 dalam
-4
-memiliki
+seperti
+banyak
 2
 dalam
-s
+ada
 
-tersebut
+oleh
 anda
-6
-bahwa
+besar
+hal
 d
-menjadi
-saat
-hanya
-ini
 :
+oleh
+kamu
+ini
+dari
 
 5
 dan
 "
-dengan
-"
+4
+seperti
 0
-u
+indonesia
 dan
-tersebut
-0
+saat
+2
+3
+ke
 (
-karena
-)
-e
-i
+"
+.
 ,
-karena
+banyak
 bisa
 
-menjadi
+kita
 0
 karena
 yang
-cara
-9
-i
-karena
+satu
+bahwa
+s
+banyak
 
-tersebut
-"
-melakukan
-an
-jika
-dapat
-)
+8
+4
+adalah
+kami
+menjadi
+ada
+e
 (
-kan
-situs
-dan
+,
+hal
+i
 akan
-5
+kita
 di
-permainan
+?
 adalah
 bisa
-harus
-sudah
-.
+sangat
+memiliki
+sangat
 dalam
 atau
 yang
-tahun
+oleh
 4
 ini
-permainan
+kita
 0
 2
 akan
 
 ini
-5
+menjadi
 -
-(
-juga
+3
+atau
 mereka
-itu
+menggunakan
 lebih
 satu
-k
-pada
+kamu
+itu
 karena
-orang
-beberapa
-0
+sangat
+hanya
+
 -
 dari
-slot
+sebagai
 akan
+saja
 kamu
-beberapa
-an
-mereka
+sebagai
+)
 itu
-jika
+sangat
 :
-sudah
--
-kan
-saat
-beberapa
 satu
+-
+t
+oleh
+hal
+tersebut
 anda
 di
 pada
-secara
-nya
-ke
+permainan
+?
+lebih
 yang
 tidak
-orang
+sangat
 pemain
 1
 akan
 kita
-orang
 harus
+e
 -
-hanya
+bahwa
 dapat
-banyak
-sangat
+karena
+seperti
 di
 anda
-itu
+ke
 dalam
 dengan
-)
+(
 dan
 /
 untuk
+d
+e
 indonesia
-"
-7
-bisa
-indonesia
+slot
+besar
 anda
 
-s
+bisa
 untuk
-t
+a
 
 nya
 dalam
-sebagai
+hanya
 dan
-(
-hal
+mereka
+9
 i
 menjadi
-menggunakan
-kan
-a
-maka
+para
+indonesia
+secara
+slot
 
 menjadi
-hanya
+adalah
 -
-7
+k
 dapat
-judi
+beberapa
 bisa
 di
-8
-t
-,
-cara
-untuk
-hal
-memiliki
+oleh
+3
+lain
+harus
+jika
+seperti
+satu
 
-ke
-tersebut
+karena
+an
 
-kamu
+?
 adalah
 kita
-bahwa
-dan
-saja
-jika
-ada
+9
+/
+secara
+menjadi
+dapat
 akan
-beberapa
+an
 hal
-beberapa
-indonesia
+permainan
+u
 bisa
+sudah
+semua
 :
-
-kita
 9
 yang
-kan
-kami
-8
+
+cara
+cara
 dan
-secara
+a
 dengan
 ,
 2
 
--
-yang
+menggunakan
+semua
 di
 kami
 ?
 
 
 mereka
-judi
+kami
 online
-dari
-baik
-orang
+nya
+7
+cara
 .
 0
 akan
-seperti
+baik
 akan
 ke
 1
 
 .
-ini
+0
 bisa
 dan
 i
 dengan
 8
-4
+/
 1
-slot
+game
 2
-menggunakan
-juga
+anda
+itu
 .
-7
-8
-hal
-4
-memiliki
+u
+saat
+situs
+seperti
+:
 ada
 anda
 i
-banyak
+besar
 1
 bisa
-jika
+apa
 
-jika
+menjadi
 dari
-dan
-mereka
+menggunakan
+lebih
 orang
-judi
-salah
-4
-9
+bahwa
+6
+maka
+sebagai
 adalah
 dengan
-jika
+mereka
 dalam
 yang
 0
 
-online
-:
+ke
+jika
 lebih
-yang
+anda
 
-seperti
+sangat
 dari
 dan
 untuk
 saat
 secara
 dengan
-menjadi
+3
 
 5
 dan
 tidak
-salah
-kan
+situs
+k
 i
 anda
-hal
+saya
 banyak
 karena
 ,
 
-1
-maka
-
-hal
-7
+i
+slot
+bagi
+saya
+a
 
 untuk
-dapat
+ada
 -
-4
+secara
 itu
 .
-tidak
+pada
 nya
 orang
 "
 pada
 s
 dari
-hanya
+t
 ke
-banyak
-mereka
+(
+3
 1
-bahwa
-/
+permainan
+situs
 pada
-baik
-sudah
+u
+satu
 
-telah
+sebagai
 1
--
-bisnis
-ke
-menjadi
+poker
+juga
+lebih
+besar
 judi
 juga
 untuk
 -
 
-secara
+saja
 untuk
--
+semua
 online
-atau
+s
 ini
-karena
-sebagai
-hal
+bahwa
+situs
+situs
 anda
 dengan
 1
-kami
-judi
-baik
-4
+an
+t
+saat
+hal
 itu
-orang
+hal
 .
-banyak
-5
-situs
+)
+menjadi
+an
 untuk
-indonesia
+k
 tidak
-lebih
-judi
+juga
+situs
 kamu
-atau
+lebih
 anda
-harus
-(
-saja
+sangat
+mereka
+membuat
 s
 i
-hanya
+dan
 juga
 
 atau
-kan
-k
+secara
+secara
 1
-
+t
 .
-situs
-2
-saja
+9
+para
+hal
 .
 2
 (
 dan
 1
-d
-,
-lain
+baik
+telah
+slot
 
 anda
-seperti
+"
 s
 .
 0
-/
+t
 juga
 bisa
 untuk
-s
-baik
+maka
+u
 .
 nya
-9
-di
-6
+sebagai
+bahwa
+indonesia
 )
-kita
-orang
+5
+cara
 2
 atau
 
-8
-online
+sangat
+lebih
 dapat
-cara
-satu
+tersebut
+oleh
 yang
-8
+cara
 
 
 
 
-sudah
-judi
-membuat
-oleh
+satu
+permainan
+juga
+saat
 yang
 
 -
 .
-)
-:
+(
+kita
 
 k
 hal
-tidak
-
 akan
-baik
-permainan
+orang
+akan
+secara
+an
 banyak
 atau
-memiliki
+kita
 ke
 
-9
-?
+an
+kamu
 nya
-saja
+dari
 judi
-para
-4
 0
-hanya
-besar
+hal
+satu
+permainan
+bahwa
 8
 juga
-secara
-mereka
+a
+
 )
-salah
-4
+maka
+membuat
 secara
 yang
-dapat
-sudah
-juga
-orang
+lebih
+/
+mereka
+harus
 dari
-k
-sudah
-bagi
+7
+oleh
+dengan
 di
--
+ini
 pada
 "
-kamu
-bahwa
+kan
+pemain
 2
 tahun
 yang
 akan
-online
+dapat
 :
 untuk
 dengan
@@ -1441,352 +1441,352 @@ i
 s
 e
 .
-hanya
-orang
-dan
+beberapa
+sangat
+3
 dari
 
-tersebut
-6
-karena
+cara
+ke
+banyak
 bisa
-satu
+sudah
 jika
 untuk
-game
+9
 ada
 yang
 akan
-game
+bagi
 nya
-bahwa
+sebagai
 di
-game
-oleh
+poker
+8
 :
+menjadi
 (
-bisa
 satu
-/
-a
-permainan
-menjadi
-saya
-kita
--
+judi
+7
+orang
+3
+seperti
 satu
-bahwa
-uang
+-
+tersebut
+sebagai
+semua
 untuk
 bisa
 ,
-s
-beberapa
-menjadi
-dalam
-a
+ada
+kamu
+3
 atau
-memiliki
+t
+dalam
+dalam
 tidak
-s
-menjadi
+ingin
+)
 
-5
-baik
+"
+di
 bisa
-bahwa
+permainan
 2
 sangat
-9
-permainan
-bahwa
+sebagai
+judi
+8
 ,
 di
-jika
-dapat
+3
+online
 i
-ada
-6
-an
+dapat
+juga
+sebagai
 -
-mereka
+3
 ini
 akan
 ini
-poker
-semua
+tidak
+bisa
 
-e
+"
 tersebut
 dan
 anda
-8
+harus
 dengan
 ada
-8
-sebagai
-sebagai
-kita
+:
+bahwa
+bahwa
+:
 yang
-
+a
 ke
 yang
-cara
+oleh
 yang
-5
-kamu
+kita
+t
 dan
 
 banyak
 .
-memiliki
-membuat
-?
-kami
-kita
-d
+:
+saja
+kamu
+sebagai
+lain
+t
 
 ke
 dalam
-situs
-(
+9
+mereka
 adalah
 pada
 -
-:
+sudah
 /
 
-juga
-permainan
+hal
+4
 dalam
-baik
+online
 s
 1
 ke
-beberapa
+kami
 ,
-situs
 9
-jika
+secara
+menjadi
 ini
-itu
+juga
 indonesia
 ada
-sebagai
+beberapa
 dan
 hanya
 yang
 bahwa
 juga
-saya
-u
+sangat
+lain
 menjadi
-semua
-juga
-dan
+menggunakan
+atau
+sebagai
 .
-:
-:
+kita
+memiliki
 di
-karena
+"
 .
 untuk
-kami
+sebagai
 untuk
-i
 atau
+i
 tidak
-oleh
-)
-bisa
+atau
+mereka
+kan
 tidak
 jika
-9
-ke
+situs
+banyak
 
 memiliki
-e
-saya
+5
+sebagai
 
-nya
-dari
-secara
+anda
 dari
-:
-(
+membuat
+atau
+memiliki
+menjadi
 akan
 
 1
 dengan
-itu
-mereka
-jadi
+juga
+(
+m
 adalah
-bahwa
-salah
+9
+besar
 
 bisa
 dan
+3
 mereka
-online
-8
-lebih
+oleh
+ke
 
-:
+sudah
 )
-saja
+hanya
 dan
-slot
+jadi
 pada
-saya
+7
 satu
-4
+/
 ,
-indonesia
+7
 0
 anda
-ini
-hanya
 dari
-melakukan
-jika
-bahwa
-permainan
-satu
-
+membuat
+dari
+game
+5
+9
+itu
+oleh
+dapat
 judi
 tidak
-beberapa
+judi
+(
 banyak
-karena
-hanya
-cara
-,
+seperti
+orang
+yang
 .
 an
 dari
 memiliki
 1
-itu
-apa
-atau
-sebagai
+u
+
+juga
+kami
 dari
 dalam
 anda
-bermain
-
-hanya
-hal
-kita
+besar
+untuk
+judi
+judi
+:
 -
-4
+/
 0
 lebih
-saja
+bahwa
 .
-5
-(
+kita
+mereka
 dengan
-6
+u
 anda
 oleh
-6
+u
 oleh
 tidak
-an
-1
+"
+dari
 
 0
 di
-harus
+saya
 membuat
 -
-3
-uang
-7
-permainan
+menjadi
+sudah
+besar
+ke
 ada
 1
-harus
-slot
+"
+namun
 an
-:
-judi
+atau
+jika
 
-hanya
+permainan
 bisa
 0
-lain
-oleh
+beberapa
+itu
 -
 0
 8
-t
-apa
+4
+permainan
 
 
-sebagai
+bahwa
 
-u
-sudah
-t
-8
-s
 salah
-adalah
-sudah
-ke
-tidak
-kamu
+satu
+baik
+oleh
+ada
+d
+pada
+oleh
+karena
+oleh
+secara
 ,
 .
 ini
-dari
-harus
+0
+sangat
 ke
 online
 atau
 
-jika
-?
+menjadi
+hanya
 0
 ,
-jika
+menjadi
 )
-membuat
+6
 adalah
 0
-cara
+8
 
-hal
-"
-oleh
+situs
+saya
+beberapa
 0
-u
+maka
 anda
-"
-tersebut
+saya
+oleh
 
 di
-6
-.
+salah
+apa
 sudah
 
 0
 2
 mereka
-salah
-online
-hal
+bermain
+lebih
+/
 adalah
 5
 menjadi
 .
-hal
-kami
-tersebut
-
+/
+9
+oleh
+u
 dapat
 .
 permainan
@@ -1795,81 +1795,81 @@ pada
 di
 saja
 
-kami
-4
+judi
+seperti
 dengan
-8
+sangat
 dari
-besar
-2
-tersebut
+)
+:
 cara
 bahwa
+beberapa
 yang
 karena
-memiliki
+menjadi
 tidak
 adalah
 3
 (
-e
-an
+cara
 kami
-lain
+permainan
+slot
 ini
 )
-sangat
+cara
 karena
 bisa
 banyak
 yang
-bahwa
-beberapa
+an
+an
 0
-lebih
+ke
 .
-situs
-4
+an
+seperti
 1
-6
-ada
+bermain
+dapat
 bisa
-judi
+untuk
 tidak
-sudah
+e
 dan
-tersebut
-karena
+oleh
+(
 1
 satu
-k
-beberapa
-bisa
-permainan
+t
+hanya
+adalah
+kamu
 
 1
-kita
+:
 baik
-anda
+n
 1
-satu
+cara
 s
 adalah
+6
 indonesia
-secara
-lebih
+online
 .
-dapat
-jika
+
+(
 di
-lebih
-"
+online
+situs
 juga
 .
-hanya
+kamu
 itu
-3
-/
+jika
+bahwa
 di
 banyak
 dapat
@@ -1878,106 +1878,106 @@ mereka
 tersebut
 
 
-indonesia
-3
+k
+d
 (
 
-memiliki
+t
 untuk
 ,
 
-karena
-permainan
-t
-e
-dapat
+banyak
+beberapa
+i
+saat
+s
 dalam
-cara
-membuat
-/
-9
+orang
+saja
+lebih
+hal
 ke
-online
+lebih
 
-2
-adalah
+,
+itu
 /
-an
-dapat
-slot
-indonesia
+beberapa
+online
+semua
+u
 harus
+karena
+menjadi
 ke
-5
-u
-memiliki
+hanya
 satu
-orang
-melakukan
-dari
-pada
+harus
+namun
+bagi
+k
 untuk
 dalam
-s
-e
-/
+i
+"
+?
 dengan
 pada
-lain
-indonesia
-:
-indonesia
+telah
+s
+apa
+uang
 dari
 
 
 
-u
+bermain
 
 dan
-9
-
+/
+pemain
 tidak
-tersebut
-lebih
+saat
+ke
+yang
+:
+3
 yang
-kita
-(
-2
 dalam
 di
-saat
-sudah
-)
-an
-
-pada
-harus
-"
-salah
-k
+oleh
+memiliki
 (
-itu
+kami
+
+yang
 saat
+saya
+maka
+7
+3
+juga
+tersebut
 2
-uang
+semua
 adalah
 -
-hanya
-t
+beberapa
+kan
 /
 online
-dapat
-satu
-d
+online
+sudah
+maka
 .
-4
-cara
+seperti
+orang
 tidak
 bisa
-atau
+i
 karena
 online
-judi
+beberapa
 dengan
 anda
 
@@ -1985,297 +1985,297 @@ pada
 tidak
 2
 nya
-maka
-untuk
-hal
+?
+namun
+9
 ?
 dapat
 sangat
-orang
-online
+e
+lebih
 yang
-mereka
+(
 
-saat
-,
+satu
 ,
-k
-)
-s
 3
+k
+seperti
+i
+mereka
 2
-online
+lebih
 yang
-oleh
-besar
+cara
+para
 .
-hanya
+)
 akan
-hal
+seperti
 2
-situs
+semua
 .
 e
 mereka
 indonesia
 t
 
-bahwa
-orang
-sebagai
+kami
+harus
+9
 -
 sebagai
-membuat
-sebagai
-indonesia
+saja
+situs
+baik
 dari
-menjadi
-e
+kita
+"
 di
 
-an
+s
 2
-5
-8
+:
+saat
 
 5
 
-kita
+d
 
-(
-slot
-melakukan
+mereka
+cara
+apa
 anda
-0
+para
 
 e
-tersebut
+oleh
 2
-ada
-a
+dapat
+kan
 ,
 anda
 -
-e
+hal
 2
 s
 0
 1
-tersebut
-banyak
-4
+saat
+)
+hal
 ke
-t
-karena
-3
+kamu
+banyak
+slot
 lebih
-secara
+t
 
 ,
 pada
-7
-tersebut
-harus
-sudah
-kita
+salah
 sebagai
-yang
-online
-atau
+saya
+memiliki
+sudah
+situs
+u
+lebih
+i
 atau
 untuk
 
-saya
-s
+situs
+dapat
 untuk
 bisa
-lebih
-/
-dalam
+ke
+itu
+akan
 ke
 
 dengan
 di
 online
-seperti
-kami
-saya
+4
 permainan
-ada
+"
+saya
+dapat
 dapat
 
-"
+seperti
 nya
 menjadi
-8
-menjadi
-kan
+cara
+5
+k
 
-bahwa
-harus
+kami
+cara
 tidak
 2
-9
-e
+sangat
+saya
 di
-bermain
+semua
+lebih
+menggunakan
+memiliki
+4
+poker
 online
-saat
-:
-seperti
-para
-dapat
-orang
-bahwa
-tersebut
+harus
+kami
+e
 maka
-dari
+1
 dari
 di
-semua
+apa
 s
 banyak
 anda
 
-ingin
-(
+besar
+banyak
 dari
-cara
-s
+8
+ada
 ,
-mereka
-bermain
-orang
-"
-saya
+?
+akan
+kamu
+4
+seperti
 dapat
 .
-menggunakan
-sangat
-slot
-tersebut
-sangat
-saja
+a
+saya
+maka
+sudah
+i
+beberapa
 untuk
-dengan
+poker
 s
-1
-bahwa
+ini
+sangat
 kita
-akan
+melakukan
 0
 tidak
 i
 
 2
-hal
+9
 bahwa
 situs
-?
-8
+hanya
+harus
 ada
 dalam
 untuk
 tersebut
 hal
-jika
+(
 satu
 yang
-tersebut
+8
 2
-secara
+saja
 ,
 )
-0
-memiliki
-besar
-adalah
-jika
-hal
+harus
+sudah
+d
+itu
+3
+sebagai
 .
-bahwa
+kami
 yang
-,
-kamu
-judi
+game
+saja
+semua
 sudah
 untuk
 bisa
 2
-namun
+bisnis
 
-dalam
-s
+nya
+ke
 itu
-menjadi
+mereka
 
 yang
 nya
 bisa
-permainan
-ada
+kamu
+dapat
 judi
-ini
+(
 .
 anda
 dalam
-3
+jika
 menjadi
-seperti
+4
 atau
-8
-anda
-beberapa
+satu
+
+sebagai
 e
 ,
-besar
-juga
+apa
+orang
 1
 dalam
-besar
+membuat
 .
 1
-judi
+beberapa
 0
-satu
+sudah
 anda
 karena
-online
+lebih
 1
-sudah
-secara
+bahwa
+t
 akan
 ,
 dengan
 dapat
-game
+semua
 bahwa
-2
-e
-8
-u
+saya
+harus
+an
+6
 anda
 
-6
-jika
-(
-u
+salah
+5
+ke
+saja
 yang
 akan
 dan
-bisa
-
-bahwa
+pada
 
-(
-menggunakan
-secara
-akan
-juga
+judi
+waktu
+3
+telah
+a
+a
+atau
 nya
+sudah
 saat
-orang
-a
+kan
 dan
 -
 cara
@@ -2286,468 +2286,468 @@ untuk
 sebagai
 
 ,
-)
-sebagai
-secara
-kita
+situs
+ke
+k
+1
 :
 
-juga
+atau
 adalah
-orang
-ada
-beberapa
-?
-secara
+tersebut
+slot
+judi
+saya
+besar
 akan
-orang
+sangat
 di
 dari
 :
-sangat
+harus
 
-e
-dan
-kan
-0
-bisa
-banyak
-s
+sangat
+kamu
+t
+0
+bisa
+ke
+i
 dalam
-s
-d
-beberapa
-oleh
+ada
+slot
+an
+8
 adalah
 s
-dapat
+online
 banyak
 2
 banyak
 
-seperti
+saya
 untuk
-saja
+membuat
 adalah
-sangat
-menggunakan
-?
+harus
+poker
+judi
 membuat
 2
-kita
+memiliki
 
 dan
-s
-an
+sangat
+hanya
 k
 adalah
-kami
+5
 untuk
-tahun
-jika
-:
-s
-e
+u
+kita
+memiliki
+ada
+cara
 )
-itu
-untuk
-yang
+satu
+harus
+
 karena
-atau
+online
 
-permainan
-ke
+maka
+karena
 bisa
 nya
-kita
-(
+memiliki
+mereka
 di
 yang
-kita
+u
 orang
-baik
+kan
 
 -
 slot
-atau
-5
+i
+menjadi
 anda
 dan
-permainan
-i
+kami
+atau
 
-maka
+besar
 0
 yang
 0
-anda
 
+harus
 
 8
 banyak
 ini
-memiliki
+satu
 juga
 untuk
 dan
 dalam
 dengan
 untuk
-ini
-tersebut
+dengan
+oleh
 jika
-sebagai
+sangat
 untuk
-menjadi
+oleh
 dalam
 ke
-4
+seperti
 s
-jika
-saat
-saja
-banyak
-baik
+menjadi
+8
+secara
+lebih
+kan
 ini
 9
 akan
 kita
-maka
-bermain
+situs
+lain
 dalam
 )
-saya
+hal
 dan
-online
-7
+lebih
+u
 0
-kami
-?
-permainan
-sudah
+beberapa
+kamu
+judi
+:
 ,
-a
-permainan
-lebih
+bisa
+?
+online
 banyak
-(
-atau
-lebih
+bagi
+ke
+ada
 2
 
-a
-dan
+maka
+yang
 .
-)
+online
 lebih
-saya
-seperti
+/
+/
 (
-satu
+cara
 )
-uang
-indonesia
+game
+menjadi
 -
-tidak
+pada
 yang
 "
 yang
 9
 adalah
-ke
-judi
+karena
+kami
+saja
 menggunakan
-u
-bahwa
+situs
 dan
 juga
 anda
-kami
+beberapa
 .
 di
-satu
+tersebut
 
 karena
-hanya
-memiliki
-orang
-k
+hal
+oleh
+sangat
+untuk
 2
 ini
-ke
+karena
 )
 
 
-sangat
+hal
 yang
-indonesia
+secara
 akan
 ini
-:
+memiliki
 anda
-9
-besar
+bahwa
+maka
 ,
-dapat
+s
 di
 untuk
-satu
+atau
 ?
-seperti
+4
 ,
 yang
-kita
-4
-e
+:
+saya
+saya
 adalah
 hal
-s
-cara
-kamu
+ada
+seperti
+a
 lebih
 dengan
-u
-jika
+bermain
+kita
 sudah
-bahwa
-itu
-3
+9
+juga
+menjadi
 mereka
 )
 
 itu
-harus
+cara
 dan
 tidak
-permainan
-juga
+?
+i
 ada
 
-harus
+e
 
 1
 kami
 
 2
-menjadi
+e
 dalam
-banyak
+)
 itu
 dari
 
-oleh
-seperti
 
-orang
+"
 
-poker
+sangat
+
+kita
 orang
-uang
-secara
+game
+kamu
 untuk
-sangat
-:
-/
-?
+e
+memiliki
+bahwa
+kamu
 ini
-t
+baik
 s
-dalam
-dari
-7
+pada
+nya
+6
 
 bahwa
 nya
 kita
 3
 yang
-:
+memiliki
 ada
 i
 
 dengan
-k
-tersebut
+m
+saat
 yang
-,
-secara
-seperti
+lain
+semua
+hal
 dengan
-s
-salah
+ada
+karena
 untuk
 .
 .
-dapat
+online
 seperti
-lebih
+ke
 dengan
-secara
-7
+kamu
+baik
 di
-4
-pada
-karena
-ke
+situs
+itu
+saja
+)
 pada
 dari
 akan
 dapat
 akan
 
-menjadi
+5
 :
-orang
-orang
+e
+kamu
 -
 i
-secara
-ke
-sudah
-hanya
+kamu
+nya
+8
+permainan
 ada
 
-permainan
+beberapa
 
 untuk
 bisa
-saat
-online
-seperti
+oleh
+karena
+"
 ,
-bermain
-(
-3
+baik
+mereka
+jika
 (
 
 saja
-s
-situs
-dan
+ada
+sebagai
+itu
 juga
 .
-orang
+harus
 0
 nya
-kamu
-situs
+.
+9
 pada
-mereka
+(
 yang
 )
 yang
-"
+sangat
 dengan
 3
 tersebut
 atau
 adalah
-permainan
-
+.
+ke
 tidak
-saja
-memiliki
-kita
-bermain
+di
+sudah
+:
+harus
 tidak
 dengan
 0
-6
-kan
--
--
-?
+u
+hal
 0
+-
+kamu
+bisa
 permainan
 .
 yang
-maka
-6
-permainan
-/
+uang
+baik
+kamu
+situs
 karena
+cara
 sangat
-e
 0
-bahwa
-/
+kami
+hal
 anda
 cara
-membuat
-beberapa
-kita
-:
+8
+kami
+5
+sudah
 di
 saya
 )
-5
-permainan
+lain
 cara
+tersebut
 di
-9
+bahwa
 s
 2
 ,
 
 atau
-6
-jika
+sudah
+sangat
 untuk
 atau
 para
-pemain
-kan
+sudah
+4
 8
 
-hanya
-k
+/
+dengan
 tersebut
 pada
 bahwa
 
 anda
-"
+saya
 0
 dan
-ini
+dan
 di
 situs
 pada
 1
-:
+tersebut
 .
-9
+saya
 dan
-a
-menjadi
-3
+7
 5
-
-online
-kami
+menjadi
+kita
+8
+lebih
+permainan
 2
-akan
+di
 adalah
-kita
-menjadi
-satu
+:
+5
+saat
 di
-(
+mereka
 ini
-menjadi
+satu
 dari
 beberapa
-atau
-3
+i
+mereka
 akan
 yang
-memiliki
-saat
+:
+8
 ini
 akan
-mereka
-ada
-karena
+6
+online
+online
 ada
 yang
 -
@@ -2756,1006 +2756,1006 @@ dalam
 )
 ke
 ini
-5
+menjadi
 dan
 bisa
 dalam
-ke
-beberapa
-baik
-5
-anda
+lebih
+kamu
+tidak
+
+saya
 3
-akan
-atau
-8
+dalam
+i
+permainan
 anda
 0
-dalam
-juga
+pada
+atau
 oleh
-hanya
+u
 dan
-adalah
+itu
 tersebut
 .
 tidak
 dan
 s
-satu
+8
 ,
-9
+sangat
 oleh
 s
 online
-harus
-)
-sebagai
-3
+9
+itu
+uang
+(
 -
 bisa
-permainan
-sudah
+saja
+tersebut
 ini
 )
 .
 nya
-k
-sebagai
-situs
+baik
+secara
+banyak
 sangat
 yang
-saat
+cara
 i
-permainan
-oleh
+hanya
+tersebut
 saat
-atau
-jika
-cara
+i
+tersebut
+memiliki
 dan
 untuk
 0
 
 dapat
-e
+8
 akan
 ,
-e
+anda
 di
 juga
 dalam
-3
+jika
 0
 untuk
-s
+ada
 jika
-7
+a
 0
 (
-satu
-bahwa
+tersebut
+situs
 .
-dan
-:
-dapat
+anda
+satu
+online
 ini
 adalah
 dalam
-0
+semua
 ini
 kan
-satu
-,
-situs
-lebih
+tersebut
+game
+/
+mereka
 :
 sangat
-?
+saja
 dan
 anda
 satu
 tidak
-judi
+?
 untuk
-secara
+membuat
 ,
 
 
 0
-lain
+baik
 s
-kami
+hanya
 tidak
 saat
 dengan
 oleh
-sudah
+banyak
+mereka
+harus
 )
-orang
-kita
 dalam
 sebagai
-jika
+5
 tersebut
-adalah
+salah
 dan
-situs
-indonesia
-karena
+sudah
+besar
+banyak
 dengan
-kami
+permainan
 tersebut
 .
 bisa
-orang
-/
+sangat
+9
 akan
-k
-saja
+ada
+kamu
 jika
 
 0
-mereka
-a
+3
+k
 akan
-karena
-orang
+atau
+sangat
 0
-bermain
-baik
+d
+t
 (
-atau
+tersebut
 pada
-di
+untuk
 1
 cara
 
-saja
+beberapa
 
 
 situs
-k
+t
 s
 adalah
 dapat
-kita
+:
 -
-memiliki
+sudah
 dalam
-lebih
+ke
 adalah
 2
 tidak
 ini
-pada
-saja
+bahwa
+kamu
 2
-k
+salah
 8
 untuk
 0
-membuat
-orang
-:
+secara
+sangat
+memiliki
 pada
 yang
 dan
 
-3
-jika
+kita
+/
 banyak
-hal
-saat
+seperti
+oleh
 akan
 ,
 akan
 lebih
-a
-6
-saja
+bahwa
+salah
+kan
 nya
-3
-kita
-ada
+menjadi
+5
+dapat
 bisa
-seperti
+sangat
 ,
-lain
-2
-dan
+maka
+dalam
+judi
 akan
-harus
+bahwa
 2
 ini
-baik
+indonesia
 dalam
 mereka
-tersebut
-sangat
+memiliki
+sudah
 s
-seperti
+4
 dan
-akan
+bisnis
 2
-(
+mereka
 di
 -
-
+menjadi
 dari
 cara
 ke
-8
-i
+cara
+s
+9
+saat
 4
-nya
-situs
-e
-hal
-an
-kan
-ada
-secara
-sangat
-judi
+maka
+4
+permainan
+sebagai
+itu
+membuat
+orang
+permainan
 dengan
-menjadi
-hanya
-seperti
-sangat
+jika
+?
+4
+orang
 .
 dengan
-situs
+/
 
 di
-online
 lebih
+banyak
 pada
-.
+adalah
 
-8
-5
-sebagai
+melakukan
+:
+/
 s
-ada
+atau
 memiliki
-hanya
-bisa
-maka
-online
+?
+akan
+sangat
+lebih
 
-salah
+u
 nya
-sudah
-hanya
+6
+saja
 pada
 adalah
-6
-"
+u
+d
 banyak
-bahwa
-secara
+)
+online
 0
-"
-di
-saya
-tersebut
-menjadi
-3
-menjadi
+4
+lebih
+seperti
+oleh
+5
+kita
+jika
 orang
 .
-4
+seperti
 nya
-hal
+9
 0
 anda
 adalah
-3
-bahwa
-dapat
-saat
+menjadi
+saya
+online
+8
 ini
 .
 pada
-anda
+dengan
 /
 yang
 
 yang
-untuk
+membuat
 karena
-6
-"
+t
+salah
 lebih
 )
 tidak
 dari
-cara
-(
-seperti
-0
+orang
+3
+4
+nya
 nya
 ?
-0
-tidak
+7
+baik
 ,
-tidak
-?
+waktu
+a
 ada
 di
-hanya
+permainan
 :
 5
 dengan
 dan
-kita
-"
-t
-d
-indonesia
-.
-bahwa
-akan
-hal
+5
+harus
+7
+pada
+2
+.
+bahwa
+akan
+4
 
-jika
+kamu
 kita
-memiliki
-/
+kita
+seperti
 
 .
-kan
+bisnis
 mereka
-t
+a
 dan
-poker
+d
 0
 tidak
-adalah
-9
+dalam
+sebagai
 situs
-"
+harus
 saat
 -
-)
-bagi
+mereka
+apa
 dengan
-beberapa
+mereka
 online
-oleh
+tersebut
 dengan
 
 
-:
+5
 dari
-juga
-nya
-ke
-e
+s
+bisa
+karena
+saya
 adalah
 lain
-harus
-saat
-memiliki
+secara
+besar
+sudah
 dengan
-membuat
-pemain
+k
+waktu
 dengan
-,
+tidak
 ke
 tidak
-banyak
-"
-hanya
+)
+7
+juga
 s
 ke
-harus
+8
 kita
-sangat
-hanya
+harus
+saja
 yang
-?
-indonesia
+permainan
+u
 
 ,
 
 e
 1
-saja
+0
 lebih
-e
-judi
 "
-5
+an
+pada
+,
 pada
 mereka
-/
+hal
 pada
-banyak
-seperti
-tersebut
+ke
+hal
+saat
 maka
 di
 sangat
-:
+sudah
 banyak
-3
+jika
 untuk
-akan
+cara
 
-"
+saya
 yang
 
 
-permainan
+maka
 anda
 
 satu
 ini
-permainan
-ke
+kamu
+karena
+"
 harus
-8
 
-t
-e
-ini
-ke
+kan
 "
+ini
+karena
+seperti
 -
-dengan
+)
 
 bisa
-membuat
-/
+hanya
+sebagai
 2
 di
-saya
-2
+seperti
+tidak
+kami
+saat
+online
+sangat
+karena
 judi
-8
-dapat
-orang
-ke
-situs
-"
+sangat
+saat
+kan
+seperti
+baik
 0
-salah
-hal
-6
-2
-oleh
-?
-saja
-
+saat
+9
+membuat
+bisa
 lebih
-dari
+
 atau
 harus
 9
-an
+permainan
 ini
-kami
+an
 .
-sudah
+tersebut
 
 permainan
 dan
-7
-?
-8
-sebagai
-saya
-juga
+baik
+judi
+saat
+bahwa
+dengan
+atau
 u
 untuk
-situs
+an
 adalah
-membuat
-secara
+kamu
+untuk
 1
 dan
-tersebut
-lebih
+8
+karena
 ,
 ini
 yang
 s
-5
+menjadi
 
-t
+secara
 yang
 kita
 ,
 tidak
-seperti
-kan
-telah
+hal
+7
+poker
 1
 /
-sudah
+saat
 ,
-saja
+secara
 bahwa
-e
-untuk
+yang
 untuk
+e
 oleh
 online
 ,
 
+e
+mereka
 sangat
-jika
-"
-slot
+bermain
 satu
 seperti
-oleh
-7
-bisnis
-menjadi
+saat
+baik
+p
+5
 bahwa
 juga
-2
-uang
-dalam
-situs
-(
+1
+di
 dalam
-beberapa
+9
+mereka
+pada
+2
 0
 adalah
-situs
-9
+karena
+hal
 kamu
-dapat
+online
 8
-sangat
+oleh
 nya
 pada
-"
-tersebut
-:
-sangat
+saya
+oleh
+baik
+e
 
-kan
-seperti
-7
-:
-4
-kamu
-mendapatkan
+secara
+judi
+indonesia
+judi
+hal
+a
+ingin
 ini
-ke
+karena
 itu
 lebih
 ,
 tidak
-situs
+bahwa
 itu
 jika
 oleh
 nya
-beberapa
+kamu
 anda
 di
-3
-sudah
-oleh
-sebagai
+5
+satu
+orang
+beberapa
 
 ke
-dari
+nya
 s
+jika
+8
 pada
-bisa
-pada
-menjadi
-)
+5
 ke
 karena
-(
+ke
+3
 pada
 dan
 nya
 2
+ada
 dapat
-lebih
-
 
-e
 
-:
-mereka
+"
+saja
+secara
+3
 dalam
 tidak
 anda
-sebagai
+an
 i
 ini
-hal
+seperti
 bisa
 ini
 nya
-8
+harus
 untuk
 atau
 dari
 
 dapat
 tidak
-d
+salah
 membuat
--
+sebagai
 akan
-an
-oleh
-memiliki
+situs
+orang
+satu
 juga
 memiliki
 
 dengan
-e
+"
 bahwa
 pada
 beberapa
 ini
 untuk
-menjadi
-t
-bahwa
-dapat
+5
+indonesia
+kan
+lebih
+2
 2
-beberapa
 dari
 nya
-sebagai
+anda
 
-dapat
+i
 2
 s
-slot
+dapat
 dalam
 adalah
 di
+sangat
 harus
-cara
 di
 akan
-an
-poker
+bahwa
+slot
 sebagai
 yang
 
 adalah
 s
-oleh
+seperti
 adalah
-menjadi
+5
 
 yang
+online
+online
 sangat
-sudah
-saja
-satu
-saya
-sangat
-i
-hanya
-dengan
+tersebut
+bahwa
+/
+s
+beberapa
+anda
 0
 nya
-secara
-bisa
+judi
+)
 memiliki
 ?
 .
 membuat
 dengan
 di
-5
-4
-harus
+memiliki
+"
+saya
 karena
-nya
-dalam
-sangat
-tersebut
-hal
-saat
+semua
+pada
+"
+karena
+bahwa
+8
 
 ,
-5
+kita
 ini
 
-sudah
+satu
 menjadi
-kan
-indonesia
+6
+6
 
-beberapa
-dapat
-banyak
+a
+online
+(
 
 
 menjadi
-9
-ini
-satu
 hal
-i
+ini
+oleh
+cara
+ada
 sebagai
-kamu
+beberapa
 dari
-kamu
-5
-?
+hal
+mereka
+seperti
 
-menjadi
-dengan
-7
 :
-orang
-i
-seperti
-oleh
-seperti
+dengan
+saat
+menjadi
+sangat
+/
 4
-saya
+tersebut
+seperti
+hal
+"
 bisa
 dan
 
-secara
-(
+saja
+jika
 ke
-orang
-d
+cara
+
 )
-6
+k
 slot
 7
 akan
 dengan
-seperti
-saat
+yang
+satu
 akan
-an
+kami
 untuk
 nya
-jika
+kita
 juga
 ,
 tersebut
 
-situs
+seperti
 juga
-(
+mereka
 dengan
-1
-4
-5
+dari
+"
+kita
 lebih
-?
+t
 sudah
-baik
-4
-baik
-akan
-i
-tersebut
+k
+sebagai
+k
+dalam
+indonesia
+saat
 oleh
 bisa
 
-telah
+game
 )
-saya
+sangat
 2
 .
-sebagai
-"
-3
-situs
+seperti
+/
+jika
+satu
 0
 di
-saat
-anda
-satu
+8
+t
+an
 ini
-menjadi
-dengan
+karena
+baik
 banyak
 dari
-an
+"
 pada
 ini
-(
+mereka
 untuk
-lebih
+online
 di
-banyak
-bermain
-:
-a
+)
+maka
 sudah
-kan
-hal
-untuk
+
+oleh
+baik
+/
+uang
 online
 para
-sebagai
+,
 bisa
-hanya
-dapat
-tersebut
+tidak
+online
+saat
 kita
 pada
-indonesia
+oleh
 pada
-5
-tahun
+:
+ingin
 ini
 .
-i
-saat
+s
+cara
 ini
 di
 di
-"
-orang
-salah
-kan
+sangat
+harus
+dengan
+u
 harus
 0
 satu
 ,
-an
+?
 nya
 saya
-tahun
-bisa
+game
+bahwa
 8
-i
+situs
 .
 bisa
 di
 memiliki
 dan
-membuat
+kamu
 2
-memiliki
-hanya
-an
-cara
-7
-bahwa
-dapat
+harus
+?
 judi
-3
+sangat
+2
+an
+ada
+kami
+5
 untuk
-hal
-bisa
-6
+4
+pemain
+ada
 .
-atau
-satu
-di
-hal
-kita
-kita
+itu
+oleh
+ini
+/
+hanya
+:
 dan
 dan
-kami
-bahwa
-dengan
+t
+judi
+0
 dengan
-ada
-lain
 karena
+poker
+)
 2
-cara
 8
-kita
-sebagai
-namun
+cara
+satu
+an
+atau
 anda
-jika
-maka
+ke
+salah
 online
-?
-t
+ke
+a
 yang
 .
 adalah
-5
-membuat
+orang
+para
 untuk
-sudah
+satu
 mereka
-ada
+slot
 -
 )
 e
-i
-sebagai
+secara
+tersebut
 online
-sangat
+game
 banyak
 0
 adalah
 lebih
-saya
+sangat
 2
-itu
-e
+atau
+hal
 dari
 itu
-an
+untuk
 dengan
 dan
 sangat
-8
+orang
 cara
-t
+secara
 4
-slot
-judi
-(
-"
+
+8
+)
+besar
 lebih
-sebagai
+
 dalam
-memiliki
-nya
-cara
-situs
-orang
-1
-lain
-saat
-ini
-memiliki
+satu
+maka
+8
+4
+7
+bisa
+uang
+para
+apa
+ada
 sebagai
 
-sangat
-indonesia
+e
+baik
 akan
-sangat
+indonesia
 dan
-lain
+maka
 akan
 menjadi
 pada
-an
+sebagai
 ini
 dengan
 .
 tidak
 2
-kita
-9
-dari
+:
+situs
+
 yang
-kita
-?
-akan
+:
+beberapa
+situs
+hanya
 harus
-saat
 akan
-sebagai
+kamu
 dengan
 juga
-d
-e
+hanya
+orang
 dari
-u
+a
 indonesia
-beberapa
+kami
 ,
-menjadi
-kan
+kita
+6
 dan
-tersebut
+oleh
 
 
 dari

predict_results.json

@@ -1,12 +1,12 @@
 {
     "predict_gen_len": 1.0,
-    "predict_loss": 1.4727340936660767,
-    "predict_rouge1": 0.4436,
+    "predict_loss": 1.331460952758789,
+    "predict_rouge1": 0.4132,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4428,
-    "predict_rougeLsum": 0.4441,
-    "predict_runtime": 2508.0418,
+    "predict_rougeL": 0.4119,
+    "predict_rougeLsum": 0.413,
+    "predict_runtime": 2272.9425,
     "predict_samples": 3761,
-    "predict_samples_per_second": 1.5,
-    "predict_steps_per_second": 0.047
+    "predict_samples_per_second": 1.655,
+    "predict_steps_per_second": 0.052
 }

train_results.json

@@ -1,9 +1,9 @@
 {
     "epoch": 5.0,
     "total_flos": 5.531847691862016e+16,
-    "train_loss": 2.4753322173661716,
-    "train_runtime": 5816.2827,
+    "train_loss": 2.267836908588495,
+    "train_runtime": 5835.4771,
     "train_samples": 14266,
-    "train_samples_per_second": 12.264,
-    "train_steps_per_second": 0.767
+    "train_samples_per_second": 12.224,
+    "train_steps_per_second": 0.764
 }

trainer_state.json

@@ -10,112 +10,112 @@
   "log_history": [
     {
       "epoch": 1.0,
-      "grad_norm": 0.8171252608299255,
+      "grad_norm": 0.9127490520477295,
       "learning_rate": 0.0008,
-      "loss": 3.1861,
+      "loss": 3.0347,
       "step": 892
     },
     {
       "epoch": 1.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 2.2145652770996094,
-      "eval_rouge1": 0.7276,
+      "eval_loss": 2.0001704692840576,
+      "eval_rouge1": 0.6717,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.7228,
-      "eval_rougeLsum": 0.7243,
-      "eval_runtime": 50.938,
-      "eval_samples_per_second": 14.665,
-      "eval_steps_per_second": 0.471,
+      "eval_rougeL": 0.6744,
+      "eval_rougeLsum": 0.6696,
+      "eval_runtime": 53.7591,
+      "eval_samples_per_second": 13.895,
+      "eval_steps_per_second": 0.446,
       "step": 892
     },
     {
       "epoch": 2.0,
-      "grad_norm": 0.7914226651191711,
+      "grad_norm": 0.7276727557182312,
       "learning_rate": 0.0006,
-      "loss": 2.6443,
+      "loss": 2.4012,
       "step": 1784
     },
     {
       "epoch": 2.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 1.8686199188232422,
-      "eval_rouge1": 0.6739,
+      "eval_loss": 1.7295931577682495,
+      "eval_rouge1": 0.7117,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.6711,
-      "eval_rougeLsum": 0.6725,
-      "eval_runtime": 57.8842,
-      "eval_samples_per_second": 12.905,
-      "eval_steps_per_second": 0.415,
+      "eval_rougeL": 0.7105,
+      "eval_rougeLsum": 0.7111,
+      "eval_runtime": 55.151,
+      "eval_samples_per_second": 13.545,
+      "eval_steps_per_second": 0.435,
       "step": 1784
     },
     {
       "epoch": 3.0,
-      "grad_norm": 0.9062034487724304,
+      "grad_norm": 0.8275261521339417,
       "learning_rate": 0.0004,
-      "loss": 2.3648,
+      "loss": 2.1461,
       "step": 2676
     },
     {
       "epoch": 3.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 1.6868230104446411,
-      "eval_rouge1": 0.6807,
+      "eval_loss": 1.478960633277893,
+      "eval_rouge1": 0.6953,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.6791,
-      "eval_rougeLsum": 0.6801,
-      "eval_runtime": 51.0146,
-      "eval_samples_per_second": 14.643,
-      "eval_steps_per_second": 0.47,
+      "eval_rougeL": 0.6922,
+      "eval_rougeLsum": 0.6902,
+      "eval_runtime": 52.4262,
+      "eval_samples_per_second": 14.249,
+      "eval_steps_per_second": 0.458,
       "step": 2676
     },
     {
       "epoch": 4.0,
-      "grad_norm": 1.0508205890655518,
+      "grad_norm": 0.9719261527061462,
       "learning_rate": 0.0002,
-      "loss": 2.1665,
+      "loss": 1.952,
       "step": 3568
     },
     {
       "epoch": 4.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 1.5094746351242065,
-      "eval_rouge1": 0.7096,
+      "eval_loss": 1.3588956594467163,
+      "eval_rouge1": 0.6758,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.7072,
-      "eval_rougeLsum": 0.7087,
-      "eval_runtime": 55.4438,
-      "eval_samples_per_second": 13.473,
-      "eval_steps_per_second": 0.433,
+      "eval_rougeL": 0.6753,
+      "eval_rougeLsum": 0.6736,
+      "eval_runtime": 54.0573,
+      "eval_samples_per_second": 13.819,
+      "eval_steps_per_second": 0.444,
       "step": 3568
     },
     {
       "epoch": 5.0,
-      "grad_norm": 0.8089126348495483,
+      "grad_norm": 0.8105780482292175,
       "learning_rate": 0.0,
-      "loss": 2.0149,
+      "loss": 1.8052,
       "step": 4460
     },
     {
       "epoch": 5.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 1.422324538230896,
-      "eval_rouge1": 0.705,
+      "eval_loss": 1.2773828506469727,
+      "eval_rouge1": 0.6685,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.703,
-      "eval_rougeLsum": 0.7034,
-      "eval_runtime": 57.1653,
-      "eval_samples_per_second": 13.067,
-      "eval_steps_per_second": 0.42,
+      "eval_rougeL": 0.6677,
+      "eval_rougeLsum": 0.6651,
+      "eval_runtime": 55.3406,
+      "eval_samples_per_second": 13.498,
+      "eval_steps_per_second": 0.434,
       "step": 4460
     },
     {
       "epoch": 5.0,
       "step": 4460,
       "total_flos": 5.531847691862016e+16,
-      "train_loss": 2.4753322173661716,
-      "train_runtime": 5816.2827,
-      "train_samples_per_second": 12.264,
-      "train_steps_per_second": 0.767
+      "train_loss": 2.267836908588495,
+      "train_runtime": 5835.4771,
+      "train_samples_per_second": 12.224,
+      "train_steps_per_second": 0.764
     }
   ],
   "logging_steps": 500,