End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:
@@ -18,10 +20,10 @@ should probably proofread and complete it, then remove this comment. -->
 This model is a fine-tuned version of [LazarusNLP/IndoNanoT5-base](https://huggingface.co/LazarusNLP/IndoNanoT5-base) on an unknown dataset.
 It achieves the following results on the evaluation set:
 - Loss: 0.6837
-- Rouge1: 0.7788
+- Rouge1: 0.7912
 - Rouge2: 0.0
-- Rougel: 0.7826
-- Rougelsum: 0.7777
+- Rougel: 0.7956
+- Rougelsum: 0.7898
 - Gen Len: 1.0
 
 ## Model description

all_results.json

@@ -0,0 +1,29 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.6836755871772766,
+    "eval_rouge1": 0.7912,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.7956,
+    "eval_rougeLsum": 0.7898,
+    "eval_runtime": 2121.3667,
+    "eval_samples": 747,
+    "eval_samples_per_second": 0.352,
+    "eval_steps_per_second": 0.011,
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.719523012638092,
+    "predict_rouge1": 0.87,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.8706,
+    "predict_rougeLsum": 0.8709,
+    "predict_runtime": 10637.3512,
+    "predict_samples": 3761,
+    "predict_samples_per_second": 0.354,
+    "predict_steps_per_second": 0.011,
+    "total_flos": 5.592661664034816e+16,
+    "train_loss": 1.4341732418590596,
+    "train_runtime": 6521.1507,
+    "train_samples": 14266,
+    "train_samples_per_second": 10.938,
+    "train_steps_per_second": 0.684
+}

eval_results.json

@@ -0,0 +1,13 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.6836755871772766,
+    "eval_rouge1": 0.7912,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.7956,
+    "eval_rougeLsum": 0.7898,
+    "eval_runtime": 2121.3667,
+    "eval_samples": 747,
+    "eval_samples_per_second": 0.352,
+    "eval_steps_per_second": 0.011
+}

generated_predictions.txt

@@ -0,0 +1,3761 @@
+bagi
+di
+untuk
+y
+,
+
+di
+
+
+dan
+,
+yang
+,
+,
+
+
+
+
+dan
+untuk
+.
+untuk
+anda
+
+dengan
+untuk
+anda
+
+yang
+
+
+,
+
+.
+di
+yang
+
+dan
+dan
+
+
+,
+,
+,
+
+
+yang
+dan
+yang
+
+,
+
+
+
+yang
+
+di
+
+,
+dan
+
+.
+
+untuk
+
+,
+yang
+.
+berbagai
+yang
+yang
+dan
+dengan
+
+.
+.
+yang
+dan
+dan
+yang
+
+
+,
+
+yang
+yang
+yang
+anda
+dan
+,
+setelah
+
+ada
+.
+di
+
+.
+.
+yang
+,
+
+untuk
+di
+,
+anda
+.
+sudah
+
+
+
+
+
+
+
+untuk
+:
+
+
+untuk
+
+.
+
+di
+
+harus
+saat
+
+,
+dan
+,
+atau
+yang
+,
+.
+.
+untuk
+dan
+forex
+di
+
+dan
+,
+terbaik
+yang
+yang
+.
+
+yang
+dan
+anda
+yang
+s
+untuk
+.
+
+dan
+
+anda
+
+dan
+yang
+dan
+
+di
+dan
+,
+anda
+ini
+anda
+di
+yang
+di
+
+yang
+yang
+(
+anda
+
+
+-
+-
+
+n
+dan
+di
+dengan
+di
+yang
+.
+dan
+,
+
+di
+
+.
+dengan
+
+
+
+untuk
+di
+di
+situs
+
+.
+di
+ketika
+dan
+ini
+yang
+.
+
+anda
+anda
+dengan
+
+
+
+
+dengan
+.
+dan
+,
+
+yang
+
+
+
+
+
+.
+dan
+untuk
+dan
+untuk
+anda
+
+
+yang
+.
+
+dan
+yang
+
+.
+dengan
+yang
+,
+e
+
+anda
+
+setiap
+,
+di
+anda
+,
+,
+yang
+
+yang
+yang
+dengan
+untuk
+
+
+anda
+yang
+,
+.
+dan
+
+yang
+
+anda
+dan
+,
+,
+,
+
+setelah
+–
+dan
+
+dan
+dan
+yang
+di
+taruhan
+dan
+
+,
+
+dan
+yang
+.
+dengan
+dan
+(
+,
+
+,
+
+
+,
+
+dan
+mudah
+yang
+
+
+dan
+semua
+untuk
+dan
+yang
+dan
+
+yang
+.
+,
+yang
+dan
+.
+di
+
+
+juga
+.
+kamu
+.
+,
+di
+dengan
+dan
+untuk
+,
+,
+
+anda
+,
+.
+
+.
+
+dan
+di
+
+di
+.
+,
+di
+.
+
+
+
+
+dan
+
+yang
+1
+anda
+,
+di
+yang
+,
+
+ini
+
+anda
+yang
+dan
+.
+anda
+yang
+dan
+untuk
+yang
+.
+,
+
+
+.
+
+.
+dan
+dan
+
+di
+yang
+di
+
+.
+yang
+dan
+dan
+kamu
+
+.
+,
+untuk
+.
+,
+dengan
+yang
+1
+.
+
+
+anda
+
+dengan
+,
+,
+di
+dan
+.
+di
+
+.
+sudah
+.
+
+
+
+
+anda
+untuk
+dan
+untuk
+
+
+
+dan
+.
+
+.
+tersebut
+
+
+
+0
+dan
+yang
+
+
+yang
+-
+,
+di
+.
+yang
+dan
+akan
+dan
+dengan
+untuk
+
+.
+
+
+dan
+
+
+
+2
+yang
+yang
+.
+.
+
+
+
+
+dan
+
+e
+di
+
+untuk
+yang
+untuk
+.
+dan
+mungkin
+
+
+anda
+yang
+,
+yang
+di
+dengan
+yang
+,
+
+di
+,
+,
+.
+di
+dengan
+untuk
+dan
+untuk
+yang
+.
+,
+untuk
+di
+.
+
+.
+situs
+yang
+,
+,
+
+
+yang
+untuk
+
+untuk
+
+
+
+,
+,
+
+dan
+.
+.
+
+,
+
+di
+
+yang
+
+yang
+dan
+
+saat
+
+
+anda
+anda
+untuk
+
+.
+,
+di
+
+
+yang
+,
+
+
+yang
+setiap
+dan
+untuk
+.
+yang
+
+sudah
+,
+
+di
+
+anda
+yang
+di
+yang
+saya
+
+untuk
+yang
+untuk
+
+yang
+untuk
+
+.
+ini
+,
+.
+-
+di
+
+untuk
+
+
+
+yang
+.
+untuk
+di
+ini
+yang
+3
+
+dan
+di
+
+
+.
+
+
+,
+
+,
+yang
+yang
+yang
+
+,
+
+di
+
+dan
+dengan
+anda
+
+
+
+juga
+ini
+.
+.
+banyak
+,
+
+di
+
+bagi
+yang
+dan
+
+
+yang
+yang
+dan
+
+
+dengan
+
+di
+
+yang
+
+di
+.
+,
+,
+di
+dan
+anda
+yang
+yang
+
+dan
+
+.
+
+.
+
+yang
+dengan
+di
+,
+di
+anda
+
+,
+yang
+dan
+
+
+yang
+di
+
+anda
+dan
+dan
+untuk
+
+tentang
+yang
+
+
+,
+untuk
+yang
+yang
+
+dan
+.
+
+
+
+
+dan
+untuk
+lebih
+
+yang
+
+anda
+yang
+yang
+
+,
+yang
+dan
+yang
+dan
+.
+yang
+yang
+yang
+
+
+dan
+,
+
+
+yang
+,
+
+,
+
+yang
+dan
+untuk
+anda
+
+
+
+,
+yang
+.
+untuk
+di
+
+yang
+,
+,
+,
+
+
+,
+,
+.
+,
+dan
+n
+dan
+dan
+
+
+
+di
+dan
+
+5
+
+tinggi
+untuk
+dan
+
+o
+
+.
+
+.
+
+
+
+yang
+dan
+,
+
+untuk
+di
+di
+
+
+yang
+yang
+
+
+
+
+yang
+
+yang
+,
+
+harga
+
+yang
+untuk
+.
+
+.
+0
+8
+
+dengan
+dan
+untuk
+yang
+untuk
+.
+di
+hari
+-
+e
+yang
+
+
+0
+untuk
+di
+.
+dan
+dan
+untuk
+di
+
+lainnya
+0
+,
+.
+dengan
+,
+
+
+
+yang
+baru
+di
+dan
+anda
+saja
+,
+di
+saat
+dengan
+
+untuk
+-
+dan
+di
+.
+di
+,
+0
+
+.
+.
+dan
+yang
+
+yang
+.
+di
+
+
+
+
+di
+yang
+perlu
+,
+
+
+–
+yang
+
+
+,
+
+yang
+dan
+
+
+dan
+di
+yang
+.
+
+
+yang
+
+untuk
+dan
+
+dan
+.
+yang
+
+di
+
+
+.
+,
+
+lebih
+untuk
+
+di
+dan
+,
+yang
+
+,
+di
+-
+
+,
+ini
+dan
+
+yang
+
+dan
+,
+jika
+
+
+
+yang
+,
+.
+dan
+dan
+dan
+di
+dan
+.
+
+.
+dan
+saya
+,
+di
+
+tidak
+
+dan
+
+,
+.
+,
+
+yang
+dalam
+dan
+dan
+
+,
+di
+,
+untuk
+anda
+1
+dan
+
+,
+.
+
+di
+r
+dan
+,
+,
+yang
+
+
+untuk
+untuk
+dengan
+dan
+
+
+dan
+,
+merupakan
+dan
+
+,
+.
+
+yang
+dengan
+yang
+untuk
+
+
+dan
+satu
+,
+.
+anda
+
+
+di
+dan
+,
+untuk
+untuk
+
+yang
+untuk
+di
+dan
+yang
+
+
+.
+yang
+
+
+dan
+.
+yang
+.
+
+dan
+(
+
+dengan
+,
+
+
+.
+yang
+dan
+.
+
+,
+untuk
+
+e
+,
+untuk
+yang
+
+
+-
+untuk
+
+
+.
+an
+dan
+
+di
+di
+,
+dan
+dan
+
+yang
+obat
+dan
+.
+.
+yang
+dengan
+
+yang
+,
+yang
+yang
+1
+dan
+.
+
+dengan
+
+di
+dan
+terbaik
+dan
+ada
+di
+
+.
+
+,
+.
+
+
+untuk
+,
+
+,
+,
+yang
+dan
+
+anda
+
+
+
+yang
+
+.
+dan
+sebuah
+
+
+,
+perlu
+di
+
+,
+yang
+dengan
+.
+
+yang
+dan
+
+,
+
+.
+
+,
+
+di
+dan
+,
+yang
+untuk
+dan
+
+dan
+
+anda
+
+di
+yang
+dan
+terbaik
+untuk
+
+dan
+yang
+yang
+yang
+di
+dan
+di
+
+,
+
+.
+
+.
+anda
+anda
+yang
+5
+
+.
+di
+terbaik
+0
+
+dengan
+,
+untuk
+
+.
+di
+yang
+bersama
+,
+dan
+di
+–
+.
+dengan
+
+pun
+dan
+di
+untuk
+-
+anda
+di
+anda
+
+
+dan
+
+.
+yang
+,
+di
+
+.
+
+yang
+di
+
+,
+di
+,
+.
+,
+di
+,
+setelah
+di
+dan
+
+rumah
+
+menemukan
+yang
+
+,
+
+
+.
+
+yang
+
+.
+anda
+yang
+dan
+
+dan
+dan
+
+masalah
+
+untuk
+.
+dan
+,
+di
+
+ini
+
+anda
+yang
+
+
+dan
+,
+
+untuk
+yang
+
+.
+yang
+untuk
+
+dengan
+dan
+yang
+dan
+
+dan
+,
+,
+yang
+.
+yang
+di
+untuk
+
+dan
+
+,
+
+
+.
+.
+yang
+kami
+
+untuk
+,
+
+,
+h
+di
+
+
+dan
+
+.
+yang
+baru
+,
+dan
+di
+untuk
+.
+.
+dan
+dan
+
+
+di
+untuk
+dan
+selama
+
+dengan
+dan
+di
+
+untuk
+
+untuk
+di
+untuk
+yang
+di
+,
+yang
+
+anda
+sebuah
+dengan
+untuk
+.
+dia
+
+yang
+.
+,
+.
+yang
+yang
+yang
+di
+
+anda
+,
+
+,
+untuk
+
+.
+
+di
+dan
+adalah
+dia
+
+,
+dan
+yang
+
+.
+untuk
+
+dan
+untuk
+untuk
+1
+
+
+
+,
+dan
+
+dan
+
+yang
+di
+yang
+
+,
+
+anda
+anda
+dan
+i
+
+,
+anda
+dan
+forex
+.
+di
+di
+
+,
+ini
+dan
+anda
+,
+dan
+yang
+
+yang
+
+yang
+
+
+
+dengan
+untuk
+,
+
+dan
+
+,
+yang
+yang
+dengan
+dapat
+yang
+dan
+
+dan
+
+yang
+dan
+anda
+
+.
+mulai
+
+
+,
+dan
+,
+,
+,
+di
+dan
+
+yang
+anda
+.
+
+
+anda
+,
+setelah
+cara
+yang
+untuk
+
+.
+di
+untuk
+dan
+sangat
+untuk
+
+
+di
+,
+.
+dan
+anda
+,
+yang
+di
+
+yang
+dan
+dan
+cara
+
+
+untuk
+.
+untuk
+
+
+kali
+dan
+
+di
+
+dengan
+,
+
+yang
+yang
+
+untuk
+di
+anda
+untuk
+anda
+
+
+anda
+tidak
+yang
+,
+dan
+
+di
+dan
+
+,
+
+yang
+dan
+.
+yang
+untuk
+anda
+.
+,
+.
+.
+
+
+
+orang
+dengan
+
+,
+-
+
+dan
+.
+anda
+
+
+,
+maka
+
+.
+
+yang
+,
+dan
+
+,
+dan
+
+2
+.
+
+di
+
+
+ke
+terbaik
+dan
+0
+anda
+yang
+dan
+
+.
+online
+tentang
+.
+
+
+
+ini
+
+ini
+untuk
+dan
+di
+
+
+di
+
+
+dan
+bisnis
+
+dan
+,
+.
+anda
+dan
+yang
+setiap
+.
+,
+
+harga
+
+banyak
+
+anda
+yang
+.
+dan
+di
+
+
+
+,
+beberapa
+,
+
+,
+,
+yang
+di
+melakukan
+yang
+untuk
+beberapa
+,
+
+
+di
+dan
+dan
+untuk
+.
+
+di
+yang
+di
+
+,
+yang
+.
+
+
+juga
+.
+anda
+di
+yang
+,
+
+yang
+.
+,
+di
+dan
+
+dan
+yang
+,
+
+
+
+
+dan
+
+nya
+hari
+.
+
+tidak
+
+untuk
+yang
+
+.
+
+.
+.
+
+
+di
+di
+
+
+,
+
+dan
+
+,
+dan
+.
+,
+,
+,
+yang
+dan
+
+yang
+,
+yang
+yang
+yang
+,
+,
+yang
+.
+0
+dan
+menjadi
+dan
+
+produk
+
+,
+bisa
+
+,
+di
+di
+,
+
+
+
+,
+,
+
+
+
+
+,
+dan
+dan
+ini
+
+
+
+.
+
+yang
+anda
+
+di
+
+membuat
+di
+dan
+
+
+.
+
+,
+anak
+
+di
+dalam
+yang
+untuk
+yang
+,
+.
+dengan
+yang
+
+
+
+
+kamu
+
+
+-
+yang
+untuk
+yang
+
+untuk
+i
+untuk
+di
+.
+.
+-
+
+.
+yang
+dan
+dan
+yang
+.
+,
+dan
+yang
+,
+,
+
+yang
+
+
+dan
+,
+anda
+di
+di
+yang
+yang
+yang
+yang
+
+dan
+cara
+
+,
+.
+
+sudah
+dan
+dan
+ini
+yang
+dan
+ke
+dan
+dan
+yang
+
+yang
+,
+.
+yang
+
+yang
+.
+anda
+untuk
+yang
+
+.
+,
+
+bahkan
+masih
+
+merupakan
+,
+yang
+dan
+di
+
+yang
+dan
+
+
+
+,
+
+saat
+
+.
+
+.
+
+
+yang
+dan
+
+
+di
+anda
+di
+yang
+di
+
+,
+dan
+,
+dan
+untuk
+untuk
+y
+,
+
+dan
+dan
+
+yang
+.
+
+yang
+
+ini
+
+
+yang
+
+.
+
+
+
+masih
+yang
+
+yang
+.
+dan
+,
+dan
+
+
+
+yang
+dan
+setiap
+,
+dan
+,
+dan
+dan
+yang
+untuk
+
+dan
+yang
+yang
+untuk
+yang
+dan
+yang
+untuk
+
+
+di
+an
+di
+
+
+yang
+
+di
+yang
+
+dan
+yang
+dan
+,
+anda
+
+
+
+itu
+
+–
+dengan
+.
+,
+untuk
+dan
+
+dan
+
+untuk
+yang
+
+anda
+anda
+yang
+.
+
+yang
+secara
+
+di
+
+-
+di
+)
+
+.
+
+dan
+yang
+
+anda
+
+.
+
+
+
+dan
+dan
+
+dengan
+dan
+
+.
+
+
+.
+dan
+dan
+yang
+
+seperti
+yang
+
+
+dan
+
+dan
+terbaik
+untuk
+.
+dan
+
+
+.
+
+yang
+.
+
+dan
+0
+yang
+an
+
+,
+untuk
+,
+.
+untuk
+
+dan
+yang
+”
+di
+
+untuk
+yang
+,
+
+
+yang
+.
+
+di
+di
+,
+
+
+
+
+anda
+
+yang
+dengan
+
+
+
+
+
+anda
+
+,
+
+
+untuk
+-
+yang
+dan
+pada
+dengan
+:
+dan
+
+
+untuk
+
+mungkin
+yang
+
+,
+
+yang
+
+
+4
+dan
+yang
+dan
+yang
+,
+kamu
+
+dan
+di
+anda
+di
+
+setiap
+
+yang
+yang
+ini
+)
+untuk
+
+dan
+yang
+di
+
+
+di
+bagaimana
+yang
+
+
+
+
+
+anda
+ini
+anda
+di
+di
+
+dengan
+anda
+
+dengan
+untuk
+yang
+
+
+
+kita
+,
+
+di
+.
+yang
+untuk
+.
+
+
+di
+,
+dengan
+masih
+dengan
+.
+,
+
+r
+anda
+
+.
+
+untuk
+dan
+,
+
+dan
+
+untuk
+.
+0
+di
+ini
+di
+r
+anda
+dan
+
+
+yang
+,
+
+yang
+
+dan
+
+dan
+-
+di
+yang
+.
+dan
+yang
+,
+
+,
+dengan
+
+
+-
+
+dengan
+
+,
+
+.
+yang
+
+,
+anda
+yang
+.
+yang
+dan
+judi
+.
+situs
+
+anda
+
+
+dan
+di
+.
+
+
+
+
+dan
+
+
+apabila
+,
+ini
+yang
+,
+di
+yang
+dan
+anda
+yang
+
+yang
+
+dan
+dan
+dengan
+ini
+
+
+
+,
+untuk
+
+
+di
+
+dan
+dan
+,
+yang
+trading
+masih
+untuk
+di
+,
+
+untuk
+di
+dengan
+mungkin
+anda
+,
+
+dengan
+,
+
+
+.
+di
+kamu
+dan
+
+dan
+untuk
+untuk
+dan
+mereka
+,
+
+yang
+yang
+yang
+
+
+yang
+,
+
+di
+yang
+
+
+
+,
+
+
+yang
+bagian
+yang
+,
+dan
+
+yang
+o
+
+di
+di
+dan
+dan
+
+
+yang
+di
+mudah
+
+,
+.
+-
+di
+di
+tentang
+,
+.
+yang
+,
+
+dan
+
+
+dan
+
+
+.
+dan
+yang
+
+di
+dan
+
+trading
+:
+
+dan
+dengan
+dan
+,
+.
+,
+
+yang
+
+,
+-
+yang
+.
+dan
+
+,
+
+untuk
+
+,
+,
+yang
+dan
+di
+yang
+dan
+,
+dan
+,
+,
+untuk
+untuk
+
+.
+dengan
+
+yang
+sebuah
+,
+di
+.
+dengan
+yang
+tetap
+
+.
+.
+
+juga
+
+
+"
+yang
+,
+di
+yang
+,
+
+yang
+dan
+
+
+dan
+masih
+di
+
+yang
+di
+,
+
+
+.
+
+untuk
+,
+yang
+dan
+
+yang
+
+dan
+
+-
+untuk
+hari
+
+di
+,
+ini
+
+
+di
+,
+yang
+,
+anda
+dan
+di
+,
+untuk
+
+,
+yang
+yang
+,
+anda
+
+,
+di
+untuk
+.
+dan
+satu
+untuk
+di
+anda
+,
+n
+
+dan
+
+5
+yang
+"
+di
+.
+.
+,
+menjadi
+dan
+untuk
+.
+untuk
+dari
+dan
+karena
+
+yang
+
+.
+anda
+game
+
+
+dan
+,
+dan
+di
+saja
+cukup
+.
+
+.
+
+yang
+
+.
+
+untuk
+dan
+dengan
+–
+yang
+yang
+.
+yang
+di
+yang
+,
+,
+
+,
+untuk
+
+dan
+ber
+yang
+dan
+
+,
+dan
+dan
+
+,
+yang
+
+
+,
+.
+yang
+anda
+.
+saja
+dan
+yang
+anda
+.
+,
+
+
+dan
+
+.
+dan
+dan
+,
+
+pun
+b
+
+.
+anda
+di
+,
+
+.
+di
+untuk
+harus
+setelah
+yang
+,
+,
+
+,
+dan
+,
+,
+
+
+yang
+
+
+yang
+dan
+,
+
+
+.
+
+
+dan
+beberapa
+yang
+dan
+yang
+0
+dan
+
+4
+dan
+untuk
+
+situs
+
+pihak
+,
+
+
+,
+
+
+dan
+,
+
+yang
+dan
+
+di
+
+.
+perlu
+di
+
+
+,
+.
+
+dan
+dan
+membuat
+baru
+taruhan
+
+yang
+,
+.
+adalah
+.
+,
+dan
+,
+
+di
+
+game
+
+dan
+
+anda
+
+.
+.
+.
+
+
+
+
+
+
+
+dan
+,
+dalam
+untuk
+salah
+
+k
+untuk
+untuk
+di
+–
+rumah
+di
+yang
+yang
+untuk
+.
+dan
+
+
+.
+dan
+.
+
+yang
+dan
+dan
+di
+
+serta
+di
+
+hal
+,
+
+adalah
+di
+-
+,
+yang
+.
+
+
+dan
+
+.
+dan
+untuk
+
+dan
+untuk
+untuk
+dengan
+untuk
+
+anda
+yang
+,
+di
+
+anda
+
+
+
+dan
+anda
+
+
+.
+dan
+
+
+
+dengan
+
+
+dan
+yang
+.
+s
+.
+
+yang
+di
+di
+
+anda
+di
+di
+
+dengan
+dan
+di
+,
+
+,
+dan
+
+
+.
+yang
+
+
+.
+dan
+-
+dengan
+.
+di
+yang
+
+.
+ada
+untuk
+.
+yang
+
+
+,
+
+dengan
+harga
+di
+-
+
+yang
+dan
+
+.
+yang
+
+di
+,
+yang
+
+
+yang
+,
+dengan
+,
+
+di
+.
+
+satu
+.
+
+
+untuk
+dan
+,
+,
+.
+
+yang
+
+dan
+.
+di
+,
+harus
+
+agar
+dan
+,
+bahwa
+
+kita
+
+
+yang
+yang
+untuk
+
+yang
+,
+,
+,
+
+yang
+
+anda
+
+dan
+di
+,
+dan
+
+
+,
+untuk
+yang
+untuk
+,
+
+
+
+yang
+yang
+yang
+dengan
+
+dengan
+yang
+.
+di
+
+dan
+tentu
+yang
+yang
+untuk
+
+
+yang
+,
+mungkin
+indonesia
+masih
+
+0
+yang
+dan
+,
+2
+
+di
+.
+
+yang
+dan
+,
+setiap
+-
+yang
+,
+,
+
+yang
+
+
+
+,
+
+yang
+
+di
+,
+
+,
+-
+yang
+anda
+di
+dan
+
+dan
+
+untuk
+yang
+dan
+
+di
+
+
+dan
+.
+
+dan
+di
+dengan
+di
+.
+untuk
+
+yang
+
+
+,
+
+
+dan
+untuk
+n
+.
+untuk
+,
+yang
+,
+,
+.
+yang
+dan
+yang
+untuk
+,
+yang
+
+di
+untuk
+.
+dan
+
+.
+,
+dan
+yang
+dan
+
+.
+
+,
+untuk
+dari
+
+seluruh
+.
+
+dan
+yang
+,
+untuk
+anda
+
+,
+,
+yang
+untuk
+
+,
+
+yang
+,
+r
+–
+,
+dan
+saat
+di
+di
+yang
+,
+dan
+
+di
+anda
+anda
+
+
+hanya
+
+
+di
+,
+ke
+dengan
+.
+yang
+,
+dan
+
+ini
+untuk
+.
+,
+untuk
+yang
+dengan
+di
+,
+
+
+
+yang
+dan
+di
+
+
+,
+di
+dengan
+yang
+.
+untuk
+,
+untuk
+,
+anda
+,
+d
+
+yang
+yang
+untuk
+,
+
+di
+yang
+untuk
+anda
+
+,
+
+dengan
+mereka
+untuk
+dan
+
+dan
+dan
+
+dengan
+,
+.
+dan
+yang
+.
+dan
+yang
+yang
+
+untuk
+anda
+yang
+.
+dan
+,
+
+untuk
+,
+anda
+jika
+yang
+di
+di
+
+.
+di
+di
+sudah
+
+o
+dan
+
+yang
+
+yang
+
+
+anda
+dengan
+
+dan
+“
+
+
+di
+,
+.
+di
+,
+.
+yang
+hal
+untuk
+,
+s
+
+dan
+yang
+
+dan
+anda
+.
+yang
+,
+yang
+dengan
+
+.
+anda
+,
+
+untuk
+permainan
+yang
+
+
+ada
+pada
+anda
+dan
+yang
+.
+anda
+2
+dan
+
+.
+di
+
+yang
+dan
+untuk
+
+dan
+
+di
+di
+untuk
+di
+di
+yang
+.
+
+di
+,
+
+,
+
+nya
+untuk
+yang
+dan
+yang
+
+.
+dan
+
+
+,
+
+di
+e
+
+,
+,
+yang
+
+dengan
+sudah
+dan
+sendiri
+
+
+dan
+
+anda
+
+.
+dan
+yang
+
+banyak
+.
+,
+maka
+
+o
+
+5
+yang
+
+untuk
+.
+
+di
+,
+dan
+di
+dan
+
+
+dan
+.
+dan
+yang
+yang
+di
+
+setiap
+saya
+.
+dan
+dengan
+situs
+di
+taruhan
+dan
+yang
+yang
+di
+kan
+anda
+dan
+dan
+di
+anda
+dan
+-
+
+
+
+untuk
+dengan
+
+
+yang
+di
+ini
+
+untuk
+
+8
+dan
+yang
+
+untuk
+dengan
+,
+dan
+di
+di
+ini
+dan
+adalah
+.
+
+dan
+.
+dengan
+anda
+
+dengan
+
+.
+dan
+yang
+yang
+yang
+.
+di
+yang
+
+anda
+dan
+,
+di
+
+
+
+
+
+,
+yang
+yang
+
+dan
+-
+yang
+yang
+
+,
+dan
+menjadi
+,
+yang
+perlu
+.
+
+.
+.
+
+,
+
+di
+bonus
+
+
+di
+
+ini
+
+
+
+
+dengan
+anda
+
+.
+dan
+
+
+,
+
+dan
+
+.
+yang
+dan
+
+.
+
+
+untuk
+dan
+
+di
+untuk
+yang
+
+mudah
+
+di
+dengan
+.
+
+
+dengan
+
+yang
+
+di
+
+2
+.
+
+
+
+.
+.
+.
+anda
+dengan
+.
+untuk
+.
+/
+di
+untuk
+untuk
+
+,
+dan
+yang
+
+
+
+k
+
+nya
+,
+
+
+
+
+
+
+dan
+
+.
+dan
+di
+yang
+
+sangat
+
+
+dan
+dan
+yang
+
+.
+dan
+dan
+
+banyak
+g
+.
+yang
+,
+di
+.
+yang
+dengan
+4
+.
+anda
+
+.
+di
+.
+.
+
+
+
+r
+yang
+,
+dan
+
+di
+,
+tak
+dan
+
+
+ini
+.
+yang
+
+
+.
+
+di
+
+di
+yang
+
+
+di
+di
+
+dan
+
+untuk
+
+yang
+
+
+untuk
+
+yang
+,
+.
+
+yang
+dengan
+
+dan
+
+dan
+,
+saat
+dan
+.
+di
+
+untuk
+dan
+
+
+
+
+
+yang
+untuk
+untuk
+,
+,
+yang
+ini
+jika
+,
+-
+anda
+.
+yang
+
+
+anda
+,
+
+yang
+yang
+dan
+
+setiap
+anda
+.
+
+dan
+,
+
+
+
+pada
+.
+.
+untuk
+
+dan
+yang
+.
+.
+
+
+di
+di
+dengan
+anda
+
+dan
+yang
+di
+di
+harga
+o
+dan
+-
+,
+
+sehingga
+
+
+online
+
+
+yang
+dan
+untuk
+perusahaan
+
+–
+
+,
+
+,
+dan
+di
+anda
+di
+
+
+ini
+,
+anda
+taruhan
+,
+
+dan
+,
+di
+
+
+,
+yang
+
+dan
+untuk
+
+yang
+
+,
+.
+
+.
+yang
+bisa
+
+untuk
+sehingga
+sangat
+di
+
+
+untuk
+anda
+untuk
+.
+dan
+
+untuk
+“
+dan
+anda
+
+,
+.
+untuk
+
+yang
+
+,
+
+
+
+
+-
+,
+dan
+dan
+.
+
+
+
+,
+untuk
+yang
+
+,
+di
+di
+untuk
+,
+
+,
+,
+
+yang
+
+ada
+
+dan
+dan
+
+.
+anda
+,
+
+
+yang
+
+,
+.
+
+yang
+yang
+yang
+
+.
+untuk
+
+yang
+dan
+,
+.
+
+yang
+
+yang
+
+
+
+di
+
+0
+.
+dan
+dan
+
+untuk
+dan
+
+di
+
+dan
+/
+
+“
+ini
+dan
+di
+,
+
+yang
+anda
+harga
+di
+/
+dan
+yang
+
+dengan
+dengan
+–
+dan
+dan
+dan
+
+di
+karena
+
+.
+-
+
+
+
+
+
+yang
+game
+
+
+,
+
+ini
+.
+di
+untuk
+,
+dan
+dan
+
+di
+
+dan
+
+.
+
+di
+dan

predict_results.json

@@ -0,0 +1,12 @@
+{
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.719523012638092,
+    "predict_rouge1": 0.87,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.8706,
+    "predict_rougeLsum": 0.8709,
+    "predict_runtime": 10637.3512,
+    "predict_samples": 3761,
+    "predict_samples_per_second": 0.354,
+    "predict_steps_per_second": 0.011
+}

runs/Jul07_17-19-30_a94680512e46/events.out.tfevents.1720381437.a94680512e46.2067134.1

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:300b633419b5ffeb20d277eefaaf83c197a1db7af587efa697ff82ed893a0d21
+size 613

train_results.json

@@ -0,0 +1,9 @@
+{
+    "epoch": 5.0,
+    "total_flos": 5.592661664034816e+16,
+    "train_loss": 1.4341732418590596,
+    "train_runtime": 6521.1507,
+    "train_samples": 14266,
+    "train_samples_per_second": 10.938,
+    "train_steps_per_second": 0.684
+}

trainer_state.json

@@ -0,0 +1,130 @@
+{
+  "best_metric": null,
+  "best_model_checkpoint": null,
+  "epoch": 5.0,
+  "eval_steps": 500,
+  "global_step": 4460,
+  "is_hyper_param_search": false,
+  "is_local_process_zero": true,
+  "is_world_process_zero": true,
+  "log_history": [
+    {
+      "epoch": 1.0,
+      "grad_norm": 1.6540483236312866,
+      "learning_rate": 0.0008,
+      "loss": 2.4494,
+      "step": 892
+    },
+    {
+      "epoch": 1.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 1.2649613618850708,
+      "eval_rouge1": 0.2566,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.2573,
+      "eval_rougeLsum": 0.2579,
+      "eval_runtime": 60.8639,
+      "eval_samples_per_second": 12.273,
+      "eval_steps_per_second": 0.394,
+      "step": 892
+    },
+    {
+      "epoch": 2.0,
+      "grad_norm": 1.7608369588851929,
+      "learning_rate": 0.0006,
+      "loss": 1.5203,
+      "step": 1784
+    },
+    {
+      "epoch": 2.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.9467156529426575,
+      "eval_rouge1": 0.3425,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3452,
+      "eval_rougeLsum": 0.3442,
+      "eval_runtime": 61.4729,
+      "eval_samples_per_second": 12.152,
+      "eval_steps_per_second": 0.39,
+      "step": 1784
+    },
+    {
+      "epoch": 3.0,
+      "grad_norm": 1.6110718250274658,
+      "learning_rate": 0.0004,
+      "loss": 1.2188,
+      "step": 2676
+    },
+    {
+      "epoch": 3.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.7931520342826843,
+      "eval_rouge1": 0.3497,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3495,
+      "eval_rougeLsum": 0.3497,
+      "eval_runtime": 64.3107,
+      "eval_samples_per_second": 11.615,
+      "eval_steps_per_second": 0.373,
+      "step": 2676
+    },
+    {
+      "epoch": 4.0,
+      "grad_norm": 1.5266708135604858,
+      "learning_rate": 0.0002,
+      "loss": 1.045,
+      "step": 3568
+    },
+    {
+      "epoch": 4.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.7192575335502625,
+      "eval_rouge1": 0.4033,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4016,
+      "eval_rougeLsum": 0.4056,
+      "eval_runtime": 61.2273,
+      "eval_samples_per_second": 12.2,
+      "eval_steps_per_second": 0.392,
+      "step": 3568
+    },
+    {
+      "epoch": 5.0,
+      "grad_norm": 1.427673578262329,
+      "learning_rate": 0.0,
+      "loss": 0.9373,
+      "step": 4460
+    },
+    {
+      "epoch": 5.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.6836755871772766,
+      "eval_rouge1": 0.7788,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.7826,
+      "eval_rougeLsum": 0.7777,
+      "eval_runtime": 63.3918,
+      "eval_samples_per_second": 11.784,
+      "eval_steps_per_second": 0.379,
+      "step": 4460
+    },
+    {
+      "epoch": 5.0,
+      "step": 4460,
+      "total_flos": 5.592661664034816e+16,
+      "train_loss": 1.4341732418590596,
+      "train_runtime": 6521.1507,
+      "train_samples_per_second": 10.938,
+      "train_steps_per_second": 0.684
+    }
+  ],
+  "logging_steps": 500,
+  "max_steps": 4460,
+  "num_input_tokens_seen": 0,
+  "num_train_epochs": 5,
+  "save_steps": 500,
+  "total_flos": 5.592661664034816e+16,
+  "train_batch_size": 16,
+  "trial_name": null,
+  "trial_params": null
+}