End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -0,0 +1,29 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.5082412362098694,
+    "eval_rouge1": 0.3572,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.3545,
+    "eval_rougeLsum": 0.3557,
+    "eval_runtime": 333.3038,
+    "eval_samples": 750,
+    "eval_samples_per_second": 2.25,
+    "eval_steps_per_second": 0.282,
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5292530655860901,
+    "predict_rouge1": 0.4599,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.4593,
+    "predict_rougeLsum": 0.4589,
+    "predict_runtime": 1669.4106,
+    "predict_samples": 3762,
+    "predict_samples_per_second": 2.253,
+    "predict_steps_per_second": 0.282,
+    "total_flos": 6.578740997709005e+16,
+    "train_loss": 0.3747134633901342,
+    "train_runtime": 9353.1788,
+    "train_samples": 14262,
+    "train_samples_per_second": 7.624,
+    "train_steps_per_second": 1.906
+}

eval_results.json

@@ -0,0 +1,13 @@
+{
+    "epoch": 5.0,
+    "eval_gen_len": 1.0,
+    "eval_loss": 0.5082412362098694,
+    "eval_rouge1": 0.3572,
+    "eval_rouge2": 0.0,
+    "eval_rougeL": 0.3545,
+    "eval_rougeLsum": 0.3557,
+    "eval_runtime": 333.3038,
+    "eval_samples": 750,
+    "eval_samples_per_second": 2.25,
+    "eval_steps_per_second": 0.282
+}

generated_predictions.txt

@@ -0,0 +1,3762 @@
+k
+beberapa
+2
+dengan
+karena
+k
+adalah
+dan
+permainan
+saya
+oleh
+sudah
+bagi
+ada
+itu
+
+,
+harus
+dan
+8
+juga
+
+dengan
+"
+judi
+dari
+1
+uang
+judi
+dengan
+/
+2
+dan
+bisa
+bagi
+judi
+memiliki
+karena
+saya
+3
+yang
+semua
+an
+-
+maka
+.
+1
+seperti
+situs
+dan
+6
+menjadi
+pada
+ke
+dari
+
+jika
+permainan
+a
+juga
+kami
+akan
+situs
+jika
+sebagai
+ada
+:
+1
+ini
+-
+-
+
+satu
+lebih
+dan
+.
+.
+dalam
+juga
+dari
+jika
+permainan
+hanya
+/
+oleh
+
+pada
+banyak
+-
+6
+e
+pada
+lebih
+a
+"
+situs
+?
+banyak
+atau
+bisa
+untuk
+kan
+itu
+p
+dari
+s
+sebagai
+satu
+kita
+"
+
+dari
+
+
+dari
+8
+dapat
+memiliki
+di
+pada
+dalam
+s
+dari
+bermain
+dari
+dan
+bisa
+nya
+perlu
+dan
+dan
+mereka
+kamu
+beberapa
+2
+
+an
+dari
+dan
+juga
+anda
+menggunakan
+,
+permainan
+anda
+e
+indonesia
+lebih
+t
+baik
+di
+orang
+5
+
+judi
+oleh
+ada
+kita
+para
+sangat
+seperti
+dan
+untuk
+k
+saja
+kan
+menjadi
+di
+d
+orang
+baik
+mereka
+jika
+adalah
+u
+7
+nya
+
+dalam
+nya
+
+tersebut
+hal
+dengan
+beberapa
+1
+
+
+dari
+saya
+1
+saja
+-
+dan
+tersebut
+8
+online
+yang
+a
+
+4
+dari
+para
+nya
+anda
+?
+dari
+.
+kita
+3
+(
+bermain
+karena
+online
+cara
+
+atau
+di
+itu
+:
+dan
+orang
+tersebut
+sangat
+-
+2
+1
+menggunakan
+anda
+adalah
+orang
+ada
+namun
+beberapa
+saat
+di
+kamu
+0
+
+harus
+seperti
+sebagai
+atau
+di
+
+1
+satu
+m
+tersebut
+juga
+di
+1
+yang
+telah
+cara
+untuk
+terbaik
+ada
+besar
+adalah
+-
+ini
+lain
+yang
+yang
+,
+yang
+pada
+poker
+situs
+an
+yang
+untuk
+di
+atau
+harus
+untuk
+ada
+i
+a
+slot
+juga
+dalam
+orang
+saat
+
+online
+
+semua
+membuat
+pada
+p
+tersebut
+d
+atau
+
+situs
+/
+satu
+i
+nya
+.
+7
+baik
+kami
+juga
+nya
+2
+anda
+yang
+tersebut
+yang
+a
+kan
+bahwa
+orang
+juga
+nya
+m
+i
+-
+0
+dan
+s
+kami
+lain
+untuk
+saat
+untuk
+2
+dapat
+cara
+yang
+untuk
+juga
+dengan
+
+di
+:
+saya
+juga
+banyak
+/
+situs
+seperti
+:
+menjadi
+dan
+-
+4
+hal
+memiliki
+ini
+kami
+4
+e
+tidak
+sudah
+0
+
+kami
+"
+hanya
+dalam
+hanya
+banyak
+jika
+nya
+0
+lebih
+3
+bahwa
+itu
+kami
+.
+i
+tahun
+yang
+kan
+
+dengan
+s
+0
+
+dan
+sudah
+secara
+kita
+juga
+:
+saat
+8
+secara
+uang
+yang
+dari
+hanya
+2
+adalah
+(
+pada
+anda
+5
+dapat
+sudah
+di
+
+oleh
+perlu
+
+seperti
+dalam
+dalam
+kita
+
+s
+tidak
+s
+1
+jika
+orang
+itu
+dengan
+oleh
+s
+
+untuk
+lain
+harus
+2
+memiliki
+adalah
+2
+dan
+4
+bermain
+permainan
+nya
+permainan
+?
+u
+akan
+saya
+situs
+dari
+akan
+bermain
+lebih
+
+saja
+karena
+
+kan
+tidak
+seperti
+dan
+3
+?
+dan
+bahwa
+kamu
+bahwa
+dalam
+5
+secara
+slot
+.
+ini
+8
+bahwa
+5
+situs
+karena
+indonesia
+
+s
+0
+permainan
+
+bermain
+"
+(
+dalam
+saya
+4
+satu
+e
+tersebut
+anda
+"
+banyak
+tahun
+
+di
+(
+karena
+sangat
+dan
+situs
+s
+kan
+anda
+atau
+yang
+harus
+7
+
+judi
+pada
+beberapa
+2
+atau
+?
+dan
+"
+memiliki
+permainan
+secara
+bahwa
+mereka
+
+online
+anda
+lain
+untuk
+yang
+waktu
+dengan
+tidak
+juga
+dengan
+an
+tersebut
+i
+4
+saat
+
+bisnis
+membuat
+oleh
+menjadi
+sangat
+5
+ada
+
+mereka
+ke
+ada
+di
+untuk
+
+besar
+tahun
+4
+cara
+k
+2
+anda
+0
+juga
+)
+hal
+t
+2
+ini
+5
+juga
+bermain
+dan
+melakukan
+yang
+1
+indonesia
+dapat
+saja
+orang
+dengan
+sudah
+1
+dan
+ini
+0
+ada
+
+an
+hanya
+4
+seperti
+membuat
+membuat
+itu
+bahwa
+
+kita
+indonesia
+atau
+cara
+
+dan
+-
+mereka
+a
+semua
+game
+saat
+3
+mereka
+s
+harus
+secara
+i
+lebih
+dengan
+sebagai
+-
+"
+)
+anda
+.
+mereka
+karena
+6
+1
+anda
+sebagai
+k
+ada
+orang
+untuk
+bisa
+dengan
+permainan
+anda
+maka
+dan
+seperti
+seperti
+kita
+
+k
+saat
+
+tersebut
+telah
+dengan
+
+dengan
+anda
+,
+dari
+juga
+dapat
+pada
+6
+poker
+t
+dapat
+(
+kita
+dalam
+dengan
+dan
+yang
+,
+kamu
+/
+bisa
+9
+pemain
+
+tidak
+yang
+sebagai
+yang
+jika
+apa
+juga
+sangat
+atau
+sudah
+
+0
+cara
+dengan
+online
+i
+besar
+(
+i
+atau
+adalah
+dalam
+dengan
+.
+hanya
+sudah
+satu
+
+orang
+d
+online
+kan
+m
+/
+adalah
+bahwa
+akan
+yang
+baik
+saja
+atau
+dengan
+orang
+di
+tidak
+untuk
+perlu
+ke
+.
+pada
+baik
+9
+sangat
+indonesia
+dari
+
+online
+ke
+dapat
+0
+secara
+oleh
+karena
+
+yang
+anda
+dengan
+judi
+mereka
+lebih
+secara
+u
+tahun
+namun
+saya
+2
+di
+k
+saja
+
+(
+-
+?
+juga
+,
+kami
+untuk
+untuk
+untuk
+membuat
+1
+ada
+tidak
+dengan
+besar
+di
+bermain
+lebih
+anda
+/
+t
+"
+poker
+8
+dan
+1
+:
+2
+itu
+lain
+jika
+banyak
+hal
+saja
+jika
+kan
+anda
+,
+online
+akan
+ini
+beberapa
+mereka
+akan
+dapat
+sangat
+cara
+melakukan
+dalam
+dan
+di
+sebagai
+yang
+
+sudah
+1
+satu
+satu
+tidak
+
+k
+menjadi
+.
+5
+hal
+an
+dapat
+dari
+adalah
+yang
+beberapa
+.
+9
+0
+,
+satu
+(
+tidak
+yang
+sangat
+dari
+game
+t
+ini
+juga
+bermain
+9
+di
+menjadi
+adalah
+/
+memiliki
+tahun
+saja
+hanya
+
+semua
+ini
+,
+/
+cara
+juga
+dengan
+situs
+u
+itu
+pada
+situs
+kamu
+tahun
+nya
+tidak
+kita
+yang
+di
+waktu
+di
+sebagai
+8
+bagi
+atau
+,
+mereka
+?
+
+,
+/
+kami
+untuk
+lebih
+indonesia
+untuk
+nya
+dan
+jika
+1
+oleh
+,
+seperti
+memiliki
+
+slot
+bahwa
+pada
+secara
+
+orang
+mereka
+an
+-
+
+memiliki
+atau
+lebih
+anda
+hal
+akan
+online
+a
+untuk
+dapat
+menjadi
+hanya
+5
+dengan
+orang
+yang
+.
+7
+?
+banyak
+8
+yang
+5
+besar
+:
+dalam
+
+itu
+mereka
+melakukan
+ke
+tersebut
+
+saat
+8
+akan
+salah
+oleh
+mereka
+
+bisa
+saja
+0
+ada
+
+poker
+saja
+salah
+)
+bisa
+harus
+hanya
+membuat
+3
+slot
+
+bisa
+1
+memiliki
+1
+anda
+banyak
+bisa
+situs
+
+kita
+untuk
+karena
+1
+8
+n
+d
+yang
+nya
+satu
+"
+mereka
+di
+saat
+bisa
+ini
+mereka
+saja
+akan
+jika
+5
+t
+seperti
+untuk
+yang
+/
+seperti
+memiliki
+4
+secara
+slot
+i
+nya
+jika
+lebih
+bahwa
+saya
+saat
+ini
+menjadi
+an
+poker
+dan
+5
+saja
+1
+juga
+e
+dan
+ini
+juga
+kamu
+yang
+besar
+ke
+mendapatkan
+
+
+bahwa
+online
+
+orang
+bahwa
+kamu
+2
+t
+saja
+
+baik
+an
+oleh
+(
+lebih
+k
+adalah
+sangat
+-
+
+karena
+cara
+)
+
+5
+banyak
+memiliki
+0
+tidak
+kamu
+jika
+?
+akan
+ini
+)
+telah
+akan
+adalah
+bisa
+
+secara
+banyak
+:
+(
+itu
+sangat
+8
+dan
+salah
+situs
+menjadi
+
+indonesia
+dengan
+:
+yang
+ini
+jika
+
+anda
+untuk
+di
+
+karena
+online
+
+pada
+an
+kita
+menjadi
+2
+.
+,
+dalam
+an
+judi
+oleh
+lebih
+jika
+poker
+kami
+hal
+telah
+
+besar
+an
+dapat
+9
+membuat
+lain
+nya
+pada
+membuat
+seperti
+juga
+namun
+m
+
+juga
+1
+melakukan
+banyak
+bisa
+1
+
+jika
+sebagai
+an
+besar
+dan
+sudah
+ada
+indonesia
+,
+judi
+kita
+jika
+slot
+menjadi
+judi
+dan
+
+pada
+bisnis
+,
+
+untuk
+jika
+tersebut
+-
+ke
+saat
+poker
+besar
+9
+cara
+bisa
+dan
+1
+ini
+,
+di
+t
+adalah
+untuk
+
+3
+5
+kami
+dan
+seperti
+itu
+:
+dapat
+9
+
+?
+adalah
+
+hal
+
+"
+.
+pada
+ini
+ke
+secara
+cara
+itu
+tersebut
+judi
+d
+harus
+di
+5
+yang
+seperti
+kamu
+memiliki
+sangat
+
+akan
+dengan
+situs
+itu
+?
+mereka
+i
+a
+s
+menjadi
+yang
+1
+n
+oleh
+bisa
+dengan
+
+1
+0
+.
+u
+.
+t
+baru
+dan
+?
+(
+akan
+saat
+maka
+kami
+t
+.
+e
+online
+
+
+7
+
+4
+
+karena
+?
+i
+?
+anda
+dapat
+bahwa
+besar
+bermain
+ini
+an
+
+9
+1
+ke
+akan
+pada
+:
+untuk
+secara
+dan
+"
+online
+
+beberapa
+)
+di
+di
+
+)
+sudah
+oleh
+oleh
+dari
+nya
+menjadi
+0
+.
+-
+tidak
+0
+,
+?
+t
+cara
+permainan
+
+sebagai
+slot
+atau
+ke
+dari
+maka
+salah
+online
+besar
+"
+sudah
+hanya
+menggunakan
+dari
+jika
+dapat
+satu
+
+saat
+di
+tersebut
+di
+
+lain
+bisnis
+dalam
+
+ke
+satu
+oleh
+saya
+beberapa
+memiliki
+saat
+dengan
+banyak
+dapat
+dapat
+n
+.
+menggunakan
+pada
+harus
+
+maka
+judi
+lain
+
+situs
+cara
+5
+dari
+maka
+yang
+,
+,
+?
+lebih
+saat
+besar
+9
+beberapa
+bisa
+saja
+masih
+anda
+satu
+bisa
+sudah
+satu
+pada
+
+banyak
+menjadi
+dan
+semua
+saya
+akan
+ada
+bahwa
+lebih
+hal
+harus
+ini
+4
+a
+yang
+0
+juga
+adalah
+hanya
+bahwa
+beberapa
+saja
+untuk
+s
+
+"
+tersebut
+pada
+nya
+ke
+.
+kami
+/
+lebih
+/
+tersebut
+menggunakan
+yang
+harus
+kamu
+situs
+kan
+cara
+ada
+nya
+para
+)
+beberapa
+sangat
+satu
+anda
+ke
+hal
+sudah
+di
+maka
+-
+banyak
+dari
+secara
+
+saat
+9
+(
+k
+dalam
+,
+:
+)
+itu
+.
+kita
+pada
+s
+di
+yang
+tidak
+online
+beberapa
+seperti
+karena
+yang
+game
+permainan
+3
+nya
+juga
+satu
+karena
+jadi
+slot
+"
+juga
+dapat
+seperti
+
+situs
+(
+
+,
+adalah
+beberapa
+.
+
+secara
+nya
+6
+yang
+saya
+adalah
+di
+5
+nya
+untuk
+para
+-
+karena
+(
+memiliki
+adalah
+satu
+membuat
+,
+waktu
+adalah
+nya
+saja
+secara
+dalam
+.
+ini
+5
+sudah
+ini
+1
+s
+
+hal
+:
+"
+ini
+uang
+
+bermain
+,
+,
+di
+,
+(
+,
+-
+judi
+anda
+atau
+
+kan
+banyak
+hal
+beberapa
+dari
+satu
+s
+.
+dalam
+saya
+a
+dalam
+dalam
+game
+adalah
+oleh
+:
+juga
+k
+karena
+ini
+-
+slot
+u
+0
+adalah
+dari
+yang
+9
+judi
+di
+dengan
+online
+6
+o
+,
+/
+(
+jika
+bisa
+salah
+dapat
+tersebut
+-
+adalah
+1
+d
+tidak
+dari
+bisa
+indonesia
+0
+satu
+dari
+tidak
+d
+7
+poker
+yang
+e
+1
+seperti
+d
+saya
+bagi
+.
+bisa
+satu
+(
+sebagai
+u
+dapat
+5
+mungkin
+bisa
+kita
+,
+.
+dalam
+memiliki
+)
+sudah
+k
+jadi
+mudah
+yang
+nya
+banyak
+dengan
+ada
+kan
+hal
+untuk
+
+bermain
+"
+:
+0
+ke
+)
+semua
+anda
+atau
+bahwa
+besar
+1
+kita
+adalah
+,
+5
+dan
+ini
+itu
+adalah
+ada
+permainan
+tersebut
+
+bermain
+secara
+5
+3
+sudah
+lain
+lain
+banyak
+pada
+,
+p
+,
+)
+e
+atau
+akan
+-
+1
+2
+-
+uang
+online
+judi
+atau
+satu
+dengan
+
+bermain
+kamu
+bisa
+yang
+situs
+apa
+ada
+yang
+yang
+.
+(
+)
+jadi
+untuk
+e
+juga
+baik
+lain
+adalah
+tahun
+tidak
+lebih
+kamu
+bahwa
+6
+nya
+u
+a
+permainan
+
+/
+atau
+adalah
+5
+sudah
+n
+ada
+)
+untuk
+dan
+bermain
+u
+
+
+dalam
+yang
+
+untuk
+5
+:
+lebih
+pada
+8
+akan
+itu
+dalam
+atau
+7
+satu
+s
+cara
+semua
+indonesia
+dan
+tersebut
+itu
+semua
+maka
+1
+online
+salah
+
+ini
+saja
+tidak
+nya
+-
+hal
+ke
+9
+7
+game
+karena
+yang
+adalah
+0
+-
+bahwa
+salah
+ada
+seperti
+saya
+0
+bisa
+juga
+ada
+atau
+yang
+salah
+membuat
+pada
+bahwa
+d
+k
+hanya
+menjadi
+banyak
+bisa
+pada
+jika
+)
+bisa
+jika
+?
+bahwa
+itu
+ke
+ada
+untuk
+dapat
+
+ini
+untuk
+bahwa
+yang
+1
+bisa
+menggunakan
+waktu
+online
+s
+kamu
+6
+kami
+karena
+dapat
+game
+besar
+nya
+ke
+saja
+atau
+-
+judi
+atau
+secara
+mereka
+tersebut
+harus
+dan
+5
+bisnis
+4
+)
+dengan
+atau
+besar
+beberapa
+saat
+"
+1
+–
+menjadi
+satu
+satu
+
+mereka
+situs
+dan
+kan
+maka
+di
+nya
+6
+0
+anda
+dari
+apa
+3
+terbaik
+
+nya
+salah
+membuat
+)
+
+pada
+indonesia
+secara
+apa
+semua
+untuk
+4
+juga
+
+
+.
+sudah
+a
+hanya
+mereka
+1
+
+bahwa
+nya
+bisa
+juga
+,
+.
+dan
+tidak
+sebagai
+ini
+bisnis
+membuat
+cara
+banyak
+cara
+e
+dan
+jika
+4
+i
+2
+ke
+memiliki
+orang
+8
+yang
+permainan
+7
+sudah
+cara
+dapat
+lebih
+dari
+pada
+anda
+dengan
+cara
+(
+)
+seperti
+atau
+di
+2
+:
+sangat
+namun
+i
+dan
+
+dan
+harus
+di
+poker
+saya
+ada
+bisa
+secara
+harus
+harus
+orang
+6
+situs
+7
+di
+bisa
+dapat
+atau
+dalam
+dapat
+satu
+seperti
+4
+-
+)
+tersebut
+lain
+2
+saja
+kami
+dalam
+judi
+3
+adalah
+uang
+dari
+mungkin
+yang
+
+.
+harus
+,
+membuat
+?
+akan
+ke
+bermain
+dengan
+
+kamu
+lebih
+di
+sudah
+untuk
+beberapa
+sangat
+baru
+anda
+9
+menggunakan
+kami
+memiliki
+saya
+9
+bermain
+permainan
+karena
+anda
+pada
+kita
+p
+untuk
+:
+baik
+bahwa
+a
+s
+tidak
+(
+bisa
+di
+lebih
+an
+sebagai
+baik
+atau
+online
+dalam
+game
+.
+jika
+ini
+satu
+
+lebih
+dan
+
+3
+lebih
+bahwa
+kamu
+saat
+dapat
+kan
+u
+mereka
+tersebut
+"
+6
+,
+masih
+ke
+3
+dan
+baik
+situs
+anda
+seperti
+seperti
+
+maka
+.
+salah
+kamu
+
+7
+kami
+bermain
+
+anda
+juga
+"
+hal
+)
+dalam
+s
+hanya
+karena
+satu
+bisa
+e
+kita
+an
+lain
+membuat
+situs
+ke
+bisa
+judi
+t
+akan
+uang
+mereka
+bisa
+3
+.
+ada
+5
+kamu
+-
+yang
+banyak
+dan
+)
+akan
+i
+1
+.
+d
+memiliki
+oleh
+dari
+melakukan
+harus
+saya
+
+?
+dengan
+di
+0
+untuk
+dengan
+)
+sangat
+lebih
+anda
+9
+ke
+tidak
+:
+
+yang
+dari
+
+atau
+
+saya
+lebih
+salah
+satu
+besar
+5
+8
+kan
+itu
+7
+jadi
+
+maka
+
+untuk
+untuk
+2
+dan
+satu
+cara
+yang
+baik
+akan
+6
+ke
+(
+di
+hal
+juga
+
+0
+akan
+anda
+t
+/
+-
+
+s
+harus
+akan
+bahwa
+hanya
+bahwa
+dalam
+an
+dapat
+telah
+menjadi
+6
+orang
+menjadi
+t
+orang
+yang
+anda
+cara
+2
+8
+4
+an
+kami
+setiap
+dengan
+:
+saya
+s
+-
+adalah
+satu
+memiliki
+1
+saya
+menjadi
+seperti
+bisnis
+indonesia
+hal
+kami
+untuk
+indonesia
+kan
+untuk
+.
+kita
+anda
+ini
+para
+hal
+juga
+kita
+/
+
+akan
+sebagai
+8
+seperti
+yang
+ke
+sangat
+nya
+hal
+dan
+untuk
+pada
+dan
+0
+
+di
+s
+2
+,
+beberapa
+
+untuk
+
+"
+tersebut
+6
+e
+cara
+-
+dari
+i
+saya
+saja
+mereka
+dengan
+apa
+nya
+dan
+dalam
+karena
+
+melakukan
+maka
+melakukan
+d
+dalam
+s
+oleh
+.
+pada
+lebih
+hal
+maka
+dapat
+
+4
+a
+beberapa
+tidak
+secara
+i
+banyak
+online
+4
+salah
+s
+mudah
+ini
+:
+menjadi
+
+dari
+situs
+,
+dengan
+?
+dapat
+8
+dapat
+8
+salah
+,
+memiliki
+kita
+/
+sudah
+beberapa
+anda
+untuk
+orang
+tidak
+atau
+tersebut
+
+i
+di
+tahun
+bisa
+yang
+"
+e
+hanya
+(
+dapat
+5
+oleh
+oleh
+saya
+permainan
+menjadi
+dengan
+untuk
+lebih
+beberapa
+anda
+i
+ada
+indonesia
+saat
+
+orang
+mereka
+/
+
+membuat
+dan
+masih
+k
+pada
+an
+dalam
+)
+beberapa
+?
+judi
+harus
+seperti
+?
+nya
+kan
+ini
+1
+yang
+seperti
+saya
+slot
+judi
+8
+permainan
+harga
+4
+dapat
+sangat
+ke
+
+bermain
+tidak
+game
+akan
+ke
+dengan
+,
+
+1
+hal
+
+dengan
+saat
+t
+seperti
+akan
+saya
+s
+2
+dan
+yang
+s
+
+telah
+:
+itu
+dalam
+cara
+yang
+
+permainan
+di
+mendapatkan
+nya
+kami
+nya
+atau
+4
+harus
+yang
+situs
+oleh
+akan
+beberapa
+beberapa
+secara
+orang
+banyak
+2
+menjadi
+2
+7
+i
+beberapa
+besar
+bahwa
+dan
+saja
+sangat
+lain
+nya
+dari
+akan
+,
+secara
+1
+adalah
+an
+secara
+judi
+bisa
+untuk
+
+dalam
+itu
+bisa
+karena
+d
+atau
+itu
+
+kami
+mendapatkan
+8
+cara
+di
+pada
+saat
+adalah
+0
+tidak
+saat
+mereka
+adalah
+memiliki
+dan
+di
+secara
+bisa
+:
+u
+,
+yang
+"
+dari
+sangat
+kami
+dan
+anda
+
+masih
+banyak
+e
+akan
+5
+anda
+permainan
+t
+besar
+
+satu
+i
+salah
+game
+t
+kamu
+lain
+anda
+ini
+jika
+salah
+4
+saat
+besar
+adalah
+akan
+kami
+?
+k
+8
+?
+atau
+kan
+(
+di
+cara
+poker
+dapat
+8
+k
+mereka
+bahwa
+kan
+bisa
+cara
+tentang
+mereka
+yang
+s
+yang
+sudah
+atau
+dapat
+
+dan
+untuk
+)
+bahwa
+akan
+mereka
+lain
+"
+tidak
+dan
+di
+dari
+kita
+satu
+akan
+0
+bisa
+
+o
+di
+i
+itu
+kami
+ke
+"
+harus
+juga
+uang
+secara
+1
+anda
+bisa
+besar
+6
+0
+seperti
+4
+waktu
+sangat
+bahwa
+e
+situs
+karena
+di
+kami
+mereka
+pada
+i
+?
+2
+0
+,
+t
+u
+dalam
+8
+sudah
+itu
+)
+a
+lebih
+uang
+akan
+5
+game
+sangat
+lebih
+0
+bermain
+a
+saat
+di
+salah
+0
+dapat
+1
+tersebut
+satu
+itu
+(
+?
+
+kan
+tidak
+"
+dan
+saat
+.
+seperti
+?
+,
+ada
+kami
+nya
+sebagai
+)
+)
+/
+nya
+
+bisa
+online
+namun
+,
+an
+
+judi
+saat
+uang
+kami
+telah
+telah
+hal
+lebih
+pada
+dapat
+permainan
+dengan
+juga
+juga
+di
+a
+.
+s
+
+beberapa
+situs
+cara
+menggunakan
+5
+8
+
+
+situs
+juga
+2
+bisa
+sebagai
+
+a
+saat
+atau
+seperti
+bisa
+kami
+
+tersebut
+di
+dengan
+anda
+situs
+2
+s
+maka
+
+ini
+adalah
+telah
+bisa
+sudah
+bahwa
+saya
+untuk
+akan
+:
+dari
+bisa
+dalam
+pada
+satu
+yang
+4
+membuat
+orang
+akan
+menggunakan
+mendapatkan
+indonesia
+mereka
+tidak
+semua
+sebagai
+akan
+)
+-
+
+anda
+dengan
+apa
+"
+situs
+kan
+:
+"
+banyak
+,
+s
+pada
+s
+0
+oleh
+permainan
+pada
+slot
+5
+2
+baik
+2
+poker
+adalah
+-
+harus
+waktu
+kami
+sebagai
+hal
+
+kita
+6
+s
+yang
+tersebut
+di
+3
+atau
+satu
+judi
+bisa
+u
+9
+t
+satu
+4
+)
+7
+saya
+seperti
+
+e
+baik
+permainan
+6
+banyak
+u
+e
+juga
+0
+beberapa
+mereka
+hanya
+jadi
+permainan
+atau
+)
+untuk
+judi
+itu
+hal
+a
+7
+ke
+sudah
+hal
+2
+judi
+a
+untuk
+salah
+u
+
+bisa
+3
+a
+3
+pada
+-
+sudah
+besar
+dari
+,
+satu
+1
+untuk
+s
+kan
+di
+.
+anda
+sangat
+bisa
+akan
+secara
+
+mereka
+dari
+,
+adalah
+0
+situs
+/
+.
+
+,
+uang
+karena
+nya
+jika
+i
+dan
+bahwa
+ke
+anda
+kamu
+dan
+1
+menjadi
+.
+dengan
+sudah
+-
+seperti
+beberapa
+orang
+lain
+:
+i
+tidak
+di
+hanya
+saya
+cara
+besar
+0
+e
+di
+bahwa
+tidak
+cara
+melakukan
+kami
+banyak
+karena
+adalah
+cara
+judi
+3
+untuk
+membuat
+k
+satu
+di
+saya
+bisa
+t
+kami
+juga
+di
+apa
+tidak
+situs
+satu
+harus
+tidak
+tidak
+1
+8
+1
+para
+memiliki
+orang
+9
+anda
+harus
+dengan
+-
+secara
+,
+kami
+yang
+ini
+5
+2
+
+1
+nya
+anda
+judi
+juga
+hanya
+menggunakan
+salah
+menjadi
+yang
+yang
+8
+lain
+ke
+online
+8
+saja
+adalah
+d
+kamu
+sudah
+satu
+atau
+"
+tidak
+3
+memiliki
+
+orang
+ke
+jika
+lebih
+karena
+di
+9
+bisa
+jadi
+online
+
+0
+
+satu
+3
+,
+yang
+e
+memiliki
+/
+
+mereka
+,
+saat
+ada
+indonesia
+kami
+:
+pada
+untuk
+bermain
+sangat
+secara
+ke
+karena
+u
+,
+dapat
+secara
+dalam
+ini
+d
+i
+)
+(
+9
+namun
+dapat
+(
+saja
+poker
+di
+ingin
+untuk
+3
+judi
+ingin
+di
+
+t
+d
+masih
+
+untuk
+
+
+6
+satu
+hal
+semua
+2
+t
+maka
+)
+anda
+lebih
+judi
+"
+3
+"
+menjadi
+dari
+pada
+oleh
+satu
+online
+?
+m
+bahwa
+tidak
+saat
+orang
+5
+untuk
+:
+0
+tidak
+kan
+3
+oleh
+dengan
+situs
+
+dari
+a
+kita
+,
+ini
+/
+cara
+ini
+harus
+baru
+pada
+bisa
+,
+an
+8
+akan
+di
+untuk
+di
+harus
+
+dapat
+maka
+dari
+.
+menjadi
+akan
+tentang
+t
+menjadi
+banyak
+oleh
+maka
+dalam
+yang
+anda
+di
+anda
+6
+adalah
+/
+sudah
+,
+semua
+(
+:
+dari
+poker
+adalah
+cara
+kamu
+ada
+judi
+oleh
+ada
+atau
+"
+kita
+di
+namun
+kamu
+6
+di
+9
+itu
+0
+2
+untuk
+bisa
+itu
+-
+saja
+nya
+tersebut
+
+satu
+ke
+bisa
+karena
+0
+baik
+
+salah
+baru
+beberapa
+sebagai
+,
+?
+an
+untuk
+tidak
+itu
+kami
+akan
+:
+tahun
+karena
+indonesia
+lebih
+atau
+
+banyak
+/
+itu
+indonesia
+k
+online
+anda
+ini
+tersebut
+hanya
+tidak
+,
+memiliki
+akan
+)
+sebagai
+game
+anda
+,
+sebagai
+
+tidak
+banyak
+,
+2
+adalah
+e
+mereka
+jika
+online
+sudah
+
+menjadi
+-
+anda
+juga
+sebagai
+memiliki
+telah
+5
+u
+dalam
+d
+saya
+2
+kan
+dari
+-
+ini
+an
+kita
+pada
+memiliki
+adalah
+untuk
+itu
+bisa
+seperti
+
+untuk
+3
+cara
+-
+hal
+d
+7
+a
+game
+4
+dan
+9
+melakukan
+.
+k
+k
+anda
+e
+untuk
+dalam
+dengan
+a
+hanya
+(
+maka
+pada
+karena
+o
+ada
+secara
+tidak
+sangat
+seperti
+karena
+di
+game
+6
+tersebut
+ada
+lain
+kamu
+bermain
+3
+seperti
+-
+judi
+5
+di
+online
+itu
+dan
+i
+lain
+
+online
+"
+pemain
+akan
+
+memiliki
+kami
+hanya
+cara
+(
+bermain
+4
+membuat
+jika
+
+lain
+0
+,
+nya
+tahun
+tahun
+oleh
+1
+sudah
+3
+9
+banyak
+0
+2
+saja
+d
+pada
+di
+karena
+9
+satu
+semua
+atau
+bahwa
+e
+banyak
+kami
+orang
+tidak
+3
+judi
+juga
+dapat
+indonesia
+yang
+dengan
+pemain
+apa
+akan
+k
+hal
+.
+,
+telah
+hanya
+yang
+4
+ke
+anda
+
+atau
+maka
+menjadi
+dengan
+dan
+bermain
+satu
+besar
+5
+uang
+3
+i
+?
+(
+anda
+ini
+situs
+dari
+kami
+
+dengan
+permainan
+dapat
+0
+tidak
+)
+secara
+dan
+sudah
+anda
+adalah
+karena
+?
+"
+2
+membuat
+5
+baik
+?
+menjadi
+
+adalah
+orang
+lebih
+
+
+saat
+1
+dalam
+2
+-
+yang
+kita
+bahwa
+kami
+juga
+lebih
+beberapa
+2
+dengan
+harus
+4
+mereka
+yang
+yang
+s
+3
+0
+saya
+saya
+pada
+dari
+anda
+situs
+)
+di
+0
+nya
+.
+e
+kan
+di
+dan
+bahwa
+dari
+di
+besar
+anda
+akan
+8
+di
+akan
+tidak
+
+hal
+untuk
+7
+itu
+lebih
+baik
+secara
+bahwa
+secara
+kami
+5
+untuk
+secara
+pada
+sangat
+lebih
+(
+seperti
+akan
+:
+bermain
+
+sudah
+
+cara
+dan
+karena
+seperti
+kamu
+hanya
+baik
+slot
+atau
+itu
+dan
+yang
+tidak
+orang
+saat
+dengan
+sangat
+anda
+yang
+dan
+untuk
+nya
+-
+banyak
+maka
+judi
+dari
+namun
+1
+untuk
+permainan
+,
+anda
+lebih
+di
+)
+memiliki
+ada
+
+situs
+sudah
+atau
+.
+
+anda
+beberapa
+-
+itu
+k
+setiap
+sangat
+5
+juga
+dan
+dan
+dengan
+judi
+dengan
+sangat
+atau
+saat
+tidak
+.
+:
+)
+,
+dalam
+cara
+anda
+kan
+ini
+juga
+.
+oleh
+banyak
+2
+orang
+ke
+
+jika
+an
+kita
+harus
+-
+kita
+mereka
+dalam
+hal
+di
+untuk
+.
+an
+bisnis
+di
+
+bermain
+melakukan
+menjadi
+
+adalah
+bisa
+satu
+tersebut
+saat
+yang
+lebih
+seperti
+orang
+ke
+-
+bagi
+untuk
+dapat
+lain
+ini
+di
+dan
+8
+anda
+jika
+sudah
+4
+,
+ini
+kita
+di
+pada
+tersebut
+dan
+baik
+hal
+,
+s
+pada
+akan
+sangat
+online
+.
+jika
+kami
+.
+dari
+a
+/
+saya
+apa
+beberapa
+juga
+pada
+1
+(
+kami
+karena
+
+1
+juga
+(
+satu
+adalah
+mereka
+mereka
+yang
+-
+karena
+sudah
+,
+juga
+ingin
+/
+lain
+pada
+judi
+2
+banyak
+
+harus
+juga
+situs
+di
+judi
+5
+membuat
+.
+/
+banyak
+1
+jika
+menjadi
+an
+ke
+untuk
+bahwa
+banyak
+baik
+maka
+saja
+uang
+?
+satu
+semua
+tidak
+1
+6
+yang
+dengan
+d
+
+dari
+5
+memiliki
+hal
+untuk
+yang
+lain
+
+ke
+7
+,
+(
+juga
+pada
+3
+
+dapat
+nya
+slot
+i
+anda
+?
+0
+atau
+lebih
+bisa
+saat
+dan
+ke
+membuat
+t
+oleh
+kami
+karena
+atau
+sudah
+,
+
+di
+online
+t
+1
+a
+salah
+untuk
+nya
+akan
+secara
+ada
+memiliki
+maka
+sebagai
+e
+adalah
+sudah
+akan
+2
+saat
+sudah
+anda
+4
+
+ke
+
+"
+untuk
+di
+hanya
+tidak
+
+anda
+melakukan
+"
+9
+4
+9
+di
+tersebut
+
+0
+waktu
+dengan
+?
+jadi
+dapat
+itu
+(
+akan
+1
+i
+dengan
+i
+semua
+-
+lain
+"
+dengan
+situs
+dengan
+2
+i
+sangat
+untuk
+hal
+orang
+u
+kita
+3
+s
+anda
+dengan
+dapat
+dapat
+salah
+
+u
+lebih
+bermain
+3
+p

predict_results.json

@@ -0,0 +1,12 @@
+{
+    "predict_gen_len": 1.0,
+    "predict_loss": 0.5292530655860901,
+    "predict_rouge1": 0.4599,
+    "predict_rouge2": 0.0,
+    "predict_rougeL": 0.4593,
+    "predict_rougeLsum": 0.4589,
+    "predict_runtime": 1669.4106,
+    "predict_samples": 3762,
+    "predict_samples_per_second": 2.253,
+    "predict_steps_per_second": 0.282
+}

train_results.json

@@ -0,0 +1,9 @@
+{
+    "epoch": 5.0,
+    "total_flos": 6.578740997709005e+16,
+    "train_loss": 0.3747134633901342,
+    "train_runtime": 9353.1788,
+    "train_samples": 14262,
+    "train_samples_per_second": 7.624,
+    "train_steps_per_second": 1.906
+}

trainer_state.json

@@ -0,0 +1,130 @@
+{
+  "best_metric": null,
+  "best_model_checkpoint": null,
+  "epoch": 5.0,
+  "eval_steps": 500,
+  "global_step": 17830,
+  "is_hyper_param_search": false,
+  "is_local_process_zero": true,
+  "is_world_process_zero": true,
+  "log_history": [
+    {
+      "epoch": 1.0,
+      "grad_norm": 5.567347526550293,
+      "learning_rate": 4e-05,
+      "loss": 0.6282,
+      "step": 3566
+    },
+    {
+      "epoch": 1.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.4718768894672394,
+      "eval_rouge1": 0.43,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.4255,
+      "eval_rougeLsum": 0.4282,
+      "eval_runtime": 336.2537,
+      "eval_samples_per_second": 2.23,
+      "eval_steps_per_second": 0.28,
+      "step": 3566
+    },
+    {
+      "epoch": 2.0,
+      "grad_norm": 2.3693532943725586,
+      "learning_rate": 3e-05,
+      "loss": 0.4301,
+      "step": 7132
+    },
+    {
+      "epoch": 2.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.4727809727191925,
+      "eval_rouge1": 0.3754,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3711,
+      "eval_rougeLsum": 0.3719,
+      "eval_runtime": 337.4308,
+      "eval_samples_per_second": 2.223,
+      "eval_steps_per_second": 0.279,
+      "step": 7132
+    },
+    {
+      "epoch": 3.0,
+      "grad_norm": 2.505617618560791,
+      "learning_rate": 2e-05,
+      "loss": 0.3336,
+      "step": 10698
+    },
+    {
+      "epoch": 3.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.4631851613521576,
+      "eval_rouge1": 0.3806,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3777,
+      "eval_rougeLsum": 0.3808,
+      "eval_runtime": 335.5116,
+      "eval_samples_per_second": 2.235,
+      "eval_steps_per_second": 0.28,
+      "step": 10698
+    },
+    {
+      "epoch": 4.0,
+      "grad_norm": 1.3223034143447876,
+      "learning_rate": 1e-05,
+      "loss": 0.2643,
+      "step": 14264
+    },
+    {
+      "epoch": 4.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.49206262826919556,
+      "eval_rouge1": 0.3537,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3512,
+      "eval_rougeLsum": 0.3514,
+      "eval_runtime": 333.89,
+      "eval_samples_per_second": 2.246,
+      "eval_steps_per_second": 0.282,
+      "step": 14264
+    },
+    {
+      "epoch": 5.0,
+      "grad_norm": 2.5732645988464355,
+      "learning_rate": 0.0,
+      "loss": 0.2174,
+      "step": 17830
+    },
+    {
+      "epoch": 5.0,
+      "eval_gen_len": 1.0,
+      "eval_loss": 0.5082412362098694,
+      "eval_rouge1": 0.3572,
+      "eval_rouge2": 0.0,
+      "eval_rougeL": 0.3545,
+      "eval_rougeLsum": 0.3557,
+      "eval_runtime": 333.1622,
+      "eval_samples_per_second": 2.251,
+      "eval_steps_per_second": 0.282,
+      "step": 17830
+    },
+    {
+      "epoch": 5.0,
+      "step": 17830,
+      "total_flos": 6.578740997709005e+16,
+      "train_loss": 0.3747134633901342,
+      "train_runtime": 9353.1788,
+      "train_samples_per_second": 7.624,
+      "train_steps_per_second": 1.906
+    }
+  ],
+  "logging_steps": 500,
+  "max_steps": 17830,
+  "num_input_tokens_seen": 0,
+  "num_train_epochs": 5,
+  "save_steps": 500,
+  "total_flos": 6.578740997709005e+16,
+  "train_batch_size": 4,
+  "trial_name": null,
+  "trial_params": null
+}