End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:
@@ -18,10 +20,10 @@ should probably proofread and complete it, then remove this comment. -->
 This model is a fine-tuned version of [LazarusNLP/IndoNanoT5-base](https://huggingface.co/LazarusNLP/IndoNanoT5-base) on an unknown dataset.
 It achieves the following results on the evaluation set:
 - Loss: 0.6844
-- Rouge1: 0.7295
+- Rouge1: 0.3969
 - Rouge2: 0.0
-- Rougel: 0.7315
-- Rougelsum: 0.7272
+- Rougel: 0.3981
+- Rougelsum: 0.3962
 - Gen Len: 1.0
 
 ## Model description

all_results.json

@@ -1,29 +1,29 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.4922512173652649,
-    "eval_rouge1": 0.3905,
+    "eval_loss": 0.6843562126159668,
+    "eval_rouge1": 0.3969,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.3898,
-    "eval_rougeLsum": 0.3916,
-    "eval_runtime": 332.1441,
+    "eval_rougeL": 0.3981,
+    "eval_rougeLsum": 0.3962,
+    "eval_runtime": 431.1964,
     "eval_samples": 747,
-    "eval_samples_per_second": 2.249,
-    "eval_steps_per_second": 0.283,
+    "eval_samples_per_second": 1.732,
+    "eval_steps_per_second": 0.056,
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5068754553794861,
-    "predict_rouge1": 0.3931,
+    "predict_loss": 0.7171599268913269,
+    "predict_rouge1": 0.4005,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.3924,
-    "predict_rougeLsum": 0.3917,
-    "predict_runtime": 1681.7484,
+    "predict_rougeL": 0.4002,
+    "predict_rougeLsum": 0.4013,
+    "predict_runtime": 2246.3882,
     "predict_samples": 3761,
-    "predict_samples_per_second": 2.236,
-    "predict_steps_per_second": 0.28,
-    "total_flos": 6.557265830209536e+16,
-    "train_loss": 0.37884998882989906,
-    "train_runtime": 9312.1131,
+    "predict_samples_per_second": 1.674,
+    "predict_steps_per_second": 0.053,
+    "total_flos": 4.884374195011584e+16,
+    "train_loss": 0.5925334092212899,
+    "train_runtime": 4323.2769,
     "train_samples": 14266,
-    "train_samples_per_second": 7.66,
-    "train_steps_per_second": 1.915
+    "train_samples_per_second": 16.499,
+    "train_steps_per_second": 1.032
 }

eval_results.json

@@ -1,13 +1,13 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.4922512173652649,
-    "eval_rouge1": 0.3905,
+    "eval_loss": 0.6843562126159668,
+    "eval_rouge1": 0.3969,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.3898,
-    "eval_rougeLsum": 0.3916,
-    "eval_runtime": 332.1441,
+    "eval_rougeL": 0.3981,
+    "eval_rougeLsum": 0.3962,
+    "eval_runtime": 431.1964,
     "eval_samples": 747,
-    "eval_samples_per_second": 2.249,
-    "eval_steps_per_second": 0.283
+    "eval_samples_per_second": 1.732,
+    "eval_steps_per_second": 0.056
 }

generated_predictions.txt

@@ -1,14 +1,14 @@
 dan
 di
 
-0
-situs
-saya
+untuk
+tidak
+tersebut
 9
 "
 saat
 
-telah
+untuk
 dapat
 lebih
 1
@@ -18,25 +18,25 @@ pada
 d
 k
 
-yang
+-
 ,
 hanya
 ke
 yang
-akan
+dalam
 
 7
-bisa
+sudah
 dengan
 di
-indonesia
+kami
 dengan
 .
-
+judi
 situs
-dan
-besar
-
+lebih
+semua
+jika
 itu
 
 di
@@ -44,117 +44,117 @@ di
 bahwa
 8
 1
-cara
-bisnis
+sangat
+5
 tidak
 :
 .
-mereka
-situs
+beberapa
+e
 
 akan
 lebih
-hal
+sebagai
 seperti
 anda
 anda
-sudah
+e
 nya
 3
-(
-sudah
-namun
+kan
+orang
+bahwa
 dengan
 yang
 di
 -
-t
+k
 atau
 situs
 membuat
 online
 jika
-0
+judi
 maka
 untuk
 online
-8
-di
-bermain
-sangat
+salah
+membuat
+telah
+/
 adalah
 untuk
 banyak
-orang
+beberapa
 memiliki
-n
+tahun
 itu
 di
 dan
 dari
 atau
 dari
-0
+dia
 indonesia
-1
+harus
 u
+maka
+menjadi
 situs
-(
-u
 0
-satu
+sebagai
 kan
-banyak
-kita
+indonesia
+(
 9
-s
+situs
 ,
-bisa
+dari
 dapat
 besar
-t
-ini
+permainan
+hanya
+lain
 bermain
-maka
-sebagai
-3
+k
+ada
 e
-lebih
+8
 kan
 namun
 untuk
 6
-bisa
+yang
 2
-t
+cara
 :
-.
-pada
+,
+dalam
 slot
 i
 adalah
 membuat
 beberapa
-
-dari
-
+di
+semua
+4
 
 kita
 5
 dari
-adalah
+para
 bisa
 ada
 pada
 
 saat
 1
-lebih
-"
-bisa
+2
+sangat
+bahwa
 indonesia
-lain
-s
+kan
+pada
 dan
 
 ,
@@ -168,19 +168,19 @@ oleh
 yang
 bisa
 besar
-4
+satu
 7
-adalah
+online
 sebagai
-satu
+oleh
 memiliki
-i
-?
+membuat
+)
 secara
-bisa
-bisnis
+1
+telah
 yang
-harus
+r
 adalah
 
 dan
@@ -191,39 +191,39 @@ itu
 
 banyak
 pada
-0
+memiliki
 0
 mereka
-pada
+dari
 baik
-e
+dan
 karena
 pada
 ini
 -
-/
+game
 dengan
 atau
-?
+1
 ini
 orang
-dapat
+lain
 karena
 itu
 t
 i
 2
-6
-lebih
+menjadi
+online
 mereka
 1
 dengan
-,
+sebagai
 salah
 
 .
 1
-2
+0
 anda
 ini
 dengan
@@ -231,21 +231,21 @@ saja
 
 itu
 d
-salah
+secara
 .
 ini
 game
-memiliki
-,
+sebagai
+yang
 d
-tahun
+menggunakan
 
 
-indonesia
+.
 "
-lain
-permainan
-maka
+para
+dalam
+mudah
 ada
 .
 sudah
@@ -257,129 +257,129 @@ besar
 5
 bahwa
 sangat
-"
-
-sangat
+a
+7
+kan
 online
-hanya
+slot
 tidak
 anda
 3
-cara
+agar
 
 
-an
+lebih
 saat
 anda
-tidak
+itu
 melakukan
 8
 juga
 di
-secara
-dan
-indonesia
+kami
+g
+sebagai
 an
 2
 .
-kan
-permainan
+mereka
+e
 e
 0
 juga
 adalah
 5
-9
+satu
 
 saat
-saat
-namun
+d
+ini
 /
-oleh
-membuat
+kamu
+besar
 karena
 permainan
-lebih
-sebagai
+menggunakan
+maka
 5
 mereka
-situs
+d
 untuk
 :
-ke
+oleh
 dan
 an
-banyak
-juga
+menjadi
+dapat
 "
 
 ini
 bisa
 /
-tersebut
+satu
 banyak
 menjadi
-tersebut
+8
 di
 dalam
 ,
 u
-atau
-di
+i
+lebih
 kami
 sudah
 anda
-judi
-ini
+mereka
+ke
 yang
 ,
-3
-situs
+saya
+besar
 tersebut
 online
 a
-n
+waktu
 8
 0
 e
 i
 oleh
 
-9
+permainan
 mereka
 itu
-sangat
+besar
 i
-akan
+dalam
 saja
-mudah
-e
-dari
-an
-?
-hanya
+3
+8
+melakukan
+banyak
+(
+lebih
 tidak
 
 saat
 -
-an
-mereka
+9
+baik
 ke
-hanya
--
 
+-
+telah
 yang
 ,
 )
-kita
+situs
 -
-jika
+oleh
 
 
 bisa
 lain
 karena
-memiliki
+baik
 sudah
 a
 .
@@ -388,7 +388,7 @@ di
 mereka
 ?
 untuk
-hal
+beberapa
 ke
 dengan
 cara
@@ -400,15 +400,15 @@ untuk
 saya
 
 satu
-beberapa
-a
+tahun
+)
 pada
-4
+cara
 di
 saya
 saya
 
-akan
+nya
 atau
 saja
 pada
@@ -423,58 +423,58 @@ kamu
 itu
 )
 
-bisa
-bahwa
+semua
+judi
 besar
-1
-jadi
-harus
-akan
-oleh
+mendapatkan
+d
+membuat
+tidak
+ke
 anda
 
 dengan
-atau
-tidak
+ke
+hanya
 "
 7
-lebih
-akan
-nya
+saat
+bisa
+)
 yang
-oleh
-kami
-besar
-setiap
+saja
+akan
+3
+lebih
 dari
-a
+hanya
 nya
 nya
-tersebut
-
+ke
+setiap
 itu
 "
-orang
+i
 2
-kita
+karena
 :
 dalam
 )
 jika
-game
+bisnis
 yang
 besar
 mereka
 uang
-indonesia
-.
-:
-atau
+a
+-
+2
+akan
 saat
 itu
 
 salah
-
+akan
 s
 -
 )
@@ -483,25 +483,25 @@ memiliki
 hal
 
 saya
-)
-tersebut
+mereka
+sudah
 kami
 sudah
 -
 hal
-permainan
+9
 9
 dapat
-m
-harus
+kan
+(
 itu
-tersebut
+memiliki
 indonesia
 ini
 ada
 nya
 yang
-untuk
+
 s
 namun
 jika
@@ -510,12 +510,12 @@ tersebut
 e
 nya
 lebih
-apa
-anda
+harus
+dia
 -
 saja
 hanya
-seperti
+beberapa
 .
 atau
 bisa
@@ -523,17 +523,17 @@ bisa
 di
 melakukan
 dengan
-kita
-adalah
-tidak
 
-memiliki
+bisnis
+tidak
 tersebut
+memiliki
+harus
 nya
 bisa
 bermain
-beberapa
-9
+baik
+1
 1
 -
 memiliki
@@ -541,29 +541,29 @@ s
 3
 i
 dari
-lain
-atau
-menggunakan
-bahwa
-dapat
+u
+banyak
+u
+karena
+tetapi
 bisa
 maka
 menjadi
-)
+dalam
 para
 e
-i
+0
 9
 atau
 indonesia
 ini
-di
-kami
+dari
+situs
 dan
 ,
 .
 membuat
-nya
+hal
 namun
 dengan
 pada
@@ -576,79 +576,79 @@ anda
 di
 pemain
 yang
-secara
+harus
 untuk
 sebagai
 saat
-terbaik
+setelah
 anda
 itu
-dapat
-itu
-kami
+namun
+online
+secara
 0
 oleh
-lain
+5
 seperti
 1
 jika
-harus
+)
 tidak
-dengan
+sudah
 
-mereka
+jika
 u
 :
-?
+sebagai
 tersebut
 /
 itu
-a
-oleh
-menjadi
+sudah
+secara
+"
 saat
-harus
+7
 dengan
 di
-kami
+judi
 akan
-9
+kan
 untuk
 "
 d
 s
-bagi
+6
 dari
-4
+/
 juga
 d
 menjadi
 tidak
-s
+banyak
 s
 dan
 0
 tersebut
-menjadi
+8
 beberapa
 )
 adalah
 kita
 yang
-tidak
+ini
 dengan
 dalam
-u
+semua
 cara
-(
+9
 
 dan
 baik
-online
-orang
+permainan
+0
 di
 beberapa
-lebih
+,
 baik
 online
 ,
@@ -656,10 +656,10 @@ online
 -
 menjadi
 9
-tidak
+tempat
 baik
 hal
-judi
+kamu
 satu
 1
 
@@ -667,42 +667,42 @@ pada
 )
 atau
 /
-:
-orang
+online
+pada
 adalah
-maka
-saja
+3
+melakukan
 ada
 kami
 orang
 
-adalah
+semua
 secara
 3
 atau
-yang
+hanya
 bisa
 menjadi
 
 dengan
-dengan
+beberapa
 tidak
 8
 bermain
 dapat
 /
-juga
+hal
 dan
 juga
 -
 
-kamu
+ada
 4
 untuk
 e
+bahwa
+saya
 sebagai
-situs
-?
 bisa
 seperti
 nya
@@ -717,34 +717,34 @@ di
 mereka
 .
 2
-dapat
+6
 
 0
 nya
 yang
 ini
-t
-6
+judi
+a
 bermain
 k
-saat
+judi
 akan
 sudah
-ini
+sangat
 bagi
 lebih
 pada
 bisa
-kan
-dengan
-lain
+/
+sangat
+tidak
 1
-5
-ini
+satu
+?
 juga
 menjadi
-a
-untuk
+.
+kami
 i
 adalah
 ini
@@ -752,13 +752,13 @@ ini
 adalah
 dan
 orang
-)
+1
 juga
 yang
-baik
-salah
-untuk
-kami
+jika
+dengan
+n
+orang
 
 :
 ,
@@ -771,63 +771,63 @@ dengan
 telah
 menjadi
 s
-harus
+karena
 dalam
 i
 di
 bahwa
 bermain
-sudah
-sudah
+/
+3
 dan
 di
-juga
-
+atau
+anda
 kan
 orang
-hal
-lain
+4
+beberapa
 satu
 ,
 tersebut
-slot
+kamu
 dalam
 "
 membuat
 ke
 pada
-kita
-kamu
+8
+permainan
 
 9
 untuk
-hanya
+itu
 dari
-harus
+dalam
 ini
--
-ke
-sebagai
-pada
-membuat
+memiliki
+orang
+juga
+pada
+saat
 situs
 1
 
-yang
-sebagai
+(
+menggunakan
 dari
-semua
-salah
+saja
+memiliki
 mereka
 akan
 di
-
+dapat
 cara
 anda
-6
-k
+indonesia
 orang
-slot
+orang
+:
 .
 itu
 baik
@@ -838,7 +838,7 @@ untuk
 lebih
 0
 
-saat
+beberapa
 adalah
 7
 
@@ -846,70 +846,70 @@ menggunakan
 0
 bisa
 yang
-secara
+nya
 tidak
 beberapa
 dari
 ke
 1
 online
-:
+bisa
 untuk
-u
+nya
 e
-orang
+ke
 
 bisa
 ada
 harus
 kita
-7
-membuat
+besar
+itu
 an
 
 dan
-saat
+ini
 cara
 sudah
-kan
+karena
 slot
-tersebut
+cara
 
 (
 akan
-?
-di
+bagi
+bahwa
 4
 bahwa
-dari
+2
 
 ada
-game
-kamu
+permainan
+judi
 seperti
 untuk
 oleh
 /
-sangat
-memiliki
-dari
+8
+5
+atau
 bisa
-anda
+dalam
 
 dari
 i
 tidak
 4
-t
-permainan
+ada
+anda
 
-cara
+"
 menjadi
 memiliki
 salah
 telah
 banyak
-d
+membuat
 ,
 .
 adalah
@@ -922,17 +922,17 @@ anda
 mudah
 a
 sangat
-tersebut
-a
+oleh
+memiliki
 7
-0
-salah
+semua
+kan
 d
 
 itu
 mereka
-6
-/
+t
+dapat
 banyak
 4
 k
@@ -943,10 +943,10 @@ pada
 dan
 akan
 (
-u
+6
 dalam
 seperti
-oleh
+ke
 2
 dalam
 ada
@@ -954,32 +954,32 @@ ada
 oleh
 anda
 n
-0
+dapat
 indonesia
 kita
 judi
 kamu
-kamu
-banyak
+hal
+)
 
 5
 dan
-4
-melakukan
+"
+/
 4
 0
 6
 dan
 saat
 2
-)
+3
 kan
 (
 satu
-ke
+baik
 maka
 banyak
-/
+dalam
 
 kita
 0
@@ -988,30 +988,30 @@ yang
 harus
 sebagai
 s
-harus
+karena
 
 orang
-4
-bagi
+akan
+baik
 kami
 menjadi
 dapat
-hal
+karena
 (
 k
-/
+e
 online
 ke
 kita
-game
+di
 ?
 adalah
 bisa
 e
-menjadi
+sudah
 sangat
 tidak
-jadi
+atau
 yang
 saat
 4
@@ -1020,74 +1020,74 @@ ini
 0
 2
 akan
-judi
+akan
 ini
 menjadi
--
+di
 jika
-lebih
-mereka
 atau
+mereka
+0
 lebih
 dalam
-permainan
-telah
+nya
+di
 )
 hal
 a
 
-ada
+adalah
 dari
-an
+besar
 akan
-menggunakan
+sebagai
 membuat
 an
 (
 itu
-adalah
+3
 :
 3
 -
 a
-,
+ke
 baik
 tersebut
 anda
 satu
 pada
 membuat
-bisa
+
 lebih
 yang
 tidak
-memiliki
-ingin
+kita
+dari
 1
 akan
 kita
-harus
+sudah
 sangat
 -
-jadi
+pemain
 dapat
-karena
+i
 saya
-
-anda
-dalam
+di
+untuk
 dalam
+atau
 
-sudah
+:
 dan
-pada
 untuk
-harus
-tersebut
+untuk
+terbaik
+permainan
 lebih
 7
-?
-anda
+hanya
+
 
 bisa
 untuk
@@ -1099,62 +1099,62 @@ i
 dan
 mereka
 sangat
-i
+tentang
 menjadi
-telah
-u
+hal
+membuat
 a
-situs
+e
 yang
 menjadi
 adalah
-judi
+6
 indonesia
-dalam
-7
+akan
+kamu
 bisa
 di
 8
-bagi
-itu
+bahwa
+slot
 harus
 untuk
-
+/
 satu
 
-u
-/
+karena
+bahwa
 
 saja
-adalah
+pada
 kita
-menjadi
-dan
-judi
+9
+sebagai
+t
 9
 dapat
 akan
-hal
+kami
 :
 kamu
 salah
 bisa
-satu
-oleh
+para
+saat
 :
 bahwa
 sudah
-saat
+para
 hal
-?
+cara
 dan
 k
 dengan
 ,
 2
 
-indonesia
-slot
+u
+maka
 di
 an
 kamu
@@ -1164,57 +1164,57 @@ mereka
 beberapa
 online
 nya
-e
+4
 cara
 .
 0
-saja
-jika
+akan
+secara
 akan
 ke
-1
+untuk
 
-.
+bermain
 ini
 bisa
 dan
 i
-dengan
-saya
-hal
+
+situs
+/
 situs
 -
 2
 memiliki
-itu
+dari
 poker
-secara
-kan
+u
+8
 sebagai
 hal
 memiliki
 ada
 anda
-
-d
+i
+salah
 1
-hal
+bisa
 m
 
-ke
+menjadi
 dari
 para
-saya
+
 dengan
-hal
+kami
 d
-hal
+4
 hanya
 adalah
 dengan
 indonesia
 dalam
-nya
+u
 0
 
 pada
@@ -1223,37 +1223,37 @@ lebih
 anda
 
 "
--
+dari
 dan
-akan
+oleh
 cara
 membuat
 dengan
+3
 
-dari
 5
 dan
 tidak
 saat
-k
+(
 i
-.
-.
+besar
+sudah
 karena
 banyak
 ,
 
 i
-slot
-?
+u
+orang
 4
 7
 
 untuk
 dapat
 -
-seperti
-itu
+situs
+
 .
 pada
 bisa
@@ -1263,20 +1263,20 @@ pada
 s
 dari
 anda
-e
-sebagai
+cara
+mereka
 jika
 1
 permainan
-cara
+sebagai
 pada
 salah
 satu
 m
-sangat
+tersebut
 1
 bagi
-m
+melakukan
 lebih
 indonesia
 hanya
@@ -1284,78 +1284,78 @@ juga
 untuk
 3
 kita
-juga
+banyak
 ,
-4
+apa
 online
 s
-ini
+perlu
 kami
+yang
 banyak
-/
 anda
-dalam
+tersebut
 1
-sebagai
-u
-cara
+beberapa
+kamu
+saja
 hal
 itu
--
+seperti
 .
 )
-kita
+menjadi
 kami
 untuk
-bahwa
+situs
 tidak
 adalah
 sebagai
-yang
-judi
-besar
+saja
+lebih
+anda
 harus
 mereka
 membuat
 s
-4
-membuat
 7
-melakukan
+secara
+tidak
+uang
 ini
-a
-kamu
+hanya
+7
 1
 baik
-namun
+hal
 9
-secara
-kan
+saja
+/
 .
 2
 mereka
 dan
 1
-4
-maka
+
+bagi
 di
 
 anda
-cara
+saya
 ada
 .
 6
-sudah
+?
 juga
 untuk
 untuk
 salah
 besar
-slot
-tahun
-seperti
-dengan
-6
+yang
+nya
+baik
+-
+kan
 )
 kita
 hal
@@ -1363,13 +1363,13 @@ hal
 atau
 
 sangat
-dengan
+lebih
 dapat
 tersebut
 oleh
 yang
 cara
-apa
+
 
 
 
@@ -1382,51 +1382,51 @@ yang
 -
 .
 (
-online
+kita
 
 indonesia
 saat
-maka
-uang
+ingin
+.
 akan
-r
+?
 t
 banyak
-atau
+perlu
 satu
-s
+saja
 
 judi
-saja
+judi
 4
 dari
-permainan
-u
-i
-melakukan
-.
+hal
+0
+nya
+)
+online
 dengan
-waktu
-tidak
-kan
-namun
+cara
+-
+sebagai
+maka
 )
 slot
-secara
+hal
 secara
 yang
 lebih
 satu
-jika
-harus
+i
+kan
 dari
-hal
+dengan
 satu
 dengan
 di
 -
-untuk
-lebih
+pada
+tersebut
 kamu
 waktu
 (
@@ -1435,86 +1435,86 @@ yang
 akan
 online
 memiliki
-untuk
+"
 dengan
 i
 s
 "
-lain
+bermain
 permainan
 saat
-ke
+dan
 dari
 
 8
-/
+karena
 banyak
 bisa
 (
 3
 untuk
-satu
+beberapa
 ada
 yang
-saat
-tersebut
-harus
+sebagai
+slot
+(
 sebagai
 di
 melakukan
 8
 :
-i
+anda
 i
 satu
-sangat
+harus
 k
 permainan
 atau
-memiliki
-oleh
+(
+5
 -
-yang
+tersebut
 kami
-akan
-dan
+anda
+
 bisa
 ,
 ada
 kamu
-3
-atau
-a
+lebih
+an
+t
 dalam
 2
-tidak
-setiap
+8
+terbaik
 )
 
 /
-orang
+saya
 bisa
 saja
-sebagai
+hal
 sangat
 an
 a
-besar
-,
+salah
+kami
 di
 jika
 online
-hanya
-k
-6
-7
+t
+bermain
+juga
+baik
 di
-pada
+jika
 ini
 akan
 ini
-slot
-baik
+bagi
+perlu
 
 3
 tersebut
@@ -1524,81 +1524,81 @@ harus
 dengan
 dapat
 saat
-bahwa
-ada
+indonesia
+kami
 :
 yang
-m
+uang
 mereka
 yang
-o
-,
+perlu
+
 5
-untuk
+t
 dan
 
 banyak
-.
+cukup
 nya
-uang
+saja
 ?
 an
 memiliki
-maka
+baik
 
 ke
 dalam
-orang
-judi
-juga
+/
+mereka
+/
 pada
 -
-
+5
 /
 –
 juga
-hal
+4
 dalam
 3
 s
-membuat
+t
 ke
 judi
-
-o
+,
+bahwa
 secara
 menjadi
-waktu
-dari
+ini
+itu
 u
 ada
-cara
+bisa
 dan
 kamu
 
 an
 juga
 sangat
-7
-5
-?
+slot
+lagi
+besar
 atau
-kami
+bahwa
 .
 :
 memiliki
 dengan
 "
 .
-untuk
+judi
 sebagai
-
+untuk
 atau
--
+4
 tidak
-oleh
+dalam
 mereka
-nya
+1
 tidak
 jika
 /
@@ -1606,13 +1606,13 @@ banyak
 
 memiliki
 4
-orang
+sebagai
 
 nya
 dari
-yang
+
 2
-memiliki
+:
 menjadi
 akan
 
@@ -1620,56 +1620,56 @@ akan
 anda
 juga
 mereka
-judi
+hari
 adalah
 9
-kan
-
+k
+taruhan
 bisa
 dan
 3
 mereka
 8
-ke
+dapat
 
 sudah
 )
-dalam
+hanya
 dan
-n
+menggunakan
 pada
 6
 satu
-sangat
+hal
 ,
-kami
+membuat
 0
-
+anda
 dari
 situs
-
-saja
+beberapa
+apa
 baru
-game
-kami
+bahwa
+beberapa
 oleh
 dapat
 beberapa
 tidak
-judi
+permainan
 (
 banyak
-orang
+menjadi
 harus
 yang
 .
-/
+an
 dari
 memiliki
-hal
+1
 p
 
-dalam
+
 7
 dari
 dalam
@@ -1683,45 +1683,45 @@ nya
 9
 0
 lebih
-beberapa
+a
 .
 ada
-mereka
+(
 dengan
-,
+indonesia
 anda
 oleh
-melakukan
+salah
 bagi
 tidak
 saya
 1
 
-0
-di
-dan
-beberapa
+baik
+,
+saya
+membuat
 2
 akan
-telah
+maka
 6
--
-bisa
+hanya
+ada
 1
 saya
 jika
-seperti
-ke
-menjadi
+/
+karena
+saja
 
-an
+beberapa
 bisa
-,
-9
-telah
+-
+game
+itu
 hal
 t
-game
+8
 adalah
 permainan
 
@@ -1730,44 +1730,44 @@ kami
 
 sangat
 ingin
-banyak
+kan
 cara
 ada
 lain
 pada
-)
+nya
 karena
 tersebut
 k
 ,
 .
-tersebut
-pada
-0
+permainan
+bisa
+harus
 ke
 lebih
 atau
-,
+-
 menjadi
-1
+membuat
 0
 ,
-menjadi
-akan
+melakukan
+)
 kamu
 adalah
-tersebut
-untuk
-
+0
+orang
+beberapa
 9
 saya
 permainan
 0
 bermain
-anda
-satu
-kita
-
+secara
+orang
+oleh
+hari
 di
 besar
 apa
@@ -1778,16 +1778,16 @@ sudah
 mereka
 maka
 lebih
-cara
+situs
 adalah
 5
-menjadi
+r
 .
 9
 bahwa
 oleh
-online
-tahun
+s
+dapat
 6
 hanya
 yang
@@ -1799,48 +1799,48 @@ judi
 4
 dengan
 e
-
+dari
 )
 memiliki
 jika
-s
+kami
 ,
 yang
-.
-satu
+lebih
+sudah
 tidak
-anda
-harus
+akan
+(
 (
 oleh
 kami
-maka
+6
 menggunakan
 ini
-harga
+taruhan
 bisa
-anda
+pada
 bisa
 banyak
 yang
-membuat
-.
+an
+harus
 0
-saat
+ke
 .
-yang
-karena
+an
+p
 1
-ke
+salah
 atau
--
+bisa
 k
-an
+banyak
 kamu
 dan
 jika
-secara
-dari
+karena
+e
 oleh
 itu
 ?
@@ -1851,53 +1851,53 @@ saja
 
 baik
 anda
-saat
+d
 tersebut
 s
 adalah
 7
-5
-online
+salah
+kamu
 .
 
 (
 di
 lebih
-tidak
+mereka
 juga
-apa
+poker
 kamu
 itu
-k
-"
+menjadi
+9
 di
 banyak
 pada
 satu
-
-5
+mereka
+jika
 
 
-u
+lain
 maka
 (
 
-a
+sangat
 untuk
 ,
 
 banyak
 permainan
 i
-d
+nya
 s
 dalam
-harus
+8
 :
-permainan
+(
 apa
-menjadi
-itu
+kami
+lebih
 k
 ,
 itu
@@ -1911,59 +1911,59 @@ karena
 menjadi
 ke
 memiliki
-bisa
+oleh
 pada
 mendapatkan
 1
-a
-2
+pada
+atau
 dalam
-i
+ini
 "
 kamu
 ,
 pada
-slot
+besar
 baik
-bisnis
+merupakan
 d
 dari
 
 
 
-jika
+menggunakan
 
 dan
-9
+pemain
 bisnis
 dengan
-8
+satu
 karena
-)
+0
 :
 3
 2
 dalam
 di
 saat
-"
-itu
+kita
+dengan
 kami
-a
+
 adalah
-cara
-hal
+
 hal
-semua
+t
+,
 3
 juga
-tersebut
-2
-d
-harus
-o
+namun
+ketika
+besar
+7
+uang
 ?
-,
+kan
 9
 online
 online
@@ -1971,7 +1971,7 @@ satu
 maka
 .
 itu
-.
+harus
 tidak
 bisa
 i
@@ -1979,22 +1979,22 @@ karena
 online
 bahwa
 dengan
-saat
+anda
 permainan
-nya
+taruhan
 tidak
-harga
+2
+membuat
 hanya
-saja
 (
 bahwa
 hanya
 dapat
 sangat
-r
+8
 lebih
 yang
-ini
+dengan
 
 satu
 ,
@@ -2006,14 +2006,14 @@ jika
 2
 lebih
 yang
-dapat
-kamu
+tersebut
+1
 .
 )
 akan
-7
+sangat
 2
-situs
+/
 .
 e
 mereka
@@ -2026,27 +2026,27 @@ mudah
 -
 bahwa
 membuat
-secara
+sebagai
 6
 di
 :
-sudah
-di
+situs
+.
 
 s
 2
 baik
 jika
-dari
-karena
-memiliki
-lain
-harus
-k
-besar
-besar
-judi
-poker
+
+5
+
+kita
+harus
+hal
+d
+slot
+untuk
+poker
 
 "
 baik
@@ -2055,42 +2055,42 @@ dapat
 anda
 ,
 anda
-kan
-game
-2
+-
+k
+5
 s
 0
 1
 8
-juga
+)
 hal
 ke
 kan
-s
+atau
 slot
 lebih
-indonesia
-
+nya
+-
 ,
-)
-)
-juga
+kami
+salah
+s
 seperti
 sudah
-sudah
+terbaik
 9
-yang
-dalam
-4
+kan
+lebih
+i
 akan
 untuk
 
-sangat
+4
 dapat
 untuk
 bisa
-nya
-kamu
+karena
+itu
 akan
 karena
 
@@ -2102,96 +2102,96 @@ permainan
 "
 melakukan
 dapat
-orang
+8
 
-4
+seperti
 nya
 menjadi
-ke
+cara
 5
-7
+terbaik
 
 bahwa
 di
-juga
+tidak
 2
-8
+lebih
 i
 di
 lain
-lebih
+permainan
 /
 memiliki
-.
-beberapa
-anda
+d
+i
+ada
 orang
 kami
-
+saya
 maka
 1
-6
+dari
 di
 bagi
-
+adalah
 banyak
 anda
 
 pemain
 banyak
-dari
+0
 oleh
 ada
 ,
 ?
 salah
-kamu
+kita
 hal
 4
 dapat
 .
 ke
-permainan
+cara
 hanya
-melakukan
-i
-kami
+6
+kamu
+bahwa
 untuk
 dengan
 s
-1
+di
 sebagai
-mudah
-slot
-mudah
+5
+game
+yang
 tidak
 i
 
 2
-situs
+9
 bahwa
-slot
-?
+bermain
+juga
 sangat
 ada
 dalam
-s
+untuk
 tersebut
 hal
 menjadi
 satu
 yang
-8
+tersebut
 2
-bagi
+untuk
 ,
 )
 e
 sudah
-saya
+u
 itu
 jika
-semua
+namun
 pada
 beberapa
 yang
@@ -2205,41 +2205,41 @@ bisa
 hal
 dengan
 dalam
-dapat
+besar
 itu
 mereka
 
 yang
 nya
-
+bisa
 saja
 s
 beberapa
-bagi
-r
-para
-cara
-tidak
-/
+(
+namun
+anda
+4
+"
+mereka
 seperti
-atau
+tidak
 saat
-harus
-3
+anda
+permainan
 e
 ,
 baik
-1
-1
+s
+tersebut
 dalam
 bermain
 .
 1
 game
 0
-0
+tersebut
 anda
-orang
+karena
 lebih
 1
 
@@ -2248,18 +2248,18 @@ akan
 ,
 dengan
 lain
-telah
+maka
 an
-2
+saya
 :
 /
 karena
 anda
-.
-permainan
+juga
+saja
 banyak
 ke
-para
+tersebut
 yang
 akan
 an
@@ -2268,31 +2268,31 @@ bisa
 beberapa
 
 3
-d
+uang
 adalah
 akan
 atau
 nya
 menjadi
-dari
-7
-dan
-dengan
-poker
+saat
+k
+sudah
+,
+menjadi
 orang
 adalah
 untuk
-
+itu
 namun
 
 ,
-hal
+sangat
 9
-a
+secara
 1
 (
 
-online
+beberapa
 adalah
 tersebut
 salah
@@ -2302,19 +2302,19 @@ indonesia
 akan
 tersebut
 di
-dari
-:
+waktu
+mereka
 e
 
 ada
-9
-satu
-dengan
+pada
+7
+saya
 bisa
 (
 s
 dalam
-ada
+o
 lain
 beberapa
 ingin
@@ -2323,7 +2323,7 @@ s
 online
 banyak
 2
-ke
+banyak
 
 seperti
 untuk
@@ -2333,47 +2333,47 @@ adalah
 satu
 bahwa
 
-anda
-an
-semua
+2
+memiliki
+slot
 dan
-8
-saja
-9
+"
+/
+,
 telah
 kita
 untuk
 bermain
-:
+l
 memiliki
 ada
-game
-)
-s
-lain
+telah
+itu
+pada
+saja
 
 karena
 online
-
-u
+,
+maka
 lain
 bisa
 nya
+memiliki
 mereka
-atau
 di
 yang
-saat
+,
 satu
-setiap
+tentang
 
 -
-semua
+bermain
 i
 jika
-a
+hari
 indonesia
-karena
+permainan
 k
 
 d
@@ -2383,20 +2383,20 @@ yang
 
 
 
-(
+8
 banyak
-para
+ini
 menjadi
 juga
 untuk
 dan
-pada
-
+adalah
+dengan
 untuk
 dengan
 oleh
 jika
-dan
+
 situs
 memiliki
 dalam
@@ -2404,47 +2404,47 @@ tentang
 4
 s
 menjadi
-tersebut
-permainan
+cara
+kamu
 karena
 6
 ini
-9
+sebagai
 akan
 d
 situs
-bermain
+menggunakan
 dalam
 )
 /
-dan
-n
+?
+slot
 maka
 0
 beberapa
-kami
+kamu
 permainan
 3
 ,
-bisa
-?
+jika
+an
 online
 banyak
 game
-sudah
+dalam
 juga
 2
 
 2
 yang
-beberapa
+saya
 jika
 lebih
 banyak
 situs
 (
 cara
-saat
+)
 sangat
 kami
 -
@@ -2452,47 +2452,47 @@ yang
 yang
 saya
 yang
-atau
+an
 adalah
-karena
+s
 judi
-indonesia
+mereka
 permainan
 situs
-1
+dan
 juga
 anda
 kamu
 .
-game
+telah
 oleh
 
-i
+dengan
 /
 :
--
+harus
 indonesia
 2
 ini
-i
+karena
 (
 
 
-situs
+akan
 yang
-tentang
-seperti
+?
+akan
 ini
 membuat
 anda
-judi
-telah
+bahwa
+slot
 ,
 online
-an
-dari
-atau
 6
+seperti
+5
+saja
 harus
 nya
 yang
@@ -2502,64 +2502,64 @@ yang
 adalah
 hal
 ada
-8
-6
+saat
+?
 nya
-dengan
-u
+hal
+slot
 kita
 sudah
 situs
 untuk
 menjadi
 mereka
-p
+)
 
 itu
 orang
 dan
 tidak
-pemain
+?
 i
 ada
 
-i
+e
 
 1
-uang
+semua
 
 2
 menjadi
 dalam
-:
+yang
 itu
-ini
+dari
 -
-lebih
-4
 
+4
+sebagai
 "
 
-mereka
+:
 harus
-t
-adalah
+hanya
+beberapa
 untuk
 uang
-juga
-bahwa
+dalam
+dalam
 saja
 0
-hanya
+sebagai
 s
 adalah
 nya
-sudah
+d
 
 an
 nya
 kita
-juga
+3
 yang
 an
 ada
@@ -2570,15 +2570,15 @@ melakukan
 saat
 yang
 ,
-bisnis
-beberapa
-dengan
-tersebut
-atau
+menggunakan
+hanya
+namun
+memiliki
+karena
 untuk
 .
 .
-online
+indonesia
 4
 ke
 dengan
@@ -2587,27 +2587,27 @@ baik
 di
 saya
 itu
-mereka
+kan
 anda
 pada
-.
+dari
 akan
 dapat
-satu
+saja
 
-)
+situs
 :
-e
+seperti
 saja
 -
 i
-hanya
-melakukan
-1
-9
-kita
+7
+para
+sangat
+mereka
+ada
+online
 
-/
 
 untuk
 bisa
@@ -2620,18 +2620,18 @@ uang
 memiliki
 (
 
-kami
+kamu
 ada
 seperti
 itu
 tidak
-hanya
+judi
 e
 0
 nya
 anda
 9
-kami
+pada
 mereka
 yang
 )
@@ -2642,72 +2642,72 @@ dengan
 tersebut
 atau
 adalah
-secara
-yang
+d
+
 tidak
-dengan
-?
+secara
+para
 :
-beberapa
+sangat
 tidak
 dengan
-0
+yang
 6
-s
+situs
 0
 -
 kamu
-dan
-secara
+nya
+hal
 .
-game
-dalam
+yang
+t
 u
 saja
 jika
-anda
-harus
+karena
+cara
 sangat
 0
 judi
 1
 anda
-saat
-besar
 cara
+baik
+
 memiliki
 3
-bisnis
+di
 seperti
 (
 kita
-jika
+/
 ada
 di
 an
-s
+i
 2
 ,
 
-atau
+lebih
 salah
 sangat
 untuk
 atau
 namun
-menggunakan
-3
-di
+ingin
+,
+ke
 
 cara
-dengan
+
 satu
 adalah
 situs
 yang
 anda
-para
-0
+8
+itu
 dan
 ini
 di
@@ -2716,42 +2716,42 @@ pada
 1
 oleh
 .
-cara
-dan
-lain
-5
-ke
+judi
+untuk
+slot
+0
+menjadi
 :
-saya
-telah
-di
+memiliki
+o
+saja
 2
--
+di
 adalah
-ke
+saat
 5
-akan
+/
 di
 mereka
-dengan
-hal
+ini
+satu
 dari
-permainan
-i
-4
+beberapa
+e
+mereka
 akan
 yang
-9
+seperti
 8
 ini
 akan
-bahwa
+secara
 online
-para
+itu
 ada
 yang
 -
-ke
+karena
 dalam
 )
 ke
@@ -2759,15 +2759,15 @@ ini
 5
 dan
 ini
-dalam
+kami
 lebih
 saja
 "
 
-saya
+e
 0
--
 indonesia
+i
 sebagai
 anda
 2
@@ -2780,7 +2780,7 @@ itu
 tersebut
 indonesia
 tidak
-dan
+yang
 s
 8
 indonesia
@@ -2790,170 +2790,170 @@ s
 online
 9
 bisa
-hal
+game
 adalah
 0
-ini
+bisa
 saja
-untuk
+2
 ini
 )
 .
-1
-t
+nya
+7
 bahwa
 d
 4
 yang
-mereka
+cara
 i
 ?
 )
 saat
 i
 
-saya
+4
 dan
 untuk
-dengan
 
-dapat
+
+.
 e
 akan
 ,
-
+5
 di
 juga
 dalam
 jika
 0
 untuk
-satu
+orang
 jika
-u
-0
+hal
+6
 (
 tersebut
-kamu
+maka
 .
 anda
 satu
-online
+juga
 ini
 adalah
-baik
+dalam
 8
 ini
-?
+7
 saat
 apa
-semua
+situs
 ada
 :
 ,
 saja
 dan
 anda
-satu
+ada
 tidak
 kamu
 untuk
-pada
+adalah
 ,
-sebagai
 
+u
 0
 k
 s
-/
+d
 -
-untuk
+saat
 dengan
 banyak
 banyak
 )
 "
-8
+memiliki
 dalam
-
+kami
 kita
 oleh
 bermain
 saat
 sudah
-d
-kami
+maka
+banyak
 dengan
 permainan
 tersebut
 .
 bisa
-hanya
-indonesia
-akan
-hanya
+a
+situs
+i
+s
 ?
 jika
 
 0
 3
 memiliki
-6
+akan
 itu
 sangat
 0
-6
-seperti
+slot
+secara
 mereka
-indonesia
+jika
 pada
 untuk
 1
 harus
-i
+kan
 secara
 
 
 sebagai
-baik
-s
+kan
+nya
 adalah
-dapat
+uang
 satu
 -
 jika
 dalam
 ke
 adalah
-2
+di
 tidak
 secara
-sebagai
+memiliki
 membuat
 2
 indonesia
-hal
+slot
 untuk
 0
-saya
+t
 oleh
-3
+memiliki
 pada
 kamu
 dan
 
 saja
-menjadi
+8
 banyak
-sudah
+akan
 saat
 akan
-seperti
+u
 akan
-atau
-i
+lebih
+kami
 d
-baik
+kami
 nya
 menjadi
 5
@@ -2962,17 +2962,17 @@ jadi
 harus
 ,
 lain
-orang
-beberapa
+2
+dan
 akan
-e
+menjadi
 2
 ini
 u
-uang
+apa
 mereka
-an
-namun
+5
+oleh
 s
 apa
 dan
@@ -2982,26 +2982,26 @@ mendapatkan
 di
 -
 menjadi
-tersebut
+t
 cara
 ke
 telah
-itu
+-
 situs
-o
+nya
 4
-hanya
+permainan
 seperti
-d
-u
-baru
-t
-0
 hanya
-bisa
+namun
+s
+t
+satu
+4
+dengan
 menjadi
 /
-cara
+situs
 harus
 .
 dengan
@@ -3009,10 +3009,10 @@ seperti
 
 di
 itu
-karena
+orang
 pada
 adalah
-a
+
 hanya
 :
 9
@@ -3021,34 +3021,34 @@ tidak
 (
 hal
 akan
-harus
+jadi
 lebih
-poker
+
 ?
 nya
-indonesia
-akan
+d
+untuk
 pada
-adalah
+memiliki
 salah
-u
+d
 banyak
 )
 secara
-dan
-an
-lebih
-masih
-4
+0
+"
+slot
+situs
+8
 5
 menjadi
 5
-p
+orang
 .
 hal
 nya
 /
-0
+dan
 anda
 adalah
 5
@@ -3058,33 +3058,33 @@ online
 ini
 .
 pada
-namun
-s
-dan
+jadi
+banyak
+yang
 
 yang
 secara
 karena
-situs
+dari
 e
 lebih
-)
-sebagai
+banyak
+"
 dari
 orang
-,
+3
 4
-untuk
+dan
 nya
-slot
+kamu
 6
-hal
+tidak
 ,
-mendapatkan
-kamu
-dapat
-di
-permainan
+namun
+t
+ada
+
+yang
 :
 :
 dengan
@@ -3093,29 +3093,29 @@ dan
 orang
 baik
 anda
-2
+kan
 .
 an
 akan
-p
+kami
 
-cara
+secara
 kita
-slot
+online
 seperti
 
 .
-tahun
+bisnis
 3
-kami
+7
 dan
 melakukan
 0
-bisa
+tidak
 dalam
 sebagai
 situs
-"
+dapat
 8
 -
 3
@@ -3123,63 +3123,63 @@ pemain
 dengan
 saja
 online
-p
+,
 dengan
 
 
 5
 dari
-juga
+s
 nya
-karena
+juga
 saya
 adalah
 an
 membuat
-saat
+akan
 sudah
 dengan
-dapat
-?
+secara
+m
 dengan
 ,
 karena
-game
+6
 banyak
 t
-akan
+i
 s
 2
 
 lain
 sangat
 baik
-)
+saja
 beberapa
-
+salah
 
 ,
-3
-tentang
-1
-0
+
+"
+untuk
+t
 lebih
 banyak
-judi
+/
 masih
 saya
 pada
 mereka
-sudah
+oleh
 pada
-ke
-indonesia
+hari
+/
 
 menggunakan
 jika
 "
 memiliki
-
+)
 jika
 untuk
 orang
@@ -3188,19 +3188,19 @@ orang
 yang
 
 
-saja
+salah
 anda
 
 satu
 ini
-secara
+kamu
 karena
-3
-besar
+"
+e
 
 permainan
-saat
-atau
+saya
+ini
 karena
 orang
 -
@@ -3208,186 +3208,186 @@ dengan
 
 bisa
 saja
-bahwa
+sebagai
 2
 di
 4
 tidak
-p
+beberapa
 8
 online
 t
 karena
-?
+u
 hal
 3
-6
-t
-bisnis
 bahwa
+seperti
+uang
+0
 saat
-?
-8
+membuat
+menjadi
 0
 lebih
 dari
 atau
 sangat
 /
-/
+kan
 ini
-saya
+dengan
 .
 satu
 
-tahun
+?
 dan
 indonesia
 hanya
 )
-bahwa
-di
+e
+sangat
 atau
-kamu
+saya
 untuk
-hal
+cara
 ada
 kamu
-
+untuk
 adalah
 saya
 cara
 ke
 ,
-secara
+salah
 yang
 s
 2
 
-saja
+adalah
 yang
 lebih
 ,
 tidak
-k
+situs
 7
-telah
+uang
 1
-e
+situs
 saat
 ,
 secara
 an
-hanya
+apa
 untuk
-lain
+i
 oleh
-mungkin
+menggunakan
 ,
 
+salah
 3
-r
 salah
-hal
+6
 kita
 4
-banyak
-t
-?
+8
+baik
+8
 5
-judi
+d
 tidak
 1
-?
+5
 adalah
-dengan
+"
 mereka
-pada
-permainan
+mereka
+bahwa
 0
 adalah
-kan
+karena
 karena
 4
-atau
+slot
 memiliki
 saat
 nya
-pada
+bisa
 saya
 oleh
-a
+baik
 -
 
 k
 (
-dan
+salah
 situs
 /
-kan
+9
 bagi
 ini
 karena
-bisa
-ini
-,
+m
 tidak
+,
+kamu
 untuk
-itu
+7
 jika
 situs
 nya
 membuat
-tersebut
+anda
 di
 menjadi
-orang
-a
+tersebut
+situs
 beberapa
 
 ke
-e
+nya
 s
 jika
-5
+menjadi
 pada
 kami
-semua
-online
+ke
+karena
 ke
 3
-hal
+pada
 indonesia
-5
+nya
 2
-satu
-ada
+dapat
+banyak
 situs
 
-satu
+hal
 saja
-4
+5
 3
-anda
+dalam
 tidak
 anda
-)
+an
 jadi
 ini
 4
 bisa
 ini
 nya
-oleh
-untuk
+harus
+
 i
-dari
+o
 
 dapat
 tidak
 d
-akan
-dapat
+poker
+hanya
 akan
 sebagai
 orang
@@ -3395,27 +3395,27 @@ satu
 
 satu
 
-juga
+an
 "
 saya
-secara
+saya
 5
 ini
-
+untuk
 kita
-an
+seperti
 kan
 lebih
-
-
+2
+saat
 dari
 nya
-seperti
+an
 dan
-lebih
+salah
 2
 s
-nya
+menggunakan
 untuk
 nya
 di
@@ -3423,102 +3423,102 @@ sangat
 harus
 di
 cara
-hal
-saat
+5
+?
 sebagai
-yang
+ingin
 
-sebagai
+saya
 s
-,
+/
 adalah
 5
 
-yang
-ada
+
+i
 lebih
 ,
 tersebut
 situs
-/
+situs
 s
 anda
 anda
 o
 nya
 7
-saat
-sudah
+tidak
+cukup
 saja
 .
-tentang
-maka
+setelah
+slot
 di
 memiliki
 seperti
-juga
+sudah
 baik
-kami
-r
-4
-karena
+saja
+bermain
+mereka
+bermain
 9
-saya
+8
 
-di
+?
 kita
 ini
 
-ke
+satu
 5
-6
+3
 baik
-bagi
-membuat
+apa
 online
-karena
+online
+ada
 
 
 menjadi
 situs
-hanya
+sebagai
 oleh
-satu
+orang
 ada
 bahwa
-k
+hal
 dari
-ada
-menjadi
+permainan
+nya
 indonesia
 
 memiliki
 
 k
-3
+kami
 e
 /
-4
+saya
 tersebut
 seperti
 situs
-harus
+3
+tahun
 membuat
-dan
 1
-judi
+saja
 3
 ke
-cara
+agar
 6
 )
-judi
-lain
+7
+1
 u
 akan
-pada
+akan
 seperti
-saat
+,
 akan
 kami
 untuk
@@ -3526,68 +3526,68 @@ nya
 kita
 juga
 baru
-menjadi
+sudah
 
 hal
-juga
+saat
 mereka
 dengan
 dari
 cara
-anda
+dalam
 lebih
-harus
+n
 satu
-para
+apa
 9
 7
 dalam
 i
-saya
+saat
 jadi
 bisa
 
 namun
 )
-(
-saja
-dengan
+hal
+anda
+bisa
 4
 /
-secara
-mereka
+masih
+harus
 0
-indonesia
-kami
+di
+8
 anda
 dari
 ini
-ke
-secara
+menjadi
+6
 banyak
 dari
-bahwa
+ada
 indonesia
 ini
 3
 untuk
 adalah
 di
-atau
+karena
 maka
 satu
 k
-maka
+oleh
 baik
-besar
+/
 salah
 online
 poker
-saya
-7
-0
-online
-8
+sebagai
+bisa
+tidak
+di
+anda
 kita
 pada
 oleh
@@ -3599,11 +3599,11 @@ ini
 s
 dari
 ini
-di
+bagi
 di
 sangat
-slot
-9
+harus
+dengan
 7
 harus
 0
@@ -3612,10 +3612,10 @@ tersebut
 bahwa
 nya
 seperti
-maka
+an
 judi
-mendapatkan
-sebagai
+orang
+9
 .
 bisa
 di
@@ -3623,97 +3623,97 @@ u
 dan
 kamu
 2
-mereka
+a
 saja
 beberapa
 orang
-hanya
-judi
+game
+kami
 ada
 judi
 5
-namun
+untuk
 /
 bisa
-ada
+d
 .
 dan
 oleh
-dengan
+ini
 situs
 kamu
 :
 dan
 dan
 dalam
-permainan
+juga
 0
 dengan
 karena
 poker
 ada
 2
-sebagai
-harus
-dan
+cara
+orang
+sudah
 oleh
 dari
 anda
 )
-/
+an
 online
-ke
+kan
 a
 yang
-.
-adalah
+-
+untuk
 5
 atau
 yang
 memiliki
-karena
-menggunakan
+mereka
+s
 -
 sudah
 "
 t
 e
 nya
-game
+k
 banyak
 0
-adalah
-lebih
+untuk
+i
 "
 2
 atau
 juga
-di
+
 itu
-karena
+kami
 dengan
 dan
-kami
-k
+sangat
+kan
 orang
 7
-karena
-d
-di
-s
-slot
+hal
+para
+dalam
+)
+menggunakan
 lebih
-harus
-namun
+sebagai
+dalam
 satu
 menggunakan
-bisa
+harus
 "
-6
+baik
 0
-lebih
-menggunakan
-t
+para
+bagi
+bagi
 ada
 an
 
@@ -3721,41 +3721,41 @@ e
 baik
 akan
 t
-membuat
+dan
 slot
-anda
+akan
 menjadi
-pada
-satu
-yang
-kita
-
+d
+(
+ini
+saja
+5
 tidak
 online
 memiliki
 9
-dari
-oleh
-:
+
+2
 :
-ada
+permainan
+9
 oleh
 menjadi
 akan
 saja
 dengan
 juga
-saja
+satu
 harus
 dari
 a
 salah
-beberapa
+judi
 ,
 :
-game
+salah
 dan
-jika
-
+cara
+secara
 
 1

predict_results.json

@@ -1,12 +1,12 @@
 {
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5068754553794861,
-    "predict_rouge1": 0.3931,
+    "predict_loss": 0.7171599268913269,
+    "predict_rouge1": 0.4005,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.3924,
-    "predict_rougeLsum": 0.3917,
-    "predict_runtime": 1681.7484,
+    "predict_rougeL": 0.4002,
+    "predict_rougeLsum": 0.4013,
+    "predict_runtime": 2246.3882,
     "predict_samples": 3761,
-    "predict_samples_per_second": 2.236,
-    "predict_steps_per_second": 0.28
+    "predict_samples_per_second": 1.674,
+    "predict_steps_per_second": 0.053
 }

train_results.json

@@ -1,9 +1,9 @@
 {
     "epoch": 5.0,
-    "total_flos": 6.557265830209536e+16,
-    "train_loss": 0.37884998882989906,
-    "train_runtime": 9312.1131,
+    "total_flos": 4.884374195011584e+16,
+    "train_loss": 0.5925334092212899,
+    "train_runtime": 4323.2769,
     "train_samples": 14266,
-    "train_samples_per_second": 7.66,
-    "train_steps_per_second": 1.915
+    "train_samples_per_second": 16.499,
+    "train_steps_per_second": 1.032
 }

trainer_state.json

@@ -3,128 +3,128 @@
   "best_model_checkpoint": null,
   "epoch": 5.0,
   "eval_steps": 500,
-  "global_step": 17835,
+  "global_step": 4460,
   "is_hyper_param_search": false,
   "is_local_process_zero": true,
   "is_world_process_zero": true,
   "log_history": [
     {
       "epoch": 1.0,
-      "grad_norm": 4.056117534637451,
-      "learning_rate": 4e-05,
-      "loss": 0.6327,
-      "step": 3567
+      "grad_norm": 0.9051845669746399,
+      "learning_rate": 0.0008,
+      "loss": 1.2322,
+      "step": 892
     },
     {
       "epoch": 1.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.4634159207344055,
-      "eval_rouge1": 0.3795,
+      "eval_loss": 0.7490009665489197,
+      "eval_rouge1": 0.7095,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3806,
-      "eval_rougeLsum": 0.3802,
-      "eval_runtime": 331.4212,
-      "eval_samples_per_second": 2.254,
-      "eval_steps_per_second": 0.284,
-      "step": 3567
+      "eval_rougeL": 0.7102,
+      "eval_rougeLsum": 0.7047,
+      "eval_runtime": 34.7466,
+      "eval_samples_per_second": 21.498,
+      "eval_steps_per_second": 0.691,
+      "step": 892
     },
     {
       "epoch": 2.0,
-      "grad_norm": 3.9469492435455322,
-      "learning_rate": 3e-05,
-      "loss": 0.4349,
-      "step": 7134
+      "grad_norm": 0.6380248069763184,
+      "learning_rate": 0.0006,
+      "loss": 0.6879,
+      "step": 1784
     },
     {
       "epoch": 2.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.45409438014030457,
-      "eval_rouge1": 0.3596,
+      "eval_loss": 0.6347340941429138,
+      "eval_rouge1": 0.7342,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3615,
-      "eval_rougeLsum": 0.3631,
-      "eval_runtime": 336.4749,
-      "eval_samples_per_second": 2.22,
-      "eval_steps_per_second": 0.279,
-      "step": 7134
+      "eval_rougeL": 0.7339,
+      "eval_rougeLsum": 0.7326,
+      "eval_runtime": 35.8554,
+      "eval_samples_per_second": 20.834,
+      "eval_steps_per_second": 0.669,
+      "step": 1784
     },
     {
       "epoch": 3.0,
-      "grad_norm": 2.7169110774993896,
-      "learning_rate": 2e-05,
-      "loss": 0.3376,
-      "step": 10701
+      "grad_norm": 0.7358594536781311,
+      "learning_rate": 0.0004,
+      "loss": 0.4916,
+      "step": 2676
     },
     {
       "epoch": 3.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.4561801552772522,
-      "eval_rouge1": 0.4121,
+      "eval_loss": 0.6006747484207153,
+      "eval_rouge1": 0.7021,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4123,
-      "eval_rougeLsum": 0.4116,
-      "eval_runtime": 332.2435,
-      "eval_samples_per_second": 2.248,
-      "eval_steps_per_second": 0.283,
-      "step": 10701
+      "eval_rougeL": 0.7036,
+      "eval_rougeLsum": 0.7024,
+      "eval_runtime": 35.3096,
+      "eval_samples_per_second": 21.156,
+      "eval_steps_per_second": 0.68,
+      "step": 2676
     },
     {
       "epoch": 4.0,
-      "grad_norm": 5.345052719116211,
-      "learning_rate": 1e-05,
-      "loss": 0.2683,
-      "step": 14268
+      "grad_norm": 0.6418809294700623,
+      "learning_rate": 0.0002,
+      "loss": 0.3445,
+      "step": 3568
     },
     {
       "epoch": 4.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.474356472492218,
-      "eval_rouge1": 0.3886,
+      "eval_loss": 0.626953661441803,
+      "eval_rouge1": 0.7205,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3869,
-      "eval_rougeLsum": 0.388,
-      "eval_runtime": 329.9317,
-      "eval_samples_per_second": 2.264,
-      "eval_steps_per_second": 0.285,
-      "step": 14268
+      "eval_rougeL": 0.7213,
+      "eval_rougeLsum": 0.7183,
+      "eval_runtime": 34.5923,
+      "eval_samples_per_second": 21.594,
+      "eval_steps_per_second": 0.694,
+      "step": 3568
     },
     {
       "epoch": 5.0,
-      "grad_norm": 3.9704811573028564,
+      "grad_norm": 0.6559532284736633,
       "learning_rate": 0.0,
-      "loss": 0.2208,
-      "step": 17835
+      "loss": 0.2065,
+      "step": 4460
     },
     {
       "epoch": 5.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.4922512173652649,
-      "eval_rouge1": 0.3905,
+      "eval_loss": 0.6843562126159668,
+      "eval_rouge1": 0.7295,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3898,
-      "eval_rougeLsum": 0.3916,
-      "eval_runtime": 332.1945,
-      "eval_samples_per_second": 2.249,
-      "eval_steps_per_second": 0.283,
-      "step": 17835
+      "eval_rougeL": 0.7315,
+      "eval_rougeLsum": 0.7272,
+      "eval_runtime": 35.1124,
+      "eval_samples_per_second": 21.275,
+      "eval_steps_per_second": 0.684,
+      "step": 4460
     },
     {
       "epoch": 5.0,
-      "step": 17835,
-      "total_flos": 6.557265830209536e+16,
-      "train_loss": 0.37884998882989906,
-      "train_runtime": 9312.1131,
-      "train_samples_per_second": 7.66,
-      "train_steps_per_second": 1.915
+      "step": 4460,
+      "total_flos": 4.884374195011584e+16,
+      "train_loss": 0.5925334092212899,
+      "train_runtime": 4323.2769,
+      "train_samples_per_second": 16.499,
+      "train_steps_per_second": 1.032
     }
   ],
   "logging_steps": 500,
-  "max_steps": 17835,
+  "max_steps": 4460,
   "num_input_tokens_seen": 0,
   "num_train_epochs": 5,
   "save_steps": 500,
-  "total_flos": 6.557265830209536e+16,
-  "train_batch_size": 4,
+  "total_flos": 4.884374195011584e+16,
+  "train_batch_size": 16,
   "trial_name": null,
   "trial_params": null
 }