animaslabs commited on
Commit
2a00a26
·
verified ·
1 Parent(s): e15f9c2

Upload model from models/parakeet-rnnt-0.6b-mlx

Browse files
Files changed (7) hide show
  1. README.md +63 -0
  2. config.json +4 -0
  3. model.safetensors +3 -0
  4. model_config.yaml +2203 -0
  5. tokenizer.model +3 -0
  6. tokenizer.vocab +1024 -0
  7. vocab.txt +1023 -0
README.md ADDED
@@ -0,0 +1,63 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ license: cc-by-4.0
3
+ track_downloads: true
4
+ language:
5
+ - en
6
+ pipeline_tag: automatic-speech-recognition
7
+ library_name: mlx
8
+ datasets:
9
+ - librispeech_asr
10
+ - fisher_corpus
11
+ - Switchboard-1
12
+ - WSJ-0
13
+ - WSJ-1
14
+ - National-Singapore-Corpus-Part-1
15
+ - National-Singapore-Corpus-Part-6
16
+ - vctk
17
+ - voxpopuli
18
+ - europarl
19
+ - multilingual_librispeech
20
+ - mozilla-foundation/common_voice_8_0
21
+ - MLCommons/peoples_speech
22
+ tags:
23
+ - automatic-speech-recognition
24
+ - speech
25
+ - audio
26
+ - Transducer
27
+ - FastConformer
28
+ - Conformer
29
+ - pytorch
30
+ - NeMo
31
+ - hf-asr-leaderboard
32
+ - mlx
33
+ base_model: nvidia/parakeet-rnnt-0.6b
34
+ ---
35
+
36
+ # **animaslabs/parakeet-rnnt-0.6b-mlx**
37
+
38
+ This model was converted to MLX format from [nvidia/parakeet-rnnt-0.6b](https://huggingface.co/nvidia/parakeet-rnnt-0.6b) using the scripts in this [github repo](https://github.com/animaslabs/mlx-models). Please refer to [original model card](https://huggingface.co/nvidia/parakeet-rnnt-0.6b) for more details on the model.
39
+
40
+ ## Use with mlx
41
+
42
+ NOTE: parakeet-mlx and mlx-audio do not support quantized models.
43
+
44
+ ### parakeet-mlx
45
+
46
+ ```bash
47
+ pip install -U parakeet-mlx
48
+ ```
49
+
50
+ ```bash
51
+ parakeet-mlx audio.wav --model animaslabs/parakeet-rnnt-0.6b-mlx
52
+ ```
53
+
54
+ ### mlx-audio
55
+
56
+ ```bash
57
+ pip install -U mlx-audio
58
+ ```
59
+
60
+ ```bash
61
+ python -m mlx_audio.stt.generate --model animaslabs/parakeet-rnnt-0.6b-mlx --audio audio.wav --output somewhere
62
+ ```
63
+
config.json ADDED
@@ -0,0 +1,4 @@
 
 
 
 
 
1
+ {
2
+ "model_type": "parakeet-tdt",
3
+ "framework": "mlx"
4
+ }
model.safetensors ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:5ab8944a391f8fd5b9f3fd2b61c419708938797507db07b7ffea8da8abdde43e
3
+ size 2467055316
model_config.yaml ADDED
@@ -0,0 +1,2203 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ sample_rate: 16000
2
+ compute_eval_loss: false
3
+ log_prediction: true
4
+ rnnt_reduction: mean_volume
5
+ skip_nan_grad: false
6
+ model_defaults:
7
+ enc_hidden: 1024
8
+ pred_hidden: 640
9
+ joint_hidden: 640
10
+ train_ds:
11
+ manifest_filepath: /disk1/NVIDIA/datasets/LibriSpeech_NeMo/librivox-train-all.json
12
+ sample_rate: 16000
13
+ batch_size: 16
14
+ shuffle: true
15
+ num_workers: 8
16
+ pin_memory: true
17
+ use_start_end_token: false
18
+ trim_silence: false
19
+ max_duration: 16.7
20
+ min_duration: 0.1
21
+ is_tarred: false
22
+ tarred_audio_filepaths: null
23
+ shuffle_n: 2048
24
+ bucketing_strategy: fully_randomized
25
+ bucketing_batch_size: null
26
+ validation_ds:
27
+ manifest_filepath: /disk1/NVIDIA/datasets/LibriSpeech_NeMo/librivox-dev-clean.json
28
+ sample_rate: 16000
29
+ batch_size: 16
30
+ shuffle: false
31
+ use_start_end_token: false
32
+ num_workers: 8
33
+ pin_memory: true
34
+ test_ds:
35
+ manifest_filepath: null
36
+ sample_rate: 16000
37
+ batch_size: 16
38
+ shuffle: false
39
+ use_start_end_token: false
40
+ num_workers: 8
41
+ pin_memory: true
42
+ tokenizer:
43
+ dir: /disk3/datasets/suno_asr_set3_tokenizer/tokenizer_spe_bpe_v1024/
44
+ type: bpe
45
+ model_path: nemo:f644e5ef786442deb7c1726c7db0d44f_tokenizer.model
46
+ vocab_path: nemo:94b39775a827410cb52d0b8d95177f1e_vocab.txt
47
+ spe_tokenizer_vocab: nemo:1cc2984fcca649148e4a5afcd991ddb0_tokenizer.vocab
48
+ preprocessor:
49
+ _target_: nemo.collections.asr.modules.AudioToMelSpectrogramPreprocessor
50
+ sample_rate: 16000
51
+ normalize: per_feature
52
+ window_size: 0.025
53
+ window_stride: 0.01
54
+ window: hann
55
+ features: 80
56
+ n_fft: 512
57
+ log: true
58
+ frame_splicing: 1
59
+ dither: 1.0e-05
60
+ pad_to: 0
61
+ pad_value: 0.0
62
+ spec_augment:
63
+ _target_: nemo.collections.asr.modules.SpectrogramAugmentation
64
+ freq_masks: 2
65
+ time_masks: 10
66
+ freq_width: 27
67
+ time_width: 0.05
68
+ encoder:
69
+ _target_: nemo.collections.asr.modules.ConformerEncoder
70
+ feat_in: 80
71
+ feat_out: -1
72
+ n_layers: 24
73
+ d_model: 1024
74
+ subsampling: dw_striding
75
+ subsampling_factor: 8
76
+ subsampling_conv_channels: 256
77
+ causal_downsampling: false
78
+ reduction: null
79
+ reduction_position: null
80
+ reduction_factor: 1
81
+ ff_expansion_factor: 4
82
+ self_attention_model: rel_pos
83
+ n_heads: 8
84
+ att_context_size:
85
+ - -1
86
+ - -1
87
+ att_context_style: regular
88
+ xscaling: true
89
+ untie_biases: true
90
+ pos_emb_max_len: 5000
91
+ conv_kernel_size: 9
92
+ conv_norm_type: batch_norm
93
+ conv_context_size: null
94
+ dropout: 0.1
95
+ dropout_pre_encoder: 0.1
96
+ dropout_emb: 0.0
97
+ dropout_att: 0.1
98
+ decoder:
99
+ _target_: nemo.collections.asr.modules.RNNTDecoder
100
+ normalization_mode: null
101
+ random_state_sampling: false
102
+ blank_as_pad: true
103
+ prednet:
104
+ pred_hidden: 640
105
+ pred_rnn_layers: 2
106
+ t_max: null
107
+ dropout: 0.2
108
+ vocab_size: 1024
109
+ joint:
110
+ _target_: nemo.collections.asr.modules.RNNTJoint
111
+ log_softmax: null
112
+ preserve_memory: false
113
+ fuse_loss_wer: true
114
+ fused_batch_size: 16
115
+ jointnet:
116
+ joint_hidden: 640
117
+ activation: relu
118
+ dropout: 0.2
119
+ encoder_hidden: 1024
120
+ pred_hidden: 640
121
+ num_classes: 1024
122
+ vocabulary:
123
+ - <unk>
124
+ - ▁t
125
+ - ▁th
126
+ - ▁a
127
+ - ▁i
128
+ - ▁the
129
+ - re
130
+ - ▁w
131
+ - ▁s
132
+ - ▁o
133
+ - in
134
+ - at
135
+ - er
136
+ - ou
137
+ - nd
138
+ - ▁c
139
+ - ▁b
140
+ - ▁h
141
+ - 'on'
142
+ - ▁m
143
+ - ▁f
144
+ - ing
145
+ - ▁to
146
+ - en
147
+ - ▁p
148
+ - ▁and
149
+ - ▁d
150
+ - es
151
+ - or
152
+ - an
153
+ - ll
154
+ - ▁y
155
+ - ▁l
156
+ - ed
157
+ - ▁of
158
+ - ▁in
159
+ - it
160
+ - is
161
+ - ▁you
162
+ - ▁that
163
+ - ar
164
+ - ▁g
165
+ - ▁n
166
+ - as
167
+ - om
168
+ - ▁it
169
+ - ic
170
+ - ve
171
+ - ▁e
172
+ - ▁wh
173
+ - ▁be
174
+ - us
175
+ - le
176
+ - al
177
+ - ion
178
+ - ow
179
+ - ▁we
180
+ - ▁re
181
+ - ▁is
182
+ - ut
183
+ - ot
184
+ - ent
185
+ - ▁on
186
+ - et
187
+ - ▁ha
188
+ - ay
189
+ - ct
190
+ - ▁he
191
+ - id
192
+ - ▁for
193
+ - ▁st
194
+ - ver
195
+ - ly
196
+ - ro
197
+ - ig
198
+ - ▁so
199
+ - ld
200
+ - ▁this
201
+ - ke
202
+ - ▁u
203
+ - se
204
+ - all
205
+ - st
206
+ - ur
207
+ - ce
208
+ - ch
209
+ - im
210
+ - ith
211
+ - ▁as
212
+ - ▁k
213
+ - ▁an
214
+ - ▁was
215
+ - ▁j
216
+ - ▁with
217
+ - ir
218
+ - ▁go
219
+ - ra
220
+ - ▁do
221
+ - ▁have
222
+ - ▁li
223
+ - ▁sh
224
+ - ▁se
225
+ - ▁they
226
+ - ▁are
227
+ - am
228
+ - ht
229
+ - ▁but
230
+ - ation
231
+ - ▁not
232
+ - th
233
+ - ▁r
234
+ - ally
235
+ - ad
236
+ - ust
237
+ - ▁or
238
+ - ▁com
239
+ - ould
240
+ - ▁can
241
+ - ill
242
+ - ▁ne
243
+ - ight
244
+ - ▁ch
245
+ - ▁de
246
+ - ▁con
247
+ - ▁at
248
+ - ▁mo
249
+ - ant
250
+ - oo
251
+ - il
252
+ - ▁me
253
+ - ▁what
254
+ - ▁there
255
+ - ter
256
+ - pe
257
+ - ▁ab
258
+ - ▁su
259
+ - ere
260
+ - ck
261
+ - ▁pro
262
+ - ▁al
263
+ - ▁fr
264
+ - ▁kn
265
+ - ▁all
266
+ - ers
267
+ - ▁like
268
+ - ge
269
+ - ▁ex
270
+ - ▁som
271
+ - ul
272
+ - ▁your
273
+ - ▁v
274
+ - pp
275
+ - use
276
+ - ▁if
277
+ - ess
278
+ - ate
279
+ - est
280
+ - ▁know
281
+ - out
282
+ - if
283
+ - ▁just
284
+ - ment
285
+ - qu
286
+ - op
287
+ - ain
288
+ - ▁one
289
+ - ol
290
+ - ri
291
+ - art
292
+ - very
293
+ - ▁wor
294
+ - ive
295
+ - ist
296
+ - ▁my
297
+ - nt
298
+ - ab
299
+ - ▁from
300
+ - ort
301
+ - ▁ma
302
+ - ▁about
303
+ - res
304
+ - ity
305
+ - ▁out
306
+ - ▁bec
307
+ - ▁le
308
+ - our
309
+ - od
310
+ - and
311
+ - ink
312
+ - ie
313
+ - ▁up
314
+ - ind
315
+ - os
316
+ - un
317
+ - ause
318
+ - oug
319
+ - um
320
+ - ▁some
321
+ - ▁int
322
+ - ▁by
323
+ - ▁pl
324
+ - ▁get
325
+ - el
326
+ - ard
327
+ - ▁when
328
+ - ▁don
329
+ - her
330
+ - ���will
331
+ - ▁us
332
+ - ▁would
333
+ - ook
334
+ - ies
335
+ - ich
336
+ - ▁because
337
+ - ▁think
338
+ - em
339
+ - ▁pe
340
+ - ▁his
341
+ - ack
342
+ - ▁then
343
+ - ▁our
344
+ - ide
345
+ - ▁tim
346
+ - ▁how
347
+ - ven
348
+ - ▁tr
349
+ - ▁who
350
+ - ▁them
351
+ - ure
352
+ - ▁ar
353
+ - ▁ye
354
+ - ▁more
355
+ - ▁going
356
+ - ect
357
+ - ▁sa
358
+ - ▁cl
359
+ - ▁had
360
+ - ▁now
361
+ - ▁which
362
+ - ▁here
363
+ - ous
364
+ - ▁their
365
+ - ▁tw
366
+ - so
367
+ - ▁has
368
+ - ud
369
+ - ▁co
370
+ - ▁ta
371
+ - ound
372
+ - ▁were
373
+ - ast
374
+ - ▁peop
375
+ - ough
376
+ - ▁no
377
+ - ▁really
378
+ - ▁any
379
+ - ▁people
380
+ - ▁want
381
+ - ▁she
382
+ - ▁en
383
+ - ▁fa
384
+ - ▁te
385
+ - ame
386
+ - ine
387
+ - ▁qu
388
+ - red
389
+ - ▁im
390
+ - ▁right
391
+ - ther
392
+ - ▁act
393
+ - ▁thing
394
+ - king
395
+ - ose
396
+ - ▁ad
397
+ - ▁see
398
+ - ▁time
399
+ - ▁these
400
+ - ci
401
+ - one
402
+ - ▁say
403
+ - ▁also
404
+ - ▁fe
405
+ - per
406
+ - ▁ag
407
+ - ▁man
408
+ - ore
409
+ - ▁un
410
+ - pt
411
+ - ▁her
412
+ - ▁look
413
+ - ong
414
+ - ice
415
+ - ▁very
416
+ - ff
417
+ - ions
418
+ - ▁comp
419
+ - ▁did
420
+ - itt
421
+ - ▁well
422
+ - ▁other
423
+ - iv
424
+ - ase
425
+ - ree
426
+ - hing
427
+ - ▁lo
428
+ - reat
429
+ - ▁cont
430
+ - ▁part
431
+ - ▁into
432
+ - nder
433
+ - ▁been
434
+ - are
435
+ - ▁am
436
+ - ans
437
+ - ▁sp
438
+ - ▁two
439
+ - ue
440
+ - ▁way
441
+ - age
442
+ - ▁where
443
+ - ite
444
+ - ▁dis
445
+ - ▁than
446
+ - ▁every
447
+ - ▁pr
448
+ - ▁po
449
+ - ag
450
+ - ▁need
451
+ - ach
452
+ - iff
453
+ - ence
454
+ - pl
455
+ - own
456
+ - ▁ac
457
+ - ble
458
+ - ▁over
459
+ - iz
460
+ - ▁work
461
+ - ▁res
462
+ - ▁make
463
+ - ▁could
464
+ - ▁off
465
+ - ually
466
+ - ▁ro
467
+ - ▁back
468
+ - able
469
+ - ip
470
+ - ry
471
+ - ▁him
472
+ - ▁cour
473
+ - ber
474
+ - ▁pre
475
+ - ▁fir
476
+ - ▁spe
477
+ - ap
478
+ - ars
479
+ - ▁diff
480
+ - ire
481
+ - ▁somet
482
+ - ▁imp
483
+ - ▁those
484
+ - ▁comm
485
+ - ance
486
+ - ick
487
+ - ▁even
488
+ - ated
489
+ - way
490
+ - sel
491
+ - ▁let
492
+ - ▁br
493
+ - ty
494
+ - ▁per
495
+ - int
496
+ - ▁first
497
+ - ▁thr
498
+ - ▁under
499
+ - ah
500
+ - ▁may
501
+ - ▁cou
502
+ - ▁new
503
+ - ress
504
+ - act
505
+ - ▁gr
506
+ - ep
507
+ - ▁said
508
+ - ations
509
+ - ▁good
510
+ - ace
511
+ - ass
512
+ - ▁does
513
+ - orm
514
+ - ish
515
+ - ▁af
516
+ - ving
517
+ - co
518
+ - ▁app
519
+ - ▁lot
520
+ - ▁things
521
+ - ▁tra
522
+ - ittle
523
+ - ▁bl
524
+ - ▁little
525
+ - ▁mu
526
+ - cess
527
+ - fe
528
+ - ome
529
+ - ▁inc
530
+ - ▁differe
531
+ - ary
532
+ - ical
533
+ - ▁only
534
+ - ult
535
+ - ▁again
536
+ - ▁got
537
+ - ens
538
+ - ▁gu
539
+ - ▁kind
540
+ - ▁much
541
+ - ord
542
+ - ▁through
543
+ - ition
544
+ - ild
545
+ - ▁down
546
+ - ▁actually
547
+ - ▁something
548
+ - ang
549
+ - ru
550
+ - ces
551
+ - ▁fl
552
+ - ile
553
+ - ater
554
+ - ▁ra
555
+ - ▁take
556
+ - ict
557
+ - ign
558
+ - ▁sc
559
+ - vel
560
+ - ▁bet
561
+ - ▁tal
562
+ - ▁yeah
563
+ - ▁use
564
+ - fore
565
+ - ▁bu
566
+ - ▁start
567
+ - ory
568
+ - be
569
+ - ▁day
570
+ - wn
571
+ - xt
572
+ - ia
573
+ - ak
574
+ - ▁after
575
+ - ▁should
576
+ - ▁fo
577
+ - ▁ho
578
+ - ▁hel
579
+ - ▁ind
580
+ - ▁uh
581
+ - na
582
+ - ial
583
+ - other
584
+ - ▁ke
585
+ - ▁call
586
+ - ▁most
587
+ - ▁ok
588
+ - ▁different
589
+ - ▁em
590
+ - ting
591
+ - ple
592
+ - ▁being
593
+ - ▁bo
594
+ - ning
595
+ - ▁too
596
+ - ors
597
+ - ▁happ
598
+ - ark
599
+ - og
600
+ - ▁help
601
+ - ▁rem
602
+ - du
603
+ - ction
604
+ - ood
605
+ - ▁ser
606
+ - ether
607
+ - ious
608
+ - ▁mean
609
+ - ▁many
610
+ - ▁court
611
+ - ▁bel
612
+ - ade
613
+ - ▁la
614
+ - ved
615
+ - ▁des
616
+ - ▁rec
617
+ - ▁jo
618
+ - ▁dec
619
+ - ves
620
+ - ▁before
621
+ - ▁put
622
+ - self
623
+ - ▁point
624
+ - te
625
+ - ▁ev
626
+ - form
627
+ - ents
628
+ - ▁add
629
+ - ody
630
+ - thing
631
+ - ▁case
632
+ - ▁pers
633
+ - ▁cons
634
+ - iss
635
+ - ▁three
636
+ - oth
637
+ - ▁ph
638
+ - ▁come
639
+ - ▁find
640
+ - ▁why
641
+ - ull
642
+ - ▁show
643
+ - ▁bas
644
+ - ▁great
645
+ - ily
646
+ - ▁rel
647
+ - ▁sm
648
+ - ▁its
649
+ - ▁fact
650
+ - ▁pos
651
+ - ool
652
+ - ments
653
+ - ise
654
+ - nds
655
+ - ys
656
+ - ▁try
657
+ - ual
658
+ - ful
659
+ - erm
660
+ - ▁inter
661
+ - ons
662
+ - ▁quest
663
+ - ▁sub
664
+ - we
665
+ - vers
666
+ - ▁supp
667
+ - ▁feel
668
+ - ▁same
669
+ - ub
670
+ - ates
671
+ - urn
672
+ - ert
673
+ - ▁inv
674
+ - day
675
+ - ▁rep
676
+ - igh
677
+ - ▁sy
678
+ - ▁inst
679
+ - ▁long
680
+ - ▁still
681
+ - ▁okay
682
+ - ft
683
+ - ific
684
+ - atch
685
+ - ought
686
+ - ath
687
+ - ▁own
688
+ - ▁made
689
+ - ix
690
+ - ced
691
+ - ks
692
+ - lic
693
+ - ▁wr
694
+ - de
695
+ - ▁cr
696
+ - ▁att
697
+ - ▁ob
698
+ - ▁world
699
+ - ▁sure
700
+ - ward
701
+ - ▁bit
702
+ - ▁life
703
+ - ▁person
704
+ - ▁pres
705
+ - ph
706
+ - ▁vide
707
+ - ▁reg
708
+ - ▁end
709
+ - ject
710
+ - ange
711
+ - ▁fin
712
+ - ied
713
+ - pect
714
+ - ▁didn
715
+ - ▁around
716
+ - ian
717
+ - ▁car
718
+ - ible
719
+ - ▁sim
720
+ - ever
721
+ - ▁sch
722
+ - ating
723
+ - ▁pol
724
+ - ▁set
725
+ - ▁oh
726
+ - cy
727
+ - ▁real
728
+ - ▁import
729
+ - ▁count
730
+ - ▁um
731
+ - ▁next
732
+ - cial
733
+ - les
734
+ - ▁hu
735
+ - ▁acc
736
+ - ▁might
737
+ - ▁ent
738
+ - ▁doing
739
+ - ▁ins
740
+ - ▁gen
741
+ - ▁play
742
+ - ▁cle
743
+ - ▁another
744
+ - ady
745
+ - ular
746
+ - ib
747
+ - ways
748
+ - ered
749
+ - ility
750
+ - ities
751
+ - ▁op
752
+ - ▁def
753
+ - ▁years
754
+ - ▁never
755
+ - ower
756
+ - ram
757
+ - ▁tell
758
+ - ▁sl
759
+ - onna
760
+ - ail
761
+ - ren
762
+ - ute
763
+ - ▁gonna
764
+ - ▁big
765
+ - ▁give
766
+ - der
767
+ - ount
768
+ - ▁ap
769
+ - kes
770
+ - ▁state
771
+ - ▁cor
772
+ - ▁min
773
+ - ically
774
+ - ▁mon
775
+ - ▁fam
776
+ - ▁important
777
+ - ▁always
778
+ - ▁high
779
+ - ▁four
780
+ - ▁gra
781
+ - ▁ca
782
+ - ▁stud
783
+ - ▁dist
784
+ - ▁talk
785
+ - ▁num
786
+ - ▁str
787
+ - ▁today
788
+ - ract
789
+ - ▁while
790
+ - ason
791
+ - ▁iss
792
+ - ▁sur
793
+ - ▁char
794
+ - ▁last
795
+ - oy
796
+ - ited
797
+ - ▁exper
798
+ - ▁place
799
+ - ▁tri
800
+ - ▁ear
801
+ - ▁belie
802
+ - ▁able
803
+ - ▁underst
804
+ - ▁che
805
+ - ▁both
806
+ - ug
807
+ - ▁doesn
808
+ - ▁keep
809
+ - ▁happen
810
+ - ings
811
+ - iew
812
+ - ather
813
+ - ▁ass
814
+ - ▁love
815
+ - ative
816
+ - av
817
+ - ▁yes
818
+ - ▁ele
819
+ - ▁year
820
+ - ▁such
821
+ - ▁video
822
+ - ness
823
+ - ▁el
824
+ - ▁trans
825
+ - ▁five
826
+ - ▁produ
827
+ - ave
828
+ - erest
829
+ - als
830
+ - body
831
+ - cus
832
+ - ▁found
833
+ - atter
834
+ - ▁eff
835
+ - ▁god
836
+ - ▁used
837
+ - llow
838
+ - ▁interest
839
+ - ▁question
840
+ - hip
841
+ - ▁bus
842
+ - ▁ask
843
+ - ▁exam
844
+ - ▁prov
845
+ - lud
846
+ - ▁form
847
+ - ▁law
848
+ - ense
849
+ - ▁child
850
+ - ▁gl
851
+ - ne
852
+ - ▁each
853
+ - ▁understand
854
+ - ▁care
855
+ - stem
856
+ - ▁med
857
+ - ▁maybe
858
+ - ably
859
+ - ▁det
860
+ - ▁coll
861
+ - its
862
+ - ▁commun
863
+ - ▁hand
864
+ - ▁'
865
+ - ▁ref
866
+ - ▁lear
867
+ - ▁done
868
+ - ▁gener
869
+ - vern
870
+ - ▁mr
871
+ - ween
872
+ - ▁better
873
+ - ▁between
874
+ - li
875
+ - blem
876
+ - ▁system
877
+ - ertain
878
+ - ▁school
879
+ - ▁eas
880
+ - ▁exp
881
+ - ▁war
882
+ - ention
883
+ - ▁ty
884
+ - ▁govern
885
+ - ues
886
+ - ▁problem
887
+ - ▁plan
888
+ - ac
889
+ - ▁conf
890
+ - ▁course
891
+ - ouse
892
+ - ▁mar
893
+ - ▁stand
894
+ - ▁sk
895
+ - ▁seco
896
+ - uring
897
+ - ▁ed
898
+ - ▁mem
899
+ - ros
900
+ - cri
901
+ - ▁thought
902
+ - cept
903
+ - ▁partic
904
+ - ▁test
905
+ - olog
906
+ - iness
907
+ - ▁far
908
+ - led
909
+ - ▁col
910
+ - ▁looking
911
+ - ▁read
912
+ - ▁whether
913
+ - ▁word
914
+ - me
915
+ - ▁once
916
+ - ize
917
+ - ▁home
918
+ - ▁requ
919
+ - gg
920
+ - ▁ide
921
+ - ▁thank
922
+ - ures
923
+ - ▁called
924
+ - ▁cur
925
+ - ▁water
926
+ - ▁frie
927
+ - ▁side
928
+ - ▁best
929
+ - ▁number
930
+ - oney
931
+ - ▁turn
932
+ - ock
933
+ - ▁eng
934
+ - ▁top
935
+ - ▁open
936
+ - ead
937
+ - ▁everything
938
+ - ▁term
939
+ - ▁prob
940
+ - ▁hard
941
+ - ▁fun
942
+ - ▁spec
943
+ - ▁dire
944
+ - ▁second
945
+ - ▁pa
946
+ - ▁build
947
+ - ▁run
948
+ - ▁sign
949
+ - ▁reason
950
+ - ▁inform
951
+ - ▁watch
952
+ - ution
953
+ - ▁few
954
+ - mo
955
+ - ▁hum
956
+ - ision
957
+ - ▁ext
958
+ - ▁tog
959
+ - ▁conc
960
+ - ▁thous
961
+ - ▁thousand
962
+ - ▁support
963
+ - ▁together
964
+ - ▁six
965
+ - ps
966
+ - ▁mark
967
+ - ics
968
+ - ▁includ
969
+ - ef
970
+ - ▁opp
971
+ - ident
972
+ - ▁anything
973
+ - ▁met
974
+ - ▁bre
975
+ - ▁jud
976
+ - ▁away
977
+ - ▁old
978
+ - ▁prog
979
+ - ten
980
+ - ▁book
981
+ - ▁says
982
+ - ▁seem
983
+ - ▁contin
984
+ - ▁process
985
+ - ▁sing
986
+ - ▁money
987
+ - ▁having
988
+ - ▁beg
989
+ - ▁comple
990
+ - ▁thir
991
+ - ▁using
992
+ - ▁ret
993
+ - ger
994
+ - ▁head
995
+ - ▁cre
996
+ - ▁poss
997
+ - enty
998
+ - ▁certain
999
+ - ▁clear
1000
+ - ines
1001
+ - ▁wee
1002
+ - arch
1003
+ - ▁inf
1004
+ - ont
1005
+ - ▁sit
1006
+ - ▁lead
1007
+ - alth
1008
+ - ▁art
1009
+ - ross
1010
+ - ▁pub
1011
+ - ▁without
1012
+ - ▁pret
1013
+ - ▁getting
1014
+ - ient
1015
+ - ▁z
1016
+ - ▁wom
1017
+ - ▁power
1018
+ - ational
1019
+ - ner
1020
+ - ▁rest
1021
+ - ▁believe
1022
+ - ▁wa
1023
+ - ▁aut
1024
+ - ▁move
1025
+ - aim
1026
+ - ▁sort
1027
+ - idence
1028
+ - ▁creat
1029
+ - ▁expl
1030
+ - ▁name
1031
+ - ▁went
1032
+ - ▁eu
1033
+ - ▁change
1034
+ - ▁came
1035
+ - ▁pay
1036
+ - ices
1037
+ - ▁sin
1038
+ - ▁pur
1039
+ - ▁pass
1040
+ - ▁whole
1041
+ - ▁house
1042
+ - ▁hund
1043
+ - ▁hundred
1044
+ - ▁pretty
1045
+ - ▁trying
1046
+ - ▁ple
1047
+ - ▁allow
1048
+ - ▁compan
1049
+ - ▁government
1050
+ - ▁small
1051
+ - ▁light
1052
+ - ▁bra
1053
+ - ▁stu
1054
+ - aint
1055
+ - ▁ah
1056
+ - ▁prot
1057
+ - ets
1058
+ - ▁cent
1059
+ - velop
1060
+ - ▁family
1061
+ - ▁business
1062
+ - ety
1063
+ - ▁making
1064
+ - ▁list
1065
+ - ▁experi
1066
+ - eric
1067
+ - ▁follow
1068
+ - ately
1069
+ - ▁probably
1070
+ - ▁appe
1071
+ - ▁serv
1072
+ - ▁val
1073
+ - ▁leg
1074
+ - ▁resp
1075
+ - ▁develop
1076
+ - ready
1077
+ - ▁already
1078
+ - ▁sec
1079
+ - ell
1080
+ - ▁saying
1081
+ - ash
1082
+ - ▁hear
1083
+ - ▁loc
1084
+ - ▁adv
1085
+ - ▁pri
1086
+ - ret
1087
+ - ▁lar
1088
+ - ▁beh
1089
+ - ▁must
1090
+ - ▁hon
1091
+ - ▁means
1092
+ - ew
1093
+ - ▁par
1094
+ - ▁order
1095
+ - ▁mom
1096
+ - gn
1097
+ - ▁though
1098
+ - ▁record
1099
+ - ▁miss
1100
+ - ▁dr
1101
+ - ▁es
1102
+ - ▁eight
1103
+ - ▁ever
1104
+ - ▁left
1105
+ - ▁example
1106
+ - ▁enough
1107
+ - osed
1108
+ - ▁claim
1109
+ - ank
1110
+ - con
1111
+ - ▁americ
1112
+ - ▁information
1113
+ - ▁arg
1114
+ - ▁full
1115
+ - nce
1116
+ - ▁consid
1117
+ - ▁working
1118
+ - ature
1119
+ - ▁
1120
+ - e
1121
+ - t
1122
+ - a
1123
+ - o
1124
+ - i
1125
+ - 'n'
1126
+ - s
1127
+ - r
1128
+ - h
1129
+ - l
1130
+ - d
1131
+ - u
1132
+ - c
1133
+ - m
1134
+ - 'y'
1135
+ - w
1136
+ - g
1137
+ - f
1138
+ - p
1139
+ - b
1140
+ - v
1141
+ - k
1142
+ - ''''
1143
+ - j
1144
+ - x
1145
+ - q
1146
+ - z
1147
+ decoding:
1148
+ strategy: greedy_batch
1149
+ greedy:
1150
+ max_symbols: 10
1151
+ beam:
1152
+ beam_size: 2
1153
+ return_best_hypothesis: false
1154
+ score_norm: true
1155
+ tsd_max_sym_exp: 50
1156
+ alsd_max_target_len: 2.0
1157
+ loss:
1158
+ loss_name: default
1159
+ warprnnt_numba_kwargs:
1160
+ fastemit_lambda: 0.0
1161
+ clamp: -1.0
1162
+ variational_noise:
1163
+ start_step: 0
1164
+ std: 0.0
1165
+ optim:
1166
+ name: adamw
1167
+ lr: 0.0025
1168
+ betas:
1169
+ - 0.9
1170
+ - 0.98
1171
+ weight_decay: 0.001
1172
+ sched:
1173
+ name: CosineAnnealing
1174
+ warmup_steps: 15000
1175
+ warmup_ratio: null
1176
+ min_lr: 1.0e-06
1177
+ labels:
1178
+ - <unk>
1179
+ - ▁t
1180
+ - ▁th
1181
+ - ▁a
1182
+ - ▁i
1183
+ - ▁the
1184
+ - re
1185
+ - ▁w
1186
+ - ▁s
1187
+ - ▁o
1188
+ - in
1189
+ - at
1190
+ - er
1191
+ - ou
1192
+ - nd
1193
+ - ▁c
1194
+ - ▁b
1195
+ - ▁h
1196
+ - 'on'
1197
+ - ▁m
1198
+ - ▁f
1199
+ - ing
1200
+ - ▁to
1201
+ - en
1202
+ - ▁p
1203
+ - ▁and
1204
+ - ▁d
1205
+ - es
1206
+ - or
1207
+ - an
1208
+ - ll
1209
+ - ▁y
1210
+ - ���l
1211
+ - ed
1212
+ - ▁of
1213
+ - ▁in
1214
+ - it
1215
+ - is
1216
+ - ▁you
1217
+ - ▁that
1218
+ - ar
1219
+ - ▁g
1220
+ - ▁n
1221
+ - as
1222
+ - om
1223
+ - ▁it
1224
+ - ic
1225
+ - ve
1226
+ - ▁e
1227
+ - ▁wh
1228
+ - ▁be
1229
+ - us
1230
+ - le
1231
+ - al
1232
+ - ion
1233
+ - ow
1234
+ - ▁we
1235
+ - ▁re
1236
+ - ▁is
1237
+ - ut
1238
+ - ot
1239
+ - ent
1240
+ - ▁on
1241
+ - et
1242
+ - ▁ha
1243
+ - ay
1244
+ - ct
1245
+ - ▁he
1246
+ - id
1247
+ - ▁for
1248
+ - ▁st
1249
+ - ver
1250
+ - ly
1251
+ - ro
1252
+ - ig
1253
+ - ▁so
1254
+ - ld
1255
+ - ▁this
1256
+ - ke
1257
+ - ▁u
1258
+ - se
1259
+ - all
1260
+ - st
1261
+ - ur
1262
+ - ce
1263
+ - ch
1264
+ - im
1265
+ - ith
1266
+ - ▁as
1267
+ - ▁k
1268
+ - ▁an
1269
+ - ▁was
1270
+ - ▁j
1271
+ - ▁with
1272
+ - ir
1273
+ - ▁go
1274
+ - ra
1275
+ - ▁do
1276
+ - ▁have
1277
+ - ▁li
1278
+ - ▁sh
1279
+ - ▁se
1280
+ - ▁they
1281
+ - ▁are
1282
+ - am
1283
+ - ht
1284
+ - ▁but
1285
+ - ation
1286
+ - ▁not
1287
+ - th
1288
+ - ▁r
1289
+ - ally
1290
+ - ad
1291
+ - ust
1292
+ - ▁or
1293
+ - ▁com
1294
+ - ould
1295
+ - ▁can
1296
+ - ill
1297
+ - ▁ne
1298
+ - ight
1299
+ - ▁ch
1300
+ - ▁de
1301
+ - ▁con
1302
+ - ▁at
1303
+ - ▁mo
1304
+ - ant
1305
+ - oo
1306
+ - il
1307
+ - ▁me
1308
+ - ▁what
1309
+ - ▁there
1310
+ - ter
1311
+ - pe
1312
+ - ▁ab
1313
+ - ▁su
1314
+ - ere
1315
+ - ck
1316
+ - ▁pro
1317
+ - ▁al
1318
+ - ▁fr
1319
+ - ▁kn
1320
+ - ▁all
1321
+ - ers
1322
+ - ▁like
1323
+ - ge
1324
+ - ▁ex
1325
+ - ▁som
1326
+ - ul
1327
+ - ▁your
1328
+ - ▁v
1329
+ - pp
1330
+ - use
1331
+ - ▁if
1332
+ - ess
1333
+ - ate
1334
+ - est
1335
+ - ▁know
1336
+ - out
1337
+ - if
1338
+ - ▁just
1339
+ - ment
1340
+ - qu
1341
+ - op
1342
+ - ain
1343
+ - ▁one
1344
+ - ol
1345
+ - ri
1346
+ - art
1347
+ - very
1348
+ - ▁wor
1349
+ - ive
1350
+ - ist
1351
+ - ▁my
1352
+ - nt
1353
+ - ab
1354
+ - ▁from
1355
+ - ort
1356
+ - ▁ma
1357
+ - ▁about
1358
+ - res
1359
+ - ity
1360
+ - ▁out
1361
+ - ▁bec
1362
+ - ▁le
1363
+ - our
1364
+ - od
1365
+ - and
1366
+ - ink
1367
+ - ie
1368
+ - ▁up
1369
+ - ind
1370
+ - os
1371
+ - un
1372
+ - ause
1373
+ - oug
1374
+ - um
1375
+ - ▁some
1376
+ - ▁int
1377
+ - ▁by
1378
+ - ▁pl
1379
+ - ▁get
1380
+ - el
1381
+ - ard
1382
+ - ▁when
1383
+ - ▁don
1384
+ - her
1385
+ - ▁will
1386
+ - ▁us
1387
+ - ▁would
1388
+ - ook
1389
+ - ies
1390
+ - ich
1391
+ - ▁because
1392
+ - ▁think
1393
+ - em
1394
+ - ▁pe
1395
+ - ▁his
1396
+ - ack
1397
+ - ▁then
1398
+ - ▁our
1399
+ - ide
1400
+ - ▁tim
1401
+ - ▁how
1402
+ - ven
1403
+ - ▁tr
1404
+ - ▁who
1405
+ - ▁them
1406
+ - ure
1407
+ - ▁ar
1408
+ - ▁ye
1409
+ - ▁more
1410
+ - ▁going
1411
+ - ect
1412
+ - ▁sa
1413
+ - ▁cl
1414
+ - ▁had
1415
+ - ▁now
1416
+ - ▁which
1417
+ - ▁here
1418
+ - ous
1419
+ - ▁their
1420
+ - ▁tw
1421
+ - so
1422
+ - ▁has
1423
+ - ud
1424
+ - ▁co
1425
+ - ▁ta
1426
+ - ound
1427
+ - ▁were
1428
+ - ast
1429
+ - ▁peop
1430
+ - ough
1431
+ - ▁no
1432
+ - ▁really
1433
+ - ▁any
1434
+ - ▁people
1435
+ - ▁want
1436
+ - ▁she
1437
+ - ▁en
1438
+ - ▁fa
1439
+ - ▁te
1440
+ - ame
1441
+ - ine
1442
+ - ▁qu
1443
+ - red
1444
+ - ▁im
1445
+ - ▁right
1446
+ - ther
1447
+ - ▁act
1448
+ - ▁thing
1449
+ - king
1450
+ - ose
1451
+ - ▁ad
1452
+ - ▁see
1453
+ - ▁time
1454
+ - ▁these
1455
+ - ci
1456
+ - one
1457
+ - ▁say
1458
+ - ▁also
1459
+ - ▁fe
1460
+ - per
1461
+ - ▁ag
1462
+ - ▁man
1463
+ - ore
1464
+ - ▁un
1465
+ - pt
1466
+ - ▁her
1467
+ - ▁look
1468
+ - ong
1469
+ - ice
1470
+ - ▁very
1471
+ - ff
1472
+ - ions
1473
+ - ▁comp
1474
+ - ▁did
1475
+ - itt
1476
+ - ▁well
1477
+ - ▁other
1478
+ - iv
1479
+ - ase
1480
+ - ree
1481
+ - hing
1482
+ - ▁lo
1483
+ - reat
1484
+ - ▁cont
1485
+ - ▁part
1486
+ - ▁into
1487
+ - nder
1488
+ - ▁been
1489
+ - are
1490
+ - ▁am
1491
+ - ans
1492
+ - ▁sp
1493
+ - ▁two
1494
+ - ue
1495
+ - ▁way
1496
+ - age
1497
+ - ▁where
1498
+ - ite
1499
+ - ▁dis
1500
+ - ▁than
1501
+ - ▁every
1502
+ - ▁pr
1503
+ - ▁po
1504
+ - ag
1505
+ - ▁need
1506
+ - ach
1507
+ - iff
1508
+ - ence
1509
+ - pl
1510
+ - own
1511
+ - ▁ac
1512
+ - ble
1513
+ - ▁over
1514
+ - iz
1515
+ - ▁work
1516
+ - ▁res
1517
+ - ▁make
1518
+ - ▁could
1519
+ - ▁off
1520
+ - ually
1521
+ - ▁ro
1522
+ - ▁back
1523
+ - able
1524
+ - ip
1525
+ - ry
1526
+ - ▁him
1527
+ - ▁cour
1528
+ - ber
1529
+ - ▁pre
1530
+ - ▁fir
1531
+ - ▁spe
1532
+ - ap
1533
+ - ars
1534
+ - ▁diff
1535
+ - ire
1536
+ - ▁somet
1537
+ - ▁imp
1538
+ - ▁those
1539
+ - ▁comm
1540
+ - ance
1541
+ - ick
1542
+ - ▁even
1543
+ - ated
1544
+ - way
1545
+ - sel
1546
+ - ▁let
1547
+ - ▁br
1548
+ - ty
1549
+ - ▁per
1550
+ - int
1551
+ - ▁first
1552
+ - ▁thr
1553
+ - ▁under
1554
+ - ah
1555
+ - ▁may
1556
+ - ▁cou
1557
+ - ▁new
1558
+ - ress
1559
+ - act
1560
+ - ▁gr
1561
+ - ep
1562
+ - ▁said
1563
+ - ations
1564
+ - ▁good
1565
+ - ace
1566
+ - ass
1567
+ - ▁does
1568
+ - orm
1569
+ - ish
1570
+ - ▁af
1571
+ - ving
1572
+ - co
1573
+ - ▁app
1574
+ - ▁lot
1575
+ - ▁things
1576
+ - ▁tra
1577
+ - ittle
1578
+ - ▁bl
1579
+ - ▁little
1580
+ - ▁mu
1581
+ - cess
1582
+ - fe
1583
+ - ome
1584
+ - ▁inc
1585
+ - ▁differe
1586
+ - ary
1587
+ - ical
1588
+ - ▁only
1589
+ - ult
1590
+ - ▁again
1591
+ - ▁got
1592
+ - ens
1593
+ - ▁gu
1594
+ - ▁kind
1595
+ - ▁much
1596
+ - ord
1597
+ - ▁through
1598
+ - ition
1599
+ - ild
1600
+ - ▁down
1601
+ - ▁actually
1602
+ - ▁something
1603
+ - ang
1604
+ - ru
1605
+ - ces
1606
+ - ▁fl
1607
+ - ile
1608
+ - ater
1609
+ - ▁ra
1610
+ - ▁take
1611
+ - ict
1612
+ - ign
1613
+ - ▁sc
1614
+ - vel
1615
+ - ▁bet
1616
+ - ▁tal
1617
+ - ▁yeah
1618
+ - ▁use
1619
+ - fore
1620
+ - ▁bu
1621
+ - ▁start
1622
+ - ory
1623
+ - be
1624
+ - ▁day
1625
+ - wn
1626
+ - xt
1627
+ - ia
1628
+ - ak
1629
+ - ▁after
1630
+ - ▁should
1631
+ - ▁fo
1632
+ - ▁ho
1633
+ - ▁hel
1634
+ - ▁ind
1635
+ - ▁uh
1636
+ - na
1637
+ - ial
1638
+ - other
1639
+ - ▁ke
1640
+ - ▁call
1641
+ - ▁most
1642
+ - ▁ok
1643
+ - ▁different
1644
+ - ▁em
1645
+ - ting
1646
+ - ple
1647
+ - ▁being
1648
+ - ▁bo
1649
+ - ning
1650
+ - ▁too
1651
+ - ors
1652
+ - ▁happ
1653
+ - ark
1654
+ - og
1655
+ - ▁help
1656
+ - ▁rem
1657
+ - du
1658
+ - ction
1659
+ - ood
1660
+ - ▁ser
1661
+ - ether
1662
+ - ious
1663
+ - ▁mean
1664
+ - ▁many
1665
+ - ▁court
1666
+ - ▁bel
1667
+ - ade
1668
+ - ▁la
1669
+ - ved
1670
+ - ▁des
1671
+ - ▁rec
1672
+ - ▁jo
1673
+ - ▁dec
1674
+ - ves
1675
+ - ▁before
1676
+ - ▁put
1677
+ - self
1678
+ - ▁point
1679
+ - te
1680
+ - ▁ev
1681
+ - form
1682
+ - ents
1683
+ - ▁add
1684
+ - ody
1685
+ - thing
1686
+ - ▁case
1687
+ - ▁pers
1688
+ - ▁cons
1689
+ - iss
1690
+ - ▁three
1691
+ - oth
1692
+ - ▁ph
1693
+ - ▁come
1694
+ - ▁find
1695
+ - ▁why
1696
+ - ull
1697
+ - ▁show
1698
+ - ▁bas
1699
+ - ▁great
1700
+ - ily
1701
+ - ▁rel
1702
+ - ▁sm
1703
+ - ▁its
1704
+ - ▁fact
1705
+ - ▁pos
1706
+ - ool
1707
+ - ments
1708
+ - ise
1709
+ - nds
1710
+ - ys
1711
+ - ▁try
1712
+ - ual
1713
+ - ful
1714
+ - erm
1715
+ - ▁inter
1716
+ - ons
1717
+ - ▁quest
1718
+ - ▁sub
1719
+ - we
1720
+ - vers
1721
+ - ▁supp
1722
+ - ▁feel
1723
+ - ▁same
1724
+ - ub
1725
+ - ates
1726
+ - urn
1727
+ - ert
1728
+ - ▁inv
1729
+ - day
1730
+ - ▁rep
1731
+ - igh
1732
+ - ▁sy
1733
+ - ▁inst
1734
+ - ▁long
1735
+ - ▁still
1736
+ - ▁okay
1737
+ - ft
1738
+ - ific
1739
+ - atch
1740
+ - ought
1741
+ - ath
1742
+ - ▁own
1743
+ - ▁made
1744
+ - ix
1745
+ - ced
1746
+ - ks
1747
+ - lic
1748
+ - ▁wr
1749
+ - de
1750
+ - ▁cr
1751
+ - ▁att
1752
+ - ▁ob
1753
+ - ▁world
1754
+ - ▁sure
1755
+ - ward
1756
+ - ▁bit
1757
+ - ▁life
1758
+ - ▁person
1759
+ - ▁pres
1760
+ - ph
1761
+ - ▁vide
1762
+ - ▁reg
1763
+ - ▁end
1764
+ - ject
1765
+ - ange
1766
+ - ▁fin
1767
+ - ied
1768
+ - pect
1769
+ - ▁didn
1770
+ - ▁around
1771
+ - ian
1772
+ - ▁car
1773
+ - ible
1774
+ - ▁sim
1775
+ - ever
1776
+ - ▁sch
1777
+ - ating
1778
+ - ▁pol
1779
+ - ▁set
1780
+ - ▁oh
1781
+ - cy
1782
+ - ▁real
1783
+ - ▁import
1784
+ - ▁count
1785
+ - ▁um
1786
+ - ▁next
1787
+ - cial
1788
+ - les
1789
+ - ▁hu
1790
+ - ▁acc
1791
+ - ▁might
1792
+ - ▁ent
1793
+ - ▁doing
1794
+ - ▁ins
1795
+ - ▁gen
1796
+ - ▁play
1797
+ - ▁cle
1798
+ - ▁another
1799
+ - ady
1800
+ - ular
1801
+ - ib
1802
+ - ways
1803
+ - ered
1804
+ - ility
1805
+ - ities
1806
+ - ▁op
1807
+ - ▁def
1808
+ - ▁years
1809
+ - ▁never
1810
+ - ower
1811
+ - ram
1812
+ - ▁tell
1813
+ - ▁sl
1814
+ - onna
1815
+ - ail
1816
+ - ren
1817
+ - ute
1818
+ - ▁gonna
1819
+ - ▁big
1820
+ - ▁give
1821
+ - der
1822
+ - ount
1823
+ - ▁ap
1824
+ - kes
1825
+ - ▁state
1826
+ - ▁cor
1827
+ - ▁min
1828
+ - ically
1829
+ - ▁mon
1830
+ - ▁fam
1831
+ - ▁important
1832
+ - ▁always
1833
+ - ▁high
1834
+ - ▁four
1835
+ - ▁gra
1836
+ - ▁ca
1837
+ - ▁stud
1838
+ - ▁dist
1839
+ - ▁talk
1840
+ - ▁num
1841
+ - ▁str
1842
+ - ▁today
1843
+ - ract
1844
+ - ▁while
1845
+ - ason
1846
+ - ▁iss
1847
+ - ▁sur
1848
+ - ▁char
1849
+ - ▁last
1850
+ - oy
1851
+ - ited
1852
+ - ▁exper
1853
+ - ▁place
1854
+ - ▁tri
1855
+ - ▁ear
1856
+ - ▁belie
1857
+ - ▁able
1858
+ - ▁underst
1859
+ - ▁che
1860
+ - ▁both
1861
+ - ug
1862
+ - ▁doesn
1863
+ - ▁keep
1864
+ - ▁happen
1865
+ - ings
1866
+ - iew
1867
+ - ather
1868
+ - ▁ass
1869
+ - ▁love
1870
+ - ative
1871
+ - av
1872
+ - ▁yes
1873
+ - ▁ele
1874
+ - ▁year
1875
+ - ▁such
1876
+ - ▁video
1877
+ - ness
1878
+ - ▁el
1879
+ - ▁trans
1880
+ - ▁five
1881
+ - ▁produ
1882
+ - ave
1883
+ - erest
1884
+ - als
1885
+ - body
1886
+ - cus
1887
+ - ▁found
1888
+ - atter
1889
+ - ▁eff
1890
+ - ▁god
1891
+ - ▁used
1892
+ - llow
1893
+ - ▁interest
1894
+ - ▁question
1895
+ - hip
1896
+ - ▁bus
1897
+ - ▁ask
1898
+ - ▁exam
1899
+ - ▁prov
1900
+ - lud
1901
+ - ▁form
1902
+ - ▁law
1903
+ - ense
1904
+ - ▁child
1905
+ - ▁gl
1906
+ - ne
1907
+ - ▁each
1908
+ - ▁understand
1909
+ - ▁care
1910
+ - stem
1911
+ - ▁med
1912
+ - ▁maybe
1913
+ - ably
1914
+ - ▁det
1915
+ - ▁coll
1916
+ - its
1917
+ - ▁commun
1918
+ - ▁hand
1919
+ - ▁'
1920
+ - ▁ref
1921
+ - ▁lear
1922
+ - ▁done
1923
+ - ▁gener
1924
+ - vern
1925
+ - ▁mr
1926
+ - ween
1927
+ - ▁better
1928
+ - ▁between
1929
+ - li
1930
+ - blem
1931
+ - ▁system
1932
+ - ertain
1933
+ - ▁school
1934
+ - ▁eas
1935
+ - ▁exp
1936
+ - ▁war
1937
+ - ention
1938
+ - ▁ty
1939
+ - ▁govern
1940
+ - ues
1941
+ - ▁problem
1942
+ - ▁plan
1943
+ - ac
1944
+ - ▁conf
1945
+ - ▁course
1946
+ - ouse
1947
+ - ▁mar
1948
+ - ▁stand
1949
+ - ▁sk
1950
+ - ▁seco
1951
+ - uring
1952
+ - ▁ed
1953
+ - ▁mem
1954
+ - ros
1955
+ - cri
1956
+ - ▁thought
1957
+ - cept
1958
+ - ▁partic
1959
+ - ▁test
1960
+ - olog
1961
+ - iness
1962
+ - ▁far
1963
+ - led
1964
+ - ▁col
1965
+ - ▁looking
1966
+ - ▁read
1967
+ - ▁whether
1968
+ - ▁word
1969
+ - me
1970
+ - ▁once
1971
+ - ize
1972
+ - ▁home
1973
+ - ▁requ
1974
+ - gg
1975
+ - ▁ide
1976
+ - ▁thank
1977
+ - ures
1978
+ - ▁called
1979
+ - ▁cur
1980
+ - ▁water
1981
+ - ▁frie
1982
+ - ▁side
1983
+ - ▁best
1984
+ - ▁number
1985
+ - oney
1986
+ - ▁turn
1987
+ - ock
1988
+ - ▁eng
1989
+ - ▁top
1990
+ - ▁open
1991
+ - ead
1992
+ - ▁everything
1993
+ - ▁term
1994
+ - ▁prob
1995
+ - ▁hard
1996
+ - ▁fun
1997
+ - ▁spec
1998
+ - ▁dire
1999
+ - ▁second
2000
+ - ▁pa
2001
+ - ▁build
2002
+ - ▁run
2003
+ - ▁sign
2004
+ - ▁reason
2005
+ - ▁inform
2006
+ - ▁watch
2007
+ - ution
2008
+ - ▁few
2009
+ - mo
2010
+ - ▁hum
2011
+ - ision
2012
+ - ▁ext
2013
+ - ▁tog
2014
+ - ▁conc
2015
+ - ▁thous
2016
+ - ▁thousand
2017
+ - ▁support
2018
+ - ▁together
2019
+ - ▁six
2020
+ - ps
2021
+ - ▁mark
2022
+ - ics
2023
+ - ▁includ
2024
+ - ef
2025
+ - ▁opp
2026
+ - ident
2027
+ - ▁anything
2028
+ - ▁met
2029
+ - ▁bre
2030
+ - ▁jud
2031
+ - ▁away
2032
+ - ▁old
2033
+ - ▁prog
2034
+ - ten
2035
+ - ▁book
2036
+ - ▁says
2037
+ - ▁seem
2038
+ - ▁contin
2039
+ - ▁process
2040
+ - ▁sing
2041
+ - ▁money
2042
+ - ▁having
2043
+ - ▁beg
2044
+ - ▁comple
2045
+ - ▁thir
2046
+ - ▁using
2047
+ - ▁ret
2048
+ - ger
2049
+ - ▁head
2050
+ - ▁cre
2051
+ - ▁poss
2052
+ - enty
2053
+ - ▁certain
2054
+ - ▁clear
2055
+ - ines
2056
+ - ▁wee
2057
+ - arch
2058
+ - ▁inf
2059
+ - ont
2060
+ - ▁sit
2061
+ - ▁lead
2062
+ - alth
2063
+ - ▁art
2064
+ - ross
2065
+ - ▁pub
2066
+ - ▁without
2067
+ - ▁pret
2068
+ - ▁getting
2069
+ - ient
2070
+ - ▁z
2071
+ - ▁wom
2072
+ - ▁power
2073
+ - ational
2074
+ - ner
2075
+ - ▁rest
2076
+ - ▁believe
2077
+ - ▁wa
2078
+ - ▁aut
2079
+ - ▁move
2080
+ - aim
2081
+ - ▁sort
2082
+ - idence
2083
+ - ▁creat
2084
+ - ▁expl
2085
+ - ▁name
2086
+ - ▁went
2087
+ - ▁eu
2088
+ - ▁change
2089
+ - ▁came
2090
+ - ▁pay
2091
+ - ices
2092
+ - ▁sin
2093
+ - ▁pur
2094
+ - ▁pass
2095
+ - ▁whole
2096
+ - ▁house
2097
+ - ▁hund
2098
+ - ▁hundred
2099
+ - ▁pretty
2100
+ - ▁trying
2101
+ - ▁ple
2102
+ - ▁allow
2103
+ - ▁compan
2104
+ - ▁government
2105
+ - ▁small
2106
+ - ▁light
2107
+ - ▁bra
2108
+ - ▁stu
2109
+ - aint
2110
+ - ▁ah
2111
+ - ▁prot
2112
+ - ets
2113
+ - ▁cent
2114
+ - velop
2115
+ - ▁family
2116
+ - ▁business
2117
+ - ety
2118
+ - ▁making
2119
+ - ▁list
2120
+ - ▁experi
2121
+ - eric
2122
+ - ▁follow
2123
+ - ately
2124
+ - ▁probably
2125
+ - ▁appe
2126
+ - ▁serv
2127
+ - ▁val
2128
+ - ▁leg
2129
+ - ▁resp
2130
+ - ▁develop
2131
+ - ready
2132
+ - ▁already
2133
+ - ▁sec
2134
+ - ell
2135
+ - ▁saying
2136
+ - ash
2137
+ - ▁hear
2138
+ - ▁loc
2139
+ - ▁adv
2140
+ - ▁pri
2141
+ - ret
2142
+ - ▁lar
2143
+ - ▁beh
2144
+ - ▁must
2145
+ - ▁hon
2146
+ - ▁means
2147
+ - ew
2148
+ - ▁par
2149
+ - ▁order
2150
+ - ▁mom
2151
+ - gn
2152
+ - ▁though
2153
+ - ▁record
2154
+ - ▁miss
2155
+ - ▁dr
2156
+ - ▁es
2157
+ - ▁eight
2158
+ - ▁ever
2159
+ - ▁left
2160
+ - ▁example
2161
+ - ▁enough
2162
+ - osed
2163
+ - ▁claim
2164
+ - ank
2165
+ - con
2166
+ - ▁americ
2167
+ - ▁information
2168
+ - ▁arg
2169
+ - ▁full
2170
+ - nce
2171
+ - ▁consid
2172
+ - ▁working
2173
+ - ature
2174
+ - ▁
2175
+ - e
2176
+ - t
2177
+ - a
2178
+ - o
2179
+ - i
2180
+ - 'n'
2181
+ - s
2182
+ - r
2183
+ - h
2184
+ - l
2185
+ - d
2186
+ - u
2187
+ - c
2188
+ - m
2189
+ - 'y'
2190
+ - w
2191
+ - g
2192
+ - f
2193
+ - p
2194
+ - b
2195
+ - v
2196
+ - k
2197
+ - ''''
2198
+ - j
2199
+ - x
2200
+ - q
2201
+ - z
2202
+ target: nemo.collections.asr.models.rnnt_bpe_models.EncDecRNNTBPEModel
2203
+ nemo_version: 1.19.0rc0
tokenizer.model ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:8f279c3951a1c280a99a108d07b429bd98c03c94ecd0270748bd7affca9c0817
3
+ size 259162
tokenizer.vocab ADDED
@@ -0,0 +1,1024 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ <unk> 0
2
+ ▁t -0
3
+ ▁th -1
4
+ ▁a -2
5
+ ▁i -3
6
+ ▁the -4
7
+ re -5
8
+ ▁w -6
9
+ ▁s -7
10
+ ▁o -8
11
+ in -9
12
+ at -10
13
+ er -11
14
+ ou -12
15
+ nd -13
16
+ ▁c -14
17
+ ▁b -15
18
+ ▁h -16
19
+ on -17
20
+ ▁m -18
21
+ ▁f -19
22
+ ing -20
23
+ ▁to -21
24
+ en -22
25
+ ▁p -23
26
+ ▁and -24
27
+ ▁d -25
28
+ es -26
29
+ or -27
30
+ an -28
31
+ ll -29
32
+ ▁y -30
33
+ ▁l -31
34
+ ed -32
35
+ ▁of -33
36
+ ▁in -34
37
+ it -35
38
+ is -36
39
+ ▁you -37
40
+ ▁that -38
41
+ ar -39
42
+ ▁g -40
43
+ ▁n -41
44
+ as -42
45
+ om -43
46
+ ▁it -44
47
+ ic -45
48
+ ve -46
49
+ ▁e -47
50
+ ▁wh -48
51
+ ▁be -49
52
+ us -50
53
+ le -51
54
+ al -52
55
+ ion -53
56
+ ow -54
57
+ ▁we -55
58
+ ▁re -56
59
+ ▁is -57
60
+ ut -58
61
+ ot -59
62
+ ent -60
63
+ ▁on -61
64
+ et -62
65
+ ▁ha -63
66
+ ay -64
67
+ ct -65
68
+ ▁he -66
69
+ id -67
70
+ ▁for -68
71
+ ▁st -69
72
+ ver -70
73
+ ly -71
74
+ ro -72
75
+ ig -73
76
+ ▁so -74
77
+ ld -75
78
+ ▁this -76
79
+ ke -77
80
+ ▁u -78
81
+ se -79
82
+ all -80
83
+ st -81
84
+ ur -82
85
+ ce -83
86
+ ch -84
87
+ im -85
88
+ ith -86
89
+ ▁as -87
90
+ ▁k -88
91
+ ▁an -89
92
+ ▁was -90
93
+ ▁j -91
94
+ ▁with -92
95
+ ir -93
96
+ ▁go -94
97
+ ra -95
98
+ ▁do -96
99
+ ▁have -97
100
+ ▁li -98
101
+ ▁sh -99
102
+ ▁se -100
103
+ ▁they -101
104
+ ▁are -102
105
+ am -103
106
+ ht -104
107
+ ▁but -105
108
+ ation -106
109
+ ▁not -107
110
+ th -108
111
+ ▁r -109
112
+ ally -110
113
+ ad -111
114
+ ust -112
115
+ ▁or -113
116
+ ▁com -114
117
+ ould -115
118
+ ▁can -116
119
+ ill -117
120
+ ▁ne -118
121
+ ight -119
122
+ ▁ch -120
123
+ ▁de -121
124
+ ▁con -122
125
+ ▁at -123
126
+ ▁mo -124
127
+ ant -125
128
+ oo -126
129
+ il -127
130
+ ▁me -128
131
+ ▁what -129
132
+ ▁there -130
133
+ ter -131
134
+ pe -132
135
+ ▁ab -133
136
+ ▁su -134
137
+ ere -135
138
+ ck -136
139
+ ▁pro -137
140
+ ▁al -138
141
+ ▁fr -139
142
+ ▁kn -140
143
+ ▁all -141
144
+ ers -142
145
+ ▁like -143
146
+ ge -144
147
+ ▁ex -145
148
+ ▁som -146
149
+ ul -147
150
+ ▁your -148
151
+ ▁v -149
152
+ pp -150
153
+ use -151
154
+ ▁if -152
155
+ ess -153
156
+ ate -154
157
+ est -155
158
+ ▁know -156
159
+ out -157
160
+ if -158
161
+ ▁just -159
162
+ ment -160
163
+ qu -161
164
+ op -162
165
+ ain -163
166
+ ▁one -164
167
+ ol -165
168
+ ri -166
169
+ art -167
170
+ very -168
171
+ ▁wor -169
172
+ ive -170
173
+ ist -171
174
+ ▁my -172
175
+ nt -173
176
+ ab -174
177
+ ▁from -175
178
+ ort -176
179
+ ▁ma -177
180
+ ▁about -178
181
+ res -179
182
+ ity -180
183
+ ▁out -181
184
+ ▁bec -182
185
+ ▁le -183
186
+ our -184
187
+ od -185
188
+ and -186
189
+ ink -187
190
+ ie -188
191
+ ▁up -189
192
+ ind -190
193
+ os -191
194
+ un -192
195
+ ause -193
196
+ oug -194
197
+ um -195
198
+ ▁some -196
199
+ ▁int -197
200
+ ▁by -198
201
+ ▁pl -199
202
+ ▁get -200
203
+ el -201
204
+ ard -202
205
+ ▁when -203
206
+ ▁don -204
207
+ her -205
208
+ ▁will -206
209
+ ▁us -207
210
+ ▁would -208
211
+ ook -209
212
+ ies -210
213
+ ich -211
214
+ ▁because -212
215
+ ▁think -213
216
+ em -214
217
+ ▁pe -215
218
+ ▁his -216
219
+ ack -217
220
+ ▁then -218
221
+ ▁our -219
222
+ ide -220
223
+ ▁tim -221
224
+ ▁how -222
225
+ ven -223
226
+ ▁tr -224
227
+ ▁who -225
228
+ ▁them -226
229
+ ure -227
230
+ ▁ar -228
231
+ ▁ye -229
232
+ ▁more -230
233
+ ▁going -231
234
+ ect -232
235
+ ▁sa -233
236
+ ▁cl -234
237
+ ▁had -235
238
+ ▁now -236
239
+ ▁which -237
240
+ ▁here -238
241
+ ous -239
242
+ ▁their -240
243
+ ▁tw -241
244
+ so -242
245
+ ▁has -243
246
+ ud -244
247
+ ▁co -245
248
+ ▁ta -246
249
+ ound -247
250
+ ▁were -248
251
+ ast -249
252
+ ▁peop -250
253
+ ough -251
254
+ ▁no -252
255
+ ▁really -253
256
+ ▁any -254
257
+ ▁people -255
258
+ ▁want -256
259
+ ▁she -257
260
+ ▁en -258
261
+ ▁fa -259
262
+ ▁te -260
263
+ ame -261
264
+ ine -262
265
+ ▁qu -263
266
+ red -264
267
+ ▁im -265
268
+ ▁right -266
269
+ ther -267
270
+ ▁act -268
271
+ ▁thing -269
272
+ king -270
273
+ ose -271
274
+ ▁ad -272
275
+ ▁see -273
276
+ ▁time -274
277
+ ▁these -275
278
+ ci -276
279
+ one -277
280
+ ▁say -278
281
+ ▁also -279
282
+ ▁fe -280
283
+ per -281
284
+ ▁ag -282
285
+ ▁man -283
286
+ ore -284
287
+ ▁un -285
288
+ pt -286
289
+ ▁her -287
290
+ ▁look -288
291
+ ong -289
292
+ ice -290
293
+ ▁very -291
294
+ ff -292
295
+ ions -293
296
+ ▁comp -294
297
+ ▁did -295
298
+ itt -296
299
+ ▁well -297
300
+ ▁other -298
301
+ iv -299
302
+ ase -300
303
+ ree -301
304
+ hing -302
305
+ ▁lo -303
306
+ reat -304
307
+ ▁cont -305
308
+ ▁part -306
309
+ ▁into -307
310
+ nder -308
311
+ ▁been -309
312
+ are -310
313
+ ▁am -311
314
+ ans -312
315
+ ▁sp -313
316
+ ▁two -314
317
+ ue -315
318
+ ▁way -316
319
+ age -317
320
+ ▁where -318
321
+ ite -319
322
+ ▁dis -320
323
+ ▁than -321
324
+ ▁every -322
325
+ ▁pr -323
326
+ ▁po -324
327
+ ag -325
328
+ ▁need -326
329
+ ach -327
330
+ iff -328
331
+ ence -329
332
+ pl -330
333
+ own -331
334
+ ▁ac -332
335
+ ble -333
336
+ ▁over -334
337
+ iz -335
338
+ ▁work -336
339
+ ▁res -337
340
+ ▁make -338
341
+ ▁could -339
342
+ ▁off -340
343
+ ually -341
344
+ ▁ro -342
345
+ ▁back -343
346
+ able -344
347
+ ip -345
348
+ ry -346
349
+ ▁him -347
350
+ ▁cour -348
351
+ ber -349
352
+ ▁pre -350
353
+ ▁fir -351
354
+ ▁spe -352
355
+ ap -353
356
+ ars -354
357
+ ▁diff -355
358
+ ire -356
359
+ ▁somet -357
360
+ ▁imp -358
361
+ ▁those -359
362
+ ▁comm -360
363
+ ance -361
364
+ ick -362
365
+ ▁even -363
366
+ ated -364
367
+ way -365
368
+ sel -366
369
+ ▁let -367
370
+ ▁br -368
371
+ ty -369
372
+ ▁per -370
373
+ int -371
374
+ ▁first -372
375
+ ▁thr -373
376
+ ▁under -374
377
+ ah -375
378
+ ▁may -376
379
+ ▁cou -377
380
+ ▁new -378
381
+ ress -379
382
+ act -380
383
+ ▁gr -381
384
+ ep -382
385
+ ▁said -383
386
+ ations -384
387
+ ▁good -385
388
+ ace -386
389
+ ass -387
390
+ ▁does -388
391
+ orm -389
392
+ ish -390
393
+ ▁af -391
394
+ ving -392
395
+ co -393
396
+ ▁app -394
397
+ ▁lot -395
398
+ ▁things -396
399
+ ▁tra -397
400
+ ittle -398
401
+ ▁bl -399
402
+ ▁little -400
403
+ ▁mu -401
404
+ cess -402
405
+ fe -403
406
+ ome -404
407
+ ▁inc -405
408
+ ▁differe -406
409
+ ary -407
410
+ ical -408
411
+ ▁only -409
412
+ ult -410
413
+ ▁again -411
414
+ ▁got -412
415
+ ens -413
416
+ ▁gu -414
417
+ ▁kind -415
418
+ ▁much -416
419
+ ord -417
420
+ ▁through -418
421
+ ition -419
422
+ ild -420
423
+ ▁down -421
424
+ ▁actually -422
425
+ ▁something -423
426
+ ang -424
427
+ ru -425
428
+ ces -426
429
+ ▁fl -427
430
+ ile -428
431
+ ater -429
432
+ ▁ra -430
433
+ ▁take -431
434
+ ict -432
435
+ ign -433
436
+ ▁sc -434
437
+ vel -435
438
+ ▁bet -436
439
+ ▁tal -437
440
+ ▁yeah -438
441
+ ▁use -439
442
+ fore -440
443
+ ▁bu -441
444
+ ▁start -442
445
+ ory -443
446
+ be -444
447
+ ▁day -445
448
+ wn -446
449
+ xt -447
450
+ ia -448
451
+ ak -449
452
+ ▁after -450
453
+ ▁should -451
454
+ ▁fo -452
455
+ ▁ho -453
456
+ ▁hel -454
457
+ ▁ind -455
458
+ ▁uh -456
459
+ na -457
460
+ ial -458
461
+ other -459
462
+ ▁ke -460
463
+ ▁call -461
464
+ ▁most -462
465
+ ▁ok -463
466
+ ▁different -464
467
+ ▁em -465
468
+ ting -466
469
+ ple -467
470
+ ▁being -468
471
+ ▁bo -469
472
+ ning -470
473
+ ▁too -471
474
+ ors -472
475
+ ▁happ -473
476
+ ark -474
477
+ og -475
478
+ ▁help -476
479
+ ▁rem -477
480
+ du -478
481
+ ction -479
482
+ ood -480
483
+ ▁ser -481
484
+ ether -482
485
+ ious -483
486
+ ▁mean -484
487
+ ▁many -485
488
+ ▁court -486
489
+ ▁bel -487
490
+ ade -488
491
+ ▁la -489
492
+ ved -490
493
+ ▁des -491
494
+ ▁rec -492
495
+ ▁jo -493
496
+ ▁dec -494
497
+ ves -495
498
+ ▁before -496
499
+ ▁put -497
500
+ self -498
501
+ ▁point -499
502
+ te -500
503
+ ▁ev -501
504
+ form -502
505
+ ents -503
506
+ ▁add -504
507
+ ody -505
508
+ thing -506
509
+ ▁case -507
510
+ ▁pers -508
511
+ ▁cons -509
512
+ iss -510
513
+ ▁three -511
514
+ oth -512
515
+ ▁ph -513
516
+ ▁come -514
517
+ ▁find -515
518
+ ▁why -516
519
+ ull -517
520
+ ▁show -518
521
+ ▁bas -519
522
+ ▁great -520
523
+ ily -521
524
+ ▁rel -522
525
+ ▁sm -523
526
+ ▁its -524
527
+ ▁fact -525
528
+ ▁pos -526
529
+ ool -527
530
+ ments -528
531
+ ise -529
532
+ nds -530
533
+ ys -531
534
+ ▁try -532
535
+ ual -533
536
+ ful -534
537
+ erm -535
538
+ ▁inter -536
539
+ ons -537
540
+ ▁quest -538
541
+ ▁sub -539
542
+ we -540
543
+ vers -541
544
+ ▁supp -542
545
+ ▁feel -543
546
+ ▁same -544
547
+ ub -545
548
+ ates -546
549
+ urn -547
550
+ ert -548
551
+ ▁inv -549
552
+ day -550
553
+ ▁rep -551
554
+ igh -552
555
+ ▁sy -553
556
+ ▁inst -554
557
+ ▁long -555
558
+ ▁still -556
559
+ ▁okay -557
560
+ ft -558
561
+ ific -559
562
+ atch -560
563
+ ought -561
564
+ ath -562
565
+ ▁own -563
566
+ ▁made -564
567
+ ix -565
568
+ ced -566
569
+ ks -567
570
+ lic -568
571
+ ▁wr -569
572
+ de -570
573
+ ▁cr -571
574
+ ▁att -572
575
+ ▁ob -573
576
+ ▁world -574
577
+ ▁sure -575
578
+ ward -576
579
+ ▁bit -577
580
+ ▁life -578
581
+ ▁person -579
582
+ ▁pres -580
583
+ ph -581
584
+ ▁vide -582
585
+ ▁reg -583
586
+ ▁end -584
587
+ ject -585
588
+ ange -586
589
+ ▁fin -587
590
+ ied -588
591
+ pect -589
592
+ ▁didn -590
593
+ ▁around -591
594
+ ian -592
595
+ ▁car -593
596
+ ible -594
597
+ ▁sim -595
598
+ ever -596
599
+ ▁sch -597
600
+ ating -598
601
+ ▁pol -599
602
+ ▁set -600
603
+ ▁oh -601
604
+ cy -602
605
+ ▁real -603
606
+ ▁import -604
607
+ ▁count -605
608
+ ▁um -606
609
+ ▁next -607
610
+ cial -608
611
+ les -609
612
+ ▁hu -610
613
+ ▁acc -611
614
+ ▁might -612
615
+ ▁ent -613
616
+ ▁doing -614
617
+ ▁ins -615
618
+ ▁gen -616
619
+ ▁play -617
620
+ ▁cle -618
621
+ ▁another -619
622
+ ady -620
623
+ ular -621
624
+ ib -622
625
+ ways -623
626
+ ered -624
627
+ ility -625
628
+ ities -626
629
+ ▁op -627
630
+ ▁def -628
631
+ ▁years -629
632
+ ▁never -630
633
+ ower -631
634
+ ram -632
635
+ ▁tell -633
636
+ ▁sl -634
637
+ onna -635
638
+ ail -636
639
+ ren -637
640
+ ute -638
641
+ ▁gonna -639
642
+ ▁big -640
643
+ ▁give -641
644
+ der -642
645
+ ount -643
646
+ ▁ap -644
647
+ kes -645
648
+ ▁state -646
649
+ ▁cor -647
650
+ ▁min -648
651
+ ically -649
652
+ ▁mon -650
653
+ ▁fam -651
654
+ ▁important -652
655
+ ▁always -653
656
+ ▁high -654
657
+ ▁four -655
658
+ ▁gra -656
659
+ ▁ca -657
660
+ ▁stud -658
661
+ ▁dist -659
662
+ ▁talk -660
663
+ ▁num -661
664
+ ▁str -662
665
+ ▁today -663
666
+ ract -664
667
+ ▁while -665
668
+ ason -666
669
+ ▁iss -667
670
+ ▁sur -668
671
+ ▁char -669
672
+ ▁last -670
673
+ oy -671
674
+ ited -672
675
+ ▁exper -673
676
+ ▁place -674
677
+ ▁tri -675
678
+ ▁ear -676
679
+ ▁belie -677
680
+ ▁able -678
681
+ ▁underst -679
682
+ ▁che -680
683
+ ▁both -681
684
+ ug -682
685
+ ▁doesn -683
686
+ ▁keep -684
687
+ ▁happen -685
688
+ ings -686
689
+ iew -687
690
+ ather -688
691
+ ▁ass -689
692
+ ▁love -690
693
+ ative -691
694
+ av -692
695
+ ▁yes -693
696
+ ▁ele -694
697
+ ▁year -695
698
+ ▁such -696
699
+ ▁video -697
700
+ ness -698
701
+ ▁el -699
702
+ ▁trans -700
703
+ ▁five -701
704
+ ▁produ -702
705
+ ave -703
706
+ erest -704
707
+ als -705
708
+ body -706
709
+ cus -707
710
+ ▁found -708
711
+ atter -709
712
+ ▁eff -710
713
+ ▁god -711
714
+ ▁used -712
715
+ llow -713
716
+ ▁interest -714
717
+ ▁question -715
718
+ hip -716
719
+ ▁bus -717
720
+ ▁ask -718
721
+ ▁exam -719
722
+ ▁prov -720
723
+ lud -721
724
+ ▁form -722
725
+ ▁law -723
726
+ ense -724
727
+ ▁child -725
728
+ ▁gl -726
729
+ ne -727
730
+ ▁each -728
731
+ ▁understand -729
732
+ ▁care -730
733
+ stem -731
734
+ ▁med -732
735
+ ▁maybe -733
736
+ ably -734
737
+ ▁det -735
738
+ ▁coll -736
739
+ its -737
740
+ ▁commun -738
741
+ ▁hand -739
742
+ ▁' -740
743
+ ▁ref -741
744
+ ▁lear -742
745
+ ▁done -743
746
+ ▁gener -744
747
+ vern -745
748
+ ▁mr -746
749
+ ween -747
750
+ ▁better -748
751
+ ▁between -749
752
+ li -750
753
+ blem -751
754
+ ▁system -752
755
+ ertain -753
756
+ ▁school -754
757
+ ▁eas -755
758
+ ▁exp -756
759
+ ▁war -757
760
+ ention -758
761
+ ▁ty -759
762
+ ▁govern -760
763
+ ues -761
764
+ ▁problem -762
765
+ ▁plan -763
766
+ ac -764
767
+ ▁conf -765
768
+ ▁course -766
769
+ ouse -767
770
+ ▁mar -768
771
+ ▁stand -769
772
+ ▁sk -770
773
+ ▁seco -771
774
+ uring -772
775
+ ▁ed -773
776
+ ▁mem -774
777
+ ros -775
778
+ cri -776
779
+ ▁thought -777
780
+ cept -778
781
+ ▁partic -779
782
+ ▁test -780
783
+ olog -781
784
+ iness -782
785
+ ▁far -783
786
+ led -784
787
+ ▁col -785
788
+ ▁looking -786
789
+ ▁read -787
790
+ ▁whether -788
791
+ ▁word -789
792
+ me -790
793
+ ▁once -791
794
+ ize -792
795
+ ▁home -793
796
+ ▁requ -794
797
+ gg -795
798
+ ▁ide -796
799
+ ▁thank -797
800
+ ures -798
801
+ ▁called -799
802
+ ▁cur -800
803
+ ▁water -801
804
+ ▁frie -802
805
+ ▁side -803
806
+ ▁best -804
807
+ ▁number -805
808
+ oney -806
809
+ ▁turn -807
810
+ ock -808
811
+ ▁eng -809
812
+ ▁top -810
813
+ ▁open -811
814
+ ead -812
815
+ ▁everything -813
816
+ ▁term -814
817
+ ▁prob -815
818
+ ▁hard -816
819
+ ▁fun -817
820
+ ▁spec -818
821
+ ▁dire -819
822
+ ▁second -820
823
+ ▁pa -821
824
+ ▁build -822
825
+ ▁run -823
826
+ ▁sign -824
827
+ ▁reason -825
828
+ ▁inform -826
829
+ ▁watch -827
830
+ ution -828
831
+ ▁few -829
832
+ mo -830
833
+ ▁hum -831
834
+ ision -832
835
+ ▁ext -833
836
+ ▁tog -834
837
+ ▁conc -835
838
+ ▁thous -836
839
+ ▁thousand -837
840
+ ▁support -838
841
+ ▁together -839
842
+ ▁six -840
843
+ ps -841
844
+ ▁mark -842
845
+ ics -843
846
+ ▁includ -844
847
+ ef -845
848
+ ▁opp -846
849
+ ident -847
850
+ ▁anything -848
851
+ ▁met -849
852
+ ▁bre -850
853
+ ▁jud -851
854
+ ▁away -852
855
+ ▁old -853
856
+ ▁prog -854
857
+ ten -855
858
+ ▁book -856
859
+ ▁says -857
860
+ ▁seem -858
861
+ ▁contin -859
862
+ ▁process -860
863
+ ▁sing -861
864
+ ▁money -862
865
+ ▁having -863
866
+ ▁beg -864
867
+ ▁comple -865
868
+ ▁thir -866
869
+ ▁using -867
870
+ ▁ret -868
871
+ ger -869
872
+ ▁head -870
873
+ ▁cre -871
874
+ ▁poss -872
875
+ enty -873
876
+ ▁certain -874
877
+ ▁clear -875
878
+ ines -876
879
+ ▁wee -877
880
+ arch -878
881
+ ▁inf -879
882
+ ont -880
883
+ ▁sit -881
884
+ ▁lead -882
885
+ alth -883
886
+ ▁art -884
887
+ ross -885
888
+ ▁pub -886
889
+ ▁without -887
890
+ ▁pret -888
891
+ ▁getting -889
892
+ ient -890
893
+ ▁z -891
894
+ ▁wom -892
895
+ ▁power -893
896
+ ational -894
897
+ ner -895
898
+ ▁rest -896
899
+ ▁believe -897
900
+ ▁wa -898
901
+ ▁aut -899
902
+ ▁move -900
903
+ aim -901
904
+ ▁sort -902
905
+ idence -903
906
+ ▁creat -904
907
+ ▁expl -905
908
+ ▁name -906
909
+ ▁went -907
910
+ ▁eu -908
911
+ ▁change -909
912
+ ▁came -910
913
+ ▁pay -911
914
+ ices -912
915
+ ▁sin -913
916
+ ▁pur -914
917
+ ▁pass -915
918
+ ▁whole -916
919
+ ▁house -917
920
+ ▁hund -918
921
+ ▁hundred -919
922
+ ▁pretty -920
923
+ ▁trying -921
924
+ ▁ple -922
925
+ ▁allow -923
926
+ ▁compan -924
927
+ ▁government -925
928
+ ▁small -926
929
+ ▁light -927
930
+ ▁bra -928
931
+ ▁stu -929
932
+ aint -930
933
+ ▁ah -931
934
+ ▁prot -932
935
+ ets -933
936
+ ▁cent -934
937
+ velop -935
938
+ ▁family -936
939
+ ▁business -937
940
+ ety -938
941
+ ▁making -939
942
+ ▁list -940
943
+ ▁experi -941
944
+ eric -942
945
+ ▁follow -943
946
+ ately -944
947
+ ▁probably -945
948
+ ▁appe -946
949
+ ▁serv -947
950
+ ▁val -948
951
+ ▁leg -949
952
+ ▁resp -950
953
+ ▁develop -951
954
+ ready -952
955
+ ▁already -953
956
+ ▁sec -954
957
+ ell -955
958
+ ▁saying -956
959
+ ash -957
960
+ ▁hear -958
961
+ ▁loc -959
962
+ ▁adv -960
963
+ ▁pri -961
964
+ ret -962
965
+ ▁lar -963
966
+ ▁beh -964
967
+ ▁must -965
968
+ ▁hon -966
969
+ ▁means -967
970
+ ew -968
971
+ ▁par -969
972
+ ▁order -970
973
+ ▁mom -971
974
+ gn -972
975
+ ▁though -973
976
+ ▁record -974
977
+ ▁miss -975
978
+ ▁dr -976
979
+ ▁es -977
980
+ ▁eight -978
981
+ ▁ever -979
982
+ ▁left -980
983
+ ▁example -981
984
+ ▁enough -982
985
+ osed -983
986
+ ▁claim -984
987
+ ank -985
988
+ con -986
989
+ ▁americ -987
990
+ ▁information -988
991
+ ▁arg -989
992
+ ▁full -990
993
+ nce -991
994
+ ▁consid -992
995
+ ▁working -993
996
+ ature -994
997
+ ▁ -995
998
+ e -996
999
+ t -997
1000
+ a -998
1001
+ o -999
1002
+ i -1000
1003
+ n -1001
1004
+ s -1002
1005
+ r -1003
1006
+ h -1004
1007
+ l -1005
1008
+ d -1006
1009
+ u -1007
1010
+ c -1008
1011
+ m -1009
1012
+ y -1010
1013
+ w -1011
1014
+ g -1012
1015
+ f -1013
1016
+ p -1014
1017
+ b -1015
1018
+ v -1016
1019
+ k -1017
1020
+ ' -1018
1021
+ j -1019
1022
+ x -1020
1023
+ q -1021
1024
+ z -1022
vocab.txt ADDED
@@ -0,0 +1,1023 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ t
2
+ th
3
+ a
4
+ i
5
+ the
6
+ ##re
7
+ w
8
+ s
9
+ o
10
+ ##in
11
+ ##at
12
+ ##er
13
+ ##ou
14
+ ##nd
15
+ c
16
+ b
17
+ h
18
+ ##on
19
+ m
20
+ f
21
+ ##ing
22
+ to
23
+ ##en
24
+ p
25
+ and
26
+ d
27
+ ##es
28
+ ##or
29
+ ##an
30
+ ##ll
31
+ y
32
+ l
33
+ ##ed
34
+ of
35
+ in
36
+ ##it
37
+ ##is
38
+ you
39
+ that
40
+ ##ar
41
+ g
42
+ n
43
+ ##as
44
+ ##om
45
+ it
46
+ ##ic
47
+ ##ve
48
+ e
49
+ wh
50
+ be
51
+ ##us
52
+ ##le
53
+ ##al
54
+ ##ion
55
+ ##ow
56
+ we
57
+ re
58
+ is
59
+ ##ut
60
+ ##ot
61
+ ##ent
62
+ on
63
+ ##et
64
+ ha
65
+ ##ay
66
+ ##ct
67
+ he
68
+ ##id
69
+ for
70
+ st
71
+ ##ver
72
+ ##ly
73
+ ##ro
74
+ ##ig
75
+ so
76
+ ##ld
77
+ this
78
+ ##ke
79
+ u
80
+ ##se
81
+ ##all
82
+ ##st
83
+ ##ur
84
+ ##ce
85
+ ##ch
86
+ ##im
87
+ ##ith
88
+ as
89
+ k
90
+ an
91
+ was
92
+ j
93
+ with
94
+ ##ir
95
+ go
96
+ ##ra
97
+ do
98
+ have
99
+ li
100
+ sh
101
+ se
102
+ they
103
+ are
104
+ ##am
105
+ ##ht
106
+ but
107
+ ##ation
108
+ not
109
+ ##th
110
+ r
111
+ ##ally
112
+ ##ad
113
+ ##ust
114
+ or
115
+ com
116
+ ##ould
117
+ can
118
+ ##ill
119
+ ne
120
+ ##ight
121
+ ch
122
+ de
123
+ con
124
+ at
125
+ mo
126
+ ##ant
127
+ ##oo
128
+ ##il
129
+ me
130
+ what
131
+ there
132
+ ##ter
133
+ ##pe
134
+ ab
135
+ su
136
+ ##ere
137
+ ##ck
138
+ pro
139
+ al
140
+ fr
141
+ kn
142
+ all
143
+ ##ers
144
+ like
145
+ ##ge
146
+ ex
147
+ som
148
+ ##ul
149
+ your
150
+ v
151
+ ##pp
152
+ ##use
153
+ if
154
+ ##ess
155
+ ##ate
156
+ ##est
157
+ know
158
+ ##out
159
+ ##if
160
+ just
161
+ ##ment
162
+ ##qu
163
+ ##op
164
+ ##ain
165
+ one
166
+ ##ol
167
+ ##ri
168
+ ##art
169
+ ##very
170
+ wor
171
+ ##ive
172
+ ##ist
173
+ my
174
+ ##nt
175
+ ##ab
176
+ from
177
+ ##ort
178
+ ma
179
+ about
180
+ ##res
181
+ ##ity
182
+ out
183
+ bec
184
+ le
185
+ ##our
186
+ ##od
187
+ ##and
188
+ ##ink
189
+ ##ie
190
+ up
191
+ ##ind
192
+ ##os
193
+ ##un
194
+ ##ause
195
+ ##oug
196
+ ##um
197
+ some
198
+ int
199
+ by
200
+ pl
201
+ get
202
+ ##el
203
+ ##ard
204
+ when
205
+ don
206
+ ##her
207
+ will
208
+ us
209
+ would
210
+ ##ook
211
+ ##ies
212
+ ##ich
213
+ because
214
+ think
215
+ ##em
216
+ pe
217
+ his
218
+ ##ack
219
+ then
220
+ our
221
+ ##ide
222
+ tim
223
+ how
224
+ ##ven
225
+ tr
226
+ who
227
+ them
228
+ ##ure
229
+ ar
230
+ ye
231
+ more
232
+ going
233
+ ##ect
234
+ sa
235
+ cl
236
+ had
237
+ now
238
+ which
239
+ here
240
+ ##ous
241
+ their
242
+ tw
243
+ ##so
244
+ has
245
+ ##ud
246
+ co
247
+ ta
248
+ ##ound
249
+ were
250
+ ##ast
251
+ peop
252
+ ##ough
253
+ no
254
+ really
255
+ any
256
+ people
257
+ want
258
+ she
259
+ en
260
+ fa
261
+ te
262
+ ##ame
263
+ ##ine
264
+ qu
265
+ ##red
266
+ im
267
+ right
268
+ ##ther
269
+ act
270
+ thing
271
+ ##king
272
+ ##ose
273
+ ad
274
+ see
275
+ time
276
+ these
277
+ ##ci
278
+ ##one
279
+ say
280
+ also
281
+ fe
282
+ ##per
283
+ ag
284
+ man
285
+ ##ore
286
+ un
287
+ ##pt
288
+ her
289
+ look
290
+ ##ong
291
+ ##ice
292
+ very
293
+ ##ff
294
+ ##ions
295
+ comp
296
+ did
297
+ ##itt
298
+ well
299
+ other
300
+ ##iv
301
+ ##ase
302
+ ##ree
303
+ ##hing
304
+ lo
305
+ ##reat
306
+ cont
307
+ part
308
+ into
309
+ ##nder
310
+ been
311
+ ##are
312
+ am
313
+ ##ans
314
+ sp
315
+ two
316
+ ##ue
317
+ way
318
+ ##age
319
+ where
320
+ ##ite
321
+ dis
322
+ than
323
+ every
324
+ pr
325
+ po
326
+ ##ag
327
+ need
328
+ ##ach
329
+ ##iff
330
+ ##ence
331
+ ##pl
332
+ ##own
333
+ ac
334
+ ##ble
335
+ over
336
+ ##iz
337
+ work
338
+ res
339
+ make
340
+ could
341
+ off
342
+ ##ually
343
+ ro
344
+ back
345
+ ##able
346
+ ##ip
347
+ ##ry
348
+ him
349
+ cour
350
+ ##ber
351
+ pre
352
+ fir
353
+ spe
354
+ ##ap
355
+ ##ars
356
+ diff
357
+ ##ire
358
+ somet
359
+ imp
360
+ those
361
+ comm
362
+ ##ance
363
+ ##ick
364
+ even
365
+ ##ated
366
+ ##way
367
+ ##sel
368
+ let
369
+ br
370
+ ##ty
371
+ per
372
+ ##int
373
+ first
374
+ thr
375
+ under
376
+ ##ah
377
+ may
378
+ cou
379
+ new
380
+ ##ress
381
+ ##act
382
+ gr
383
+ ##ep
384
+ said
385
+ ##ations
386
+ good
387
+ ##ace
388
+ ##ass
389
+ does
390
+ ##orm
391
+ ##ish
392
+ af
393
+ ##ving
394
+ ##co
395
+ app
396
+ lot
397
+ things
398
+ tra
399
+ ##ittle
400
+ bl
401
+ little
402
+ mu
403
+ ##cess
404
+ ##fe
405
+ ##ome
406
+ inc
407
+ differe
408
+ ##ary
409
+ ##ical
410
+ only
411
+ ##ult
412
+ again
413
+ got
414
+ ##ens
415
+ gu
416
+ kind
417
+ much
418
+ ##ord
419
+ through
420
+ ##ition
421
+ ##ild
422
+ down
423
+ actually
424
+ something
425
+ ##ang
426
+ ##ru
427
+ ##ces
428
+ fl
429
+ ##ile
430
+ ##ater
431
+ ra
432
+ take
433
+ ##ict
434
+ ##ign
435
+ sc
436
+ ##vel
437
+ bet
438
+ tal
439
+ yeah
440
+ use
441
+ ##fore
442
+ bu
443
+ start
444
+ ##ory
445
+ ##be
446
+ day
447
+ ##wn
448
+ ##xt
449
+ ##ia
450
+ ##ak
451
+ after
452
+ should
453
+ fo
454
+ ho
455
+ hel
456
+ ind
457
+ uh
458
+ ##na
459
+ ##ial
460
+ ##other
461
+ ke
462
+ call
463
+ most
464
+ ok
465
+ different
466
+ em
467
+ ##ting
468
+ ##ple
469
+ being
470
+ bo
471
+ ##ning
472
+ too
473
+ ##ors
474
+ happ
475
+ ##ark
476
+ ##og
477
+ help
478
+ rem
479
+ ##du
480
+ ##ction
481
+ ##ood
482
+ ser
483
+ ##ether
484
+ ##ious
485
+ mean
486
+ many
487
+ court
488
+ bel
489
+ ##ade
490
+ la
491
+ ##ved
492
+ des
493
+ rec
494
+ jo
495
+ dec
496
+ ##ves
497
+ before
498
+ put
499
+ ##self
500
+ point
501
+ ##te
502
+ ev
503
+ ##form
504
+ ##ents
505
+ add
506
+ ##ody
507
+ ##thing
508
+ case
509
+ pers
510
+ cons
511
+ ##iss
512
+ three
513
+ ##oth
514
+ ph
515
+ come
516
+ find
517
+ why
518
+ ##ull
519
+ show
520
+ bas
521
+ great
522
+ ##ily
523
+ rel
524
+ sm
525
+ its
526
+ fact
527
+ pos
528
+ ##ool
529
+ ##ments
530
+ ##ise
531
+ ##nds
532
+ ##ys
533
+ try
534
+ ##ual
535
+ ##ful
536
+ ##erm
537
+ inter
538
+ ##ons
539
+ quest
540
+ sub
541
+ ##we
542
+ ##vers
543
+ supp
544
+ feel
545
+ same
546
+ ##ub
547
+ ##ates
548
+ ##urn
549
+ ##ert
550
+ inv
551
+ ##day
552
+ rep
553
+ ##igh
554
+ sy
555
+ inst
556
+ long
557
+ still
558
+ okay
559
+ ##ft
560
+ ##ific
561
+ ##atch
562
+ ##ought
563
+ ##ath
564
+ own
565
+ made
566
+ ##ix
567
+ ##ced
568
+ ##ks
569
+ ##lic
570
+ wr
571
+ ##de
572
+ cr
573
+ att
574
+ ob
575
+ world
576
+ sure
577
+ ##ward
578
+ bit
579
+ life
580
+ person
581
+ pres
582
+ ##ph
583
+ vide
584
+ reg
585
+ end
586
+ ##ject
587
+ ##ange
588
+ fin
589
+ ##ied
590
+ ##pect
591
+ didn
592
+ around
593
+ ##ian
594
+ car
595
+ ##ible
596
+ sim
597
+ ##ever
598
+ sch
599
+ ##ating
600
+ pol
601
+ set
602
+ oh
603
+ ##cy
604
+ real
605
+ import
606
+ count
607
+ um
608
+ next
609
+ ##cial
610
+ ##les
611
+ hu
612
+ acc
613
+ might
614
+ ent
615
+ doing
616
+ ins
617
+ gen
618
+ play
619
+ cle
620
+ another
621
+ ##ady
622
+ ##ular
623
+ ##ib
624
+ ##ways
625
+ ##ered
626
+ ##ility
627
+ ##ities
628
+ op
629
+ def
630
+ years
631
+ never
632
+ ##ower
633
+ ##ram
634
+ tell
635
+ sl
636
+ ##onna
637
+ ##ail
638
+ ##ren
639
+ ##ute
640
+ gonna
641
+ big
642
+ give
643
+ ##der
644
+ ##ount
645
+ ap
646
+ ##kes
647
+ state
648
+ cor
649
+ min
650
+ ##ically
651
+ mon
652
+ fam
653
+ important
654
+ always
655
+ high
656
+ four
657
+ gra
658
+ ca
659
+ stud
660
+ dist
661
+ talk
662
+ num
663
+ str
664
+ today
665
+ ##ract
666
+ while
667
+ ##ason
668
+ iss
669
+ sur
670
+ char
671
+ last
672
+ ##oy
673
+ ##ited
674
+ exper
675
+ place
676
+ tri
677
+ ear
678
+ belie
679
+ able
680
+ underst
681
+ che
682
+ both
683
+ ##ug
684
+ doesn
685
+ keep
686
+ happen
687
+ ##ings
688
+ ##iew
689
+ ##ather
690
+ ass
691
+ love
692
+ ##ative
693
+ ##av
694
+ yes
695
+ ele
696
+ year
697
+ such
698
+ video
699
+ ##ness
700
+ el
701
+ trans
702
+ five
703
+ produ
704
+ ##ave
705
+ ##erest
706
+ ##als
707
+ ##body
708
+ ##cus
709
+ found
710
+ ##atter
711
+ eff
712
+ god
713
+ used
714
+ ##llow
715
+ interest
716
+ question
717
+ ##hip
718
+ bus
719
+ ask
720
+ exam
721
+ prov
722
+ ##lud
723
+ form
724
+ law
725
+ ##ense
726
+ child
727
+ gl
728
+ ##ne
729
+ each
730
+ understand
731
+ care
732
+ ##stem
733
+ med
734
+ maybe
735
+ ##ably
736
+ det
737
+ coll
738
+ ##its
739
+ commun
740
+ hand
741
+ '
742
+ ref
743
+ lear
744
+ done
745
+ gener
746
+ ##vern
747
+ mr
748
+ ##ween
749
+ better
750
+ between
751
+ ##li
752
+ ##blem
753
+ system
754
+ ##ertain
755
+ school
756
+ eas
757
+ exp
758
+ war
759
+ ##ention
760
+ ty
761
+ govern
762
+ ##ues
763
+ problem
764
+ plan
765
+ ##ac
766
+ conf
767
+ course
768
+ ##ouse
769
+ mar
770
+ stand
771
+ sk
772
+ seco
773
+ ##uring
774
+ ed
775
+ mem
776
+ ##ros
777
+ ##cri
778
+ thought
779
+ ##cept
780
+ partic
781
+ test
782
+ ##olog
783
+ ##iness
784
+ far
785
+ ##led
786
+ col
787
+ looking
788
+ read
789
+ whether
790
+ word
791
+ ##me
792
+ once
793
+ ##ize
794
+ home
795
+ requ
796
+ ##gg
797
+ ide
798
+ thank
799
+ ##ures
800
+ called
801
+ cur
802
+ water
803
+ frie
804
+ side
805
+ best
806
+ number
807
+ ##oney
808
+ turn
809
+ ##ock
810
+ eng
811
+ top
812
+ open
813
+ ##ead
814
+ everything
815
+ term
816
+ prob
817
+ hard
818
+ fun
819
+ spec
820
+ dire
821
+ second
822
+ pa
823
+ build
824
+ run
825
+ sign
826
+ reason
827
+ inform
828
+ watch
829
+ ##ution
830
+ few
831
+ ##mo
832
+ hum
833
+ ##ision
834
+ ext
835
+ tog
836
+ conc
837
+ thous
838
+ thousand
839
+ support
840
+ together
841
+ six
842
+ ##ps
843
+ mark
844
+ ##ics
845
+ includ
846
+ ##ef
847
+ opp
848
+ ##ident
849
+ anything
850
+ met
851
+ bre
852
+ jud
853
+ away
854
+ old
855
+ prog
856
+ ##ten
857
+ book
858
+ says
859
+ seem
860
+ contin
861
+ process
862
+ sing
863
+ money
864
+ having
865
+ beg
866
+ comple
867
+ thir
868
+ using
869
+ ret
870
+ ##ger
871
+ head
872
+ cre
873
+ poss
874
+ ##enty
875
+ certain
876
+ clear
877
+ ##ines
878
+ wee
879
+ ##arch
880
+ inf
881
+ ##ont
882
+ sit
883
+ lead
884
+ ##alth
885
+ art
886
+ ##ross
887
+ pub
888
+ without
889
+ pret
890
+ getting
891
+ ##ient
892
+ z
893
+ wom
894
+ power
895
+ ##ational
896
+ ##ner
897
+ rest
898
+ believe
899
+ wa
900
+ aut
901
+ move
902
+ ##aim
903
+ sort
904
+ ##idence
905
+ creat
906
+ expl
907
+ name
908
+ went
909
+ eu
910
+ change
911
+ came
912
+ pay
913
+ ##ices
914
+ sin
915
+ pur
916
+ pass
917
+ whole
918
+ house
919
+ hund
920
+ hundred
921
+ pretty
922
+ trying
923
+ ple
924
+ allow
925
+ compan
926
+ government
927
+ small
928
+ light
929
+ bra
930
+ stu
931
+ ##aint
932
+ ah
933
+ prot
934
+ ##ets
935
+ cent
936
+ ##velop
937
+ family
938
+ business
939
+ ##ety
940
+ making
941
+ list
942
+ experi
943
+ ##eric
944
+ follow
945
+ ##ately
946
+ probably
947
+ appe
948
+ serv
949
+ val
950
+ leg
951
+ resp
952
+ develop
953
+ ##ready
954
+ already
955
+ sec
956
+ ##ell
957
+ saying
958
+ ##ash
959
+ hear
960
+ loc
961
+ adv
962
+ pri
963
+ ##ret
964
+ lar
965
+ beh
966
+ must
967
+ hon
968
+ means
969
+ ##ew
970
+ par
971
+ order
972
+ mom
973
+ ##gn
974
+ though
975
+ record
976
+ miss
977
+ dr
978
+ es
979
+ eight
980
+ ever
981
+ left
982
+ example
983
+ enough
984
+ ##osed
985
+ claim
986
+ ##ank
987
+ ##con
988
+ americ
989
+ information
990
+ arg
991
+ full
992
+ ##nce
993
+ consid
994
+ working
995
+ ##ature
996
+
997
+ ##e
998
+ ##t
999
+ ##a
1000
+ ##o
1001
+ ##i
1002
+ ##n
1003
+ ##s
1004
+ ##r
1005
+ ##h
1006
+ ##l
1007
+ ##d
1008
+ ##u
1009
+ ##c
1010
+ ##m
1011
+ ##y
1012
+ ##w
1013
+ ##g
1014
+ ##f
1015
+ ##p
1016
+ ##b
1017
+ ##v
1018
+ ##k
1019
+ ##'
1020
+ ##j
1021
+ ##x
1022
+ ##q
1023
+ ##z