Hugging Face's logo

hf-internal-testing
/
udop-tokenizer

Transformers
Model card Files
xet
Community
ArthurZ HF Staff commited on
Commit
76ecccd
·
verified ·
1 Parent(s): 3588982

Delete special_tokens_map.json

Browse files
Files changed (1) hide show
  1. special_tokens_map.json +0 -1233
special_tokens_map.json DELETED
@@ -1,1233 +0,0 @@
1
- {
2
- "additional_special_tokens": [
3
- "<extra_id_0>",
4
- "<extra_id_1>",
5
- "<extra_id_2>",
6
- "<extra_id_3>",
7
- "<extra_id_4>",
8
- "<extra_id_5>",
9
- "<extra_id_6>",
10
- "<extra_id_7>",
11
- "<extra_id_8>",
12
- "<extra_id_9>",
13
- "<extra_id_10>",
14
- "<extra_id_11>",
15
- "<extra_id_12>",
16
- "<extra_id_13>",
17
- "<extra_id_14>",
18
- "<extra_id_15>",
19
- "<extra_id_16>",
20
- "<extra_id_17>",
21
- "<extra_id_18>",
22
- "<extra_id_19>",
23
- "<extra_id_20>",
24
- "<extra_id_21>",
25
- "<extra_id_22>",
26
- "<extra_id_23>",
27
- "<extra_id_24>",
28
- "<extra_id_25>",
29
- "<extra_id_26>",
30
- "<extra_id_27>",
31
- "<extra_id_28>",
32
- "<extra_id_29>",
33
- "<extra_id_30>",
34
- "<extra_id_31>",
35
- "<extra_id_32>",
36
- "<extra_id_33>",
37
- "<extra_id_34>",
38
- "<extra_id_35>",
39
- "<extra_id_36>",
40
- "<extra_id_37>",
41
- "<extra_id_38>",
42
- "<extra_id_39>",
43
- "<extra_id_40>",
44
- "<extra_id_41>",
45
- "<extra_id_42>",
46
- "<extra_id_43>",
47
- "<extra_id_44>",
48
- "<extra_id_45>",
49
- "<extra_id_46>",
50
- "<extra_id_47>",
51
- "<extra_id_48>",
52
- "<extra_id_49>",
53
- "<extra_id_50>",
54
- "<extra_id_51>",
55
- "<extra_id_52>",
56
- "<extra_id_53>",
57
- "<extra_id_54>",
58
- "<extra_id_55>",
59
- "<extra_id_56>",
60
- "<extra_id_57>",
61
- "<extra_id_58>",
62
- "<extra_id_59>",
63
- "<extra_id_60>",
64
- "<extra_id_61>",
65
- "<extra_id_62>",
66
- "<extra_id_63>",
67
- "<extra_id_64>",
68
- "<extra_id_65>",
69
- "<extra_id_66>",
70
- "<extra_id_67>",
71
- "<extra_id_68>",
72
- "<extra_id_69>",
73
- "<extra_id_70>",
74
- "<extra_id_71>",
75
- "<extra_id_72>",
76
- "<extra_id_73>",
77
- "<extra_id_74>",
78
- "<extra_id_75>",
79
- "<extra_id_76>",
80
- "<extra_id_77>",
81
- "<extra_id_78>",
82
- "<extra_id_79>",
83
- "<extra_id_80>",
84
- "<extra_id_81>",
85
- "<extra_id_82>",
86
- "<extra_id_83>",
87
- "<extra_id_84>",
88
- "<extra_id_85>",
89
- "<extra_id_86>",
90
- "<extra_id_87>",
91
- "<extra_id_88>",
92
- "<extra_id_89>",
93
- "<extra_id_90>",
94
- "<extra_id_91>",
95
- "<extra_id_92>",
96
- "<extra_id_93>",
97
- "<extra_id_94>",
98
- "<extra_id_95>",
99
- "<extra_id_96>",
100
- "<extra_id_97>",
101
- "<extra_id_98>",
102
- "<extra_id_99>",
103
- "<extra_l_id_0>",
104
- "<extra_l_id_1>",
105
- "<extra_l_id_2>",
106
- "<extra_l_id_3>",
107
- "<extra_l_id_4>",
108
- "<extra_l_id_5>",
109
- "<extra_l_id_6>",
110
- "<extra_l_id_7>",
111
- "<extra_l_id_8>",
112
- "<extra_l_id_9>",
113
- "<extra_l_id_10>",
114
- "<extra_l_id_11>",
115
- "<extra_l_id_12>",
116
- "<extra_l_id_13>",
117
- "<extra_l_id_14>",
118
- "<extra_l_id_15>",
119
- "<extra_l_id_16>",
120
- "<extra_l_id_17>",
121
- "<extra_l_id_18>",
122
- "<extra_l_id_19>",
123
- "<extra_l_id_20>",
124
- "<extra_l_id_21>",
125
- "<extra_l_id_22>",
126
- "<extra_l_id_23>",
127
- "<extra_l_id_24>",
128
- "<extra_l_id_25>",
129
- "<extra_l_id_26>",
130
- "<extra_l_id_27>",
131
- "<extra_l_id_28>",
132
- "<extra_l_id_29>",
133
- "<extra_l_id_30>",
134
- "<extra_l_id_31>",
135
- "<extra_l_id_32>",
136
- "<extra_l_id_33>",
137
- "<extra_l_id_34>",
138
- "<extra_l_id_35>",
139
- "<extra_l_id_36>",
140
- "<extra_l_id_37>",
141
- "<extra_l_id_38>",
142
- "<extra_l_id_39>",
143
- "<extra_l_id_40>",
144
- "<extra_l_id_41>",
145
- "<extra_l_id_42>",
146
- "<extra_l_id_43>",
147
- "<extra_l_id_44>",
148
- "<extra_l_id_45>",
149
- "<extra_l_id_46>",
150
- "<extra_l_id_47>",
151
- "<extra_l_id_48>",
152
- "<extra_l_id_49>",
153
- "<extra_l_id_50>",
154
- "<extra_l_id_51>",
155
- "<extra_l_id_52>",
156
- "<extra_l_id_53>",
157
- "<extra_l_id_54>",
158
- "<extra_l_id_55>",
159
- "<extra_l_id_56>",
160
- "<extra_l_id_57>",
161
- "<extra_l_id_58>",
162
- "<extra_l_id_59>",
163
- "<extra_l_id_60>",
164
- "<extra_l_id_61>",
165
- "<extra_l_id_62>",
166
- "<extra_l_id_63>",
167
- "<extra_l_id_64>",
168
- "<extra_l_id_65>",
169
- "<extra_l_id_66>",
170
- "<extra_l_id_67>",
171
- "<extra_l_id_68>",
172
- "<extra_l_id_69>",
173
- "<extra_l_id_70>",
174
- "<extra_l_id_71>",
175
- "<extra_l_id_72>",
176
- "<extra_l_id_73>",
177
- "<extra_l_id_74>",
178
- "<extra_l_id_75>",
179
- "<extra_l_id_76>",
180
- "<extra_l_id_77>",
181
- "<extra_l_id_78>",
182
- "<extra_l_id_79>",
183
- "<extra_l_id_80>",
184
- "<extra_l_id_81>",
185
- "<extra_l_id_82>",
186
- "<extra_l_id_83>",
187
- "<extra_l_id_84>",
188
- "<extra_l_id_85>",
189
- "<extra_l_id_86>",
190
- "<extra_l_id_87>",
191
- "<extra_l_id_88>",
192
- "<extra_l_id_89>",
193
- "<extra_l_id_90>",
194
- "<extra_l_id_91>",
195
- "<extra_l_id_92>",
196
- "<extra_l_id_93>",
197
- "<extra_l_id_94>",
198
- "<extra_l_id_95>",
199
- "<extra_l_id_96>",
200
- "<extra_l_id_97>",
201
- "<extra_l_id_98>",
202
- "<extra_l_id_99>",
203
- "</extra_l_id_0>",
204
- "</extra_l_id_1>",
205
- "</extra_l_id_2>",
206
- "</extra_l_id_3>",
207
- "</extra_l_id_4>",
208
- "</extra_l_id_5>",
209
- "</extra_l_id_6>",
210
- "</extra_l_id_7>",
211
- "</extra_l_id_8>",
212
- "</extra_l_id_9>",
213
- "</extra_l_id_10>",
214
- "</extra_l_id_11>",
215
- "</extra_l_id_12>",
216
- "</extra_l_id_13>",
217
- "</extra_l_id_14>",
218
- "</extra_l_id_15>",
219
- "</extra_l_id_16>",
220
- "</extra_l_id_17>",
221
- "</extra_l_id_18>",
222
- "</extra_l_id_19>",
223
- "</extra_l_id_20>",
224
- "</extra_l_id_21>",
225
- "</extra_l_id_22>",
226
- "</extra_l_id_23>",
227
- "</extra_l_id_24>",
228
- "</extra_l_id_25>",
229
- "</extra_l_id_26>",
230
- "</extra_l_id_27>",
231
- "</extra_l_id_28>",
232
- "</extra_l_id_29>",
233
- "</extra_l_id_30>",
234
- "</extra_l_id_31>",
235
- "</extra_l_id_32>",
236
- "</extra_l_id_33>",
237
- "</extra_l_id_34>",
238
- "</extra_l_id_35>",
239
- "</extra_l_id_36>",
240
- "</extra_l_id_37>",
241
- "</extra_l_id_38>",
242
- "</extra_l_id_39>",
243
- "</extra_l_id_40>",
244
- "</extra_l_id_41>",
245
- "</extra_l_id_42>",
246
- "</extra_l_id_43>",
247
- "</extra_l_id_44>",
248
- "</extra_l_id_45>",
249
- "</extra_l_id_46>",
250
- "</extra_l_id_47>",
251
- "</extra_l_id_48>",
252
- "</extra_l_id_49>",
253
- "</extra_l_id_50>",
254
- "</extra_l_id_51>",
255
- "</extra_l_id_52>",
256
- "</extra_l_id_53>",
257
- "</extra_l_id_54>",
258
- "</extra_l_id_55>",
259
- "</extra_l_id_56>",
260
- "</extra_l_id_57>",
261
- "</extra_l_id_58>",
262
- "</extra_l_id_59>",
263
- "</extra_l_id_60>",
264
- "</extra_l_id_61>",
265
- "</extra_l_id_62>",
266
- "</extra_l_id_63>",
267
- "</extra_l_id_64>",
268
- "</extra_l_id_65>",
269
- "</extra_l_id_66>",
270
- "</extra_l_id_67>",
271
- "</extra_l_id_68>",
272
- "</extra_l_id_69>",
273
- "</extra_l_id_70>",
274
- "</extra_l_id_71>",
275
- "</extra_l_id_72>",
276
- "</extra_l_id_73>",
277
- "</extra_l_id_74>",
278
- "</extra_l_id_75>",
279
- "</extra_l_id_76>",
280
- "</extra_l_id_77>",
281
- "</extra_l_id_78>",
282
- "</extra_l_id_79>",
283
- "</extra_l_id_80>",
284
- "</extra_l_id_81>",
285
- "</extra_l_id_82>",
286
- "</extra_l_id_83>",
287
- "</extra_l_id_84>",
288
- "</extra_l_id_85>",
289
- "</extra_l_id_86>",
290
- "</extra_l_id_87>",
291
- "</extra_l_id_88>",
292
- "</extra_l_id_89>",
293
- "</extra_l_id_90>",
294
- "</extra_l_id_91>",
295
- "</extra_l_id_92>",
296
- "</extra_l_id_93>",
297
- "</extra_l_id_94>",
298
- "</extra_l_id_95>",
299
- "</extra_l_id_96>",
300
- "</extra_l_id_97>",
301
- "</extra_l_id_98>",
302
- "</extra_l_id_99>",
303
- "<extra_t_id_0>",
304
- "<extra_t_id_1>",
305
- "<extra_t_id_2>",
306
- "<extra_t_id_3>",
307
- "<extra_t_id_4>",
308
- "<extra_t_id_5>",
309
- "<extra_t_id_6>",
310
- "<extra_t_id_7>",
311
- "<extra_t_id_8>",
312
- "<extra_t_id_9>",
313
- "<extra_t_id_10>",
314
- "<extra_t_id_11>",
315
- "<extra_t_id_12>",
316
- "<extra_t_id_13>",
317
- "<extra_t_id_14>",
318
- "<extra_t_id_15>",
319
- "<extra_t_id_16>",
320
- "<extra_t_id_17>",
321
- "<extra_t_id_18>",
322
- "<extra_t_id_19>",
323
- "<extra_t_id_20>",
324
- "<extra_t_id_21>",
325
- "<extra_t_id_22>",
326
- "<extra_t_id_23>",
327
- "<extra_t_id_24>",
328
- "<extra_t_id_25>",
329
- "<extra_t_id_26>",
330
- "<extra_t_id_27>",
331
- "<extra_t_id_28>",
332
- "<extra_t_id_29>",
333
- "<extra_t_id_30>",
334
- "<extra_t_id_31>",
335
- "<extra_t_id_32>",
336
- "<extra_t_id_33>",
337
- "<extra_t_id_34>",
338
- "<extra_t_id_35>",
339
- "<extra_t_id_36>",
340
- "<extra_t_id_37>",
341
- "<extra_t_id_38>",
342
- "<extra_t_id_39>",
343
- "<extra_t_id_40>",
344
- "<extra_t_id_41>",
345
- "<extra_t_id_42>",
346
- "<extra_t_id_43>",
347
- "<extra_t_id_44>",
348
- "<extra_t_id_45>",
349
- "<extra_t_id_46>",
350
- "<extra_t_id_47>",
351
- "<extra_t_id_48>",
352
- "<extra_t_id_49>",
353
- "<extra_t_id_50>",
354
- "<extra_t_id_51>",
355
- "<extra_t_id_52>",
356
- "<extra_t_id_53>",
357
- "<extra_t_id_54>",
358
- "<extra_t_id_55>",
359
- "<extra_t_id_56>",
360
- "<extra_t_id_57>",
361
- "<extra_t_id_58>",
362
- "<extra_t_id_59>",
363
- "<extra_t_id_60>",
364
- "<extra_t_id_61>",
365
- "<extra_t_id_62>",
366
- "<extra_t_id_63>",
367
- "<extra_t_id_64>",
368
- "<extra_t_id_65>",
369
- "<extra_t_id_66>",
370
- "<extra_t_id_67>",
371
- "<extra_t_id_68>",
372
- "<extra_t_id_69>",
373
- "<extra_t_id_70>",
374
- "<extra_t_id_71>",
375
- "<extra_t_id_72>",
376
- "<extra_t_id_73>",
377
- "<extra_t_id_74>",
378
- "<extra_t_id_75>",
379
- "<extra_t_id_76>",
380
- "<extra_t_id_77>",
381
- "<extra_t_id_78>",
382
- "<extra_t_id_79>",
383
- "<extra_t_id_80>",
384
- "<extra_t_id_81>",
385
- "<extra_t_id_82>",
386
- "<extra_t_id_83>",
387
- "<extra_t_id_84>",
388
- "<extra_t_id_85>",
389
- "<extra_t_id_86>",
390
- "<extra_t_id_87>",
391
- "<extra_t_id_88>",
392
- "<extra_t_id_89>",
393
- "<extra_t_id_90>",
394
- "<extra_t_id_91>",
395
- "<extra_t_id_92>",
396
- "<extra_t_id_93>",
397
- "<extra_t_id_94>",
398
- "<extra_t_id_95>",
399
- "<extra_t_id_96>",
400
- "<extra_t_id_97>",
401
- "<extra_t_id_98>",
402
- "<extra_t_id_99>",
403
- "</extra_t_id_0>",
404
- "</extra_t_id_1>",
405
- "</extra_t_id_2>",
406
- "</extra_t_id_3>",
407
- "</extra_t_id_4>",
408
- "</extra_t_id_5>",
409
- "</extra_t_id_6>",
410
- "</extra_t_id_7>",
411
- "</extra_t_id_8>",
412
- "</extra_t_id_9>",
413
- "</extra_t_id_10>",
414
- "</extra_t_id_11>",
415
- "</extra_t_id_12>",
416
- "</extra_t_id_13>",
417
- "</extra_t_id_14>",
418
- "</extra_t_id_15>",
419
- "</extra_t_id_16>",
420
- "</extra_t_id_17>",
421
- "</extra_t_id_18>",
422
- "</extra_t_id_19>",
423
- "</extra_t_id_20>",
424
- "</extra_t_id_21>",
425
- "</extra_t_id_22>",
426
- "</extra_t_id_23>",
427
- "</extra_t_id_24>",
428
- "</extra_t_id_25>",
429
- "</extra_t_id_26>",
430
- "</extra_t_id_27>",
431
- "</extra_t_id_28>",
432
- "</extra_t_id_29>",
433
- "</extra_t_id_30>",
434
- "</extra_t_id_31>",
435
- "</extra_t_id_32>",
436
- "</extra_t_id_33>",
437
- "</extra_t_id_34>",
438
- "</extra_t_id_35>",
439
- "</extra_t_id_36>",
440
- "</extra_t_id_37>",
441
- "</extra_t_id_38>",
442
- "</extra_t_id_39>",
443
- "</extra_t_id_40>",
444
- "</extra_t_id_41>",
445
- "</extra_t_id_42>",
446
- "</extra_t_id_43>",
447
- "</extra_t_id_44>",
448
- "</extra_t_id_45>",
449
- "</extra_t_id_46>",
450
- "</extra_t_id_47>",
451
- "</extra_t_id_48>",
452
- "</extra_t_id_49>",
453
- "</extra_t_id_50>",
454
- "</extra_t_id_51>",
455
- "</extra_t_id_52>",
456
- "</extra_t_id_53>",
457
- "</extra_t_id_54>",
458
- "</extra_t_id_55>",
459
- "</extra_t_id_56>",
460
- "</extra_t_id_57>",
461
- "</extra_t_id_58>",
462
- "</extra_t_id_59>",
463
- "</extra_t_id_60>",
464
- "</extra_t_id_61>",
465
- "</extra_t_id_62>",
466
- "</extra_t_id_63>",
467
- "</extra_t_id_64>",
468
- "</extra_t_id_65>",
469
- "</extra_t_id_66>",
470
- "</extra_t_id_67>",
471
- "</extra_t_id_68>",
472
- "</extra_t_id_69>",
473
- "</extra_t_id_70>",
474
- "</extra_t_id_71>",
475
- "</extra_t_id_72>",
476
- "</extra_t_id_73>",
477
- "</extra_t_id_74>",
478
- "</extra_t_id_75>",
479
- "</extra_t_id_76>",
480
- "</extra_t_id_77>",
481
- "</extra_t_id_78>",
482
- "</extra_t_id_79>",
483
- "</extra_t_id_80>",
484
- "</extra_t_id_81>",
485
- "</extra_t_id_82>",
486
- "</extra_t_id_83>",
487
- "</extra_t_id_84>",
488
- "</extra_t_id_85>",
489
- "</extra_t_id_86>",
490
- "</extra_t_id_87>",
491
- "</extra_t_id_88>",
492
- "</extra_t_id_89>",
493
- "</extra_t_id_90>",
494
- "</extra_t_id_91>",
495
- "</extra_t_id_92>",
496
- "</extra_t_id_93>",
497
- "</extra_t_id_94>",
498
- "</extra_t_id_95>",
499
- "</extra_t_id_96>",
500
- "</extra_t_id_97>",
501
- "</extra_t_id_98>",
502
- "</extra_t_id_99>",
503
- "<loc_0>",
504
- "<loc_1>",
505
- "<loc_2>",
506
- "<loc_3>",
507
- "<loc_4>",
508
- "<loc_5>",
509
- "<loc_6>",
510
- "<loc_7>",
511
- "<loc_8>",
512
- "<loc_9>",
513
- "<loc_10>",
514
- "<loc_11>",
515
- "<loc_12>",
516
- "<loc_13>",
517
- "<loc_14>",
518
- "<loc_15>",
519
- "<loc_16>",
520
- "<loc_17>",
521
- "<loc_18>",
522
- "<loc_19>",
523
- "<loc_20>",
524
- "<loc_21>",
525
- "<loc_22>",
526
- "<loc_23>",
527
- "<loc_24>",
528
- "<loc_25>",
529
- "<loc_26>",
530
- "<loc_27>",
531
- "<loc_28>",
532
- "<loc_29>",
533
- "<loc_30>",
534
- "<loc_31>",
535
- "<loc_32>",
536
- "<loc_33>",
537
- "<loc_34>",
538
- "<loc_35>",
539
- "<loc_36>",
540
- "<loc_37>",
541
- "<loc_38>",
542
- "<loc_39>",
543
- "<loc_40>",
544
- "<loc_41>",
545
- "<loc_42>",
546
- "<loc_43>",
547
- "<loc_44>",
548
- "<loc_45>",
549
- "<loc_46>",
550
- "<loc_47>",
551
- "<loc_48>",
552
- "<loc_49>",
553
- "<loc_50>",
554
- "<loc_51>",
555
- "<loc_52>",
556
- "<loc_53>",
557
- "<loc_54>",
558
- "<loc_55>",
559
- "<loc_56>",
560
- "<loc_57>",
561
- "<loc_58>",
562
- "<loc_59>",
563
- "<loc_60>",
564
- "<loc_61>",
565
- "<loc_62>",
566
- "<loc_63>",
567
- "<loc_64>",
568
- "<loc_65>",
569
- "<loc_66>",
570
- "<loc_67>",
571
- "<loc_68>",
572
- "<loc_69>",
573
- "<loc_70>",
574
- "<loc_71>",
575
- "<loc_72>",
576
- "<loc_73>",
577
- "<loc_74>",
578
- "<loc_75>",
579
- "<loc_76>",
580
- "<loc_77>",
581
- "<loc_78>",
582
- "<loc_79>",
583
- "<loc_80>",
584
- "<loc_81>",
585
- "<loc_82>",
586
- "<loc_83>",
587
- "<loc_84>",
588
- "<loc_85>",
589
- "<loc_86>",
590
- "<loc_87>",
591
- "<loc_88>",
592
- "<loc_89>",
593
- "<loc_90>",
594
- "<loc_91>",
595
- "<loc_92>",
596
- "<loc_93>",
597
- "<loc_94>",
598
- "<loc_95>",
599
- "<loc_96>",
600
- "<loc_97>",
601
- "<loc_98>",
602
- "<loc_99>",
603
- "<loc_100>",
604
- "<loc_101>",
605
- "<loc_102>",
606
- "<loc_103>",
607
- "<loc_104>",
608
- "<loc_105>",
609
- "<loc_106>",
610
- "<loc_107>",
611
- "<loc_108>",
612
- "<loc_109>",
613
- "<loc_110>",
614
- "<loc_111>",
615
- "<loc_112>",
616
- "<loc_113>",
617
- "<loc_114>",
618
- "<loc_115>",
619
- "<loc_116>",
620
- "<loc_117>",
621
- "<loc_118>",
622
- "<loc_119>",
623
- "<loc_120>",
624
- "<loc_121>",
625
- "<loc_122>",
626
- "<loc_123>",
627
- "<loc_124>",
628
- "<loc_125>",
629
- "<loc_126>",
630
- "<loc_127>",
631
- "<loc_128>",
632
- "<loc_129>",
633
- "<loc_130>",
634
- "<loc_131>",
635
- "<loc_132>",
636
- "<loc_133>",
637
- "<loc_134>",
638
- "<loc_135>",
639
- "<loc_136>",
640
- "<loc_137>",
641
- "<loc_138>",
642
- "<loc_139>",
643
- "<loc_140>",
644
- "<loc_141>",
645
- "<loc_142>",
646
- "<loc_143>",
647
- "<loc_144>",
648
- "<loc_145>",
649
- "<loc_146>",
650
- "<loc_147>",
651
- "<loc_148>",
652
- "<loc_149>",
653
- "<loc_150>",
654
- "<loc_151>",
655
- "<loc_152>",
656
- "<loc_153>",
657
- "<loc_154>",
658
- "<loc_155>",
659
- "<loc_156>",
660
- "<loc_157>",
661
- "<loc_158>",
662
- "<loc_159>",
663
- "<loc_160>",
664
- "<loc_161>",
665
- "<loc_162>",
666
- "<loc_163>",
667
- "<loc_164>",
668
- "<loc_165>",
669
- "<loc_166>",
670
- "<loc_167>",
671
- "<loc_168>",
672
- "<loc_169>",
673
- "<loc_170>",
674
- "<loc_171>",
675
- "<loc_172>",
676
- "<loc_173>",
677
- "<loc_174>",
678
- "<loc_175>",
679
- "<loc_176>",
680
- "<loc_177>",
681
- "<loc_178>",
682
- "<loc_179>",
683
- "<loc_180>",
684
- "<loc_181>",
685
- "<loc_182>",
686
- "<loc_183>",
687
- "<loc_184>",
688
- "<loc_185>",
689
- "<loc_186>",
690
- "<loc_187>",
691
- "<loc_188>",
692
- "<loc_189>",
693
- "<loc_190>",
694
- "<loc_191>",
695
- "<loc_192>",
696
- "<loc_193>",
697
- "<loc_194>",
698
- "<loc_195>",
699
- "<loc_196>",
700
- "<loc_197>",
701
- "<loc_198>",
702
- "<loc_199>",
703
- "<loc_200>",
704
- "<loc_201>",
705
- "<loc_202>",
706
- "<loc_203>",
707
- "<loc_204>",
708
- "<loc_205>",
709
- "<loc_206>",
710
- "<loc_207>",
711
- "<loc_208>",
712
- "<loc_209>",
713
- "<loc_210>",
714
- "<loc_211>",
715
- "<loc_212>",
716
- "<loc_213>",
717
- "<loc_214>",
718
- "<loc_215>",
719
- "<loc_216>",
720
- "<loc_217>",
721
- "<loc_218>",
722
- "<loc_219>",
723
- "<loc_220>",
724
- "<loc_221>",
725
- "<loc_222>",
726
- "<loc_223>",
727
- "<loc_224>",
728
- "<loc_225>",
729
- "<loc_226>",
730
- "<loc_227>",
731
- "<loc_228>",
732
- "<loc_229>",
733
- "<loc_230>",
734
- "<loc_231>",
735
- "<loc_232>",
736
- "<loc_233>",
737
- "<loc_234>",
738
- "<loc_235>",
739
- "<loc_236>",
740
- "<loc_237>",
741
- "<loc_238>",
742
- "<loc_239>",
743
- "<loc_240>",
744
- "<loc_241>",
745
- "<loc_242>",
746
- "<loc_243>",
747
- "<loc_244>",
748
- "<loc_245>",
749
- "<loc_246>",
750
- "<loc_247>",
751
- "<loc_248>",
752
- "<loc_249>",
753
- "<loc_250>",
754
- "<loc_251>",
755
- "<loc_252>",
756
- "<loc_253>",
757
- "<loc_254>",
758
- "<loc_255>",
759
- "<loc_256>",
760
- "<loc_257>",
761
- "<loc_258>",
762
- "<loc_259>",
763
- "<loc_260>",
764
- "<loc_261>",
765
- "<loc_262>",
766
- "<loc_263>",
767
- "<loc_264>",
768
- "<loc_265>",
769
- "<loc_266>",
770
- "<loc_267>",
771
- "<loc_268>",
772
- "<loc_269>",
773
- "<loc_270>",
774
- "<loc_271>",
775
- "<loc_272>",
776
- "<loc_273>",
777
- "<loc_274>",
778
- "<loc_275>",
779
- "<loc_276>",
780
- "<loc_277>",
781
- "<loc_278>",
782
- "<loc_279>",
783
- "<loc_280>",
784
- "<loc_281>",
785
- "<loc_282>",
786
- "<loc_283>",
787
- "<loc_284>",
788
- "<loc_285>",
789
- "<loc_286>",
790
- "<loc_287>",
791
- "<loc_288>",
792
- "<loc_289>",
793
- "<loc_290>",
794
- "<loc_291>",
795
- "<loc_292>",
796
- "<loc_293>",
797
- "<loc_294>",
798
- "<loc_295>",
799
- "<loc_296>",
800
- "<loc_297>",
801
- "<loc_298>",
802
- "<loc_299>",
803
- "<loc_300>",
804
- "<loc_301>",
805
- "<loc_302>",
806
- "<loc_303>",
807
- "<loc_304>",
808
- "<loc_305>",
809
- "<loc_306>",
810
- "<loc_307>",
811
- "<loc_308>",
812
- "<loc_309>",
813
- "<loc_310>",
814
- "<loc_311>",
815
- "<loc_312>",
816
- "<loc_313>",
817
- "<loc_314>",
818
- "<loc_315>",
819
- "<loc_316>",
820
- "<loc_317>",
821
- "<loc_318>",
822
- "<loc_319>",
823
- "<loc_320>",
824
- "<loc_321>",
825
- "<loc_322>",
826
- "<loc_323>",
827
- "<loc_324>",
828
- "<loc_325>",
829
- "<loc_326>",
830
- "<loc_327>",
831
- "<loc_328>",
832
- "<loc_329>",
833
- "<loc_330>",
834
- "<loc_331>",
835
- "<loc_332>",
836
- "<loc_333>",
837
- "<loc_334>",
838
- "<loc_335>",
839
- "<loc_336>",
840
- "<loc_337>",
841
- "<loc_338>",
842
- "<loc_339>",
843
- "<loc_340>",
844
- "<loc_341>",
845
- "<loc_342>",
846
- "<loc_343>",
847
- "<loc_344>",
848
- "<loc_345>",
849
- "<loc_346>",
850
- "<loc_347>",
851
- "<loc_348>",
852
- "<loc_349>",
853
- "<loc_350>",
854
- "<loc_351>",
855
- "<loc_352>",
856
- "<loc_353>",
857
- "<loc_354>",
858
- "<loc_355>",
859
- "<loc_356>",
860
- "<loc_357>",
861
- "<loc_358>",
862
- "<loc_359>",
863
- "<loc_360>",
864
- "<loc_361>",
865
- "<loc_362>",
866
- "<loc_363>",
867
- "<loc_364>",
868
- "<loc_365>",
869
- "<loc_366>",
870
- "<loc_367>",
871
- "<loc_368>",
872
- "<loc_369>",
873
- "<loc_370>",
874
- "<loc_371>",
875
- "<loc_372>",
876
- "<loc_373>",
877
- "<loc_374>",
878
- "<loc_375>",
879
- "<loc_376>",
880
- "<loc_377>",
881
- "<loc_378>",
882
- "<loc_379>",
883
- "<loc_380>",
884
- "<loc_381>",
885
- "<loc_382>",
886
- "<loc_383>",
887
- "<loc_384>",
888
- "<loc_385>",
889
- "<loc_386>",
890
- "<loc_387>",
891
- "<loc_388>",
892
- "<loc_389>",
893
- "<loc_390>",
894
- "<loc_391>",
895
- "<loc_392>",
896
- "<loc_393>",
897
- "<loc_394>",
898
- "<loc_395>",
899
- "<loc_396>",
900
- "<loc_397>",
901
- "<loc_398>",
902
- "<loc_399>",
903
- "<loc_400>",
904
- "<loc_401>",
905
- "<loc_402>",
906
- "<loc_403>",
907
- "<loc_404>",
908
- "<loc_405>",
909
- "<loc_406>",
910
- "<loc_407>",
911
- "<loc_408>",
912
- "<loc_409>",
913
- "<loc_410>",
914
- "<loc_411>",
915
- "<loc_412>",
916
- "<loc_413>",
917
- "<loc_414>",
918
- "<loc_415>",
919
- "<loc_416>",
920
- "<loc_417>",
921
- "<loc_418>",
922
- "<loc_419>",
923
- "<loc_420>",
924
- "<loc_421>",
925
- "<loc_422>",
926
- "<loc_423>",
927
- "<loc_424>",
928
- "<loc_425>",
929
- "<loc_426>",
930
- "<loc_427>",
931
- "<loc_428>",
932
- "<loc_429>",
933
- "<loc_430>",
934
- "<loc_431>",
935
- "<loc_432>",
936
- "<loc_433>",
937
- "<loc_434>",
938
- "<loc_435>",
939
- "<loc_436>",
940
- "<loc_437>",
941
- "<loc_438>",
942
- "<loc_439>",
943
- "<loc_440>",
944
- "<loc_441>",
945
- "<loc_442>",
946
- "<loc_443>",
947
- "<loc_444>",
948
- "<loc_445>",
949
- "<loc_446>",
950
- "<loc_447>",
951
- "<loc_448>",
952
- "<loc_449>",
953
- "<loc_450>",
954
- "<loc_451>",
955
- "<loc_452>",
956
- "<loc_453>",
957
- "<loc_454>",
958
- "<loc_455>",
959
- "<loc_456>",
960
- "<loc_457>",
961
- "<loc_458>",
962
- "<loc_459>",
963
- "<loc_460>",
964
- "<loc_461>",
965
- "<loc_462>",
966
- "<loc_463>",
967
- "<loc_464>",
968
- "<loc_465>",
969
- "<loc_466>",
970
- "<loc_467>",
971
- "<loc_468>",
972
- "<loc_469>",
973
- "<loc_470>",
974
- "<loc_471>",
975
- "<loc_472>",
976
- "<loc_473>",
977
- "<loc_474>",
978
- "<loc_475>",
979
- "<loc_476>",
980
- "<loc_477>",
981
- "<loc_478>",
982
- "<loc_479>",
983
- "<loc_480>",
984
- "<loc_481>",
985
- "<loc_482>",
986
- "<loc_483>",
987
- "<loc_484>",
988
- "<loc_485>",
989
- "<loc_486>",
990
- "<loc_487>",
991
- "<loc_488>",
992
- "<loc_489>",
993
- "<loc_490>",
994
- "<loc_491>",
995
- "<loc_492>",
996
- "<loc_493>",
997
- "<loc_494>",
998
- "<loc_495>",
999
- "<loc_496>",
1000
- "<loc_497>",
1001
- "<loc_498>",
1002
- "<loc_499>",
1003
- "<loc_500>",
1004
- "<other_0>",
1005
- "<other_1>",
1006
- "<other_2>",
1007
- "<other_3>",
1008
- "<other_4>",
1009
- "<other_5>",
1010
- "<other_6>",
1011
- "<other_7>",
1012
- "<other_8>",
1013
- "<other_9>",
1014
- "<other_10>",
1015
- "<other_11>",
1016
- "<other_12>",
1017
- "<other_13>",
1018
- "<other_14>",
1019
- "<other_15>",
1020
- "<other_16>",
1021
- "<other_17>",
1022
- "<other_18>",
1023
- "<other_19>",
1024
- "<other_20>",
1025
- "<other_21>",
1026
- "<other_22>",
1027
- "<other_23>",
1028
- "<other_24>",
1029
- "<other_25>",
1030
- "<other_26>",
1031
- "<other_27>",
1032
- "<other_28>",
1033
- "<other_29>",
1034
- "<other_30>",
1035
- "<other_31>",
1036
- "<other_32>",
1037
- "<other_33>",
1038
- "<other_34>",
1039
- "<other_35>",
1040
- "<other_36>",
1041
- "<other_37>",
1042
- "<other_38>",
1043
- "<other_39>",
1044
- "<other_40>",
1045
- "<other_41>",
1046
- "<other_42>",
1047
- "<other_43>",
1048
- "<other_44>",
1049
- "<other_45>",
1050
- "<other_46>",
1051
- "<other_47>",
1052
- "<other_48>",
1053
- "<other_49>",
1054
- "<other_50>",
1055
- "<other_51>",
1056
- "<other_52>",
1057
- "<other_53>",
1058
- "<other_54>",
1059
- "<other_55>",
1060
- "<other_56>",
1061
- "<other_57>",
1062
- "<other_58>",
1063
- "<other_59>",
1064
- "<other_60>",
1065
- "<other_61>",
1066
- "<other_62>",
1067
- "<other_63>",
1068
- "<other_64>",
1069
- "<other_65>",
1070
- "<other_66>",
1071
- "<other_67>",
1072
- "<other_68>",
1073
- "<other_69>",
1074
- "<other_70>",
1075
- "<other_71>",
1076
- "<other_72>",
1077
- "<other_73>",
1078
- "<other_74>",
1079
- "<other_75>",
1080
- "<other_76>",
1081
- "<other_77>",
1082
- "<other_78>",
1083
- "<other_79>",
1084
- "<other_80>",
1085
- "<other_81>",
1086
- "<other_82>",
1087
- "<other_83>",
1088
- "<other_84>",
1089
- "<other_85>",
1090
- "<other_86>",
1091
- "<other_87>",
1092
- "<other_88>",
1093
- "<other_89>",
1094
- "<other_90>",
1095
- "<other_91>",
1096
- "<other_92>",
1097
- "<other_93>",
1098
- "<other_94>",
1099
- "<other_95>",
1100
- "<other_96>",
1101
- "<other_97>",
1102
- "<other_98>",
1103
- "<other_99>",
1104
- "<other_100>",
1105
- "<other_101>",
1106
- "<other_102>",
1107
- "<other_103>",
1108
- "<other_104>",
1109
- "<other_105>",
1110
- "<other_106>",
1111
- "<other_107>",
1112
- "<other_108>",
1113
- "<other_109>",
1114
- "<other_110>",
1115
- "<other_111>",
1116
- "<other_112>",
1117
- "<other_113>",
1118
- "<other_114>",
1119
- "<other_115>",
1120
- "<other_116>",
1121
- "<other_117>",
1122
- "<other_118>",
1123
- "<other_119>",
1124
- "<other_120>",
1125
- "<other_121>",
1126
- "<other_122>",
1127
- "<other_123>",
1128
- "<other_124>",
1129
- "<other_125>",
1130
- "<other_126>",
1131
- "<other_127>",
1132
- "<other_128>",
1133
- "<other_129>",
1134
- "<other_130>",
1135
- "<other_131>",
1136
- "<other_132>",
1137
- "<other_133>",
1138
- "<other_134>",
1139
- "<other_135>",
1140
- "<other_136>",
1141
- "<other_137>",
1142
- "<other_138>",
1143
- "<other_139>",
1144
- "<other_140>",
1145
- "<other_141>",
1146
- "<other_142>",
1147
- "<other_143>",
1148
- "<other_144>",
1149
- "<other_145>",
1150
- "<other_146>",
1151
- "<other_147>",
1152
- "<other_148>",
1153
- "<other_149>",
1154
- "<other_150>",
1155
- "<other_151>",
1156
- "<other_152>",
1157
- "<other_153>",
1158
- "<other_154>",
1159
- "<other_155>",
1160
- "<other_156>",
1161
- "<other_157>",
1162
- "<other_158>",
1163
- "<other_159>",
1164
- "<other_160>",
1165
- "<other_161>",
1166
- "<other_162>",
1167
- "<other_163>",
1168
- "<other_164>",
1169
- "<other_165>",
1170
- "<other_166>",
1171
- "<other_167>",
1172
- "<other_168>",
1173
- "<other_169>",
1174
- "<other_170>",
1175
- "<other_171>",
1176
- "<other_172>",
1177
- "<other_173>",
1178
- "<other_174>",
1179
- "<other_175>",
1180
- "<other_176>",
1181
- "<other_177>",
1182
- "<other_178>",
1183
- "<other_179>",
1184
- "<other_180>",
1185
- "<other_181>",
1186
- "<other_182>",
1187
- "<other_183>",
1188
- "<other_184>",
1189
- "<other_185>",
1190
- "<other_186>",
1191
- "<other_187>",
1192
- "<other_188>",
1193
- "<other_189>",
1194
- "<other_190>",
1195
- "<other_191>",
1196
- "<other_192>",
1197
- "<other_193>",
1198
- "<other_194>",
1199
- "<other_195>",
1200
- "<other_196>",
1201
- "<other_197>",
1202
- "<other_198>",
1203
- "<other_199>"
1204
- ],
1205
- "eos_token": {
1206
- "content": "[NEW_EOS]",
1207
- "lstrip": true,
1208
- "normalized": false,
1209
- "rstrip": false,
1210
- "single_word": false
1211
- },
1212
- "pad_token": {
1213
- "content": "<pad>",
1214
- "lstrip": false,
1215
- "normalized": false,
1216
- "rstrip": false,
1217
- "single_word": false
1218
- },
1219
- "sep_token": {
1220
- "content": "</s>",
1221
- "lstrip": false,
1222
- "normalized": false,
1223
- "rstrip": false,
1224
- "single_word": false
1225
- },
1226
- "unk_token": {
1227
- "content": "<unk>",
1228
- "lstrip": false,
1229
- "normalized": false,
1230
- "rstrip": false,
1231
- "single_word": false
1232
- }
1233
- }