| { |
| "vocab_size": 3357, |
| "tokenizer_names": [ |
| "english_phoneme", |
| "text_ce_tokenizer", |
| "spanish_phoneme", |
| "german_phoneme", |
| "mandarin_phoneme", |
| "japanese_phoneme", |
| "portuguese_Brazilian_phoneme", |
| "hindi_phoneme", |
| "arabic_AE_chartokenizer", |
| "arabic_SA_chartokenizer", |
| "arabic_MSA_chartokenizer", |
| "french_chartokenizer", |
| "italian_chartokenizer", |
| "vietnamese_chartokenizer", |
| "korean_chartokenizer" |
| ], |
| "tokenizer_offsets": { |
| "english_phoneme": 0, |
| "text_ce_tokenizer": 96, |
| "spanish_phoneme": 480, |
| "german_phoneme": 583, |
| "mandarin_phoneme": 733, |
| "japanese_phoneme": 842, |
| "portuguese_Brazilian_phoneme": 1017, |
| "hindi_phoneme": 1128, |
| "arabic_AE_chartokenizer": 1329, |
| "arabic_SA_chartokenizer": 1493, |
| "arabic_MSA_chartokenizer": 1657, |
| "french_chartokenizer": 1821, |
| "italian_chartokenizer": 2205, |
| "vietnamese_chartokenizer": 2589, |
| "korean_chartokenizer": 2973 |
| }, |
| "num_tokens_per_tokenizer": { |
| "english_phoneme": 96, |
| "text_ce_tokenizer": 384, |
| "spanish_phoneme": 103, |
| "german_phoneme": 150, |
| "mandarin_phoneme": 109, |
| "japanese_phoneme": 175, |
| "portuguese_Brazilian_phoneme": 111, |
| "hindi_phoneme": 201, |
| "arabic_AE_chartokenizer": 164, |
| "arabic_SA_chartokenizer": 164, |
| "arabic_MSA_chartokenizer": 164, |
| "french_chartokenizer": 384, |
| "italian_chartokenizer": 384, |
| "vietnamese_chartokenizer": 384, |
| "korean_chartokenizer": 384 |
| }, |
| "tokenizer_pad_ids": { |
| "english_phoneme": 94, |
| "text_ce_tokenizer": 96, |
| "spanish_phoneme": 581, |
| "german_phoneme": 731, |
| "mandarin_phoneme": 840, |
| "japanese_phoneme": 1015, |
| "portuguese_Brazilian_phoneme": 1126, |
| "hindi_phoneme": 1327, |
| "arabic_AE_chartokenizer": 1491, |
| "arabic_SA_chartokenizer": 1655, |
| "arabic_MSA_chartokenizer": 1819, |
| "french_chartokenizer": 1821, |
| "italian_chartokenizer": 2205, |
| "vietnamese_chartokenizer": 2589, |
| "korean_chartokenizer": 2973 |
| }, |
| "tokens": [ |
| "!", |
| "\"", |
| "'", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "?", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "]", |
| "a", |
| "b", |
| "d", |
| "e", |
| "f", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "z", |
| "{", |
| "}", |
| "À", |
| "É", |
| "æ", |
| "ð", |
| "ŋ", |
| "ɑ", |
| "ɔ", |
| "ə", |
| "ɚ", |
| "ɛ", |
| "ɝ", |
| "ɡ", |
| "ɪ", |
| "ɹ", |
| "ʃ", |
| "ʊ", |
| "ʌ", |
| "ʒ", |
| "ˈ", |
| "ˌ", |
| "θ", |
| " ", |
| "<pad>", |
| "<oov>", |
| "<pad>", |
| "</s>", |
| "<unk>", |
| "\u0000", |
| "\u0001", |
| "\u0002", |
| "\u0003", |
| "\u0004", |
| "\u0005", |
| "\u0006", |
| "\u0007", |
| "\b", |
| "\t", |
| "\n", |
| "\u000b", |
| "\f", |
| "\r", |
| "\u000e", |
| "\u000f", |
| "\u0010", |
| "\u0011", |
| "\u0012", |
| "\u0013", |
| "\u0014", |
| "\u0015", |
| "\u0016", |
| "\u0017", |
| "\u0018", |
| "\u0019", |
| "\u001a", |
| "\u001b", |
| "\u001c", |
| "\u001d", |
| "\u001e", |
| "\u001f", |
| " ", |
| "!", |
| "\"", |
| "#", |
| "$", |
| "%", |
| "&", |
| "'", |
| "(", |
| ")", |
| "*", |
| "+", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "<", |
| "=", |
| ">", |
| "?", |
| "@", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "\\", |
| "]", |
| "^", |
| "_", |
| "`", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "|", |
| "}", |
| "~", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "
", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| " ", |
| "¡", |
| "¢", |
| "£", |
| "¤", |
| "¥", |
| "¦", |
| "§", |
| "¨", |
| "©", |
| "ª", |
| "«", |
| "¬", |
| "", |
| "®", |
| "¯", |
| "°", |
| "±", |
| "²", |
| "³", |
| "´", |
| "µ", |
| "¶", |
| "·", |
| "¸", |
| "¹", |
| "º", |
| "»", |
| "¼", |
| "½", |
| "¾", |
| "¿", |
| "À", |
| "Á", |
| "Â", |
| "Ã", |
| "Ä", |
| "Å", |
| "Æ", |
| "Ç", |
| "È", |
| "É", |
| "Ê", |
| "Ë", |
| "Ì", |
| "Í", |
| "Î", |
| "Ï", |
| "Ð", |
| "Ñ", |
| "Ò", |
| "Ó", |
| "Ô", |
| "Õ", |
| "Ö", |
| "×", |
| "Ø", |
| "Ù", |
| "Ú", |
| "Û", |
| "Ü", |
| "Ý", |
| "Þ", |
| "ß", |
| "à", |
| "á", |
| "â", |
| "ã", |
| "ä", |
| "å", |
| "æ", |
| "ç", |
| "è", |
| "é", |
| "ê", |
| "ë", |
| "ì", |
| "í", |
| "î", |
| "ï", |
| "ð", |
| "ñ", |
| "ò", |
| "ó", |
| "ô", |
| "õ", |
| "ö", |
| "÷", |
| "ø", |
| "ù", |
| "ú", |
| "û", |
| "ü", |
| "ý", |
| "þ", |
| "ÿ", |
| "<extra_id_0>", |
| "<extra_id_1>", |
| "<extra_id_2>", |
| "<extra_id_3>", |
| "<extra_id_4>", |
| "<extra_id_5>", |
| "<extra_id_6>", |
| "<extra_id_7>", |
| "<extra_id_8>", |
| "<extra_id_9>", |
| "<extra_id_10>", |
| "<extra_id_11>", |
| "<extra_id_12>", |
| "<extra_id_13>", |
| "<extra_id_14>", |
| "<extra_id_15>", |
| "<extra_id_16>", |
| "<extra_id_17>", |
| "<extra_id_18>", |
| "<extra_id_19>", |
| "<extra_id_20>", |
| "<extra_id_21>", |
| "<extra_id_22>", |
| "<extra_id_23>", |
| "<extra_id_24>", |
| "<extra_id_25>", |
| "<extra_id_26>", |
| "<extra_id_27>", |
| "<extra_id_28>", |
| "<extra_id_29>", |
| "<extra_id_30>", |
| "<extra_id_31>", |
| "<extra_id_32>", |
| "<extra_id_33>", |
| "<extra_id_34>", |
| "<extra_id_35>", |
| "<extra_id_36>", |
| "<extra_id_37>", |
| "<extra_id_38>", |
| "<extra_id_39>", |
| "<extra_id_40>", |
| "<extra_id_41>", |
| "<extra_id_42>", |
| "<extra_id_43>", |
| "<extra_id_44>", |
| "<extra_id_45>", |
| "<extra_id_46>", |
| "<extra_id_47>", |
| "<extra_id_48>", |
| "<extra_id_49>", |
| "<extra_id_50>", |
| "<extra_id_51>", |
| "<extra_id_52>", |
| "<extra_id_53>", |
| "<extra_id_54>", |
| "<extra_id_55>", |
| "<extra_id_56>", |
| "<extra_id_57>", |
| "<extra_id_58>", |
| "<extra_id_59>", |
| "<extra_id_60>", |
| "<extra_id_61>", |
| "<extra_id_62>", |
| "<extra_id_63>", |
| "<extra_id_64>", |
| "<extra_id_65>", |
| "<extra_id_66>", |
| "<extra_id_67>", |
| "<extra_id_68>", |
| "<extra_id_69>", |
| "<extra_id_70>", |
| "<extra_id_71>", |
| "<extra_id_72>", |
| "<extra_id_73>", |
| "<extra_id_74>", |
| "<extra_id_75>", |
| "<extra_id_76>", |
| "<extra_id_77>", |
| "<extra_id_78>", |
| "<extra_id_79>", |
| "<extra_id_80>", |
| "<extra_id_81>", |
| "<extra_id_82>", |
| "<extra_id_83>", |
| "<extra_id_84>", |
| "<extra_id_85>", |
| "<extra_id_86>", |
| "<extra_id_87>", |
| "<extra_id_88>", |
| "<extra_id_89>", |
| "<extra_id_90>", |
| "<extra_id_91>", |
| "<extra_id_92>", |
| "<extra_id_93>", |
| "<extra_id_94>", |
| "<extra_id_95>", |
| "<extra_id_96>", |
| "<extra_id_97>", |
| "<extra_id_98>", |
| "<extra_id_99>", |
| "<extra_id_100>", |
| "<extra_id_101>", |
| "<extra_id_102>", |
| "<extra_id_103>", |
| "<extra_id_104>", |
| "<extra_id_105>", |
| "<extra_id_106>", |
| "<extra_id_107>", |
| "<extra_id_108>", |
| "<extra_id_109>", |
| "<extra_id_110>", |
| "<extra_id_111>", |
| "<extra_id_112>", |
| "<extra_id_113>", |
| "<extra_id_114>", |
| "<extra_id_115>", |
| "<extra_id_116>", |
| "<extra_id_117>", |
| "<extra_id_118>", |
| "<extra_id_119>", |
| "<extra_id_120>", |
| "<extra_id_121>", |
| "<extra_id_122>", |
| "<extra_id_123>", |
| "<extra_id_124>", |
| "!", |
| "\"", |
| "'", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "]", |
| "a", |
| "b", |
| "d", |
| "e", |
| "f", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "r", |
| "s", |
| "t", |
| "u", |
| "w", |
| "x", |
| "{", |
| "}", |
| "¡", |
| "«", |
| "»", |
| "¿", |
| "Á", |
| "Ç", |
| "É", |
| "Í", |
| "Î", |
| "Ñ", |
| "Ó", |
| "Ö", |
| "Ú", |
| "Ü", |
| "Ý", |
| "ð", |
| "ŋ", |
| "ɛ", |
| "ɟ", |
| "ɡ", |
| "ɣ", |
| "ɪ", |
| "ɲ", |
| "ɾ", |
| "ʃ", |
| "ʊ", |
| "ʎ", |
| "ʒ", |
| "ʝ", |
| "ˈ", |
| "ˌ", |
| "ː", |
| "̯", |
| "͡", |
| "β", |
| "θ", |
| "‹", |
| "›", |
| " ", |
| "<pad>", |
| "<oov>", |
| "!", |
| "\"", |
| "#A", |
| "#B", |
| "#C", |
| "#D", |
| "#E", |
| "#F", |
| "#G", |
| "#H", |
| "#I", |
| "#J", |
| "#K", |
| "#L", |
| "#M", |
| "#N", |
| "#O", |
| "#P", |
| "#Q", |
| "#R", |
| "#S", |
| "#T", |
| "#U", |
| "#V", |
| "#W", |
| "#X", |
| "#Y", |
| "#Z", |
| "#a", |
| "#b", |
| "#c", |
| "#d", |
| "#e", |
| "#f", |
| "#g", |
| "#h", |
| "#i", |
| "#j", |
| "#k", |
| "#l", |
| "#m", |
| "#n", |
| "#o", |
| "#p", |
| "#q", |
| "#r", |
| "#s", |
| "#t", |
| "#u", |
| "#v", |
| "#w", |
| "#x", |
| "#y", |
| "#z", |
| "#Ä", |
| "#Å", |
| "#Ö", |
| "#Ü", |
| "#ß", |
| "#à", |
| "#á", |
| "#ä", |
| "#å", |
| "#ç", |
| "#è", |
| "#é", |
| "#ê", |
| "#ë", |
| "#í", |
| "#ó", |
| "#ö", |
| "#ø", |
| "#ü", |
| "'", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| "1", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "a", |
| "b", |
| "d", |
| "e", |
| "f", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "}", |
| "«", |
| "»", |
| "ç", |
| "ð", |
| "ø", |
| "ŋ", |
| "œ", |
| "ɐ", |
| "ɑ", |
| "ɒ", |
| "ɔ", |
| "ə", |
| "ɛ", |
| "ɜ", |
| "ɡ", |
| "ɪ", |
| "ɹ", |
| "ɾ", |
| "ʃ", |
| "ʊ", |
| "ʌ", |
| "ʒ", |
| "ˈ", |
| "ˌ", |
| "ː", |
| "̃", |
| "θ", |
| "‒", |
| "–", |
| "—", |
| "‘", |
| "‚", |
| "“", |
| "„", |
| "‹", |
| "›", |
| " ", |
| "<pad>", |
| "<oov>", |
| " ", |
| "a", |
| "ai", |
| "au", |
| "e", |
| "ei", |
| "f", |
| "i", |
| "j", |
| "k", |
| "kʰ", |
| "l", |
| "m", |
| "n", |
| "o", |
| "ou", |
| "p", |
| "pʰ", |
| "s", |
| "t", |
| "ts", |
| "tsʰ", |
| "tɕ", |
| "tɕʰ", |
| "tʰ", |
| "u", |
| "w", |
| "x", |
| "y", |
| "ŋ", |
| "ɕ", |
| "ə", |
| "ɚ", |
| "ɛ", |
| "ɤ", |
| "ɥ", |
| "ʂ", |
| "ʈʂ", |
| "ʈʂʰ", |
| "ʊ", |
| "ʐ", |
| "#1", |
| "#2", |
| "#3", |
| "#4", |
| "#5", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "'", |
| ",", |
| "。", |
| "?", |
| "!", |
| ";", |
| ":", |
| "、", |
| "‘", |
| "’", |
| "“", |
| "”", |
| "(", |
| ")", |
| "【", |
| "】", |
| "「", |
| "」", |
| "《", |
| "》", |
| ",", |
| ".", |
| "!", |
| "?", |
| "-", |
| ":", |
| ";", |
| "/", |
| "\"", |
| "(", |
| ")", |
| "[", |
| "]", |
| "{", |
| "}", |
| "<pad>", |
| "<oov>", |
| " ", |
| "0", |
| "1", |
| "ァ", |
| "ア", |
| "ィ", |
| "イ", |
| "ゥ", |
| "ウ", |
| "ェ", |
| "エ", |
| "ォ", |
| "オ", |
| "カ", |
| "ガ", |
| "キ", |
| "ギ", |
| "ク", |
| "グ", |
| "ケ", |
| "ゲ", |
| "コ", |
| "ゴ", |
| "サ", |
| "ザ", |
| "シ", |
| "ジ", |
| "ス", |
| "ズ", |
| "セ", |
| "ゼ", |
| "ソ", |
| "ゾ", |
| "タ", |
| "ダ", |
| "チ", |
| "ヂ", |
| "ッ", |
| "ツ", |
| "ヅ", |
| "テ", |
| "デ", |
| "ト", |
| "ド", |
| "ナ", |
| "ニ", |
| "ヌ", |
| "ネ", |
| "ノ", |
| "ハ", |
| "バ", |
| "パ", |
| "ヒ", |
| "ビ", |
| "ピ", |
| "フ", |
| "ブ", |
| "プ", |
| "ヘ", |
| "ベ", |
| "ペ", |
| "ホ", |
| "ボ", |
| "ポ", |
| "マ", |
| "ミ", |
| "ム", |
| "メ", |
| "モ", |
| "ャ", |
| "ヤ", |
| "ュ", |
| "ユ", |
| "ョ", |
| "ヨ", |
| "ラ", |
| "リ", |
| "ル", |
| "レ", |
| "ロ", |
| "ヮ", |
| "ワ", |
| "ヲ", |
| "ン", |
| "ヴ", |
| "ヵ", |
| "ヶ", |
| "ー", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "!", |
| "\"", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "{", |
| "}", |
| "«", |
| "»", |
| "•", |
| "‥", |
| "…", |
| "‹", |
| "›", |
| "※", |
| "◦", |
| "、", |
| "。", |
| "〃", |
| "〈", |
| "〉", |
| "《", |
| "》", |
| "「", |
| "」", |
| "『", |
| "』", |
| "【", |
| "】", |
| "〒", |
| "〓", |
| "〔", |
| "〕", |
| "〖", |
| "〗", |
| "〘", |
| "〙", |
| "〚", |
| "〛", |
| "〜", |
| "〽", |
| "・", |
| "・・・", |
| "ー", |
| "﹅", |
| "﹆", |
| "!", |
| "*", |
| "?", |
| "⦅", |
| "⦆", |
| "<pad>", |
| "<oov>", |
| "!", |
| "\"", |
| "#A", |
| "#B", |
| "#C", |
| "#D", |
| "#E", |
| "#F", |
| "#G", |
| "#H", |
| "#I", |
| "#J", |
| "#K", |
| "#L", |
| "#M", |
| "#N", |
| "#O", |
| "#P", |
| "#Q", |
| "#R", |
| "#S", |
| "#T", |
| "#U", |
| "#V", |
| "#W", |
| "#X", |
| "#Y", |
| "#Z", |
| "#À", |
| "#Á", |
| "#Â", |
| "#Ã", |
| "#Ç", |
| "#É", |
| "#Ê", |
| "#Í", |
| "#Ó", |
| "#Ô", |
| "#Õ", |
| "#Ú", |
| "#Ü", |
| "'", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "a", |
| "b", |
| "d", |
| "e", |
| "f", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "}", |
| "ð", |
| "õ", |
| "ĩ", |
| "ŋ", |
| "ũ", |
| "ɐ", |
| "ɑ", |
| "ɒ", |
| "ɔ", |
| "ə", |
| "ɛ", |
| "ɜ", |
| "ɡ", |
| "ɪ", |
| "ɲ", |
| "ɹ", |
| "ɾ", |
| "ʁ", |
| "ʃ", |
| "ʊ", |
| "ʌ", |
| "ʎ", |
| "ʒ", |
| "ʲ", |
| "ˈ", |
| "ˌ", |
| "ː", |
| "̃", |
| "θ", |
| "ẽ", |
| " ", |
| "<pad>", |
| "<oov>", |
| "!", |
| "\"", |
| "'", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "?", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "]", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "z", |
| "{", |
| "}", |
| "À", |
| "É", |
| "ã", |
| "æ", |
| "ð", |
| "õ", |
| "ĩ", |
| "ŋ", |
| "ũ", |
| "ɑ", |
| "ɔ", |
| "ɖ", |
| "ə", |
| "ɚ", |
| "ɛ", |
| "ɝ", |
| "ɟ", |
| "ɡ", |
| "ɣ", |
| "ɪ", |
| "ɭ", |
| "ɲ", |
| "ɳ", |
| "ɹ", |
| "ɾ", |
| "ʂ", |
| "ʃ", |
| "ʈ", |
| "ʊ", |
| "ʋ", |
| "ʌ", |
| "ʒ", |
| "ʰ", |
| "ˈ", |
| "ˌ", |
| "ː", |
| "̃", |
| "̩", |
| "θ", |
| "χ", |
| "ँ", |
| "ं", |
| "ः", |
| "अ", |
| "आ", |
| "इ", |
| "ई", |
| "उ", |
| "ऊ", |
| "ऋ", |
| "ऌ", |
| "ऍ", |
| "ऎ", |
| "ए", |
| "ऐ", |
| "ऑ", |
| "ओ", |
| "औ", |
| "क", |
| "ख", |
| "ग", |
| "घ", |
| "ङ", |
| "च", |
| "छ", |
| "ज", |
| "झ", |
| "ञ", |
| "ट", |
| "ठ", |
| "ड", |
| "ढ", |
| "ण", |
| "त", |
| "थ", |
| "द", |
| "ध", |
| "न", |
| "ऩ", |
| "प", |
| "फ", |
| "ब", |
| "भ", |
| "म", |
| "य", |
| "र", |
| "ऱ", |
| "ल", |
| "ळ", |
| "ऴ", |
| "व", |
| "श", |
| "ष", |
| "स", |
| "ह", |
| "ऺ", |
| "़", |
| "ऽ", |
| "ा", |
| "ि", |
| "ी", |
| "ु", |
| "ू", |
| "ृ", |
| "ॅ", |
| "ॆ", |
| "े", |
| "ै", |
| "ॉ", |
| "ॊ", |
| "ो", |
| "ौ", |
| "्", |
| "ॐ", |
| "॓", |
| "ॠ", |
| "ॡ", |
| "ॢ", |
| "।", |
| "॥", |
| "॰", |
| "ẽ", |
| " ", |
| "<pad>", |
| "<oov>", |
| " ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "'", |
| "!", |
| "\"", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "{", |
| "}", |
| "،", |
| "؛", |
| "؟", |
| "<pad>", |
| "<oov>", |
| " ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "'", |
| "!", |
| "\"", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "{", |
| "}", |
| "،", |
| "؛", |
| "؟", |
| "<pad>", |
| "<oov>", |
| " ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "ء", |
| "آ", |
| "أ", |
| "إ", |
| "ؤ", |
| "ئ", |
| "ا", |
| "ب", |
| "ة", |
| "ت", |
| "ث", |
| "ج", |
| "ح", |
| "خ", |
| "د", |
| "ذ", |
| "ر", |
| "ز", |
| "س", |
| "ش", |
| "ص", |
| "ض", |
| "ط", |
| "ظ", |
| "ع", |
| "غ", |
| "ف", |
| "ق", |
| "ك", |
| "ل", |
| "م", |
| "ن", |
| "ه", |
| "و", |
| "ى", |
| "ي", |
| "ً", |
| "ٌ", |
| "ٍ", |
| "َ", |
| "ُ", |
| "ِ", |
| "ّ", |
| "ٰ", |
| "ْ", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "'", |
| "!", |
| "\"", |
| "(", |
| ")", |
| ",", |
| "-", |
| ".", |
| "/", |
| ":", |
| ";", |
| "?", |
| "[", |
| "]", |
| "{", |
| "}", |
| "،", |
| "؛", |
| "؟", |
| "<pad>", |
| "<oov>", |
| "<pad>", |
| "</s>", |
| "<unk>", |
| "\u0000", |
| "\u0001", |
| "\u0002", |
| "\u0003", |
| "\u0004", |
| "\u0005", |
| "\u0006", |
| "\u0007", |
| "\b", |
| "\t", |
| "\n", |
| "\u000b", |
| "\f", |
| "\r", |
| "\u000e", |
| "\u000f", |
| "\u0010", |
| "\u0011", |
| "\u0012", |
| "\u0013", |
| "\u0014", |
| "\u0015", |
| "\u0016", |
| "\u0017", |
| "\u0018", |
| "\u0019", |
| "\u001a", |
| "\u001b", |
| "\u001c", |
| "\u001d", |
| "\u001e", |
| "\u001f", |
| " ", |
| "!", |
| "\"", |
| "#", |
| "$", |
| "%", |
| "&", |
| "'", |
| "(", |
| ")", |
| "*", |
| "+", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "<", |
| "=", |
| ">", |
| "?", |
| "@", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "\\", |
| "]", |
| "^", |
| "_", |
| "`", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "|", |
| "}", |
| "~", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "
", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| " ", |
| "¡", |
| "¢", |
| "£", |
| "¤", |
| "¥", |
| "¦", |
| "§", |
| "¨", |
| "©", |
| "ª", |
| "«", |
| "¬", |
| "", |
| "®", |
| "¯", |
| "°", |
| "±", |
| "²", |
| "³", |
| "´", |
| "µ", |
| "¶", |
| "·", |
| "¸", |
| "¹", |
| "º", |
| "»", |
| "¼", |
| "½", |
| "¾", |
| "¿", |
| "À", |
| "Á", |
| "Â", |
| "Ã", |
| "Ä", |
| "Å", |
| "Æ", |
| "Ç", |
| "È", |
| "É", |
| "Ê", |
| "Ë", |
| "Ì", |
| "Í", |
| "Î", |
| "Ï", |
| "Ð", |
| "Ñ", |
| "Ò", |
| "Ó", |
| "Ô", |
| "Õ", |
| "Ö", |
| "×", |
| "Ø", |
| "Ù", |
| "Ú", |
| "Û", |
| "Ü", |
| "Ý", |
| "Þ", |
| "ß", |
| "à", |
| "á", |
| "â", |
| "ã", |
| "ä", |
| "å", |
| "æ", |
| "ç", |
| "è", |
| "é", |
| "ê", |
| "ë", |
| "ì", |
| "í", |
| "î", |
| "ï", |
| "ð", |
| "ñ", |
| "ò", |
| "ó", |
| "ô", |
| "õ", |
| "ö", |
| "÷", |
| "ø", |
| "ù", |
| "ú", |
| "û", |
| "ü", |
| "ý", |
| "þ", |
| "ÿ", |
| "<extra_id_0>", |
| "<extra_id_1>", |
| "<extra_id_2>", |
| "<extra_id_3>", |
| "<extra_id_4>", |
| "<extra_id_5>", |
| "<extra_id_6>", |
| "<extra_id_7>", |
| "<extra_id_8>", |
| "<extra_id_9>", |
| "<extra_id_10>", |
| "<extra_id_11>", |
| "<extra_id_12>", |
| "<extra_id_13>", |
| "<extra_id_14>", |
| "<extra_id_15>", |
| "<extra_id_16>", |
| "<extra_id_17>", |
| "<extra_id_18>", |
| "<extra_id_19>", |
| "<extra_id_20>", |
| "<extra_id_21>", |
| "<extra_id_22>", |
| "<extra_id_23>", |
| "<extra_id_24>", |
| "<extra_id_25>", |
| "<extra_id_26>", |
| "<extra_id_27>", |
| "<extra_id_28>", |
| "<extra_id_29>", |
| "<extra_id_30>", |
| "<extra_id_31>", |
| "<extra_id_32>", |
| "<extra_id_33>", |
| "<extra_id_34>", |
| "<extra_id_35>", |
| "<extra_id_36>", |
| "<extra_id_37>", |
| "<extra_id_38>", |
| "<extra_id_39>", |
| "<extra_id_40>", |
| "<extra_id_41>", |
| "<extra_id_42>", |
| "<extra_id_43>", |
| "<extra_id_44>", |
| "<extra_id_45>", |
| "<extra_id_46>", |
| "<extra_id_47>", |
| "<extra_id_48>", |
| "<extra_id_49>", |
| "<extra_id_50>", |
| "<extra_id_51>", |
| "<extra_id_52>", |
| "<extra_id_53>", |
| "<extra_id_54>", |
| "<extra_id_55>", |
| "<extra_id_56>", |
| "<extra_id_57>", |
| "<extra_id_58>", |
| "<extra_id_59>", |
| "<extra_id_60>", |
| "<extra_id_61>", |
| "<extra_id_62>", |
| "<extra_id_63>", |
| "<extra_id_64>", |
| "<extra_id_65>", |
| "<extra_id_66>", |
| "<extra_id_67>", |
| "<extra_id_68>", |
| "<extra_id_69>", |
| "<extra_id_70>", |
| "<extra_id_71>", |
| "<extra_id_72>", |
| "<extra_id_73>", |
| "<extra_id_74>", |
| "<extra_id_75>", |
| "<extra_id_76>", |
| "<extra_id_77>", |
| "<extra_id_78>", |
| "<extra_id_79>", |
| "<extra_id_80>", |
| "<extra_id_81>", |
| "<extra_id_82>", |
| "<extra_id_83>", |
| "<extra_id_84>", |
| "<extra_id_85>", |
| "<extra_id_86>", |
| "<extra_id_87>", |
| "<extra_id_88>", |
| "<extra_id_89>", |
| "<extra_id_90>", |
| "<extra_id_91>", |
| "<extra_id_92>", |
| "<extra_id_93>", |
| "<extra_id_94>", |
| "<extra_id_95>", |
| "<extra_id_96>", |
| "<extra_id_97>", |
| "<extra_id_98>", |
| "<extra_id_99>", |
| "<extra_id_100>", |
| "<extra_id_101>", |
| "<extra_id_102>", |
| "<extra_id_103>", |
| "<extra_id_104>", |
| "<extra_id_105>", |
| "<extra_id_106>", |
| "<extra_id_107>", |
| "<extra_id_108>", |
| "<extra_id_109>", |
| "<extra_id_110>", |
| "<extra_id_111>", |
| "<extra_id_112>", |
| "<extra_id_113>", |
| "<extra_id_114>", |
| "<extra_id_115>", |
| "<extra_id_116>", |
| "<extra_id_117>", |
| "<extra_id_118>", |
| "<extra_id_119>", |
| "<extra_id_120>", |
| "<extra_id_121>", |
| "<extra_id_122>", |
| "<extra_id_123>", |
| "<extra_id_124>", |
| "<pad>", |
| "</s>", |
| "<unk>", |
| "\u0000", |
| "\u0001", |
| "\u0002", |
| "\u0003", |
| "\u0004", |
| "\u0005", |
| "\u0006", |
| "\u0007", |
| "\b", |
| "\t", |
| "\n", |
| "\u000b", |
| "\f", |
| "\r", |
| "\u000e", |
| "\u000f", |
| "\u0010", |
| "\u0011", |
| "\u0012", |
| "\u0013", |
| "\u0014", |
| "\u0015", |
| "\u0016", |
| "\u0017", |
| "\u0018", |
| "\u0019", |
| "\u001a", |
| "\u001b", |
| "\u001c", |
| "\u001d", |
| "\u001e", |
| "\u001f", |
| " ", |
| "!", |
| "\"", |
| "#", |
| "$", |
| "%", |
| "&", |
| "'", |
| "(", |
| ")", |
| "*", |
| "+", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "<", |
| "=", |
| ">", |
| "?", |
| "@", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "\\", |
| "]", |
| "^", |
| "_", |
| "`", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "|", |
| "}", |
| "~", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "
", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| " ", |
| "¡", |
| "¢", |
| "£", |
| "¤", |
| "¥", |
| "¦", |
| "§", |
| "¨", |
| "©", |
| "ª", |
| "«", |
| "¬", |
| "", |
| "®", |
| "¯", |
| "°", |
| "±", |
| "²", |
| "³", |
| "´", |
| "µ", |
| "¶", |
| "·", |
| "¸", |
| "¹", |
| "º", |
| "»", |
| "¼", |
| "½", |
| "¾", |
| "¿", |
| "À", |
| "Á", |
| "Â", |
| "Ã", |
| "Ä", |
| "Å", |
| "Æ", |
| "Ç", |
| "È", |
| "É", |
| "Ê", |
| "Ë", |
| "Ì", |
| "Í", |
| "Î", |
| "Ï", |
| "Ð", |
| "Ñ", |
| "Ò", |
| "Ó", |
| "Ô", |
| "Õ", |
| "Ö", |
| "×", |
| "Ø", |
| "Ù", |
| "Ú", |
| "Û", |
| "Ü", |
| "Ý", |
| "Þ", |
| "ß", |
| "à", |
| "á", |
| "â", |
| "ã", |
| "ä", |
| "å", |
| "æ", |
| "ç", |
| "è", |
| "é", |
| "ê", |
| "ë", |
| "ì", |
| "í", |
| "î", |
| "ï", |
| "ð", |
| "ñ", |
| "ò", |
| "ó", |
| "ô", |
| "õ", |
| "ö", |
| "÷", |
| "ø", |
| "ù", |
| "ú", |
| "û", |
| "ü", |
| "ý", |
| "þ", |
| "ÿ", |
| "<extra_id_0>", |
| "<extra_id_1>", |
| "<extra_id_2>", |
| "<extra_id_3>", |
| "<extra_id_4>", |
| "<extra_id_5>", |
| "<extra_id_6>", |
| "<extra_id_7>", |
| "<extra_id_8>", |
| "<extra_id_9>", |
| "<extra_id_10>", |
| "<extra_id_11>", |
| "<extra_id_12>", |
| "<extra_id_13>", |
| "<extra_id_14>", |
| "<extra_id_15>", |
| "<extra_id_16>", |
| "<extra_id_17>", |
| "<extra_id_18>", |
| "<extra_id_19>", |
| "<extra_id_20>", |
| "<extra_id_21>", |
| "<extra_id_22>", |
| "<extra_id_23>", |
| "<extra_id_24>", |
| "<extra_id_25>", |
| "<extra_id_26>", |
| "<extra_id_27>", |
| "<extra_id_28>", |
| "<extra_id_29>", |
| "<extra_id_30>", |
| "<extra_id_31>", |
| "<extra_id_32>", |
| "<extra_id_33>", |
| "<extra_id_34>", |
| "<extra_id_35>", |
| "<extra_id_36>", |
| "<extra_id_37>", |
| "<extra_id_38>", |
| "<extra_id_39>", |
| "<extra_id_40>", |
| "<extra_id_41>", |
| "<extra_id_42>", |
| "<extra_id_43>", |
| "<extra_id_44>", |
| "<extra_id_45>", |
| "<extra_id_46>", |
| "<extra_id_47>", |
| "<extra_id_48>", |
| "<extra_id_49>", |
| "<extra_id_50>", |
| "<extra_id_51>", |
| "<extra_id_52>", |
| "<extra_id_53>", |
| "<extra_id_54>", |
| "<extra_id_55>", |
| "<extra_id_56>", |
| "<extra_id_57>", |
| "<extra_id_58>", |
| "<extra_id_59>", |
| "<extra_id_60>", |
| "<extra_id_61>", |
| "<extra_id_62>", |
| "<extra_id_63>", |
| "<extra_id_64>", |
| "<extra_id_65>", |
| "<extra_id_66>", |
| "<extra_id_67>", |
| "<extra_id_68>", |
| "<extra_id_69>", |
| "<extra_id_70>", |
| "<extra_id_71>", |
| "<extra_id_72>", |
| "<extra_id_73>", |
| "<extra_id_74>", |
| "<extra_id_75>", |
| "<extra_id_76>", |
| "<extra_id_77>", |
| "<extra_id_78>", |
| "<extra_id_79>", |
| "<extra_id_80>", |
| "<extra_id_81>", |
| "<extra_id_82>", |
| "<extra_id_83>", |
| "<extra_id_84>", |
| "<extra_id_85>", |
| "<extra_id_86>", |
| "<extra_id_87>", |
| "<extra_id_88>", |
| "<extra_id_89>", |
| "<extra_id_90>", |
| "<extra_id_91>", |
| "<extra_id_92>", |
| "<extra_id_93>", |
| "<extra_id_94>", |
| "<extra_id_95>", |
| "<extra_id_96>", |
| "<extra_id_97>", |
| "<extra_id_98>", |
| "<extra_id_99>", |
| "<extra_id_100>", |
| "<extra_id_101>", |
| "<extra_id_102>", |
| "<extra_id_103>", |
| "<extra_id_104>", |
| "<extra_id_105>", |
| "<extra_id_106>", |
| "<extra_id_107>", |
| "<extra_id_108>", |
| "<extra_id_109>", |
| "<extra_id_110>", |
| "<extra_id_111>", |
| "<extra_id_112>", |
| "<extra_id_113>", |
| "<extra_id_114>", |
| "<extra_id_115>", |
| "<extra_id_116>", |
| "<extra_id_117>", |
| "<extra_id_118>", |
| "<extra_id_119>", |
| "<extra_id_120>", |
| "<extra_id_121>", |
| "<extra_id_122>", |
| "<extra_id_123>", |
| "<extra_id_124>", |
| "<pad>", |
| "</s>", |
| "<unk>", |
| "\u0000", |
| "\u0001", |
| "\u0002", |
| "\u0003", |
| "\u0004", |
| "\u0005", |
| "\u0006", |
| "\u0007", |
| "\b", |
| "\t", |
| "\n", |
| "\u000b", |
| "\f", |
| "\r", |
| "\u000e", |
| "\u000f", |
| "\u0010", |
| "\u0011", |
| "\u0012", |
| "\u0013", |
| "\u0014", |
| "\u0015", |
| "\u0016", |
| "\u0017", |
| "\u0018", |
| "\u0019", |
| "\u001a", |
| "\u001b", |
| "\u001c", |
| "\u001d", |
| "\u001e", |
| "\u001f", |
| " ", |
| "!", |
| "\"", |
| "#", |
| "$", |
| "%", |
| "&", |
| "'", |
| "(", |
| ")", |
| "*", |
| "+", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "<", |
| "=", |
| ">", |
| "?", |
| "@", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "\\", |
| "]", |
| "^", |
| "_", |
| "`", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "|", |
| "}", |
| "~", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "
", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| " ", |
| "¡", |
| "¢", |
| "£", |
| "¤", |
| "¥", |
| "¦", |
| "§", |
| "¨", |
| "©", |
| "ª", |
| "«", |
| "¬", |
| "", |
| "®", |
| "¯", |
| "°", |
| "±", |
| "²", |
| "³", |
| "´", |
| "µ", |
| "¶", |
| "·", |
| "¸", |
| "¹", |
| "º", |
| "»", |
| "¼", |
| "½", |
| "¾", |
| "¿", |
| "À", |
| "Á", |
| "Â", |
| "Ã", |
| "Ä", |
| "Å", |
| "Æ", |
| "Ç", |
| "È", |
| "É", |
| "Ê", |
| "Ë", |
| "Ì", |
| "Í", |
| "Î", |
| "Ï", |
| "Ð", |
| "Ñ", |
| "Ò", |
| "Ó", |
| "Ô", |
| "Õ", |
| "Ö", |
| "×", |
| "Ø", |
| "Ù", |
| "Ú", |
| "Û", |
| "Ü", |
| "Ý", |
| "Þ", |
| "ß", |
| "à", |
| "á", |
| "â", |
| "ã", |
| "ä", |
| "å", |
| "æ", |
| "ç", |
| "è", |
| "é", |
| "ê", |
| "ë", |
| "ì", |
| "í", |
| "î", |
| "ï", |
| "ð", |
| "ñ", |
| "ò", |
| "ó", |
| "ô", |
| "õ", |
| "ö", |
| "÷", |
| "ø", |
| "ù", |
| "ú", |
| "û", |
| "ü", |
| "ý", |
| "þ", |
| "ÿ", |
| "<extra_id_0>", |
| "<extra_id_1>", |
| "<extra_id_2>", |
| "<extra_id_3>", |
| "<extra_id_4>", |
| "<extra_id_5>", |
| "<extra_id_6>", |
| "<extra_id_7>", |
| "<extra_id_8>", |
| "<extra_id_9>", |
| "<extra_id_10>", |
| "<extra_id_11>", |
| "<extra_id_12>", |
| "<extra_id_13>", |
| "<extra_id_14>", |
| "<extra_id_15>", |
| "<extra_id_16>", |
| "<extra_id_17>", |
| "<extra_id_18>", |
| "<extra_id_19>", |
| "<extra_id_20>", |
| "<extra_id_21>", |
| "<extra_id_22>", |
| "<extra_id_23>", |
| "<extra_id_24>", |
| "<extra_id_25>", |
| "<extra_id_26>", |
| "<extra_id_27>", |
| "<extra_id_28>", |
| "<extra_id_29>", |
| "<extra_id_30>", |
| "<extra_id_31>", |
| "<extra_id_32>", |
| "<extra_id_33>", |
| "<extra_id_34>", |
| "<extra_id_35>", |
| "<extra_id_36>", |
| "<extra_id_37>", |
| "<extra_id_38>", |
| "<extra_id_39>", |
| "<extra_id_40>", |
| "<extra_id_41>", |
| "<extra_id_42>", |
| "<extra_id_43>", |
| "<extra_id_44>", |
| "<extra_id_45>", |
| "<extra_id_46>", |
| "<extra_id_47>", |
| "<extra_id_48>", |
| "<extra_id_49>", |
| "<extra_id_50>", |
| "<extra_id_51>", |
| "<extra_id_52>", |
| "<extra_id_53>", |
| "<extra_id_54>", |
| "<extra_id_55>", |
| "<extra_id_56>", |
| "<extra_id_57>", |
| "<extra_id_58>", |
| "<extra_id_59>", |
| "<extra_id_60>", |
| "<extra_id_61>", |
| "<extra_id_62>", |
| "<extra_id_63>", |
| "<extra_id_64>", |
| "<extra_id_65>", |
| "<extra_id_66>", |
| "<extra_id_67>", |
| "<extra_id_68>", |
| "<extra_id_69>", |
| "<extra_id_70>", |
| "<extra_id_71>", |
| "<extra_id_72>", |
| "<extra_id_73>", |
| "<extra_id_74>", |
| "<extra_id_75>", |
| "<extra_id_76>", |
| "<extra_id_77>", |
| "<extra_id_78>", |
| "<extra_id_79>", |
| "<extra_id_80>", |
| "<extra_id_81>", |
| "<extra_id_82>", |
| "<extra_id_83>", |
| "<extra_id_84>", |
| "<extra_id_85>", |
| "<extra_id_86>", |
| "<extra_id_87>", |
| "<extra_id_88>", |
| "<extra_id_89>", |
| "<extra_id_90>", |
| "<extra_id_91>", |
| "<extra_id_92>", |
| "<extra_id_93>", |
| "<extra_id_94>", |
| "<extra_id_95>", |
| "<extra_id_96>", |
| "<extra_id_97>", |
| "<extra_id_98>", |
| "<extra_id_99>", |
| "<extra_id_100>", |
| "<extra_id_101>", |
| "<extra_id_102>", |
| "<extra_id_103>", |
| "<extra_id_104>", |
| "<extra_id_105>", |
| "<extra_id_106>", |
| "<extra_id_107>", |
| "<extra_id_108>", |
| "<extra_id_109>", |
| "<extra_id_110>", |
| "<extra_id_111>", |
| "<extra_id_112>", |
| "<extra_id_113>", |
| "<extra_id_114>", |
| "<extra_id_115>", |
| "<extra_id_116>", |
| "<extra_id_117>", |
| "<extra_id_118>", |
| "<extra_id_119>", |
| "<extra_id_120>", |
| "<extra_id_121>", |
| "<extra_id_122>", |
| "<extra_id_123>", |
| "<extra_id_124>", |
| "<pad>", |
| "</s>", |
| "<unk>", |
| "\u0000", |
| "\u0001", |
| "\u0002", |
| "\u0003", |
| "\u0004", |
| "\u0005", |
| "\u0006", |
| "\u0007", |
| "\b", |
| "\t", |
| "\n", |
| "\u000b", |
| "\f", |
| "\r", |
| "\u000e", |
| "\u000f", |
| "\u0010", |
| "\u0011", |
| "\u0012", |
| "\u0013", |
| "\u0014", |
| "\u0015", |
| "\u0016", |
| "\u0017", |
| "\u0018", |
| "\u0019", |
| "\u001a", |
| "\u001b", |
| "\u001c", |
| "\u001d", |
| "\u001e", |
| "\u001f", |
| " ", |
| "!", |
| "\"", |
| "#", |
| "$", |
| "%", |
| "&", |
| "'", |
| "(", |
| ")", |
| "*", |
| "+", |
| ",", |
| "-", |
| ".", |
| "/", |
| "0", |
| "1", |
| "2", |
| "3", |
| "4", |
| "5", |
| "6", |
| "7", |
| "8", |
| "9", |
| ":", |
| ";", |
| "<", |
| "=", |
| ">", |
| "?", |
| "@", |
| "A", |
| "B", |
| "C", |
| "D", |
| "E", |
| "F", |
| "G", |
| "H", |
| "I", |
| "J", |
| "K", |
| "L", |
| "M", |
| "N", |
| "O", |
| "P", |
| "Q", |
| "R", |
| "S", |
| "T", |
| "U", |
| "V", |
| "W", |
| "X", |
| "Y", |
| "Z", |
| "[", |
| "\\", |
| "]", |
| "^", |
| "_", |
| "`", |
| "a", |
| "b", |
| "c", |
| "d", |
| "e", |
| "f", |
| "g", |
| "h", |
| "i", |
| "j", |
| "k", |
| "l", |
| "m", |
| "n", |
| "o", |
| "p", |
| "q", |
| "r", |
| "s", |
| "t", |
| "u", |
| "v", |
| "w", |
| "x", |
| "y", |
| "z", |
| "{", |
| "|", |
| "}", |
| "~", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "
", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| "", |
| " ", |
| "¡", |
| "¢", |
| "£", |
| "¤", |
| "¥", |
| "¦", |
| "§", |
| "¨", |
| "©", |
| "ª", |
| "«", |
| "¬", |
| "", |
| "®", |
| "¯", |
| "°", |
| "±", |
| "²", |
| "³", |
| "´", |
| "µ", |
| "¶", |
| "·", |
| "¸", |
| "¹", |
| "º", |
| "»", |
| "¼", |
| "½", |
| "¾", |
| "¿", |
| "À", |
| "Á", |
| "Â", |
| "Ã", |
| "Ä", |
| "Å", |
| "Æ", |
| "Ç", |
| "È", |
| "É", |
| "Ê", |
| "Ë", |
| "Ì", |
| "Í", |
| "Î", |
| "Ï", |
| "Ð", |
| "Ñ", |
| "Ò", |
| "Ó", |
| "Ô", |
| "Õ", |
| "Ö", |
| "×", |
| "Ø", |
| "Ù", |
| "Ú", |
| "Û", |
| "Ü", |
| "Ý", |
| "Þ", |
| "ß", |
| "à", |
| "á", |
| "â", |
| "ã", |
| "ä", |
| "å", |
| "æ", |
| "ç", |
| "è", |
| "é", |
| "ê", |
| "ë", |
| "ì", |
| "í", |
| "î", |
| "ï", |
| "ð", |
| "ñ", |
| "ò", |
| "ó", |
| "ô", |
| "õ", |
| "ö", |
| "÷", |
| "ø", |
| "ù", |
| "ú", |
| "û", |
| "ü", |
| "ý", |
| "þ", |
| "ÿ", |
| "<extra_id_0>", |
| "<extra_id_1>", |
| "<extra_id_2>", |
| "<extra_id_3>", |
| "<extra_id_4>", |
| "<extra_id_5>", |
| "<extra_id_6>", |
| "<extra_id_7>", |
| "<extra_id_8>", |
| "<extra_id_9>", |
| "<extra_id_10>", |
| "<extra_id_11>", |
| "<extra_id_12>", |
| "<extra_id_13>", |
| "<extra_id_14>", |
| "<extra_id_15>", |
| "<extra_id_16>", |
| "<extra_id_17>", |
| "<extra_id_18>", |
| "<extra_id_19>", |
| "<extra_id_20>", |
| "<extra_id_21>", |
| "<extra_id_22>", |
| "<extra_id_23>", |
| "<extra_id_24>", |
| "<extra_id_25>", |
| "<extra_id_26>", |
| "<extra_id_27>", |
| "<extra_id_28>", |
| "<extra_id_29>", |
| "<extra_id_30>", |
| "<extra_id_31>", |
| "<extra_id_32>", |
| "<extra_id_33>", |
| "<extra_id_34>", |
| "<extra_id_35>", |
| "<extra_id_36>", |
| "<extra_id_37>", |
| "<extra_id_38>", |
| "<extra_id_39>", |
| "<extra_id_40>", |
| "<extra_id_41>", |
| "<extra_id_42>", |
| "<extra_id_43>", |
| "<extra_id_44>", |
| "<extra_id_45>", |
| "<extra_id_46>", |
| "<extra_id_47>", |
| "<extra_id_48>", |
| "<extra_id_49>", |
| "<extra_id_50>", |
| "<extra_id_51>", |
| "<extra_id_52>", |
| "<extra_id_53>", |
| "<extra_id_54>", |
| "<extra_id_55>", |
| "<extra_id_56>", |
| "<extra_id_57>", |
| "<extra_id_58>", |
| "<extra_id_59>", |
| "<extra_id_60>", |
| "<extra_id_61>", |
| "<extra_id_62>", |
| "<extra_id_63>", |
| "<extra_id_64>", |
| "<extra_id_65>", |
| "<extra_id_66>", |
| "<extra_id_67>", |
| "<extra_id_68>", |
| "<extra_id_69>", |
| "<extra_id_70>", |
| "<extra_id_71>", |
| "<extra_id_72>", |
| "<extra_id_73>", |
| "<extra_id_74>", |
| "<extra_id_75>", |
| "<extra_id_76>", |
| "<extra_id_77>", |
| "<extra_id_78>", |
| "<extra_id_79>", |
| "<extra_id_80>", |
| "<extra_id_81>", |
| "<extra_id_82>", |
| "<extra_id_83>", |
| "<extra_id_84>", |
| "<extra_id_85>", |
| "<extra_id_86>", |
| "<extra_id_87>", |
| "<extra_id_88>", |
| "<extra_id_89>", |
| "<extra_id_90>", |
| "<extra_id_91>", |
| "<extra_id_92>", |
| "<extra_id_93>", |
| "<extra_id_94>", |
| "<extra_id_95>", |
| "<extra_id_96>", |
| "<extra_id_97>", |
| "<extra_id_98>", |
| "<extra_id_99>", |
| "<extra_id_100>", |
| "<extra_id_101>", |
| "<extra_id_102>", |
| "<extra_id_103>", |
| "<extra_id_104>", |
| "<extra_id_105>", |
| "<extra_id_106>", |
| "<extra_id_107>", |
| "<extra_id_108>", |
| "<extra_id_109>", |
| "<extra_id_110>", |
| "<extra_id_111>", |
| "<extra_id_112>", |
| "<extra_id_113>", |
| "<extra_id_114>", |
| "<extra_id_115>", |
| "<extra_id_116>", |
| "<extra_id_117>", |
| "<extra_id_118>", |
| "<extra_id_119>", |
| "<extra_id_120>", |
| "<extra_id_121>", |
| "<extra_id_122>", |
| "<extra_id_123>", |
| "<extra_id_124>" |
| ], |
| "eos_id": 3358 |
| } |