{ "blank": 0, "chars": [ " ", "!", "\"", "#", "$", "%", "&", "'", "(", ")", "*", "+", ",", "-", ".", "/", "0", "1", "2", "3", "4", "5", "6", "7", "8", "9", ":", ";", "<", "=", ">", "?", "@", "A", "B", "C", "D", "E", "F", "G", "H", "I", "J", "K", "L", "M", "N", "O", "P", "Q", "R", "S", "T", "U", "V", "W", "X", "Y", "Z", "[", "\\", "]", "^", "_", "`", "a", "b", "c", "d", "e", "f", "g", "h", "i", "j", "k", "l", "m", "n", "o", "p", "q", "r", "s", "t", "u", "v", "w", "x", "y", "z", "{", "|", "}", "~", "¡", "¢", "£", "¤", "¥", "¦", "§", "¨", "©", "ª", "«", "¬", "®", "¯", "°", "±", "²", "³", "´", "µ", "¶", "·", "¸", "¹", "º", "»", "¼", "½", "¾", "¿", "À", "Á", "Â", "Ã", "Ä", "Å", "Æ", "Ç", "È", "É", "Ê", "Ë", "Ì", "Í", "Î", "Ï", "Ð", "Ñ", "Ò", "Ó", "Ô", "Õ", "Ö", "×", "Ø", "Ù", "Ú", "Û", "Ü", "Ý", "Þ", "ß", "à", "á", "â", "ã", "ä", "å", "æ", "ç", "è", "é", "ê", "ë", "ì", "í", "î", "ï", "ð", "ñ", "ò", "ó", "ô", "õ", "ö", "÷", "ø", "ù", "ú", "û", "ü", "ý", "þ", "ÿ", "Ā", "ā", "Ă", "ă", "Ą", "ą", "Ć", "ć", "Ĉ", "ĉ", "Ċ", "ċ", "Č", "č", "Ď", "ď", "Đ", "đ", "Ē", "ē", "Ĕ", "ĕ", "Ė", "ė", "Ę", "ę", "Ě", "ě", "Ĝ", "ĝ", "Ğ", "ğ", "Ġ", "ġ", "Ģ", "ģ", "Ĥ", "ĥ", "Ħ", "ħ", "Ĩ", "ĩ", "Ī", "ī", "Ĭ", "ĭ", "Į", "į", "İ", "ı", "IJ", "ij", "Ĵ", "ĵ", "Ķ", "ķ", "ĸ", "Ĺ", "ĺ", "Ļ", "ļ", "Ľ", "ľ", "Ŀ", "ŀ", "Ł", "ł", "Ń", "ń", "Ņ", "ņ", "Ň", "ň", "ʼn", "Ŋ", "ŋ", "Ō", "ō", "Ŏ", "ŏ", "Ő", "ő", "Œ", "œ", "Ŕ", "ŕ", "Ŗ", "ŗ", "Ř", "ř", "Ś", "ś", "Ŝ", "ŝ", "Ş", "ş", "Š", "š", "Ţ", "ţ", "Ť", "ť", "Ŧ", "ŧ", "Ũ", "ũ", "Ū", "ū", "Ŭ", "ŭ", "Ů", "ů", "Ű", "ű", "Ų", "ų", "Ŵ", "ŵ", "Ŷ", "ŷ", "Ÿ", "Ź", "ź", "Ż", "ż", "Ž", "ž", "ſ", "ƀ", "Ɓ", "Ƃ", "ƃ", "Ƅ", "ƅ", "Ɔ", "Ƈ", "ƈ", "Ɖ", "Ɗ", "Ƌ", "ƌ", "ƍ", "Ǝ", "Ə", "Ɛ", "Ƒ", "ƒ", "Ɠ", "Ɣ", "ƕ", "Ɩ", "Ɨ", "Ƙ", "ƙ", "ƚ", "ƛ", "Ɯ", "Ɲ", "ƞ", "Ɵ", "Ơ", "ơ", "Ƣ", "ƣ", "Ƥ", "ƥ", "Ʀ", "Ƨ", "ƨ", "Ʃ", "ƪ", "ƫ", "Ƭ", "ƭ", "Ʈ", "Ư", "ư", "Ʊ", "Ʋ", "Ƴ", "ƴ", "Ƶ", "ƶ", "Ʒ", "Ƹ", "ƹ", "ƺ", "ƻ", "Ƽ", "ƽ", "ƾ", "ƿ", "ǀ", "ǁ", "ǂ", "ǃ", "DŽ", "Dž", "dž", "LJ", "Lj", "lj", "NJ", "Nj", "nj", "Ǎ", "ǎ", "Ǐ", "ǐ", "Ǒ", "ǒ", "Ǔ", "ǔ", "Ǖ", "ǖ", "Ǘ", "ǘ", "Ǚ", "ǚ", "Ǜ", "ǜ", "ǝ", "Ǟ", "ǟ", "Ǡ", "ǡ", "Ǣ", "ǣ", "Ǥ", "ǥ", "Ǧ", "ǧ", "Ǩ", "ǩ", "Ǫ", "ǫ", "Ǭ", "ǭ", "Ǯ", "ǯ", "ǰ", "DZ", "Dz", "dz", "Ǵ", "ǵ", "Ƕ", "Ƿ", "Ǹ", "ǹ", "Ǻ", "ǻ", "Ǽ", "ǽ", "Ǿ", "ǿ", "Ȁ", "ȁ", "Ȃ", "ȃ", "Ȅ", "ȅ", "Ȇ", "ȇ", "Ȉ", "ȉ", "Ȋ", "ȋ", "Ȍ", "ȍ", "Ȏ", "ȏ", "Ȑ", "ȑ", "Ȓ", "ȓ", "Ȕ", "ȕ", "Ȗ", "ȗ", "Ș", "ș", "Ț", "ț", "Ȝ", "ȝ", "Ȟ", "ȟ", "Ƞ", "ȡ", "Ȣ", "ȣ", "Ȥ", "ȥ", "Ȧ", "ȧ", "Ȩ", "ȩ", "Ȫ", "ȫ", "Ȭ", "ȭ", "Ȯ", "ȯ", "Ȱ", "ȱ", "Ȳ", "ȳ", "ȴ", "ȵ", "ȶ", "ȷ", "ȸ", "ȹ", "Ⱥ", "Ȼ", "ȼ", "Ƚ", "Ⱦ", "ȿ", "ɀ", "Ɂ", "ɂ", "Ƀ", "Ʉ", "Ʌ", "Ɇ", "ɇ", "Ɉ", "ɉ", "Ɋ", "ɋ", "Ɍ", "ɍ", "Ɏ", "ɏ", "Ḁ", "ḁ", "Ḃ", "ḃ", "Ḅ", "ḅ", "Ḇ", "ḇ", "Ḉ", "ḉ", "Ḋ", "ḋ", "Ḍ", "ḍ", "Ḏ", "ḏ", "Ḑ", "ḑ", "Ḓ", "ḓ", "Ḕ", "ḕ", "Ḗ", "ḗ", "Ḙ", "ḙ", "Ḛ", "ḛ", "Ḝ", "ḝ", "Ḟ", "ḟ", "Ḡ", "ḡ", "Ḣ", "ḣ", "Ḥ", "ḥ", "Ḧ", "ḧ", "Ḩ", "ḩ", "Ḫ", "ḫ", "Ḭ", "ḭ", "Ḯ", "ḯ", "Ḱ", "ḱ", "Ḳ", "ḳ", "Ḵ", "ḵ", "Ḷ", "ḷ", "Ḹ", "ḹ", "Ḻ", "ḻ", "Ḽ", "ḽ", "Ḿ", "ḿ", "Ṁ", "ṁ", "Ṃ", "ṃ", "Ṅ", "ṅ", "Ṇ", "ṇ", "Ṉ", "ṉ", "Ṋ", "ṋ", "Ṍ", "ṍ", "Ṏ", "ṏ", "Ṑ", "ṑ", "Ṓ", "ṓ", "Ṕ", "ṕ", "Ṗ", "ṗ", "Ṙ", "ṙ", "Ṛ", "ṛ", "Ṝ", "ṝ", "Ṟ", "ṟ", "Ṡ", "ṡ", "Ṣ", "ṣ", "Ṥ", "ṥ", "Ṧ", "ṧ", "Ṩ", "ṩ", "Ṫ", "ṫ", "Ṭ", "ṭ", "Ṯ", "ṯ", "Ṱ", "ṱ", "Ṳ", "ṳ", "Ṵ", "ṵ", "Ṷ", "ṷ", "Ṹ", "ṹ", "Ṻ", "ṻ", "Ṽ", "ṽ", "Ṿ", "ṿ", "Ẁ", "ẁ", "Ẃ", "ẃ", "Ẅ", "ẅ", "Ẇ", "ẇ", "Ẉ", "ẉ", "Ẋ", "ẋ", "Ẍ", "ẍ", "Ẏ", "ẏ", "Ẑ", "ẑ", "Ẓ", "ẓ", "Ẕ", "ẕ", "ẖ", "ẗ", "ẘ", "ẙ", "ẚ", "ẛ", "ẜ", "ẝ", "ẞ", "ẟ", "Ạ", "ạ", "Ả", "ả", "Ấ", "ấ", "Ầ", "ầ", "Ẩ", "ẩ", "Ẫ", "ẫ", "Ậ", "ậ", "Ắ", "ắ", "Ằ", "ằ", "Ẳ", "ẳ", "Ẵ", "ẵ", "Ặ", "ặ", "Ẹ", "ẹ", "Ẻ", "ẻ", "Ẽ", "ẽ", "Ế", "ế", "Ề", "ề", "Ể", "ể", "Ễ", "ễ", "Ệ", "ệ", "Ỉ", "ỉ", "Ị", "ị", "Ọ", "ọ", "Ỏ", "ỏ", "Ố", "ố", "Ồ", "ồ", "Ổ", "ổ", "Ỗ", "ỗ", "Ộ", "ộ", "Ớ", "ớ", "Ờ", "ờ", "Ở", "ở", "Ỡ", "ỡ", "Ợ", "ợ", "Ụ", "ụ", "Ủ", "ủ", "Ứ", "ứ", "Ừ", "ừ", "Ử", "ử", "Ữ", "ữ", "Ự", "ự", "Ỳ", "ỳ", "Ỵ", "ỵ", "Ỷ", "ỷ", "Ỹ", "ỹ", "Ỻ", "ỻ", "Ỽ", "ỽ", "Ỿ", "ỿ", "Α", "Β", "Γ", "Δ", "Ε", "Ζ", "Η", "Θ", "Ι", "Κ", "Λ", "Μ", "Ν", "Ξ", "Ο", "Π", "Ρ", "Σ", "Τ", "Υ", "Φ", "Χ", "Ψ", "Ω", "α", "β", "γ", "δ", "ε", "ζ", "η", "θ", "ι", "κ", "λ", "μ", "ν", "ξ", "ο", "π", "ρ", "ς", "σ", "τ", "υ", "φ", "χ", "ψ", "ω", "‐", "‑", "‒", "–", "—", "―", "‖", "‘", "’", "‚", "‛", "“", "”", "„", "‟", "†", "‡", "•", "‣", "…", "‰", "′", "″", "‹", "›", "⁄", "※", "⁰", "⁴", "⁵", "⁶", "⁷", "⁸", "⁹", "⁺", "⁻", "⁽", "⁾", "ⁿ", "₀", "₁", "₂", "₃", "₄", "₅", "₆", "₇", "₈", "₉", "€", "₹", "₽", "₩", "₺", "₪", "₱", "₫", "₴", "₦", "₡", "₸", "™", "℃", "℉", "№", "ℓ", "℮", "⅓", "⅔", "⅛", "←", "↑", "→", "↓", "↔", "⇒", "⇔", "↵", "−", "∓", "∗", "∘", "∙", "√", "∞", "∝", "∠", "∧", "∨", "∩", "∪", "∫", "≈", "≠", "≡", "≤", "≥", "⊂", "⊃", "⊆", "⊇", "⊕", "⊗", "⊥", "⋅", "∂", "∆", "∇", "∈", "∉", "∋", "∏", "∑", "∀", "∃", "∅", "■", "□", "▪", "▫", "▲", "△", "▶", "►", "▼", "▽", "◀", "◄", "◆", "◇", "○", "◦", "●", "★", "☆", "✓", "✔", "✗", "✘", "❖", "➢", "➤", "؆", "؇", "؈", "؉", "؊", "؋", "،", "؍", "؎", "؏", "ؐ", "ؑ", "ؒ", "ؓ", "ؔ", "ؕ", "ؖ", "ؗ", "ؘ", "ؙ", "ؚ", "؛", "؝", "؞", "؟", "ؠ", "ء", "آ", "أ", "ؤ", "إ", "ئ", "ا", "ب", "ة", "ت", "ث", "ج", "ح", "خ", "د", "ذ", "ر", "ز", "س", "ش", "ص", "ض", "ط", "ظ", "ع", "غ", "ػ", "ؼ", "ؽ", "ؾ", "ؿ", "ف", "ق", "ك", "ل", "م", "ن", "ه", "و", "ى", "ي", "ً", "ٌ", "ٍ", "َ", "ُ", "ِ", "ّ", "ْ", "ٓ", "ٔ", "ٕ", "ٖ", "ٗ", "٘", "ٙ", "ٚ", "ٛ", "ٜ", "ٝ", "ٞ", "ٟ", "٠", "١", "٢", "٣", "٤", "٥", "٦", "٧", "٨", "٩", "٪", "٫", "٬", "٭", "ٮ", "ٯ", "ٰ", "ٱ", "ٲ", "ٳ", "ٴ", "ٵ", "ٶ", "ٷ", "ٸ", "ٹ", "ٺ", "ٻ", "ټ", "ٽ", "پ", "ٿ", "ڀ", "ځ", "ڂ", "ڃ", "ڄ", "څ", "چ", "ڇ", "ڈ", "ډ", "ڊ", "ڋ", "ڌ", "ڍ", "ڎ", "ڏ", "ڐ", "ڑ", "ڒ", "ړ", "ڔ", "ڕ", "ږ", "ڗ", "ژ", "ڙ", "ښ", "ڛ", "ڜ", "ڝ", "ڞ", "ڟ", "ڠ", "ڡ", "ڢ", "ڣ", "ڤ", "ڥ", "ڦ", "ڧ", "ڨ", "ک", "ڪ", "ګ", "ڬ", "ڭ", "ڮ", "گ", "ڰ", "ڱ", "ڲ", "ڳ", "ڴ", "ڵ", "ڶ", "ڷ", "ڸ", "ڹ", "ں", "ڻ", "ڼ", "ڽ", "ھ", "ڿ", "ۀ", "ہ", "ۂ", "ۃ", "ۄ", "ۅ", "ۆ", "ۇ", "ۈ", "ۉ", "ۊ", "ۋ", "ی", "ۍ", "ێ", "ۏ", "ې", "ۑ", "ے", "ۓ", "۔", "ە", "ۖ", "ۗ", "ۘ", "ۙ", "ۚ", "ۛ", "ۜ", "۞", "۟", "۠", "ۡ", "ۢ", "ۣ", "ۤ", "ۥ", "ۦ", "ۧ", "ۨ", "۩", "۪", "۫", "۬", "ۭ", "ۮ", "ۯ", "۰", "۱", "۲", "۳", "۴", "۵", "۶", "۷", "۸", "۹", "ۺ", "ۻ", "ۼ", "۽", "۾", "ۿ", "ݐ", "ݑ", "ݒ", "ݓ", "ݔ", "ݕ", "ݖ", "ݗ", "ݘ", "ݙ", "ݚ", "ݛ", "ݜ", "ݝ", "ݞ", "ݟ", "ݠ", "ݡ", "ݢ", "ݣ", "ݤ", "ݥ", "ݦ", "ݧ", "ݨ", "ݩ", "ݪ", "ݫ", "ݬ", "ݭ", "ݮ", "ݯ", "ݰ", "ݱ", "ݲ", "ݳ", "ݴ", "ݵ", "ݶ", "ݷ", "ݸ", "ݹ", "ݺ", "ݻ", "ݼ", "ݽ", "ݾ", "ݿ", "֑", "֒", "֓", "֔", "֕", "֖", "֗", "֘", "֙", "֚", "֛", "֜", "֝", "֞", "֟", "֠", "֡", "֢", "֣", "֤", "֥", "֦", "֧", "֨", "֩", "֪", "֫", "֬", "֭", "֮", "֯", "ְ", "ֱ", "ֲ", "ֳ", "ִ", "ֵ", "ֶ", "ַ", "ָ", "ֹ", "ֺ", "ֻ", "ּ", "ֽ", "־", "ֿ", "׀", "ׁ", "ׂ", "׃", "ׄ", "ׅ", "׆", "ׇ", "א", "ב", "ג", "ד", "ה", "ו", "ז", "ח", "ט", "י", "ך", "כ", "ל", "ם", "מ", "ן", "נ", "ס", "ע", "ף", "פ", "ץ", "צ", "ק", "ר", "ש", "ת", "ׯ", "װ", "ױ", "ײ", "׳", "״", "‌", "”", "", "­", "ɑ", "ɒ", "ə", "ɛ", "ʃ", "ʒ", "ʔ", "ʿ", "˝", "ˣ", "́", "ί", "ϵ", "А", "В", "Г", "Д", "И", "К", "М", "Н", "О", "П", "Р", "С", "Т", "У", "Ш", "Э", "а", "б", "в", "г", "д", "е", "ж", "з", "и", "й", "к", "л", "м", "н", "о", "п", "р", "с", "т", "у", "ф", "х", "ц", "ч", "ш", "ъ", "ы", "ь", "э", "ю", "я", "ё", "ғ", "қ", "ҷ", "ӣ", "ӯ", "Հ", "Ո", "Ս", "ա", "գ", "ե", "զ", "է", "ի", "կ", "հ", "յ", "ն", "ո", "ս", "վ", "տ", "ր", "ւ", "ք", "ـ", "ᵀ", "ᵗ", "ᵢ", "​", "‍", "‎", "‏", "‫", "‬", "‭", "‮", "", "ⁱ", "ₖ", "ₘ", "ₙ", "ₜ", "ℝ", "∥", "━", "┏", "┓", "┻", "◽", "☐", "♀", "➜", "ⱼ", "、", "。", "《", "》", "う", "お", "き", "こ", "し", "じ", "そ", "た", "だ", "っ", "て", "と", "な", "の", "ば", "ひ", "ま", "め", "や", "わ", "ア", "ィ", "ウ", "カ", "キ", "グ", "サ", "ス", "ヂ", "ツ", "デ", "ト", "ビ", "ブ", "ペ", "リ", "ル", "ン", "下", "丸", "丹", "主", "事", "京", "仮", "八", "公", "典", "内", "北", "南", "博", "口", "古", "名", "向", "和", "園", "坂", "城", "場", "塩", "外", "大", "奈", "子", "家", "居", "山", "岳", "嵐", "川", "巻", "座", "庭", "志", "戸", "手", "摩", "日", "明", "本", "条", "東", "桜", "梅", "楠", "模", "檜", "毬", "沢", "浅", "濱", "物", "王", "田", "登", "白", "皇", "盟", "相", "県", "神", "競", "紫", "美", "脈", "花", "苑", "草", "蒲", "藤", "蘇", "蛇", "術", "見", "話", "赤", "連", "部", "都", "里", "野", "題", "館", "馬", "駅", "", "", "", "️", "ﺯ", "（", "）", "＊", "０", "７", "：", "", "ʾ", "̄", "𐬀", "𐬌", "𐬛", "𐬨", "𐬰" ], "old_chars_preserved": 1356, "appended_chars": [ "”", "", "­", "ɑ", "ɒ", "ə", "ɛ", "ʃ", "ʒ", "ʔ", "ʿ", "˝", "ˣ", "́", "ί", "ϵ", "А", "В", "Г", "Д", "И", "К", "М", "Н", "О", "П", "Р", "С", "Т", "У", "Ш", "Э", "а", "б", "в", "г", "д", "е", "ж", "з", "и", "й", "к", "л", "м", "н", "о", "п", "р", "с", "т", "у", "ф", "х", "ц", "ч", "ш", "ъ", "ы", "ь", "э", "ю", "я", "ё", "ғ", "қ", "ҷ", "ӣ", "ӯ", "Հ", "Ո", "Ս", "ա", "գ", "ե", "զ", "է", "ի", "կ", "հ", "յ", "ն", "ո", "ս", "վ", "տ", "ր", "ւ", "ք", "ـ", "ᵀ", "ᵗ", "ᵢ", "​", "‍", "‎", "‏", "‫", "‬", "‭", "‮", "", "ⁱ", "ₖ", "ₘ", "ₙ", "ₜ", "ℝ", "∥", "━", "┏", "┓", "┻", "◽", "☐", "♀", "➜", "ⱼ", "、", "。", "《", "》", "う", "お", "き", "こ", "し", "じ", "そ", "た", "だ", "っ", "て", "と", "な", "の", "ば", "ひ", "ま", "め", "や", "わ", "ア", "ィ", "ウ", "カ", "キ", "グ", "サ", "ス", "ヂ", "ツ", "デ", "ト", "ビ", "ブ", "ペ", "リ", "ル", "ン", "下", "丸", "丹", "主", "事", "京", "仮", "八", "公", "典", "内", "北", "南", "博", "口", "古", "名", "向", "和", "園", "坂", "城", "場", "塩", "外", "大", "奈", "子", "家", "居", "山", "岳", "嵐", "川", "巻", "座", "庭", "志", "戸", "手", "摩", "日", "明", "本", "条", "東", "桜", "梅", "楠", "模", "檜", "毬", "沢", "浅", "濱", "物", "王", "田", "登", "白", "皇", "盟", "相", "県", "神", "競", "紫", "美", "脈", "花", "苑", "草", "蒲", "藤", "蘇", "蛇", "術", "見", "話", "赤", "連", "部", "都", "里", "野", "題", "館", "馬", "駅", "", "", "", "️", "ﺯ", "（", "）", "＊", "０", "７", "：", "" ], "dev_lines_with_unseen_training_chars": 0, "target_policy": "raw source retained; NFC then invertible rtl.flip(base_rtl=True); no silent character removal", "append_only_new_chars": [ "ʾ", "̄", "𐬀", "𐬌", "𐬛", "𐬨", "𐬰" ], "space_ID": 1, "ZWNJ_ID": 1356, "source_vocabulary_sha256": "2d8b1a087e8b8b56a6ffb0294b022e1b2970a91dca4065c1b1dcc22f16f7c47f" }