tokenizer.json

{
  "itos": [
    "<unk>",
    "\n",
    " ",
    "!",
    "$",
    "&",
    "'",
    ",",
    "-",
    ".",
    "3",
    ":",
    ";",
    "?",
    "A",
    "B",
    "C",
    "D",
    "E",
    "F",
    "G",
    "H",
    "I",
    "J",
    "K",
    "L",
    "M",
    "N",
    "O",
    "P",
    "Q",
    "R",
    "S",
    "T",
    "U",
    "V",
    "W",
    "X",
    "Y",
    "Z",
    "a",
    "b",
    "c",
    "d",
    "e",
    "f",
    "g",
    "h",
    "i",
    "j",
    "k",
    "l",
    "m",
    "n",
    "o",
    "p",
    "q",
    "r",
    "s",
    "t",
    "u",
    "v",
    "w",
    "x",
    "y",
    "z"
  ],
  "stoi": {
    "\n": 1,
    " ": 2,
    "!": 3,
    "$": 4,
    "&": 5,
    "'": 6,
    ",": 7,
    "-": 8,
    ".": 9,
    "3": 10,
    ":": 11,
    ";": 12,
    "<unk>": 0,
    "?": 13,
    "A": 14,
    "B": 15,
    "C": 16,
    "D": 17,
    "E": 18,
    "F": 19,
    "G": 20,
    "H": 21,
    "I": 22,
    "J": 23,
    "K": 24,
    "L": 25,
    "M": 26,
    "N": 27,
    "O": 28,
    "P": 29,
    "Q": 30,
    "R": 31,
    "S": 32,
    "T": 33,
    "U": 34,
    "V": 35,
    "W": 36,
    "X": 37,
    "Y": 38,
    "Z": 39,
    "a": 40,
    "b": 41,
    "c": 42,
    "d": 43,
    "e": 44,
    "f": 45,
    "g": 46,
    "h": 47,
    "i": 48,
    "j": 49,
    "k": 50,
    "l": 51,
    "m": 52,
    "n": 53,
    "o": 54,
    "p": 55,
    "q": 56,
    "r": 57,
    "s": 58,
    "t": 59,
    "u": 60,
    "v": 61,
    "w": 62,
    "x": 63,
    "y": 64,
    "z": 65
  },
  "type": "character-level",
  "unk_token": "<unk>",
  "vocab_size": 66
}