tokenizer.json

{
  "added_tokens": [],
  "do_lower_case": true,
  "encoder": {
    "cls_token": "[CLS]",
    "eos_token": "[EOS]",
    "unk_token": "[UNK]",
    "pad_token": "[PAD]",
    "sep_token": "[SEP]",
    "mask_token": "[MASK]",
    "vocab_size": 30522,
    "tokens": {
      "[CLS]": 0,
      "[EOS]": 1,
      "[UNK]": 2,
      "[PAD]": 3,
      "[SEP]": 4,
      "[MASK]": 5
    }
  },
  "version": "1.0"
}