korean-relation-extraction / special_tokens_map.json
chnaaam's picture
add tokenizer
ab891e2
raw
history blame contribute delete
602 Bytes
{"bos_token": "[CLS]", "eos_token": "[SEP]", "unk_token": "[UNK]", "sep_token": "[SEP]", "pad_token": "[PAD]", "cls_token": "[CLS]", "mask_token": "[MASK]", "additional_special_tokens": ["[E1]", "[/E1]", "[E2]", "[/E2]", "[LABEL1]", "[LABEL2]", "[LABEL3]", "[LABEL4]", "[LABEL5]", "[LABEL6]", "[LABEL7]", "[LABEL8]", "[LABEL9]", "[LABEL10]", "[LABEL11]", "[LABEL12]", "[LABEL13]", "[LABEL14]", "[LABEL15]", "[LABEL16]", "[LABEL17]", "[LABEL18]", "[LABEL19]", "[LABEL20]", "[LABEL21]", "[LABEL22]", "[LABEL23]", "[LABEL24]", "[LABEL25]", "[LABEL26]", "[LABEL27]", "[LABEL28]", "[LABEL29]", "[LABEL30]"]}