Update tokenizer_config.json
Browse files- tokenizer_config.json +0 -2
tokenizer_config.json
CHANGED
|
@@ -4228,8 +4228,6 @@
|
|
| 4228 |
"<repo_name>",
|
| 4229 |
"<|im_end|>",
|
| 4230 |
"<|im_start|>",
|
| 4231 |
-
"<think>",
|
| 4232 |
-
"</think>",
|
| 4233 |
"<|system|>",
|
| 4234 |
"<|file_sep|>",
|
| 4235 |
"<|repo_name|>",
|
|
|
|
| 4228 |
"<repo_name>",
|
| 4229 |
"<|im_end|>",
|
| 4230 |
"<|im_start|>",
|
|
|
|
|
|
|
| 4231 |
"<|system|>",
|
| 4232 |
"<|file_sep|>",
|
| 4233 |
"<|repo_name|>",
|