Update README.md
Browse files
README.md
CHANGED
|
@@ -16,4 +16,4 @@ license:
|
|
| 16 |
|
| 17 |
[Bingsu/ko_BBPE_tokenizer_roberta](https://huggingface.co/Bingsu/ko_BBPE_tokenizer_roberta)์์ post-processor๋ฅผ BertProcessing๋ก ๋ณ๊ฒฝํ๊ณ ํ ํฌ๋์ด์ ํด๋์ค๋ฅผ `BertTokenizerFast`๋ก ๋ณ๊ฒฝํ ๊ฒ์
๋๋ค.
|
| 18 |
|
| 19 |
-
๋ ๋ฌธ์ฅ์ ํ ํฌ๋์ด์ ์ ์
๋ ฅํ์ ๋, sep ํ ํฐ์ด ๋ค๋ฅด๊ฒ ์ฒ๋ฆฌ๋๋ค๋ ๊ฒ์
|
|
|
|
| 16 |
|
| 17 |
[Bingsu/ko_BBPE_tokenizer_roberta](https://huggingface.co/Bingsu/ko_BBPE_tokenizer_roberta)์์ post-processor๋ฅผ BertProcessing๋ก ๋ณ๊ฒฝํ๊ณ ํ ํฌ๋์ด์ ํด๋์ค๋ฅผ `BertTokenizerFast`๋ก ๋ณ๊ฒฝํ ๊ฒ์
๋๋ค.
|
| 18 |
|
| 19 |
+
๋ ๋ฌธ์ฅ์ ํ ํฌ๋์ด์ ์ ์
๋ ฅํ์ ๋, sep ํ ํฐ์ด ๋ค๋ฅด๊ฒ ์ฒ๋ฆฌ๋๋ค๋ ๊ฒ์ ์ ์ธํ๊ณ ๊ฒฐ๊ณผ๋ ๋์ผํฉ๋๋ค.
|