pasha
commited on
Commit
·
d8fe7bb
1
Parent(s):
668ae64
Readme updated
Browse files
README.md
CHANGED
|
@@ -4,7 +4,7 @@ license: mit
|
|
| 4 |
|
| 5 |
# morphemizer - Morpheme-based Russian Tokenizer
|
| 6 |
|
| 7 |
-
|
| 8 |
|
| 9 |
В данный момент проект на ранней стадии разработки.
|
| 10 |
|
|
|
|
| 4 |
|
| 5 |
# morphemizer - Morpheme-based Russian Tokenizer
|
| 6 |
|
| 7 |
+
Репозиторий содержит только токенизатор русского текста, данный токенизатор позволяет преобразовывать входные текстовые данные в последовательность токенов, каждый из которых представляет из себя морфемы из которых состоят слова.
|
| 8 |
|
| 9 |
В данный момент проект на ранней стадии разработки.
|
| 10 |
|