Hugging Face
Models
Datasets
Spaces
Community
Docs
Enterprise
Pricing
Log In
Sign Up
Adjoumani
/
frenchTokenizer
like
0
Model card
Files
Files and versions
xet
Community
main
frenchTokenizer
588 kB
1 contributor
History:
2 commits
Adjoumani
Première version du tokenizer Français
1565884
verified
12 months ago
.gitattributes
1.52 kB
initial commit
12 months ago
merges.txt
55.6 kB
Première version du tokenizer Français
12 months ago
special_tokens_map.json
125 Bytes
Première version du tokenizer Français
12 months ago
tokenizer.json
435 kB
Première version du tokenizer Français
12 months ago
tokenizer_config.json
1.17 kB
Première version du tokenizer Français
12 months ago
vocab.json
93.8 kB
Première version du tokenizer Français
12 months ago
