Felsefe bpe tokenizer
önceki datasetimde ki verileri texte dönüştürüp daha sonra bir bpe tokenizer ile eğitim yaptım kelime genişliği 8000 bu modelin https://huggingface.co/datasets/yoitsmeyusuf/felsefe_finetune
Inference Providers NEW
This model isn't deployed by any Inference Provider. 🙋 Ask for provider support
# Load model directly from transformers import AutoModel model = AutoModel.from_pretrained("yoitsmeyusuf/felsefe-bpe-tokenizer", device_map="auto")