tokenizer_IUPAC.model 和 tokenizer_FASTA.model 一样
#9
by
forcegalaxy
- opened
感谢维护这个出色的模型！请问IUPAC的词表（tokenizer_IUPAC.model ）是不是上传错了，和FASTA的词表（tokenizer_IUPAC.model ）一模一样，导致IUPAC的分词最终都会回退到BPE
感谢维护这个出色的模型！请问IUPAC的词表（tokenizer_IUPAC.model ）是不是上传错了，和FASTA的词表（tokenizer_IUPAC.model ）一模一样，导致IUPAC的分词最终都会回退到BPE