How to use tranhuudan-fullstack-ai-engineer/stage2 with sentence-transformers:
from sentence_transformers import SentenceTransformer model = SentenceTransformer("tranhuudan-fullstack-ai-engineer/stage2") sentences = [ "em_gái grany người da trắng cô ấy muốn đi học", "bà thường kể câu_chuyện về chị_gái bà người chồng quyết_định chuyển đến thành_phố augusta chuyển sang màu trắng", "thêm thời_gian thông_thường thêm phát_triển kế_hoạch hành_động", "em_gái grany người da trắng" ] embeddings = model.encode(sentences) similarities = model.similarity(embeddings, embeddings) print(similarities.shape) # [4, 4]
https://huggingface.co/tranhuudan-fullstack-ai-engineer/stage2/resolve/main/bpe.codes
hf download hf://tranhuudan-fullstack-ai-engineer/stage2/bpe.codes
curl -L -o bpe.codes https://huggingface.co/tranhuudan-fullstack-ai-engineer/stage2/resolve/main/bpe.codes
