How to use Mead0w1ark/multilingual-e5-small-hs-codes with sentence-transformers:
from sentence_transformers import SentenceTransformer model = SentenceTransformer("Mead0w1ark/multilingual-e5-small-hs-codes") sentences = [ "query: DAIRY PRODUCE; CHEESE (NOT GRATED, POWDERED OR PROCESSED), N.E.C. IN HEADING NO. 0406 POWDERED IN VACUUM PACKS 14290 PCS", "passage: Tôm đông lạnh, sơ chế, bỏ đầu bỏ vỏ, để xuất khẩu theo điều kiện thương mại tiêu chuẩn, điều kiện giao hàng FOB", "passage: Phô mai loại khác, để thông quan và khai báo nhập khẩu, kèm hóa đơn thương mại và phiếu đóng gói", "passage: Organic fresh tomatoes, hydroponic, for bulk procurement program, palletized for container shipment" ] embeddings = model.encode(sentences) similarities = model.similarity(embeddings, embeddings) print(similarities.shape) # [4, 4]
How to fix it?