Sentence Similarity
sentence-transformers
Safetensors
gemma3_text
feature-extraction
dense
Generated from Trainer
dataset_size:5749
loss:CosineSimilarityLoss
Eval Results (legacy)
text-embeddings-inference
Instructions to use summerstars/MARK-Embedding with libraries, inference providers, notebooks, and local apps. Follow these links to get started.
- Libraries
- sentence-transformers
How to use summerstars/MARK-Embedding with sentence-transformers:
from sentence_transformers import SentenceTransformer model = SentenceTransformer("summerstars/MARK-Embedding") sentences = [ "Nterprise Linux Services is expected to be available before then end of this year.", "Beta versions of Nterprise Linux Services are expected to be available on certain HP ProLiant servers in July.", "Spain turning back the clock on siestas", "I don't like many flavored drinks." ] embeddings = model.encode(sentences) similarities = model.similarity(embeddings, embeddings) print(similarities.shape) # [4, 4] - Notebooks
- Google Colab
- Kaggle
Upload README.md
Browse files
README.md
ADDED
|
@@ -0,0 +1,66 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
---
|
| 2 |
+
language: ja
|
| 3 |
+
license: apache-2.0
|
| 4 |
+
tags:
|
| 5 |
+
- sentence-transformers
|
| 6 |
+
- embeddings
|
| 7 |
+
- japanese
|
| 8 |
+
- semantic-search
|
| 9 |
+
- highschool-project
|
| 10 |
+
library_name: sentence-transformers
|
| 11 |
+
---
|
| 12 |
+
|
| 13 |
+
# MARK-Embedding
|
| 14 |
+
|
| 15 |
+
**MARK-Embedding** は、高校三年生によって開発された日本語文章向けの埋め込みモデルです。
|
| 16 |
+
SentenceTransformers 互換で、意味ベースの文章類似度計算や検索、クラスタリングなどに利用できます。
|
| 17 |
+
|
| 18 |
+
## モデル概要
|
| 19 |
+
|
| 20 |
+
- **開発者**: 高校三年生 (2025)
|
| 21 |
+
- **用途**: 日本語テキストの意味ベクトル化(埋め込み)
|
| 22 |
+
- **アーキテクチャ**: [SentenceTransformers](https://www.sbert.net/) ベース
|
| 23 |
+
- **想定タスク**
|
| 24 |
+
- 類似文章検索
|
| 25 |
+
- 重複検出
|
| 26 |
+
- 意味クラスタリング
|
| 27 |
+
- FAQ やチャットボット回答候補スコアリング
|
| 28 |
+
|
| 29 |
+
## 使い方
|
| 30 |
+
|
| 31 |
+
```python
|
| 32 |
+
from sentence_transformers import SentenceTransformer, util
|
| 33 |
+
|
| 34 |
+
# モデルをロード
|
| 35 |
+
model = SentenceTransformer("summerstars/MARK-Embedding")
|
| 36 |
+
|
| 37 |
+
# 文章をエンコード
|
| 38 |
+
sentences = ["私はりんごが好きです", "私はバナナが好きです"]
|
| 39 |
+
embeddings = model.encode(sentences)
|
| 40 |
+
|
| 41 |
+
# 類似度を計算
|
| 42 |
+
similarity = util.cos_sim(embeddings[0], embeddings[1])
|
| 43 |
+
print("類似度:", similarity.item())
|
| 44 |
+
```
|
| 45 |
+
|
| 46 |
+
## 推奨用途
|
| 47 |
+
|
| 48 |
+
- 日本語の類似度計算
|
| 49 |
+
- 意味検索・レコメンデーション
|
| 50 |
+
- クラスタリングやトピック分析
|
| 51 |
+
|
| 52 |
+
## 注意点
|
| 53 |
+
|
| 54 |
+
- 本モデルは日本語テキスト向けに調整されていますが、英語など他言語では性能が保証されません。
|
| 55 |
+
- 教育目的・研究目的での利用を推奨します。
|
| 56 |
+
- 商用利用の場合はライセンス条件を確認してください。
|
| 57 |
+
|
| 58 |
+
## ライセンス
|
| 59 |
+
|
| 60 |
+
- 学習に使用したベースモデルのライセンスに準じます。
|
| 61 |
+
- このリポジトリは [Apache-2.0](https://www.apache.org/licenses/LICENSE-2.0) で公開しています。
|
| 62 |
+
|
| 63 |
+
## 開発背景
|
| 64 |
+
|
| 65 |
+
このモデルは、高校三年生が自然言語処理と機械学習を学ぶ過程で作成したものです。
|
| 66 |
+
より多くの人が日本語の意味検索やAI開発を気軽に体験できるように公開しています。
|