Update README.md
Browse files
README.md
CHANGED
|
@@ -9,11 +9,33 @@ tags:
|
|
| 9 |
- medical
|
| 10 |
---
|
| 11 |
|
| 12 |
-
# Korean Medical DPR(Dense Passage Retrieval)
|
| 13 |
|
| 14 |
## 1. Intro
|
| 15 |
**์๋ฃ ๋ถ์ผ**์์ ์ฌ์ฉํ ์ ์๋ Bi-Encoder ๊ตฌ์กฐ์ ๊ฒ์ ๋ชจ๋ธ์
๋๋ค.
|
| 16 |
-
ํยท์ ํผ์ฉ์ฒด์ ์๋ฃ ๊ธฐ๋ก์ ์ฒ๋ฆฌํ๊ธฐ ์ํด **SapBERT-KO-EN** ์ ๋ฒ ์ด์ค ๋ชจ๋ธ๋ก ์ด์ฉํ์ต๋๋ค.
|
| 17 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 18 |
|
| 19 |
|
|
|
|
| 9 |
- medical
|
| 10 |
---
|
| 11 |
|
| 12 |
+
# ๐ Korean Medical DPR(Dense Passage Retrieval)
|
| 13 |
|
| 14 |
## 1. Intro
|
| 15 |
**์๋ฃ ๋ถ์ผ**์์ ์ฌ์ฉํ ์ ์๋ Bi-Encoder ๊ตฌ์กฐ์ ๊ฒ์ ๋ชจ๋ธ์
๋๋ค.
|
| 16 |
+
ํยท์ ํผ์ฉ์ฒด์ ์๋ฃ ๊ธฐ๋ก์ ์ฒ๋ฆฌํ๊ธฐ ์ํด **SapBERT-KO-EN** ์ ๋ฒ ์ด์ค ๋ชจ๋ธ๋ก ์ด์ฉํ์ต๋๋ค.
|
| 17 |
+
์ง๋ฌธ์ Question Encoder๋ก, ํ
์คํธ๋ Context Encoder๋ฅผ ์ด์ฉํด ์ธ์ฝ๋ฉํฉ๋๋ค.
|
| 18 |
+
|
| 19 |
+
- Question Encoder : [https://huggingface.co/snumin44/medical-biencoder-ko-bert-question](https://huggingface.co/snumin44/medical-biencoder-ko-bert-question)
|
| 20 |
+
|
| 21 |
+
(โป ์ด ๋ชจ๋ธ์ AI Hub์ [์ด๊ฑฐ๋ AI ํฌ์ค์ผ์ด ์ง์ ์๋ต ๋ฐ์ดํฐ](https://aihub.or.kr/aihubdata/data/view.do?currMenu=115&topMenu=100&dataSetSn=71762)๋ก ํ์ตํ ๋ชจ๋ธ์
๋๋ค.)
|
| 22 |
+
|
| 23 |
+
## 2. Model
|
| 24 |
+
|
| 25 |
+
**(1) Self Alignment Pretraining (SAP)**
|
| 26 |
+
|
| 27 |
+
ํ๊ตญ ์๋ฃ ๊ธฐ๋ก์ ํยท์ ํผ์ฉ์ฒด๋ก ์ด๋ฃจ์ด์ ธ ์์ต๋๋ค.
|
| 28 |
+
Multi Similarity Loss๋ฅผ ์ด์ฉํด ์ธ์ด๋ ํํ์ ์๊ด ์์ด **๋์ผํ ์ฝ๋์ ์ฉ์ด** ๊ฐ์ ๋์ ์ ์ฌ๋๋ฅผ ๊ฐ๋๋ก ํ์ตํฉ๋๋ค.
|
| 29 |
+
```
|
| 30 |
+
์) C3843080 || ๊ณ ํ์ ์งํ
|
| 31 |
+
C3843080 || Hypertension
|
| 32 |
+
C3843080 || High Blood Pressure
|
| 33 |
+
C3843080 || HTN
|
| 34 |
+
C3843080 || HBP
|
| 35 |
+
```
|
| 36 |
+
|
| 37 |
+
|
| 38 |
+
- [SapBERT-KO-EN]()
|
| 39 |
+
- [Github]()
|
| 40 |
|
| 41 |
|