| # Biblo XLM-RoBERTa ๋ชจ๋ธ |
|
|
| ์ด ๋ ํฌ์งํ ๋ฆฌ๋ ํ์ธํ๋๋ XLM-RoBERTa ๋ชจ๋ธ์ ํฌํจํ๊ณ ์์ต๋๋ค. |
|
|
| ## ๋ชจ๋ธ ์ ๋ณด |
|
|
| ์ด ๋ชจ๋ธ์ XLM-RoBERTa ์ํคํ
์ฒ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํ๋ฉฐ, ํน์ ํ์คํฌ์ ๋ง๊ฒ ํ์ธํ๋๋์์ต๋๋ค. |
|
|
| ## ์ฌ์ฉ ๋ฐฉ๋ฒ |
|
|
| ์๋ ์ฝ๋๋ฅผ ์ฌ์ฉํ์ฌ ๋ชจ๋ธ๊ณผ ํ ํฌ๋์ด์ ๋ฅผ ๋ถ๋ฌ์ฌ ์ ์์ต๋๋ค: |
|
|
| ```python |
| from transformers import XLMRobertaModel, XLMRobertaTokenizer |
| |
| # ๋ชจ๋ธ๊ณผ ํ ํฌ๋์ด์ ๋ก๋ |
| model_name = "vanguard-huggingface/biblo-model" # ์ฌ๊ธฐ์ ๋ณธ์ธ์ ๋ชจ๋ธ ID๋ฅผ ๋ฃ์ผ์ธ์ |
| model = XLMRobertaModel.from_pretrained(model_name) |
| tokenizer = XLMRobertaTokenizer.from_pretrained(model_name) |
| |
| # ์์ ์ฌ์ฉ |
| text = "์ฌ๊ธฐ์ ์์ ํ
์คํธ๋ฅผ ๋ฃ์ผ์ธ์." |
| inputs = tokenizer(text, return_tensors="pt") |
| outputs = model(**inputs) |
| ``` |
|
|
| ## ์๊ตฌ์ฌํญ |
|
|
| ์ด ๋ชจ๋ธ์ ์ฌ์ฉํ๊ธฐ ์ํด์๋ ๋ค์ ํจํค์ง๊ฐ ํ์ํฉ๋๋ค: |
| - transformers |
| - torch |
| - sentencepiece |
|
|
| ๋ค์ ๋ช
๋ น์ด๋ก ์ค์นํ ์ ์์ต๋๋ค: |
| ``` |
| pip install transformers torch sentencepiece |
| ``` |
|
|
| ## ๋ผ์ด์ผ์ค |
|
|
| ์ด ๋ชจ๋ธ์ ๊ฐ์ธ ๋ฐ ์ฐ๊ตฌ ๋ชฉ์ ์ผ๋ก ์ฌ์ฉํ ์ ์์ต๋๋ค. |