File size: 6,149 Bytes
d75e4c9
 
 
 
 
 
d5b0334
 
 
 
 
ea99da1
 
 
 
 
 
d51dce1
103142c
d51dce1
103142c
 
d51dce1
103142c
 
d51dce1
103142c
d51dce1
103142c
 
d51dce1
103142c
 
 
 
54b6dd3
103142c
 
 
 
 
 
 
 
 
d51dce1
103142c
d51dce1
103142c
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
d51dce1
103142c
d51dce1
103142c
 
 
 
 
 
d51dce1
103142c
 
 
d51dce1
103142c
d51dce1
103142c
 
d51dce1
54b6dd3
 
d51dce1
103142c
d909cd1
 
54b6dd3
103142c
54b6dd3
 
 
d51dce1
103142c
762be2e
15d08bb
ac0dc0a
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
f2cfb57
ac0dc0a
103142c
762be2e
 
 
f505f90
 
 
d5b0334
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
---
license: mit
language:
- en
- ro
base_model:
- LLMLit/LLMLit
tags:
- LLMLiT
- Romania
- LLM
datasets:
- LLMLit/LitSet
metrics:
- accuracy
- character
- code_eval
---
---

# **LLMLit – Model Card**  
📌 *High-performance multilingual LLM for English & Romanian NLP tasks*  

🔗 [LLMLit on Hugging Face](https://huggingface.co/LLMLit)  
🔗 [LitSeekR1 on Hugging Face](https://huggingface.co/LLMLit/LitSeekR1)  

---

## **🔍 Quick Summary**  
**LLMLit** este un model de limbaj mare (LLM) performant, multilingv, optimizat din **Meta’s Llama 3.1 8B Instruct**. Este conceput pentru **task-uri NLP în limba engleză și română**, având capacități avansate de **urmărire a instrucțiunilor, înțelegere contextuală și generare de conținut precis**.  

## **📌 Model Details**  
🔹 **Descriere:** LLMLit poate fi utilizat pentru **generare de conținut, sumarizare, răspuns la întrebări și multe altele**.  
🔹 **Fine-tuning:** Modelul a fost antrenat pentru **adherarea la instrucțiuni de înaltă calitate și o mai bună înțelegere a contextului**.  
🔹 **Utilizatori țintă:** Dezvoltatori, cercetători și companii care au nevoie de **soluții NLP fiabile**.  

| Caracteristici  | Detalii |
|----------------|---------|
| 🏢 **Dezvoltat de**  | LLMLit Development Team |
| 💰 **Finanțare**  | Contribuții open-source & sponsori privați |
| 🌍 **Limbaje**  | Engleză (en), Română (ro) |
| 🏷 **Licență**  | MIT |
| 🔗 **Model de bază**  | `meta-llama/Llama-3.1-8B-Instruct` |
| 📂 **Resurse**  | [GitHub Repository](#) / Paper: *To be published* |
| 🚀 **Demo**  | *Coming Soon* |

---

## **💡 Utilizări principale**  
### ✅ **Utilizare directă**  
LLMLit poate fi aplicat la:  
✔️ Generarea de răspunsuri asemănătoare celor umane  
✔️ Traducere între **engleză și română**  
✔️ Sumarizarea articolelor, rapoartelor și documentelor  
✔️ Răspuns la întrebări complexe cu sensibilitate la context  

### 🚀 **Utilizare avansată (fine-tuning & integrare)**  
LLMLit poate fi optimizat pentru:  
🗨️ **Chatboți & asistenți virtuali**  
📚 **Instrumente educaționale bilingve**  
⚖️ **Analiza documentelor legale/medicale**  
🛒 **Automatizare în e-commerce & suport clienți**  

### ❌ **Utilizări nerecomandate**  
⛔ Aplicații neetice (dezinformare, manipulare)  
⛔ Luarea deciziilor critice fără supervizare umană  
⛔ Task-uri care necesită **performanță în timp real**  

---

## **⚠️ Bias, Riscuri și Limitări**  
🔍 **Bias:** Modelul poate reflecta bias-urile existente în datele de antrenament.  
⚠️ **Riscuri:** Poate genera informații inexacte sau neconforme.  
📌 **Limitări:**  
- Performanța depinde de **calitatea prompturilor**.  
- Înțelegere limitată a domeniilor **foarte tehnice sau de nișă**.  

🔹 **Recomandări:**  
✔️ Revizuirea output-ului pentru **aplicații sensibile**.  
✔️ Fine-tuning pentru sarcini specifice pentru **minimizarea riscurilor**.  

---

## **🚀 Cum să începi cu LLMLit**  
Pentru a utiliza LLMLit, instalează librăriile necesare și încarcă modelul:  

```python
from transformers import AutoModelForCausalLM, AutoTokenizer

# Încarcă modelul și tokenizer-ul
model = AutoModelForCausalLM.from_pretrained("llmlit/LLMLit-0.2-8B-Instruct")
tokenizer = AutoTokenizer.from_pretrained("llmlit/LLMLit-0.2-8B-Instruct")

# Generează text
inputs = tokenizer("Your prompt here", return_tensors="pt")
outputs = model.generate(**inputs, max_length=100)
```

---

Iată o documentație simplă și clară despre cum să instalezi **Ollama** și să rulezi **LLMLit** de pe Hugging Face.  

---

# **📌 Ghid de Instalare: Ollama + LLMLit**  

## **🔹 Pasul 1: Instalarea Ollama**  
Ollama este un framework ușor pentru rularea modelelor **LLM (Large Language Models)** local.  

### **🖥️ Pentru macOS & Linux**  
1️⃣ **Deschide un terminal și rulează:**  
```sh
curl -fsSL https://ollama.com/install.sh | sh
```
2️⃣ **Repornește terminalul pentru a aplica modificările.**  

### **🖥️ Pentru Windows (Necesită WSL2)**  
1️⃣ **Activează WSL2 și instalează Ubuntu:**  
   - Deschide **PowerShell** ca administrator și rulează:  
   ```powershell
   wsl --install
   ```
   - Repornește computerul.  

2️⃣ **Instalează Ollama în WSL2:**  
   ```sh
   curl -fsSL https://ollama.com/install.sh | sh
   ```  

3️⃣ **Verifică dacă Ollama este instalat corect:**  
   ```sh
   ollama
   ```
   Dacă apare meniul de utilizare, instalarea a fost realizată cu succes! 🎉  

---

## **🔹 Pasul 2: Instalarea LLMLit de pe Hugging Face**  
LLMLit poate fi descărcat și rulat în Ollama folosind comanda `ollama pull`.  

1️⃣ **Deschide un terminal și rulează:**  
```sh
ollama pull llmlit/LLMLit-0.2-8B-Instruct
```  

2️⃣ **Verifică dacă modelul a fost instalat:**  
```sh
ollama list
```  
Ar trebui să vezi **LLMLit** în lista de modele disponibile. ✅  

---

## **🔹 Pasul 3: Rularea LLMLit în Ollama**  
După instalare, poți începe să interacționezi cu **LLMLit** astfel:  

```sh
ollama run llmlit/LLMLit-0.2-8B-Instruct
```  
Aceasta va deschide o sesiune locală unde poți discuta cu modelul. 🤖  

Pentru a trimite un prompt personalizat:  
```sh
ollama run llmlit/LLMLit-0.2-8B-Instruct "Salut, cum pot folosi LLMLit?"
```  

---

## **🔹 Pasul 4: Utilizarea LLMLit în Python**  
Dacă vrei să integrezi **LLMLit** într-un script Python, instalează librăria necesară:  
```sh
pip install ollama
```  

Apoi, creează un script Python:  
```python
import ollama

response = ollama.chat(model='llmlit/LLMLit-0.2-8B-Instruct', messages=[{'role': 'user', 'content': 'Cum funcționează LLMLit?'}])
print(response['message']['content'])
```  

---

🚀 **Gata!** Acum ai **Ollama + LLMLit** instalat și pregătit de utilizare local!😊

🔗 **Mai multe detalii:** [LLMLit on Hugging Face](https://huggingface.co/LLMLit) 🚀



![Civis3.png](https://cdn-uploads.huggingface.co/production/uploads/6769b18893c0c9156b8265d5/pZch1_YVa6Ixc3d_eYxBR.png)


---