Update README.md
Browse files
README.md
CHANGED
|
@@ -54,7 +54,7 @@ model-index:
|
|
| 54 |
|
| 55 |
# KiDBERT: Modelo de Linguagem para Kikongo
|
| 56 |
|
| 57 |
-
**KiDBERT** é o primeiro modelo Transformer desenvolvido especificamente para a língua **Kikongo**, baseado na arquitetura **
|
| 58 |
O modelo foi treinado com um grande corpus textual de Kikongo, incluindo dados linguísticos, morfológicos e contextuais, provenientes de textos literários, religiosos e culturais.
|
| 59 |
|
| 60 |
---
|
|
@@ -72,7 +72,7 @@ O modelo foi treinado com um grande corpus textual de Kikongo, incluindo dados l
|
|
| 72 |
|
| 73 |
### O que é o Backbone?
|
| 74 |
O **backbone** é a espinha dorsal do modelo — a parte responsável por extrair representações (features) linguísticas a partir do texto.
|
| 75 |
-
No **KiDBERT**, o backbone é o **
|
| 76 |
|
| 77 |
---
|
| 78 |
|
|
|
|
| 54 |
|
| 55 |
# KiDBERT: Modelo de Linguagem para Kikongo
|
| 56 |
|
| 57 |
+
**KiDBERT** é o primeiro modelo Transformer desenvolvido especificamente para a língua **Kikongo**, baseado na arquitetura **DISTILBERT**.
|
| 58 |
O modelo foi treinado com um grande corpus textual de Kikongo, incluindo dados linguísticos, morfológicos e contextuais, provenientes de textos literários, religiosos e culturais.
|
| 59 |
|
| 60 |
---
|
|
|
|
| 72 |
|
| 73 |
### O que é o Backbone?
|
| 74 |
O **backbone** é a espinha dorsal do modelo — a parte responsável por extrair representações (features) linguísticas a partir do texto.
|
| 75 |
+
No **KiDBERT**, o backbone é o **DISTILBERT**, que foi adaptado e reentreinado com o corpus Kikongo para aprender as dependências e estruturas linguísticas dessa língua.
|
| 76 |
|
| 77 |
---
|
| 78 |
|