Add evaluation results on the default config of LeoCordoba/CC-NEWS-ES-titles

README.md

@@ -1,8 +1,8 @@
 
 ---
-language: 
+language:
 - es
-thumbnail: 
+thumbnail: null
 tags:
 - summarization
 - mt5
@@ -14,10 +14,66 @@ datasets:
 metrics:
 - rouge
 widget:
-- text: "La Guardia Civil ha desarticulado un grupo organizado dedicado a copiar en los examenes teoricos para la obtencion del permiso de conducir. Para ello, empleaban receptores y camaras de alta tecnologia y operaban desde la misma sede del Centro de examenes de la Direccion General de Trafico (DGT) en Mostoles. Es lo que han llamado la Operacion pinga.
-El grupo desarticulado ofrecia el servicio de transporte y tecnologia para copiar y poder aprobar. Por dicho servicio cobraban 1.000 euros. Los investigadores sorprendieron in fraganti a una mujer intentando copiar en el examen. Portaba una chaqueta con dispositivos electronicos ocultos, concretamente un telefono movil al que estaba conectada una camara que habia sido insertada en la parte frontal de la chaqueta para transmitir online el examen y que orientada al ordenador del Centro de Examenes en el que aparecen las preguntas, permitia visualizar las imagenes en otro ordenador alojado en el interior de un vehiculo estacionado en las inmediaciones del centro. En este vehiculo, se encontraban el resto del grupo desarticulado con varios ordenadores portatiles y tablets abiertos y conectados a paginas de test de la DGT para consultar las respuestas. Estos, comunicaban con la mujer que estaba en el aula haciendo el examen a traves de un diminuto receptor bluetooth que portaba en el interior de su oido. 
-Luis de Lama, portavoz de la Guardia Civil de Trafico destaca que los ciudadanos, eran de origen chino, y copiaban en el examen utilizando la tecnologia facilitada por una organizacion. Destaca que, ademas de parte del fraude que supone copiar en un examen muchos de estos ciudadanos desconocian el idioma, no hablan ni entienden el español lo que supone un grave riesgo para la seguridad vial por desconocer las señales y letreros que avisan en carretera de muchas incidencias.
-"
+- text: "La Guardia Civil ha desarticulado un grupo organizado dedicado a copiar en\
+    \ los examenes teoricos para la obtencion del permiso de conducir. Para ello,\
+    \ empleaban receptores y camaras de alta tecnologia y operaban desde la misma\
+    \ sede del Centro de examenes de la Direccion General de Trafico (DGT) en Mostoles.\
+    \ Es lo que han llamado la Operacion pinga. El grupo desarticulado ofrecia el\
+    \ servicio de transporte y tecnologia para copiar y poder aprobar. Por dicho servicio\
+    \ cobraban 1.000 euros. Los investigadores sorprendieron in fraganti a una mujer\
+    \ intentando copiar en el examen. Portaba una chaqueta con dispositivos electronicos\
+    \ ocultos, concretamente un telefono movil al que estaba conectada una camara\
+    \ que habia sido insertada en la parte frontal de la chaqueta para transmitir\
+    \ online el examen y que orientada al ordenador del Centro de Examenes en el que\
+    \ aparecen las preguntas, permitia visualizar las imagenes en otro ordenador alojado\
+    \ en el interior de un vehiculo estacionado en las inmediaciones del centro. En\
+    \ este vehiculo, se encontraban el resto del grupo desarticulado con varios ordenadores\
+    \ portatiles y tablets abiertos y conectados a paginas de test de la DGT para\
+    \ consultar las respuestas. Estos, comunicaban con la mujer que estaba en el aula\
+    \ haciendo el examen a traves de un diminuto receptor bluetooth que portaba en\
+    \ el interior de su oido. Luis de Lama, portavoz de la Guardia Civil de Trafico\
+    \ destaca que los ciudadanos, eran de origen chino, y copiaban en el examen utilizando\
+    \ la tecnologia facilitada por una organizacion. Destaca que, ademas de parte\
+    \ del fraude que supone copiar en un examen muchos de estos ciudadanos desconocian\
+    \ el idioma, no hablan ni entienden el espa\xF1ol lo que supone un grave riesgo\
+    \ para la seguridad vial por desconocer las se\xF1ales y letreros que avisan en\
+    \ carretera de muchas incidencias. "
+model-index:
+- name: josmunpen/mt5-small-spanish-summarization
+  results:
+  - task:
+      type: summarization
+      name: Summarization
+    dataset:
+      name: LeoCordoba/CC-NEWS-ES-titles
+      type: LeoCordoba/CC-NEWS-ES-titles
+      config: default
+      split: test
+    metrics:
+    - name: ROUGE-1
+      type: rouge
+      value: 20.8562
+      verified: true
+    - name: ROUGE-2
+      type: rouge
+      value: 6.4586
+      verified: true
+    - name: ROUGE-L
+      type: rouge
+      value: 18.043
+      verified: true
+    - name: ROUGE-LSUM
+      type: rouge
+      value: 18.0619
+      verified: true
+    - name: loss
+      type: loss
+      value: 4.6041717529296875
+      verified: true
+    - name: gen_len
+      type: gen_len
+      value: 17.5618
+      verified: true
 ---
 # mt5-small-spanish-summarization