eval/this_model.json

{
 "Horizon-Labs/multilingual-web-topic-format-small": {
  "en_llama405b": {
   "topic": {
    "n": 3000,
    "acc": 0.8016666666666666,
    "macro_f1": 0.7875987937262346,
    "lang_mean_acc": 0.8016666666666666
   },
   "format": {
    "n": 3000,
    "acc": 0.6676666666666666,
    "macro_f1": 0.618600033589074,
    "lang_mean_acc": 0.6676666666666666
   }
  },
  "fw2_judged": {
   "topic": {
    "n": 9750,
    "acc": 0.7795897435897436,
    "macro_f1": 0.7537650156938996,
    "lang_mean_acc": 0.7795897435897436
   },
   "format": {
    "n": 9750,
    "acc": 0.6954871794871795,
    "macro_f1": 0.6360103864707396,
    "lang_mean_acc": 0.6954871794871795
   }
  }
 }
}