Spaces:
Running
Running
| [ | |
| { | |
| "set": "size50_seed1", | |
| "label": "size 50 · seed 1", | |
| "size": 50, | |
| "seed": 1, | |
| "n_docs": 51, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size50_seed1.json", | |
| "eval_file": "eval_size50_seed1.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size50_seed2", | |
| "label": "size 50 · seed 2", | |
| "size": 50, | |
| "seed": 2, | |
| "n_docs": 50, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size50_seed2.json", | |
| "eval_file": "eval_size50_seed2.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size50_seed3", | |
| "label": "size 50 · seed 3", | |
| "size": 50, | |
| "seed": 3, | |
| "n_docs": 51, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size50_seed3.json", | |
| "eval_file": "eval_size50_seed3.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size500_seed1", | |
| "label": "size 500 · seed 1", | |
| "size": 500, | |
| "seed": 1, | |
| "n_docs": 503, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size500_seed1.json", | |
| "eval_file": "eval_size500_seed1.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size500_seed2", | |
| "label": "size 500 · seed 2", | |
| "size": 500, | |
| "seed": 2, | |
| "n_docs": 503, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size500_seed2.json", | |
| "eval_file": "eval_size500_seed2.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size500_seed3", | |
| "label": "size 500 · seed 3", | |
| "size": 500, | |
| "seed": 3, | |
| "n_docs": 504, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size500_seed3.json", | |
| "eval_file": "eval_size500_seed3.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size5000_seed1", | |
| "label": "size 5000 · seed 1", | |
| "size": 5000, | |
| "seed": 1, | |
| "n_docs": 5030, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size5000_seed1.json", | |
| "eval_file": "eval_size5000_seed1.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size5000_seed2", | |
| "label": "size 5000 · seed 2", | |
| "size": 5000, | |
| "seed": 2, | |
| "n_docs": 5029, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size5000_seed2.json", | |
| "eval_file": "eval_size5000_seed2.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "28", | |
| "29" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| }, | |
| { | |
| "set": "size5000_seed3", | |
| "label": "size 5000 · seed 3", | |
| "size": 5000, | |
| "seed": 3, | |
| "n_docs": 5039, | |
| "n_questions": 500, | |
| "corpus_file": "corpus_size5000_seed3.json", | |
| "eval_file": "eval_size5000_seed3.json", | |
| "facets": [ | |
| { | |
| "key": "Difficulty", | |
| "values": [ | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "24", | |
| "25" | |
| ] | |
| }, | |
| { | |
| "key": "Type", | |
| "values": [ | |
| "0", | |
| "1", | |
| "2", | |
| "3", | |
| "4", | |
| "5", | |
| "6", | |
| "7", | |
| "8", | |
| "9", | |
| "10", | |
| "11", | |
| "12", | |
| "13", | |
| "14", | |
| "15", | |
| "16", | |
| "17", | |
| "18", | |
| "19", | |
| "20", | |
| "21", | |
| "22", | |
| "23", | |
| "24", | |
| "25", | |
| "26", | |
| "27", | |
| "28", | |
| "29", | |
| "30", | |
| "31", | |
| "32", | |
| "33", | |
| "34", | |
| "35", | |
| "36", | |
| "37", | |
| "38", | |
| "39", | |
| "40", | |
| "41", | |
| "42", | |
| "43", | |
| "44", | |
| "45", | |
| "46", | |
| "47", | |
| "48", | |
| "49" | |
| ] | |
| } | |
| ] | |
| } | |
| ] |