phantom-wiki-viewer / sets.json
timchen0618's picture
Add PhantomWiki viewer (Corpus + Eval tabs; 9 size/seed universes)
548b2a6 verified
Raw
History Blame Contribute Delete
14.1 kB
[
{
"set": "size50_seed1",
"label": "size 50 · seed 1",
"size": 50,
"seed": 1,
"n_docs": 51,
"n_questions": 500,
"corpus_file": "corpus_size50_seed1.json",
"eval_file": "eval_size50_seed1.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size50_seed2",
"label": "size 50 · seed 2",
"size": 50,
"seed": 2,
"n_docs": 50,
"n_questions": 500,
"corpus_file": "corpus_size50_seed2.json",
"eval_file": "eval_size50_seed2.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size50_seed3",
"label": "size 50 · seed 3",
"size": 50,
"seed": 3,
"n_docs": 51,
"n_questions": 500,
"corpus_file": "corpus_size50_seed3.json",
"eval_file": "eval_size50_seed3.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size500_seed1",
"label": "size 500 · seed 1",
"size": 500,
"seed": 1,
"n_docs": 503,
"n_questions": 500,
"corpus_file": "corpus_size500_seed1.json",
"eval_file": "eval_size500_seed1.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size500_seed2",
"label": "size 500 · seed 2",
"size": 500,
"seed": 2,
"n_docs": 503,
"n_questions": 500,
"corpus_file": "corpus_size500_seed2.json",
"eval_file": "eval_size500_seed2.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size500_seed3",
"label": "size 500 · seed 3",
"size": 500,
"seed": 3,
"n_docs": 504,
"n_questions": 500,
"corpus_file": "corpus_size500_seed3.json",
"eval_file": "eval_size500_seed3.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size5000_seed1",
"label": "size 5000 · seed 1",
"size": 5000,
"seed": 1,
"n_docs": 5030,
"n_questions": 500,
"corpus_file": "corpus_size5000_seed1.json",
"eval_file": "eval_size5000_seed1.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size5000_seed2",
"label": "size 5000 · seed 2",
"size": 5000,
"seed": 2,
"n_docs": 5029,
"n_questions": 500,
"corpus_file": "corpus_size5000_seed2.json",
"eval_file": "eval_size5000_seed2.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"28",
"29"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
},
{
"set": "size5000_seed3",
"label": "size 5000 · seed 3",
"size": 5000,
"seed": 3,
"n_docs": 5039,
"n_questions": 500,
"corpus_file": "corpus_size5000_seed3.json",
"eval_file": "eval_size5000_seed3.json",
"facets": [
{
"key": "Difficulty",
"values": [
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"24",
"25"
]
},
{
"key": "Type",
"values": [
"0",
"1",
"2",
"3",
"4",
"5",
"6",
"7",
"8",
"9",
"10",
"11",
"12",
"13",
"14",
"15",
"16",
"17",
"18",
"19",
"20",
"21",
"22",
"23",
"24",
"25",
"26",
"27",
"28",
"29",
"30",
"31",
"32",
"33",
"34",
"35",
"36",
"37",
"38",
"39",
"40",
"41",
"42",
"43",
"44",
"45",
"46",
"47",
"48",
"49"
]
}
]
}
]