File size: 2,147 Bytes
5374a2d |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 |
{
"6": {
"score": 0.9666666666666667,
"success": {},
"failure": {
"8": {
"modification": "(such as:add /delete /modify/ ...)",
"score": 0.96
},
"12": {
"modification": "Integrate self-ask mechanism before generating answers",
"score": 0.49333333333333335
},
"11": {
"modification": "Introduce self-ask mechanism before generating answers",
"score": 0.8533333333333334
}
}
},
"1": {
"score": 0.9666666666666667,
"success": {},
"failure": {
"3": {
"modification": "(add QAScEnsemble operator for improved solution selection)",
"score": 0.96
},
"4": {
"modification": "(add a Review operator to evaluate the generated answer before ensemble selection)",
"score": 0.11333333333333334
}
}
},
"3": {
"score": 0.96,
"success": {
"5": {
"modification": "modify: Added a step to generate an initial solution before using QAScEnsemble for better context.",
"score": 0.9666666666666667
}
},
"failure": {}
},
"0": {
"score": 0.9466666666666667,
"success": {
"10": {
"modification": "add QAScEnsemble operator to improve solution selection",
"score": 0.96
},
"1": {
"modification": "(add: QAScEnsemble)",
"score": 0.9666666666666667
},
"2": {
"modification": "add QAScEnsemble operator to enhance solution selection",
"score": 0.96
}
},
"failure": {}
},
"2": {
"score": 0.96,
"success": {
"6": {
"modification": "(such as:add /delete /modify/ ...)",
"score": 0.9666666666666667
}
},
"failure": {}
}
} |