| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.18406, | |
| "NDCG@3": 0.2229525, | |
| "NDCG@5": 0.24138916666666663, | |
| "NDCG@10": 0.264705, | |
| "NDCG@20": 0.2836966666666667, | |
| "NDCG@50": 0.3036575, | |
| "NDCG@100": 0.317455, | |
| "NDCG@200": 0.3279316666666667, | |
| "NDCG@1000": 0.3471208333333333 | |
| }, | |
| "map": { | |
| "MAP@1": 0.15620583333333335, | |
| "MAP@3": 0.19959000000000002, | |
| "MAP@5": 0.21138416666666668, | |
| "MAP@10": 0.22192916666666665, | |
| "MAP@20": 0.22766583333333335, | |
| "MAP@50": 0.23130833333333337, | |
| "MAP@100": 0.2327866666666667, | |
| "MAP@200": 0.2334733333333333, | |
| "MAP@1000": 0.23405083333333332 | |
| }, | |
| "precision": { | |
| "P@1": 0.18406, | |
| "P@3": 0.10411250000000001, | |
| "P@5": 0.0760425, | |
| "P@10": 0.04850833333333333, | |
| "P@20": 0.0298675, | |
| "P@50": 0.015099166666666665, | |
| "P@100": 0.008941666666666665, | |
| "P@200": 0.005136666666666667, | |
| "P@1000": 0.0013391666666666667 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.15620583333333335, | |
| "Recall@3": 0.24788249999999998, | |
| "Recall@5": 0.2942608333333333, | |
| "Recall@10": 0.3632225, | |
| "Recall@20": 0.4335508333333334, | |
| "Recall@50": 0.5252308333333333, | |
| "Recall@100": 0.6014158333333334, | |
| "Recall@200": 0.6680558333333332, | |
| "Recall@1000": 0.8154633333333333 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.18406, | |
| "MRR@3": 0.23019749999999997, | |
| "MRR@5": 0.24204666666666663, | |
| "MRR@10": 0.25234, | |
| "MRR@20": 0.257585, | |
| "MRR@50": 0.2605608333333334, | |
| "MRR@100": 0.26161333333333336, | |
| "MRR@200": 0.26206250000000003, | |
| "MRR@1000": 0.26239833333333334 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.18406, | |
| "R_cap@3": 0.2531541666666666, | |
| "R_cap@5": 0.2966533333333334, | |
| "R_cap@10": 0.3642716666666666, | |
| "R_cap@20": 0.43398416666666667, | |
| "R_cap@50": 0.5253808333333334, | |
| "R_cap@100": 0.6014775, | |
| "R_cap@200": 0.6680633333333333, | |
| "R_cap@1000": 0.8154633333333333 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7429125, | |
| "Hole@3": 0.8188533333333333, | |
| "Hole@5": 0.8458958333333334, | |
| "Hole@10": 0.8714099999999999, | |
| "Hole@20": 0.8905433333333334, | |
| "Hole@50": 0.9064025, | |
| "Hole@100": 0.9140950000000001, | |
| "Hole@200": 0.9195925000000003, | |
| "Hole@1000": 0.927175 | |
| } | |
| } | |
| } | |