| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.191785, | |
| "NDCG@3": 0.22964416666666665, | |
| "NDCG@5": 0.24790416666666668, | |
| "NDCG@10": 0.2689125, | |
| "NDCG@20": 0.28783416666666667, | |
| "NDCG@50": 0.30862, | |
| "NDCG@100": 0.3217433333333333, | |
| "NDCG@200": 0.33254666666666666, | |
| "NDCG@1000": 0.35154250000000004 | |
| }, | |
| "map": { | |
| "MAP@1": 0.16045, | |
| "MAP@3": 0.20496, | |
| "MAP@5": 0.2168866666666666, | |
| "MAP@10": 0.22648166666666666, | |
| "MAP@20": 0.23229249999999999, | |
| "MAP@50": 0.23614249999999995, | |
| "MAP@100": 0.23753583333333328, | |
| "MAP@200": 0.23825333333333332, | |
| "MAP@1000": 0.2388283333333333 | |
| }, | |
| "precision": { | |
| "P@1": 0.191785, | |
| "P@3": 0.10717333333333334, | |
| "P@5": 0.07819333333333332, | |
| "P@10": 0.04877416666666665, | |
| "P@20": 0.030159166666666667, | |
| "P@50": 0.015413333333333334, | |
| "P@100": 0.009021666666666667, | |
| "P@200": 0.005186666666666667, | |
| "P@1000": 0.001340833333333333 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.16045, | |
| "Recall@3": 0.2544575, | |
| "Recall@5": 0.3006583333333333, | |
| "Recall@10": 0.3638466666666666, | |
| "Recall@20": 0.4333991666666667, | |
| "Recall@50": 0.5287158333333333, | |
| "Recall@100": 0.6019383333333334, | |
| "Recall@200": 0.6707433333333332, | |
| "Recall@1000": 0.8166041666666667 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.191785, | |
| "MRR@3": 0.23855000000000004, | |
| "MRR@5": 0.2503225, | |
| "MRR@10": 0.25958749999999997, | |
| "MRR@20": 0.2646675, | |
| "MRR@50": 0.2677983333333333, | |
| "MRR@100": 0.26882500000000004, | |
| "MRR@200": 0.26928499999999994, | |
| "MRR@1000": 0.2696158333333333 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.191785, | |
| "R_cap@3": 0.2602333333333333, | |
| "R_cap@5": 0.30328916666666667, | |
| "R_cap@10": 0.36496833333333334, | |
| "R_cap@20": 0.43395083333333334, | |
| "R_cap@50": 0.52893, | |
| "R_cap@100": 0.6020241666666667, | |
| "R_cap@200": 0.6707508333333333, | |
| "R_cap@1000": 0.8166041666666667 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7298749999999999, | |
| "Hole@3": 0.8100466666666665, | |
| "Hole@5": 0.8372991666666666, | |
| "Hole@10": 0.8669091666666667, | |
| "Hole@20": 0.8862683333333333, | |
| "Hole@50": 0.9035375, | |
| "Hole@100": 0.9118466666666666, | |
| "Hole@200": 0.9179083333333332, | |
| "Hole@1000": 0.9267599999999999 | |
| } | |
| } | |
| } | |