| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.21213666666666667, | |
| "NDCG@3": 0.2506633333333333, | |
| "NDCG@5": 0.26989500000000005, | |
| "NDCG@10": 0.29382749999999996, | |
| "NDCG@20": 0.3128033333333334, | |
| "NDCG@50": 0.3338566666666667, | |
| "NDCG@100": 0.3470849999999999, | |
| "NDCG@200": 0.35768749999999994, | |
| "NDCG@1000": 0.37589500000000003 | |
| }, | |
| "map": { | |
| "MAP@1": 0.18000166666666664, | |
| "MAP@3": 0.2254708333333333, | |
| "MAP@5": 0.23794, | |
| "MAP@10": 0.24887666666666663, | |
| "MAP@20": 0.2547658333333333, | |
| "MAP@50": 0.2586833333333333, | |
| "MAP@100": 0.2600891666666666, | |
| "MAP@200": 0.26079916666666664, | |
| "MAP@1000": 0.2613725 | |
| }, | |
| "precision": { | |
| "P@1": 0.21213666666666667, | |
| "P@3": 0.11628833333333333, | |
| "P@5": 0.08396166666666667, | |
| "P@10": 0.05308916666666666, | |
| "P@20": 0.03235833333333333, | |
| "P@50": 0.016341666666666664, | |
| "P@100": 0.009485833333333334, | |
| "P@200": 0.005423333333333333, | |
| "P@1000": 0.0013875000000000005 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.18000166666666664, | |
| "Recall@3": 0.27587249999999996, | |
| "Recall@5": 0.32479166666666665, | |
| "Recall@10": 0.3953508333333333, | |
| "Recall@20": 0.46499000000000007, | |
| "Recall@50": 0.5617300000000001, | |
| "Recall@100": 0.6354808333333334, | |
| "Recall@200": 0.702255, | |
| "Recall@1000": 0.8406408333333335 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.21213666666666667, | |
| "MRR@3": 0.2595566666666667, | |
| "MRR@5": 0.27212, | |
| "MRR@10": 0.28255916666666664, | |
| "MRR@20": 0.28760416666666666, | |
| "MRR@50": 0.29065583333333334, | |
| "MRR@100": 0.29164999999999996, | |
| "MRR@200": 0.2920924999999999, | |
| "MRR@1000": 0.2924066666666667 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.21213666666666667, | |
| "R_cap@3": 0.2817866666666667, | |
| "R_cap@5": 0.3272833333333333, | |
| "R_cap@10": 0.3964641666666666, | |
| "R_cap@20": 0.4654858333333334, | |
| "R_cap@50": 0.5619025, | |
| "R_cap@100": 0.6355466666666667, | |
| "R_cap@200": 0.7022624999999999, | |
| "R_cap@1000": 0.8406408333333335 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7135958333333333, | |
| "Hole@3": 0.8054299999999999, | |
| "Hole@5": 0.8364533333333332, | |
| "Hole@10": 0.8659000000000002, | |
| "Hole@20": 0.8876591666666668, | |
| "Hole@50": 0.9045275, | |
| "Hole@100": 0.9129241666666666, | |
| "Hole@200": 0.9189291666666667, | |
| "Hole@1000": 0.9273433333333334 | |
| } | |
| } | |
| } | |