| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.192585, | |
| "NDCG@3": 0.23012000000000002, | |
| "NDCG@5": 0.24853083333333334, | |
| "NDCG@10": 0.27109750000000005, | |
| "NDCG@20": 0.28913, | |
| "NDCG@50": 0.3094608333333333, | |
| "NDCG@100": 0.32246, | |
| "NDCG@200": 0.33299416666666665, | |
| "NDCG@1000": 0.3518408333333333 | |
| }, | |
| "map": { | |
| "MAP@1": 0.16343416666666669, | |
| "MAP@3": 0.20673, | |
| "MAP@5": 0.2185975, | |
| "MAP@10": 0.22862166666666664, | |
| "MAP@20": 0.23417583333333333, | |
| "MAP@50": 0.23797916666666666, | |
| "MAP@100": 0.2393291666666667, | |
| "MAP@200": 0.24002916666666665, | |
| "MAP@1000": 0.24060999999999996 | |
| }, | |
| "precision": { | |
| "P@1": 0.192585, | |
| "P@3": 0.10611916666666665, | |
| "P@5": 0.07762750000000002, | |
| "P@10": 0.04901916666666666, | |
| "P@20": 0.029904166666666666, | |
| "P@50": 0.01523916666666667, | |
| "P@100": 0.008928333333333332, | |
| "P@200": 0.005132499999999999, | |
| "P@1000": 0.0013341666666666667 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.16343416666666669, | |
| "Recall@3": 0.25509166666666666, | |
| "Recall@5": 0.3009616666666667, | |
| "Recall@10": 0.3678975, | |
| "Recall@20": 0.43421249999999995, | |
| "Recall@50": 0.5266183333333333, | |
| "Recall@100": 0.5988908333333334, | |
| "Recall@200": 0.6657075, | |
| "Recall@1000": 0.8091266666666668 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.192585, | |
| "MRR@3": 0.23851833333333336, | |
| "MRR@5": 0.2500325, | |
| "MRR@10": 0.26011166666666663, | |
| "MRR@20": 0.26493666666666665, | |
| "MRR@50": 0.2679816666666666, | |
| "MRR@100": 0.26897666666666664, | |
| "MRR@200": 0.26943, | |
| "MRR@1000": 0.2697675 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.192585, | |
| "R_cap@3": 0.2600166666666667, | |
| "R_cap@5": 0.30309416666666666, | |
| "R_cap@10": 0.3688741666666666, | |
| "R_cap@20": 0.43466750000000004, | |
| "R_cap@50": 0.526785, | |
| "R_cap@100": 0.59896, | |
| "R_cap@200": 0.6657150000000001, | |
| "R_cap@1000": 0.8091266666666668 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7308800000000001, | |
| "Hole@3": 0.8147808333333336, | |
| "Hole@5": 0.8420441666666667, | |
| "Hole@10": 0.8696600000000001, | |
| "Hole@20": 0.8884650000000002, | |
| "Hole@50": 0.9042541666666666, | |
| "Hole@100": 0.9118466666666666, | |
| "Hole@200": 0.9178058333333333, | |
| "Hole@1000": 0.9268700000000001 | |
| } | |
| } | |
| } | |