{ "dataset_revision": "CQADupstackRetrieval-Fa_is_a_combined_dataset", "task_name": "CQADupstackRetrieval-Fa", "mteb_version": "1.25.8", "scores": { "test": [ { "ndcg_at_1": 0.03110916666666667, "ndcg_at_3": 0.038228333333333336, "ndcg_at_5": 0.043442499999999995, "ndcg_at_10": 0.048946666666666666, "ndcg_at_20": 0.055395, "ndcg_at_100": 0.07147833333333332, "ndcg_at_1000": 0.098675, "map_at_1": 0.02469666666666667, "map_at_3": 0.03252083333333333, "map_at_5": 0.03570916666666666, "map_at_10": 0.0380625, "map_at_20": 0.03983916666666666, "map_at_100": 0.04195833333333334, "map_at_1000": 0.0428275, "recall_at_1": 0.02469666666666667, "recall_at_3": 0.042799166666666666, "recall_at_5": 0.05595583333333334, "recall_at_10": 0.07275083333333333, "recall_at_20": 0.09719833333333333, "recall_at_100": 0.17949249999999997, "recall_at_1000": 0.38565, "precision_at_1": 0.03110916666666667, "precision_at_3": 0.018865, "precision_at_5": 0.0150225, "precision_at_10": 0.010102499999999999, "precision_at_20": 0.006850000000000001, "precision_at_100": 0.0027083333333333334, "precision_at_1000": 0.0006358333333333334, "mrr_at_1": 0.031109916666666668, "mrr_at_3": 0.04101091666666667, "mrr_at_5": 0.04476433333333333, "mrr_at_10": 0.047573833333333336, "mrr_at_20": 0.04961175000000001, "mrr_at_100": 0.05188566666666667, "mrr_at_1000": 0.05270025, "nauc_ndcg_at_1_max": 0.0979495833333333, "nauc_ndcg_at_1_std": 0.12276225, "nauc_ndcg_at_1_diff1": 0.3369055, "nauc_ndcg_at_3_max": 0.09674724999999999, "nauc_ndcg_at_3_std": 0.10596583333333333, "nauc_ndcg_at_3_diff1": 0.25679025, "nauc_ndcg_at_5_max": 0.09443858333333333, "nauc_ndcg_at_5_std": 0.10697483333333331, "nauc_ndcg_at_5_diff1": 0.2194759166666667, "nauc_ndcg_at_10_max": 0.08929633333333332, "nauc_ndcg_at_10_std": 0.11194008333333334, "nauc_ndcg_at_10_diff1": 0.20465325, "nauc_ndcg_at_20_max": 0.08304308333333334, "nauc_ndcg_at_20_std": 0.122452, "nauc_ndcg_at_20_diff1": 0.18888733333333332, "nauc_ndcg_at_100_max": 0.08508825000000002, "nauc_ndcg_at_100_std": 0.13634358333333335, "nauc_ndcg_at_100_diff1": 0.1648885, "nauc_ndcg_at_1000_max": 0.08886491666666668, "nauc_ndcg_at_1000_std": 0.14484083333333334, "nauc_ndcg_at_1000_diff1": 0.1492329166666667, "nauc_map_at_1_max": 0.11229025, "nauc_map_at_1_std": 0.10560008333333333, "nauc_map_at_1_diff1": 0.36547025000000005, "nauc_map_at_3_max": 0.10493616666666666, "nauc_map_at_3_std": 0.1022575, "nauc_map_at_3_diff1": 0.28281049999999996, "nauc_map_at_5_max": 0.10263016666666669, "nauc_map_at_5_std": 0.10288075, "nauc_map_at_5_diff1": 0.2556323333333333, "nauc_map_at_10_max": 0.09953141666666666, "nauc_map_at_10_std": 0.10722716666666665, "nauc_map_at_10_diff1": 0.24479641666666666, "nauc_map_at_20_max": 0.096551, "nauc_map_at_20_std": 0.11155700000000002, "nauc_map_at_20_diff1": 0.23660166666666668, "nauc_map_at_100_max": 0.09639666666666667, "nauc_map_at_100_std": 0.1152761666666667, "nauc_map_at_100_diff1": 0.22901524999999998, "nauc_map_at_1000_max": 0.09660183333333332, "nauc_map_at_1000_std": 0.11678099999999998, "nauc_map_at_1000_diff1": 0.227295, "nauc_recall_at_1_max": 0.11229025, "nauc_recall_at_1_std": 0.10560008333333333, "nauc_recall_at_1_diff1": 0.36547025000000005, "nauc_recall_at_3_max": 0.09950116666666665, "nauc_recall_at_3_std": 0.09854333333333332, "nauc_recall_at_3_diff1": 0.2294635833333333, "nauc_recall_at_5_max": 0.08811133333333333, "nauc_recall_at_5_std": 0.10040991666666667, "nauc_recall_at_5_diff1": 0.16969658333333337, "nauc_recall_at_10_max": 0.07638874999999999, "nauc_recall_at_10_std": 0.10919999999999998, "nauc_recall_at_10_diff1": 0.14802849999999998, "nauc_recall_at_20_max": 0.06607958333333333, "nauc_recall_at_20_std": 0.12807208333333334, "nauc_recall_at_20_diff1": 0.12723041666666665, "nauc_recall_at_100_max": 0.06826658333333332, "nauc_recall_at_100_std": 0.15323841666666668, "nauc_recall_at_100_diff1": 0.09425850000000001, "nauc_recall_at_1000_max": 0.06798583333333334, "nauc_recall_at_1000_std": 0.161869, "nauc_recall_at_1000_diff1": 0.06884658333333334, "nauc_precision_at_1_max": 0.0979495833333333, "nauc_precision_at_1_std": 0.12276225, "nauc_precision_at_1_diff1": 0.3369055, "nauc_precision_at_3_max": 0.07961474999999998, "nauc_precision_at_3_std": 0.10864783333333333, "nauc_precision_at_3_diff1": 0.206998, "nauc_precision_at_5_max": 0.07601333333333334, "nauc_precision_at_5_std": 0.12353216666666668, "nauc_precision_at_5_diff1": 0.14722275, "nauc_precision_at_10_max": 0.06981425000000001, "nauc_precision_at_10_std": 0.13578633333333334, "nauc_precision_at_10_diff1": 0.1328445, "nauc_precision_at_20_max": 0.057449499999999994, "nauc_precision_at_20_std": 0.161352, "nauc_precision_at_20_diff1": 0.11425625000000002, "nauc_precision_at_100_max": 0.06855208333333333, "nauc_precision_at_100_std": 0.18831675, "nauc_precision_at_100_diff1": 0.08065225, "nauc_precision_at_1000_max": 0.06641775, "nauc_precision_at_1000_std": 0.1762615, "nauc_precision_at_1000_diff1": 0.05084291666666666, "nauc_mrr_at_1_max": 0.0979495833333333, "nauc_mrr_at_1_std": 0.12276225, "nauc_mrr_at_1_diff1": 0.3369055, "nauc_mrr_at_3_max": 0.08898108333333331, "nauc_mrr_at_3_std": 0.11357983333333332, "nauc_mrr_at_3_diff1": 0.2657625, "nauc_mrr_at_5_max": 0.08966841666666668, "nauc_mrr_at_5_std": 0.11498533333333334, "nauc_mrr_at_5_diff1": 0.23777650000000003, "nauc_mrr_at_10_max": 0.08628883333333333, "nauc_mrr_at_10_std": 0.11646825000000001, "nauc_mrr_at_10_diff1": 0.22843358333333338, "nauc_mrr_at_20_max": 0.08447958333333332, "nauc_mrr_at_20_std": 0.12035508333333333, "nauc_mrr_at_20_diff1": 0.22126466666666667, "nauc_mrr_at_100_max": 0.08580458333333334, "nauc_mrr_at_100_std": 0.12198216666666668, "nauc_mrr_at_100_diff1": 0.21500058333333336, "nauc_mrr_at_1000_max": 0.08635399999999999, "nauc_mrr_at_1000_std": 0.12229916666666668, "nauc_mrr_at_1000_diff1": 0.21361125, "main_score": 0.048946666666666666, "hf_subset": "default", "languages": [ "fas-Arab" ] } ] }, "evaluation_time": null, "kg_co2_emissions": null }