Gte Qwen2 7B Instruct 4bit DWQ
模型简介
模型特点
模型能力
使用案例
基础模型: 阿里巴巴NLP/gte-Qwen2-7B-instruct
库名称: mlx
许可证: apache-2.0
流水线标签: 文本生成
标签:
- mteb
- 句子转换器
- 转换器
- Qwen2
- 句子相似度
- mlx
模型索引:
- 名称: gte-qwen2-7B-instruct
结果:-
任务:
类型: 分类
数据集:
名称: MTEB 亚马逊反事实分类 (英文)
类型: mteb/amazon_counterfactual
配置: en
分割: 测试
修订版本: e8379541af4e31359cca9fbcf4b00f2671dba205
指标:- 类型: 准确率
值: 91.31343283582089 - 类型: 平均精度
值: 67.64251402604096 - 类型: F1分数
值: 87.53372530755692
- 类型: 准确率
-
任务:
类型: 分类
数据集:
名称: MTEB 亚马逊极性分类
类型: mteb/amazon_polarity
配置: 默认
分割: 测试
修订版本: e2d317d38cd51312af73b3d32a06d1a08b442046
指标:- 类型: 准确率
值: 97.497825 - 类型: 平均精度
值: 96.30329547047529 - 类型: F1分数
值: 97.49769793778039
- 类型: 准确率
-
任务:
类型: 分类
数据集:
名称: MTEB 亚马逊评论分类 (英文)
类型: mteb/amazon_reviews_multi
配置: en
分割: 测试
修订版本: 1399c76144fd37290681b995c656ef9b2e06e26d
指标:- 类型: 准确率
值: 62.564 - 类型: F1分数
值: 60.975777935041066
- 类型: 准确率
-
任务:
类型: 检索
数据集:
名称: MTEB ArguAna
类型: mteb/arguana
配置: 默认
分割: 测试
修订版本: c22ab2a51041ffd869aaddef7af8d8215647e41a
指标:- 类型: 平均精度@1
值: 36.486000000000004 - 类型: 平均精度@10
值: 54.842 - 类型: 平均精度@100
值: 55.206999999999994 - 类型: 平均精度@1000
值: 55.206999999999994 - 类型: 平均精度@3
值: 49.893 - 类型: 平均精度@5
值: 53.105000000000004 - 类型: 平均倒数排名@1
值: 37.34 - 类型: 平均倒数排名@10
值: 55.143 - 类型: 平均倒数排名@100
值: 55.509 - 类型: 平均倒数排名@1000
值: 55.509 - 类型: 平均倒数排名@3
值: 50.212999999999994 - 类型: 平均倒数排名@5
值: 53.432 - 类型: 归一化折损累积增益@1
值: 36.486000000000004 - 类型: 归一化折损累积增益@10
值: 64.273 - 类型: 归一化折损累积增益@100
值: 65.66199999999999 - 类型: 归一化折损累积增益@1000
值: 65.66199999999999 - 类型: 归一化折损累积增益@3
值: 54.352999999999994 - 类型: 归一化折损累积增益@5
值: 60.131 - 类型: 精确率@1
值: 36.486000000000004 - 类型: 精确率@10
值: 9.395000000000001 - 类型: 精确率@100
值: 0.996 - 类型: 精确率@1000
值: 0.1 - 类型: 精确率@3
值: 22.428 - 类型: 精确率@5
值: 16.259 - 类型: 召回率@1
值: 36.486000000000004 - 类型: 召回率@10
值: 93.95400000000001 - 类型: 召回率@100
值: 99.644 - 类型: 召回率@1000
值: 99.644 - 类型: 召回率@3
值: 67.283 - 类型: 召回率@5
值: 81.294
- 类型: 平均精度@1
-
任务:
类型: 聚类
数据集:
名称: MTEB ArxivClusteringP2P
类型: mteb/arxiv-clustering-p2p
配置: 默认
分割: 测试
修订版本: a122ad7f3f0291bf49cc6f4d32aa80929df69d5d
指标:- 类型: V度量
值: 56.461169803700564
- 类型: V度量
-
任务:
类型: 聚类
数据集:
名称: MTEB ArxivClusteringS2S
类型: mteb/arxiv-clustering-s2s
配置: 默认
分割: 测试
修订版本: f910caf1a6075f7329cdf8c1a6135696f37dbd53
指标:- 类型: V度量
值: 51.73600434466286
- 类型: V度量
-
任务:
类型: 重排序
数据集:
名称: MTEB AskUbuntuDupQuestions
类型: mteb/askubuntudupquestions-reranking
配置: 默认
分割: 测试
修订版本: 2000358ca161889fa9c082cb41daa8dcfb161a54
指标:- 类型: 平均精度
值: 67.57827065898053 - 类型: 平均倒数排名
值: 79.08136569493911
- 类型: 平均精度
-
任务:
类型: 语义文本相似度
数据集:
名称: MTEB BIOSSES
类型: mteb/biosses-sts
配置: 默认
分割: 测试
修订版本: d3fb88f8f02e40887cd149695127462bbcf29b4a
指标:- 类型: 余弦相似度皮尔逊相关系数
值: 83.53324575999243 - 类型: 余弦相似度斯皮尔曼相关系数
值: 81.37173362822374 - 类型: 欧几里得距离皮尔逊相关系数
值: 82.19243335103444 - 类型: 欧几里得距离斯皮尔曼相关系数
值: 81.33679307304334 - 类型: 曼哈顿距离皮尔逊相关系数
值: 82.38752665975699 - 类型: 曼哈顿距离斯皮尔曼相关系数
值: 81.31510583189689
- 类型: 余弦相似度皮尔逊相关系数
-
任务:
类型: 分类
数据集:
名称: MTEB Banking77分类
类型: mteb/banking77
配置: 默认
分割: 测试
修订版本: 0fd18e25b25c072e09e0d92ab615fda904d66300
指标:- 类型: 准确率
值: 87.56818181818181 - 类型: F1分数
值: 87.25826722019875
- 类型: 准确率
-
任务:
类型: 聚类
数据集:
名称: MTEB BiorxivClusteringP2P
类型: mteb/biorxiv-clustering-p2p
配置: 默认
分割: 测试
修订版本: 65b79d1d13f80053f67aca9498d9402c2d9f1f40
指标:- 类型: V度量
值: 50.09239610327673
- 类型: V度量
-
任务:
类型: 聚类
数据集:
名称: MTEB BiorxivClusteringS2S
类型: mteb/biorxiv-clustering-s2s
配置: 默认
分割: 测试
修订版本: 258694dd0231531bc1fd9de6ceb52a0853c6d908
指标:- 类型: V度量
值: 46.64733054606282
- 类型: V度量
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackAndroidRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: f46a197baaae43b4f621051089b82a364682dfeb
指标:- 类型: 平均精度@1
值: 33.997 - 类型: 平均精度@10
值: 48.176 - 类型: 平均精度@100
值: 49.82 - 类型: 平均精度@1000
值: 49.924 - 类型: 平均精度@3
值: 43.626 - 类型: 平均精度@5
值: 46.275 - 类型: 平均倒数排名@1
值: 42.059999999999995 - 类型: 平均倒数排名@10
值: 53.726 - 类型: 平均倒数排名@100
值: 54.398 - 类型: 平均倒数排名@1000
值: 54.416 - 类型: 平均倒数排名@3
值: 50.714999999999996 - 类型: 平均倒数排名@5
值: 52.639 - 类型: 归一化折损累积增益@1
值: 42.059999999999995 - 类型: 归一化折损累积增益@10
值: 55.574999999999996 - 类型: 归一化折损累积增益@100
值: 60.744 - 类型: 归一化折损累积增益@1000
值: 61.85699999999999 - 类型: 归一化折损累积增益@3
值: 49.363 - 类型: 归一化折损累积增益@5
值: 52.44 - 类型: 精确率@1
值: 42.059999999999995 - 类型: 精确率@10
值: 11.101999999999999 - 类型: 精确率@100
值: 1.73 - 类型: 精确率@1000
值: 0.218 - 类型: 精确率@3
值: 24.464 - 类型: 精确率@5
值: 18.026 - 类型: 召回率@1
值: 33.997 - 类型: 召回率@10
值: 70.35900000000001 - 类型: 召回率@100
值: 91.642 - 类型: 召回率@1000
值: 97.977 - 类型: 召回率@3
值: 52.76 - 类型: 召回率@5
值: 61.148
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackEnglishRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: ad9991cb51e31e31e430383c75ffb2885547b5f0
指标:- 类型: 平均精度@1
值: 35.884 - 类型: 平均精度@10
值: 48.14 - 类型: 平均精度@100
值: 49.5 - 类型: 平均精度@1000
值: 49.63 - 类型: 平均精度@3
值: 44.646 - 类型: 平均精度@5
值: 46.617999999999995 - 类型: 平均倒数排名@1
值: 44.458999999999996 - 类型: 平均倒数排名@10
值: 53.751000000000005 - 类型: 平均倒数排名@100
值: 54.37800000000001 - 类型: 平均倒数排名@1000
值: 54.415 - 类型: 平均倒数排名@3
值: 51.815 - 类型: 平均倒数排名@5
值: 52.882 - 类型: 归一化折损累积增益@1
值: 44.458999999999996 - 类型: 归一化折损累积增益@10
值: 54.157 - 类型: 归一化折损累积增益@100
值: 58.362 - 类型: 归一化折损累积增益@1000
值: 60.178 - 类型: 归一化折损累积增益@3
值: 49.661 - 类型: 归一化折损累积增益@5
值: 51.74999999999999 - 类型: 精确率@1
值: 44.458999999999996 - 类型: 精确率@10
值: 10.248 - 类型: 精确率@100
值: 1.5890000000000002 - 类型: 精确率@1000
值: 0.207 - 类型: 精确率@3
值: 23.928 - 类型: 精确率@5
值: 16.878999999999998 - 类型: 召回率@1
值: 35.884 - 类型: 召回率@10
值: 64.798 - 类型: 召回率@100
值: 82.345 - 类型: 召回率@1000
值: 93.267 - 类型: 召回率@3
值: 51.847 - 类型: 召回率@5
值: 57.601
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackGamingRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 4885aa143210c98657558c04aaf3dc47cfb54340
指标:- 类型: 平均精度@1
值: 39.383 - 类型: 平均精度@10
值: 53.714 - 类型: 平均精度@100
值: 54.838 - 类型: 平均精度@1000
值: 54.87800000000001 - 类型: 平均精度@3
值: 50.114999999999995 - 类型: 平均精度@5
值: 52.153000000000006 - 类型: 平均倒数排名@1
值: 45.016 - 类型: 平均倒数排名@10
值: 56.732000000000006 - 类型: 平均倒数排名@100
值: 57.411 - 类型: 平均倒数排名@1000
值: 57.431 - 类型: 平均倒数排名@3
值: 54.044000000000004 - 类型: 平均倒数排名@5
值: 55.639 - 类型: 归一化折损累积增益@1
值: 45.016 - 类型: 归一化折损累积增益@10
值: 60.228 - 类型: 归一化折损累积增益@100
值: 64.277 - 类型: 归一化折损累积增益@1000
值: 65.07 - 类型: 归一化折损累积增益@3
值: 54.124 - 类型: 归一化折损累积增益@5
值: 57.147000000000006 - 类型: 精确率@1
值: 45.016 - 类型: 精确率@10
值: 9.937 - 类型: 精确率@100
值: 1.288 - 类型: 精确率@1000
值: 0.13899999999999998 - 类型: 精确率@3
值: 24.471999999999998 - 类型: 精确率@5
值: 16.991 - 类型: 召回率@1
值: 39.383 - 类型: 召回率@10
值: 76.175 - 类型: 召回率@100
值: 93.02 - 类型: 召回率@1000
值: 98.60900000000001 - 类型: 召回率@3
值: 60.265 - 类型: 召回率@5
值: 67.46600000000001
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackGisRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 5003b3064772da1887988e05400cf3806fe491f2
指标:- 类型: 平均精度@1
值: 27.426000000000002 - 类型: 平均精度@10
值: 37.397000000000006 - 类型: 平均精度@100
值: 38.61 - 类型: 平均精度@1000
值: 38.678000000000004 - 类型: 平均精度@3
值: 34.150999999999996 - 类型: 平均精度@5
值: 36.137 - 类型: 平均倒数排名@1
值: 29.944 - 类型: 平均倒数排名@10
值: 39.654 - 类型: 平均倒数排名@100
值: 40.638000000000005 - 类型: 平均倒数排名@1000
值: 40.691 - 类型: 平均倒数排名@3
值: 36.817 - 类型: 平均倒数排名@5
值: 38.524 - 类型: 归一化折损累积增益@1
值: 29.944 - 类型: 归一化折损累积增益@10
值: 43.094 - 类型: 归一化折损累积增益@100
值: 48.789 - 类型: 归一化折损累积增益@1000
值: 50.339999999999996 - 类型: 归一化折损累积增益@3
值: 36.984 - 类型: 归一化折损累积增益@5
值: 40.248 - 类型: 精确率@1
值: 29.944 - 类型: 精确率@10
值: 6.78 - 类型: 精确率@100
值: 1.024 - 类型: 精确率@1000
值: 0.11800000000000001 - 类型: 精确率@3
值: 15.895000000000001 - 类型: 精确率@5
值: 11.39 - 类型: 召回率@1
值: 27.426000000000002 - 类型: 召回率@10
值: 58.464000000000006 - 类型: 召回率@100
值: 84.193 - 类型: 召回率@1000
值: 95.52000000000001 - 类型: 召回率@3
值: 42.172 - 类型: 召回率@5
值: 50.101
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackMathematicaRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 90fceea13679c63fe563ded68f3b6f06e50061de
指标:- 类型: 平均精度@1
值: 19.721 - 类型: 平均精度@10
值: 31.604 - 类型: 平均精度@100
值: 32.972 - 类型: 平均精度@1000
值: 33.077 - 类型: 平均精度@3
值: 27.218999999999998 - 类型: 平均精度@5
值: 29.53 - 类型: 平均倒数排名@1
值: 25.0 - 类型: 平均倒数排名@10
值: 35.843 - 类型: 平均倒数排名@100
值: 36.785000000000004 - 类型: 平均倒数排名@1000
值: 36.842000000000006 - 类型: 平均倒数排名@3
值: 32.193 - 类型: 平均倒数排名@5
值: 34.264 - 类型: 归一化折损累积增益@1
值: 25.0 - 类型: 归一化折损累积增益@10
值: 38.606 - 类型: 归一化折损累积增益@100
值: 44.272 - 类型: 归一化折损累积增益@1000
值: 46.527 - 类型: 归一化折损累积增益@3
值: 30.985000000000003 - 类型: 归一化折损累积增益@5
值: 34.43 - 类型: 精确率@1
值: 25.0 - 类型: 精确率@10
值: 7.811 - 类型: 精确率@100
值: 1.203 - 类型: 精确率@1000
值: 0.15 - 类型: 精确率@3
值: 15.423 - 类型: 精确率@5
值: 11.791 - 类型: 召回率@1
值: 19.721 - 类型: 召回率@10
值: 55.625 - 类型: 召回率@100
值: 79.34400000000001 - 类型: 召回率@1000
值: 95.208 - 类型: 召回率@3
值: 35.19 - 类型: 召回率@5
值: 43.626
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackPhysicsRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 79531abbd1fb92d06c6d6315a0cbbbf5bb247ea4
指标:- 类型: 平均精度@1
值: 33.784 - 类型: 平均精度@10
值: 47.522 - 类型: 平均精度@100
值: 48.949999999999996 - 类型: 平均精度@1000
值: 49.038 - 类型: 平均精度@3
值: 43.284 - 类型: 平均精度@5
值: 45.629 - 类型: 平均倒数排名@1
值: 41.482 - 类型: 平均倒数排名@10
值: 52.830999999999996 - 类型: 平均倒数排名@100
值: 53.559999999999995 - 类型: 平均倒数排名@1000
值: 53.588 - 类型: 平均倒数排名@3
值: 50.016000000000005 - 类型: 平均倒数排名@5
值: 51.614000000000004 - 类型: 归一化折损累积增益@1
值: 41.482 - 类型: 归一化折损累积增益@10
值: 54.569 - 类型: 归一化折损累积增益@100
值: 59.675999999999995 - 类型: 归一化折损累积增益@1000
值: 60.989000000000004 - 类型: 归一化折损累积增益@3
值: 48.187000000000005 - 类型: 归一化折损累积增益@5
值: 51.183 - 类型: 精确率@1
值: 41.482 - 类型: 精确率@10
值: 10.221 - 类型: 精确率@100
值: 1.486 - 类型: 精确率@1000
值: 0.17500000000000002 - 类型: 精确率@3
值: 23.548 - 类型: 精确率@5
值: 16.805 - 类型: 召回率@1
值: 33.784 - 类型: 召回率@10
值: 69.798 - 类型: 召回率@100
值: 90.098 - 类型: 召回率@1000
值: 98.176 - 类型: 召回率@3
值: 52.127 - 类型: 召回率@5
值: 59.861
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackProgrammersRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 6184bc1440d2dbc7612be22b50686b8826d22b32
指标:- 类型: 平均精度@1
值: 28.038999999999998 - 类型: 平均精度@10
值: 41.904 - 类型: 平均精度@100
值: 43.36 - 类型: 平均精度@1000
值: 43.453 - 类型: 平均精度@3
值: 37.785999999999994 - 类型: 平均精度@5
值: 40.105000000000004 - 类型: 平均倒数排名@1
值: 35.046 - 类型: 平均倒数排名@10
值: 46.926 - 类型: 平均倒数排名@100
值: 47.815000000000005 - 类型: 平均倒数排名@1000
值: 47.849000000000004 - 类型: 平均倒数排名@3
值: 44.273 - 类型: 平均倒数排名@5
值: 45.774 - 类型: 归一化折损累积增益@1
值: 35.046 - 类型: 归一化折损累积增益@10
值: 48.937000000000005 - 类型: 归一化折损累积增益@100
值: 54.544000000000004 - 类型: 归一化折损累积增益@1000
值: 56.069 - 类型: 归一化折损累积增益@3
值: 42.858000000000004 - 类型: 归一化折损累积增益@5
值: 45.644 - 类型: 精确率@1
值: 35.046 - 类型: 精确率@10
值: 9.452 - 类型: 精确率@100
值: 1.429 - 类型: 精确率@1000
值: 0.173 - 类型: 精确率@3
值: 21.346999999999998 - 类型: 精确率@5
值: 15.342 - 类型: 召回率@1
值: 28.038999999999998 - 类型: 召回率@10
值: 64.59700000000001 - 类型: 召回率@100
值: 87.735 - 类型: 召回率@1000
值: 97.41300000000001 - 类型: 召回率@3
值: 47.368 - 类型: 召回率@5
值: 54.93900000000001
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 4ffe81d471b1924886b33c7567bfb200e9eec5c4
指标:- 类型: 平均精度@1
值: 28.17291666666667 - 类型: 平均精度@10
值: 40.025749999999995 - 类型: 平均精度@100
值: 41.39208333333333 - 类型: 平均精度@1000
值: 41.499249999999996 - 类型: 平均精度@3
值: 36.347 - 类型: 平均精度@5
值: 38.41391666666667 - 类型: 平均倒数排名@1
值: 33.65925 - 类型: 平均倒数排名@10
值: 44.085499999999996 - 类型: 平均倒数排名@100
值: 44.94116666666667 - 类型: 平均倒数排名@1000
值: 44.9855 - 类型: 平均倒数排名@3
值: 41.2815 - 类型: 平均倒数排名@5
值: 42.91491666666666 - 类型: 归一化折损累积增益@1
值: 33.65925 - 类型: 归一化折损累积增益@10
值: 46.430833333333325 - 类型: 归一化折损累积增益@100
值: 51.761 - 类型: 归一化折损累积增益@1000
值: 53.50899999999999 - 类型: 归一化折损累积增益@3
值: 40.45133333333333 - 类型: 归一化折损累积增益@5
值: 43.31483333333334 - 类型: 精确率@1
值: 33.65925 - 类型: 精确率@10
值: 8.4995 - 类型: 精确率@100
值: 1.3210000000000004 - 类型: 精确率@1000
值: 0.16591666666666666 - 类型: 精确率@3
值: 19.165083333333335 - 类型: 精确率@5
值: 13.81816666666667 - 类型: 召回率@1
值: 28.17291666666667 - 类型: 召回率@10
值: 61.12624999999999 - 类型: 召回率@100
值: 83.97266666666667 - 类型: 召回率@1000
值: 95.66550000000001 - 类型: 召回率@3
值: 44.661249999999995 - 类型: 召回率@5
值: 51.983333333333334
- 类型: 平均精度@1
-
任务:
类型: 检索
数据集:
名称: MTEB CQADupstackStatsRetrieval
类型: BeIR/cqadupstack
配置: 默认
分割: 测试
修订版本: 65ac3a16b8e91f9cee4c9828cc7c335575432a2a
指标:- 类型: 平均精度@1
值:
- 类型: 平均精度@1
-


