Bilingual Embedding Base

由 Lajavaness 开发

一个基于sentence-transformers的双语句子嵌入模型，支持特征提取和句子相似度计算

文本嵌入

Transformers

开源协议:Apache-2.0 #双语嵌入 #教育领域聚类 #法语重排序

下载量 1,269

发布时间 : 6/26/2024

模型介绍

内容详情

替代品

模型简介

该模型主要用于生成句子的嵌入表示，可用于计算句子相似度、聚类、检索和重排序等任务

模型特点

双语支持

支持双语处理，能够处理跨语言的句子相似度计算

多功能应用

支持多种下游任务，包括聚类、检索和重排序

高性能

在多个评估数据集上表现出色，特别是在重排序任务上表现优异

模型能力

句子嵌入生成

句子相似度计算

文本聚类

信息检索

结果重排序

使用案例

教育

教育内容聚类

对教育相关文本进行自动聚类

在AlloProfClusteringP2P数据集上v_measure达到64.71

信息检索

法律文档检索

在法律文档中进行相关文档检索

在BSARDRetrieval数据集上map@100达到10.852

电子商务

商品评论分类

对商品评论进行情感分类

在AmazonReviewsClassification(fr)数据集上准确率达到40.354%

库名称：sentence-transformers
流水线标签：句子相似度
标签：

sentence-transformers
特征提取
句子相似度
transformers
句子嵌入
mteb

模型索引：

名称：bilingual-embedding-base
结果：
- 任务：
  类型：聚类
  数据集：
  类型：lyon-nlp/alloprof
  名称：MTEB AlloProfClusteringP2P
  配置：默认
  拆分：测试
  修订版本：392ba3f5bcc8c51f578786c1fc3dae648662cb9b
  指标：
  - 类型：v_measure
    值：64.71347977413274
  - 类型：v_measures
    值：[0.6276406100583347, 0.6380984027637511, 0.6322659733117469, 0.652473343931587, 0.6411502615838207]
- 任务：
  类型：聚类
  数据集：
  类型：lyon-nlp/alloprof
  名称：MTEB AlloProfClusteringS2S
  配置：默认
  拆分：测试
  修订版本：392ba3f5bcc8c51f578786c1fc3dae648662cb9b
  指标：
  - 类型：v_measure
    值：45.56886694296516
  - 类型：v_measures
    值：[0.4359417286866465, 0.4218168523895086, 0.419693469863105, 0.4981808644314091, 0.4546120704986696]
- 任务：
  类型：重排序
  数据集：
  类型：lyon-nlp/mteb-fr-reranking-alloprof-s2p
  名称：MTEB AlloprofReranking
  配置：默认
  拆分：测试
  修订版本：65393d0d7a08a10b4e348135e824f385d420b0fd
  指标：
  - 类型：map
    值：70.45979049191963
  - 类型：mrr
    值：71.61250582558874
  - 类型：nAUC_map_diff1
    值：53.81172404763562
  - 类型：nAUC_map_max
    值：11.344605627946006
  - 类型：nAUC_mrr_diff1
    值：53.73572411920392
  - 类型：nAUC_mrr_max
    值：11.900785644756448
- 任务：
  类型：检索
  数据集：
  类型：lyon-nlp/alloprof
  名称：MTEB AlloprofRetrieval
  配置：默认
  拆分：测试
  修订版本：fcf295ea64c750f41fadbaa37b9b861558e1bfbd
  指标：
  - 类型：map_at_1
    值：24.956999999999997
  - 类型：map_at_10
    值：35.519
  - 类型：map_at_100
    值：36.602000000000004
  - 类型：map_at_1000
    值：36.667
  - 类型：map_at_20
    值：36.199
  - 类型：map_at_3
    值：32.397999999999996
  - 类型：map_at_5
    值：34.121
  - 类型：mrr_at_1
    值：24.956822107081177
  - 类型：mrr_at_10
    值：35.5187515420676
  - 类型：mrr_at_100
    值：36.60233410773095
  - 类型：mrr_at_1000
    值：36.6673425266803
  - 类型：mrr_at_20
    值：36.19886807640962
  - 类型：mrr_at_3
    值：32.39781232009212
  - 类型：mrr_at_5
    值：34.120610247553294
  - 类型：nauc_map_at_1000_diff1
    值：35.47549954610535
  - 类型：nauc_map_at_1000_max
    值：32.90078190148035
  - 类型：nauc_map_at_100_diff1
    值：35.450977423889455
  - 类型：nauc_map_at_100_max
    值：32.94163322687819
  - 类型：nauc_map_at_10_diff1
    值：35.33565787959566
  - 类型：nauc_map_at_10_max
    值：32.64293321320758
  - 类型：nauc_map_at_1_diff1
    值：41.36063963274824
  - 类型：nauc_map_at_1_max
    值：29.231198539339754
  - 类型：nauc_map_at_20_diff1
    值：35.43536321023612
  - 类型：nauc_map_at_20_max
    值：32.88345868813372
  - 类型：nauc_map_at_3_diff1
    值：35.686505961183194
  - 类型：nauc_map_at_3_max
    值：32.00806639149525
  - 类型：nauc_map_at_5_diff1
    值：35.34083004527267
  - 类型：nauc_map_at_5_max
    值：32.34459863266794
  - 类型：nauc_mrr_at_1000_diff1
    值：35.47549954610535
  - 类型：nauc_mrr_at_1000_max
    值：32.90078190148035
  - 类型：nauc_mrr_at_100_diff1
    值：35.450977423889455
  - 类型：nauc_mrr_at_100_max
    值：32.94163322687819
  - 类型：nauc_mrr_at_10_diff1
    值：35.33565787959566
  - 类型：nauc_mrr_at_10_max
    值：32.64293321320758
  - 类型：nauc_mrr_at_1_diff1
    值：41.36063963274824
  - 类型：nauc_mrr_at_1_max
    值：29.231198539339754
  - 类型：nauc_mrr_at_20_diff1
    值：35.43536321023612
  - 类型：nauc_mrr_at_20_max
    值：32.88345868813372
  - 类型：nauc_mrr_at_3_diff1
    值：35.686505961183194
  - 类型：nauc_mrr_at_3_max
    值：32.00806639149525
  - 类型：nauc_mrr_at_5_diff1
    值：35.34083004527267
  - 类型：nauc_mrr_at_5_max
    值：32.34459863266794
  - 类型：nauc_ndcg_at_1000_diff1
    值：34.4325639393338
  - 类型：nauc_ndcg_at_1000_max
    值：34.44147157978809
  - 类型：nauc_ndcg_at_100_diff1
    值：33.88653913244061
  - 类型：nauc_ndcg_at_100_max
    值：35.59739772150559
  - 类型：nauc_ndcg_at_10_diff1
    值：33.51057326557921
  - 类型：nauc_ndcg_at_10_max
    值：34.18300339583124
  - 类型：nauc_ndcg_at_1_diff1
    值：41.36063963274824
  - 类型：nauc_ndcg_at_1_max
    值：29.231198539339754
  - 类型：nauc_ndcg_at_20_diff1
    值：33.804940889687714
  - 类型：nauc_ndcg_at_20_max
    值：35.13066047975507
  - 类型：nauc_ndcg_at_3_diff1
    值：34.167179830350406
  - 类型：nauc_ndcg_at_3_max
    值：32.94370726673571
  - 类型：nauc_ndcg_at_5_diff1
    值：33.52138730976869
  - 类型：nauc_ndcg_at_5_max
    值：33.48723912009657
  - 类型：nauc_precision_at_1000_diff1
    值：22.67827963096167
  - 类型：nauc_precision_at_1000_max
    值：67.17958434804059
  - 类型：nauc_precision_at_100_diff1
    值：24.83989747177019
  - 类型：nauc_precision_at_100_max
    值：56.86858468981111
  - 类型：nauc_precision_at_10_diff1
    值：27.973507280697774
  - 类型：nauc_precision_at_10_max
    值：39.14247264250278
  - 类型：nauc_precision_at_1_diff1
    值：41.36063963274824
  - 类型：nauc_precision_at_1_max
    值：29.231198539339754
  - 类型：nauc_precision_at_20_diff1
    值：28.244479044808852
  - 类型：nauc_precision_at_20_max
    值：44.5538108461975
  - 类型：nauc_precision_at_3_diff1
    值：30.09786756288918
  - 类型：nauc_precision_at_3_max
    值：35.51252285506707
  - 类型：nauc_precision_at_5_diff1
    值：28.444019525872083
  - 类型：nauc_precision_at_5_max
    值：36.71010320598834
  - 类型：nauc_recall_at_1000_diff1
    值：22.67827963096142
  - 类型：nauc_recall_at_1000_max
    值：67.17958434804105
  - 类型：nauc_recall_at_100_diff1
    值：24.83989747177035
  - 类型：nauc_recall_at_100_max
    值：56.868584689811186
  - 类型：nauc_recall_at_10_diff1
    值：27.973507280697774
  - 类型：nauc_recall_at_10_max
    值：39.14247264250283
  - 类型：nauc_recall_at_1_diff1
    值：41.36063963274824
  - 类型：nauc_recall_at_1_max
    值：29.231198539339754
  - 类型：nauc_recall_at_20_diff1
    值：28.244479044808823
  - 类型：nauc_recall_at_20_max
    值：44.553810846197486
  - 类型：nauc_recall_at_3_diff1
    值：30.097867562889213
  - 类型：nauc_recall_at_3_max
    值：35.51252285506708
  - 类型：nauc_recall_at_5_diff1
    值：28.444019525872054
  - 类型：nauc_recall_at_5_max
    值：36.71010320598833
  - 类型：ndcg_at_1
    值：24.956999999999997
  - 类型：ndcg_at_10
    值：41.260999999999996
  - 类型：ndcg_at_100
    值：46.628
  - 类型：ndcg_at_1000
    值：48.339999999999996
  - 类型：ndcg_at_20
    值：43.71
  - 类型：ndcg_at_3
    值：34.771
  - 类型：ndcg_at_5
    值：37.862
  - 类型：precision_at_1
    值：24.956999999999997
  - 类型：precision_at_10
    值：5.963
  - 类型：precision_at_100
    值：0.8500000000000001
  - 类型：precision_at_1000
    值：0.098
  - 类型：precision_at_20
    值：3.463
  - 类型：precision_at_3
    值：13.874
  - 类型：precision_at_5
    值：9.818999999999999
  - 类型：recall_at_1
    值：24.956999999999997
  - 类型：recall_at_10
    值：59.629
  - 类型：recall_at_100
    值：84.974
  - 类型：recall_at_1000
    值：98.402
  - 类型：recall_at_20
    值：69.257
  - 类型：recall_at_3
    值：41.623
  - 类型：recall_at_5
    值：49.092999999999996
- 任务：
  类型：分类
  数据集：
  类型：mteb/amazon_reviews_multi
  名称：MTEB AmazonReviewsClassification (fr)
  配置：fr
  拆分：测试
  修订版本：1399c76144fd37290681b995c656ef9b2e06e26d
  指标：
  - 类型：accuracy
    值：40.354
  - 类型：f1
    值：38.96127209677864
  - 类型：f1_weighted
    值：38.96127209677863
- 任务：
  类型：检索
  数据集：
  类型：maastrichtlawtech/bsard
  名称：MTEB BSARDRetrieval
  配置：默认
  拆分：测试
  修订版本：5effa1b9b5fa3b0f9e12523e6e43e5f86a6e6d59
  指标：
  - 类型：map_at_1
    值：5.405
  - 类型：map_at_10
    值：9.715
  - 类型：map_at_100
    值：10.852
  - 类型：map_at_1000
    值：10.986
  - 类型：map_at_20
    值：10.324
  - 类型：map_at_3
    值：8.183
  - 类型：map_at_5
    值：9.129
  - 类型：mrr_at_1
    值：5.405405405405405
  - 类型：mrr_at_10
    值：9.715250965250963
  - 类型：mrr_at_100
    值：10.852488713991455
  - 类型：mrr_at_1000
    值：10.986128810251913
  - 类型：mrr_at_20
    值：10.324372731493472
  - 类型：mrr_at_3
    值：8.183183183183184
  - 类型：mrr_at_5
    值：9.12912912912913
  - 类型：nauc_map_at_1000_diff1
    值：27.989147369852507
  - 类型：nauc_map_at_1000_max
    值：13.956676274011212
  - 类型：nauc_map_at_100_diff1
    值：27.97931691839789
  - 类型：nauc_map_at_100_max
    值：13.885054931557967
  - 类型：nauc_map_at_10_diff1
    值：28.39484917161119
  - 类型：nauc_map_at_10_max
    值：12.859153645903026
  - 类型：nauc_map_at_1_diff1
    值：40.37326707123
  - 类型：nauc_map_at_1_max
    值：19.53225223707901
  - 类型：nauc_map_at_20_diff1