Dmeta Embedding Zh

由 DMetaSoul 开发

Dmeta-embedding 是一个用于句子相似度计算和特征提取的模型，支持多种文本相关任务。

文本嵌入

PyTorch

支持多种语言

开源协议:Apache-2.0 #中文语义相似度 #医疗问答重排序 #多维度相似度评估

下载量 2,774

发布时间 : 1/25/2024

模型介绍

内容详情

替代品

模型简介

该模型主要用于句子相似度计算、特征提取和文本检索等任务，在多个中文数据集上表现出色。

模型特点

多任务支持

支持句子相似度计算、文本分类、聚类、检索和重新排序等多种任务。

高性能

在多个中文数据集上表现出色，特别是在医疗问答检索任务中表现优异。

多种相似度度量

支持余弦相似度、欧几里得距离和曼哈顿距离等多种相似度度量方法。

模型能力

句子相似度计算

特征提取

文本分类

聚类

文本检索

重新排序

使用案例

医疗问答

医疗问答检索

用于医疗领域的问答检索系统，帮助用户快速找到相关答案。

在CMedQA数据集上表现出色，平均精度达到88.48%

文本分类

商品评论分类

对电商平台的商品评论进行分类。

在AmazonReviews中文数据集上准确率达到44.93%

句子相似度

句子对匹配

判断两个句子是否表达相同或相似的意思。

在AFQMC数据集上余弦相似度皮尔逊相关系数达到65.61%

标签：

句子转换器
特征提取
句子相似度
MTEB
RAG 模型索引：
名称：Dmeta-embedding 结果：
- 任务：类型：STS 数据集：类型：C-MTEB/AFQMC 名称：MTEB AFQMC 配置：默认分割：验证修订：无指标：
  - 类型：余弦相似度皮尔逊值：65.60825224706932
  - 类型：余弦相似度斯皮尔曼值：71.12862586297193
  - 类型：欧几里得皮尔逊值：70.18130275750404
  - 类型：欧几里得斯皮尔曼值：71.12862586297193
  - 类型：曼哈顿皮尔逊值：70.14470398075396
  - 类型：曼哈顿斯皮尔曼值：71.05226975911737
- 任务：类型：STS 数据集：类型：C-MTEB/ATEC 名称：MTEB ATEC 配置：默认分割：测试修订：无指标：
  - 类型：余弦相似度皮尔逊值：65.52386345655479
  - 类型：余弦相似度斯皮尔曼值：64.64245253181382
  - 类型：欧几里得皮尔逊值：73.20157662981914
  - 类型：欧几里得斯皮尔曼值：64.64245253178956
  - 类型：曼哈顿皮尔逊值：73.22837571756348
  - 类型：曼哈顿斯皮尔曼值：64.62632334391418
- 任务：类型：分类数据集：类型：mteb/amazon_reviews_multi 名称：MTEB AmazonReviews分类（中文）配置：中文分割：测试修订：1399c76144fd37290681b995c656ef9b2e06e26d 指标：
  - 类型：准确率值：44.925999999999995
  - 类型：F1分数值：42.82555191308971
- 任务：类型：STS 数据集：类型：C-MTEB/BQ 名称：MTEB BQ 配置：默认分割：测试修订：无指标：
  - 类型：余弦相似度皮尔逊值：71.35236446393156
  - 类型：余弦相似度斯皮尔曼值：72.29629643702184
  - 类型：欧几里得皮尔逊值：70.94570179874498
  - 类型：欧几里得斯皮尔曼值：72.29629297226953
  - 类型：曼哈顿皮尔逊值：70.84463025501125
  - 类型：曼哈顿斯皮尔曼值：72.24527021975821
- 任务：类型：聚类数据集：类型：C-MTEB/CLSClusteringP2P 名称：MTEB CLSClusteringP2P 配置：默认分割：测试修订：无指标：
  - 类型：V度量值：40.24232916894152
- 任务：类型：聚类数据集：类型：C-MTEB/CLSClusteringS2S 名称：MTEB CLSClusteringS2S 配置：默认分割：测试修订：无指标：
  - 类型：V度量值：39.167806226929706
- 任务：类型：重新排序数据集：类型：C-MTEB/CMedQAv1-重新排序名称：MTEB CMedQAv1 配置：默认分割：测试修订：无指标：
  - 类型：平均精度值：88.48837920106357
  - 类型：平均倒数排名值：90.36861111111111
- 任务：类型：重新排序数据集：类型：C-MTEB/CMedQAv2-重新排序名称：MTEB CMedQAv2 配置：默认分割：测试修订：无指标：
  - 类型：平均精度值：89.17878171657071
  - 类型：平均倒数排名值：91.35805555555555
- 任务：类型：检索数据集：类型：C-MTEB/Cmedqa检索名称：MTEB Cmedqa检索配置：默认分割：开发修订：无指标：
  - 类型：排名1的平均精度值：25.751
  - 类型：排名10的平均精度值：38.946
  - 类型：排名100的平均精度值：40.855000000000004
  - 类型：排名1000的平均精度值：40.953
  - 类型：排名3的平均精度值：34.533
  - 类型：排名5的平均精度值：36.905
  - 类型：排名1的平均倒数排名值：39.235
  - 类型：排名10的平均倒数排名值：47.713
  - 类型：排名100的平均倒数排名值：48.71
  - 类型：排名1000的平均倒数排名值：48.747
  - 类型：排名3的平均倒数排名值：45.086
  - 类型：排名5的平均倒数排名值：46.498
  - 类型：排名1的归一化折损累积增益值：39.235
  - 类型：排名10的归一化折损累积增益值：45.831
  - 类型：排名100的归一化折损累积增益值：53.162
  - 类型：排名1000的归一化折损累积增益值：54.800000000000004
  - 类型：排名3的归一化折损累积增益值：40.188
  - 类型：排名5的归一化折损累积增益值：42.387
  - 类型：排名1的精确率值：39.235
  - 类型：排名10的精确率值：10.273
  - 类型：排名100的精确率值：1.627
  - 类型：排名1000的精确率值：0.183
  - 类型：排名3的精确率值：22.772000000000002
  - 类型：排名5的精确率值：16.524
  - 类型：排名1的召回率值：25.751
  - 类型：排名10的召回率值：57.411
  - 类型：排名100的召回率值：87.44
  - 类型：排名1000的召回率值：98.386
  - 类型：排名3的召回率值：40.416000000000004
  - 类型：排名5的召回率值：47.238
- 任务：类型：对分类数据集：类型：C-MTEB/CMNLI 名称：MTEB Cmnli 配置：默认分割：验证修订：无指标：
  - 类型：余弦相似度准确率值：83.59591100420926
  - 类型：余弦相似度平均精度值：90.65538153970263
  - 类型：余弦相似度F1分数值：84.76466651795673
  - 类型：余弦相似度精确率值：81.04073363190446
  - 类型：余弦相似度召回率值：88.84732288987608
  - 类型：点积准确率值：83.59591100420926
  - 类型：点积平均精度值：90.64355541781003
  - 类型：点积F1分数值：84.76466651795673
  - 类型：点积精确率值：81.04073363190446
  - 类型：点积召回率值：88.84732288987608
  - 类型：欧几里得准确率值：83.59591100420926
  - 类型：欧几里得平均精度值：90.6547878194287
  - 类型：欧几里得F1分数值：84.76466651795673
  - 类型：欧几里得精确率值：81.04073363190446
  - 类型：欧几里得召回率值：88.84732288987608
  - 类型：曼哈顿准确率值：83.51172579675286
  - 类型：曼哈顿平均精度值：90.59941589844144
  - 类型：曼哈顿F1分数值：84.51827242524917
  - 类型：曼哈顿精确率值：80.28613507258574
  - 类型：曼哈顿召回率值：89.22141688099134
  - 类型：最大准确率值：83.59591100420926
  - 类型：最大平均精度值：90.65538153970263
  - 类型：最大F1分数值：84.76466651795673
- 任务：类型：检索数据集：类型：C-MTEB/Covid检索名称：MTEB Covid检索配置：默认分割：开发修订：无指标：
  - 类型：排名1的平均精度值：63.251000000000005
  - 类型：排名10的平均精度值：72.442
  - 类型：排名100的平均精度值：72.79299999999999
  - 类型：排名1000的平均精度值：72.80499999999999
  - 类型：排名3的平均精度值：70.293
  - 类型：排名5的平均精度值：71.571
  - 类型：排名1的平均倒数排名值：63.541000000000004
  - 类型：排名10的平均倒数排名值：72.502
  - 类型：排名100的平均倒数排名值：72.846
  - 类型：排名1000的平均倒数排名值：72.858
  - 类型：排名3的平均倒数排名值：70.39
  - 类型：排名5的平均倒数排名值：71.654
  - 类型：排名1的归一化折损累积增益值：63.541000000000004
  - 类型：排名10的归一化折损累积增益值：76.774
  - 类型：排名100的归一化折损累积增益值：78.389
  - 类型：排名1000的归一化折损累积增益值：78.678
  - 类型：排名3的归一化折损累积增益值：72.47
  - 类型：排名5的归一化折损累积增益值：74.748
  - 类型：排名1的精确率值：63.541000000000004
  - 类型：排名10的精确率值：9.115
  - 类型：排名100的精确率值：0.9860000000000001
  - 类型：排名1000的精确率值：0.101
  - 类型：排名3的精确率值：26.379
  - 类型：排名5的精确率值：16.965
  - 类型：排名1的召回率值：63.251000000000005
  - 类型：排名10的召回率值：90.253
  - 类型：排名100的召回率值：97.576
  - 类型：排名1000的召回率值：99.789
  - 类型：排名3的召回率值：78.635
  - 类型：排名5的召回率值：84.141
- 任务：类型：检索数据集：类型：C-MTEB/Du检索名称：MTEB Du检索配置：默认分割：开发修订：无指标：
  - 类型：排名1的平均精度值