M

Modernbert Base Msmarco

由 joe32140 开发
该模型是基于ModernBERT-base微调的句子嵌入模型,专门用于句子相似度任务,支持英语文本处理。
下载量 4,695
发布时间 : 12/20/2024
模型介绍
内容详情
替代品

模型简介

该模型通过微调ModernBERT-base架构,专注于句子相似度计算和特征提取任务,适用于信息检索、问答匹配等场景。

模型特点

高效的句子嵌入
通过微调ModernBERT-base,生成高质量的句子嵌入,适用于相似度计算和信息检索。
优化的损失函数
使用CachedMultipleNegativesRankingLoss进行训练,提升了模型在负样本对比学习中的性能。
大规模数据集训练
基于msmarco-co-condenser-margin-mse-sym-mnrl-mean-v1数据集(约1166万条数据)训练,具备较强的泛化能力。

模型能力

句子相似度计算
特征提取
信息检索
问答匹配

使用案例

信息检索
问答匹配
根据用户查询,从候选答案中找出最相关的回答。
在msmarco co condenser开发集上达到0.984的余弦准确度。
文本分类
亚马逊评论分类
对亚马逊产品评论进行分类。
在MTEB亚马逊评论分类(英文)任务中达到32.318的准确率。