Bge M3 Es Legal Tmp 6
这是一个基于Sentence Transformers库,从BAAI/bge-m3微调而来的西班牙语法律文本嵌入模型,支持1024维向量空间映射。
下载量 343
发布时间 : 7/12/2024
模型简介
该模型专门针对西班牙语法律文本优化,能够将句子和段落映射到1024维的密集向量空间,适用于语义相似度计算、搜索、分类等多种NLP任务。
模型特点
法律领域优化
针对西班牙法律文本进行微调,能准确理解法律术语和条文结构
长文本支持
最大支持8192标记的序列长度,适合处理法律条文等长文本
多任务适配
通过稠密向量表示可支持语义搜索、文本分类、聚类等多种下游任务
模型能力
语义文本相似度计算
法律条文检索
法律问答系统
文本分类
文档聚类
释义挖掘
使用案例
法律智能
法律条文检索
根据用户问题自动匹配相关法律条文
在测试集上达到90.24%的top-10准确率
法律问答系统
构建基于语义匹配的法律问答助手
文档分析
法律文书归类
自动对法律文书进行主题分类
🚀 BGE large Legal Spanish
这是一个基于 Sentence Transformers 库,从 BAAI/bge-m3 微调而来的模型。它可以将句子和段落映射到一个 1024 维的密集向量空间,可用于语义文本相似度计算、语义搜索、释义挖掘、文本分类、聚类等任务。
🚀 快速开始
直接使用(Sentence Transformers)
首先,安装 Sentence Transformers 库:
pip install -U sentence-transformers
然后,你可以加载这个模型并进行推理:
from sentence_transformers import SentenceTransformer
# 从 🤗 Hub 下载模型
model = SentenceTransformer("dariolopez/bge-m3-es-legal-tmp-6")
# 进行推理
sentences = [
'Artículo 6. Definiciones. 1. Discriminación directa e indirecta. b) La discriminación indirecta se produce cuando una disposición, criterio o práctica aparentemente neutros ocasiona o puede ocasionar a una o varias personas una desventaja particular con respecto a otras por razón de las causas previstas en el apartado 1 del artículo 2.',
'¿Qué se considera discriminación indirecta?',
'¿Qué tipo de información se considera veraz?',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 1024]
# 获取嵌入向量的相似度分数
similarities = model.similarity(embeddings, embeddings)
print(similarities.shape)
# [3, 3]
✨ 主要特性
- 能够将句子和段落映射到 1024 维的密集向量空间。
- 可用于多种自然语言处理任务,如语义文本相似度计算、语义搜索、释义挖掘、文本分类、聚类等。
📦 安装指南
若要使用该模型,需安装 Sentence Transformers 库:
pip install -U sentence-transformers
💻 使用示例
基础用法
from sentence_transformers import SentenceTransformer
# 从 🤗 Hub 下载模型
model = SentenceTransformer("dariolopez/bge-m3-es-legal-tmp-6")
# 进行推理
sentences = [
'Artículo 6. Definiciones. 1. Discriminación directa e indirecta. b) La discriminación indirecta se produce cuando una disposición, criterio o práctica aparentemente neutros ocasiona o puede ocasionar a una o varias personas una desventaja particular con respecto a otras por razón de las causas previstas en el apartado 1 del artículo 2.',
'¿Qué se considera discriminación indirecta?',
'¿Qué tipo de información se considera veraz?',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 1024]
# 获取嵌入向量的相似度分数
similarities = model.similarity(embeddings, embeddings)
print(similarities.shape)
# [3, 3]
📚 详细文档
模型详情
模型描述
属性 | 详情 |
---|---|
模型类型 | Sentence Transformer |
基础模型 | BAAI/bge-m3 |
最大序列长度 | 8192 个标记 |
输出维度 | 1024 个标记 |
相似度函数 | 余弦相似度 |
语言 | 西班牙语 |
许可证 | apache-2.0 |
模型来源
- 文档:Sentence Transformers 文档
- 仓库:GitHub 上的 Sentence Transformers
- Hugging Face:Hugging Face 上的 Sentence Transformers
完整模型架构
SentenceTransformer(
(0): Transformer({'max_seq_length': 8192, 'do_lower_case': False}) with Transformer model: XLMRobertaModel
(1): Pooling({'word_embedding_dimension': 1024, 'pooling_mode_cls_token': True, 'pooling_mode_mean_tokens': False, 'pooling_mode_max_tokens': False, 'pooling_mode_mean_sqrt_len_tokens': False, 'pooling_mode_weightedmean_tokens': False, 'pooling_mode_lasttoken': False, 'include_prompt': True})
(2): Normalize()
)
评估
信息检索指标
以下是不同数据集上的评估指标:
数据集:dim_1024
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.5518 |
cosine_accuracy@3 | 0.8049 |
cosine_accuracy@5 | 0.8445 |
cosine_accuracy@10 | 0.9024 |
cosine_precision@1 | 0.5518 |
cosine_precision@3 | 0.2683 |
cosine_precision@5 | 0.1689 |
cosine_precision@10 | 0.0902 |
cosine_recall@1 | 0.5518 |
cosine_recall@3 | 0.8049 |
cosine_recall@5 | 0.8445 |
cosine_recall@10 | 0.9024 |
cosine_ndcg@10 | 0.738 |
cosine_mrr@10 | 0.6842 |
cosine_map@100 | 0.6881 |
数据集:dim_768
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.5488 |
cosine_accuracy@3 | 0.8049 |
cosine_accuracy@5 | 0.8506 |
cosine_accuracy@10 | 0.9024 |
cosine_precision@1 | 0.5488 |
cosine_precision@3 | 0.2683 |
cosine_precision@5 | 0.1701 |
cosine_precision@10 | 0.0902 |
cosine_recall@1 | 0.5488 |
cosine_recall@3 | 0.8049 |
cosine_recall@5 | 0.8506 |
cosine_recall@10 | 0.9024 |
cosine_ndcg@10 | 0.7361 |
cosine_mrr@10 | 0.6816 |
cosine_map@100 | 0.6855 |
数据集:dim_512
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.5579 |
cosine_accuracy@3 | 0.811 |
cosine_accuracy@5 | 0.8506 |
cosine_accuracy@10 | 0.8933 |
cosine_precision@1 | 0.5579 |
cosine_precision@3 | 0.2703 |
cosine_precision@5 | 0.1701 |
cosine_precision@10 | 0.0893 |
cosine_recall@1 | 0.5579 |
cosine_recall@3 | 0.811 |
cosine_recall@5 | 0.8506 |
cosine_recall@10 | 0.8933 |
cosine_ndcg@10 | 0.7363 |
cosine_mrr@10 | 0.6845 |
cosine_map@100 | 0.6889 |
数据集:dim_256
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.5549 |
cosine_accuracy@3 | 0.7957 |
cosine_accuracy@5 | 0.8323 |
cosine_accuracy@10 | 0.8841 |
cosine_precision@1 | 0.5549 |
cosine_precision@3 | 0.2652 |
cosine_precision@5 | 0.1665 |
cosine_precision@10 | 0.0884 |
cosine_recall@1 | 0.5549 |
cosine_recall@3 | 0.7957 |
cosine_recall@5 | 0.8323 |
cosine_recall@10 | 0.8841 |
cosine_ndcg@10 | 0.7307 |
cosine_mrr@10 | 0.6804 |
cosine_map@100 | 0.6851 |
数据集:dim_128
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.5213 |
cosine_accuracy@3 | 0.7622 |
cosine_accuracy@5 | 0.814 |
cosine_accuracy@10 | 0.8659 |
cosine_precision@1 | 0.5213 |
cosine_precision@3 | 0.2541 |
cosine_precision@5 | 0.1628 |
cosine_precision@10 | 0.0866 |
cosine_recall@1 | 0.5213 |
cosine_recall@3 | 0.7622 |
cosine_recall@5 | 0.814 |
cosine_recall@10 | 0.8659 |
cosine_ndcg@10 | 0.7028 |
cosine_mrr@10 | 0.6495 |
cosine_map@100 | 0.655 |
数据集:dim_64
使用 InformationRetrievalEvaluator
进行评估。
指标 | 值 |
---|---|
cosine_accuracy@1 | 0.4848 |
cosine_accuracy@3 | 0.7256 |
cosine_accuracy@5 | 0.7805 |
cosine_accuracy@10 | 0.8537 |
cosine_precision@1 | 0.4848 |
cosine_precision@3 | 0.2419 |
cosine_precision@5 | 0.1561 |
cosine_precision@10 | 0.0854 |
cosine_recall@1 | 0.4848 |
cosine_recall@3 | 0.7256 |
cosine_recall@5 | 0.7805 |
cosine_recall@10 | 0.8537 |
cosine_ndcg@10 | 0.6729 |
cosine_mrr@10 | 0.6147 |
cosine_map@100 | 0.6198 |
📄 许可证
该模型使用 apache-2.0 许可证。
Jina Embeddings V3
Jina Embeddings V3 是一个多语言句子嵌入模型,支持超过100种语言,专注于句子相似度和特征提取任务。
文本嵌入
Transformers 支持多种语言

J
jinaai
3.7M
911
Ms Marco MiniLM L6 V2
Apache-2.0
基于MS Marco段落排序任务训练的交叉编码器模型,用于信息检索中的查询-段落相关性评分
文本嵌入 英语
M
cross-encoder
2.5M
86
Opensearch Neural Sparse Encoding Doc V2 Distill
Apache-2.0
基于蒸馏技术的稀疏检索模型,专为OpenSearch优化,支持免推理文档编码,在搜索相关性和效率上优于V1版本
文本嵌入
Transformers 英语

O
opensearch-project
1.8M
7
Sapbert From PubMedBERT Fulltext
Apache-2.0
基于PubMedBERT的生物医学实体表征模型,通过自对齐预训练优化语义关系捕捉
文本嵌入 英语
S
cambridgeltl
1.7M
49
Gte Large
MIT
GTE-Large 是一个强大的句子转换器模型,专注于句子相似度和文本嵌入任务,在多个基准测试中表现出色。
文本嵌入 英语
G
thenlper
1.5M
278
Gte Base En V1.5
Apache-2.0
GTE-base-en-v1.5 是一个英文句子转换器模型,专注于句子相似度任务,在多个文本嵌入基准测试中表现优异。
文本嵌入
Transformers 支持多种语言

G
Alibaba-NLP
1.5M
63
Gte Multilingual Base
Apache-2.0
GTE Multilingual Base 是一个多语言的句子嵌入模型,支持超过50种语言,适用于句子相似度计算等任务。
文本嵌入
Transformers 支持多种语言

G
Alibaba-NLP
1.2M
246
Polybert
polyBERT是一个化学语言模型,旨在实现完全由机器驱动的超快聚合物信息学。它将PSMILES字符串映射为600维密集指纹,以数值形式表示聚合物化学结构。
文本嵌入
Transformers

P
kuelumbus
1.0M
5
Bert Base Turkish Cased Mean Nli Stsb Tr
Apache-2.0
基于土耳其语BERT的句子嵌入模型,专为语义相似度任务优化
文本嵌入
Transformers 其他

B
emrecan
1.0M
40
GIST Small Embedding V0
MIT
基于BAAI/bge-small-en-v1.5模型微调的文本嵌入模型,通过MEDI数据集与MTEB分类任务数据集训练,优化了检索任务的查询编码能力。
文本嵌入
Safetensors 英语
G
avsolatorio
945.68k
29
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers 支持多种语言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers 英语

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统 中文
R
uer
2,694
98
智启未来,您的人工智能解决方案智库
简体中文