B

Bertin Base Random

由 bertin-project 开发
这是一个基于RoBERTa-base架构、完全使用西班牙语数据从头训练的模型,专注于填充掩码任务。
下载量 19
发布时间 : 3/2/2022
模型介绍
内容详情
替代品

模型简介

该模型是基于RoBERTa架构的西班牙语预训练模型,专门用于处理西班牙语文本的填充掩码任务。

模型特点

纯西班牙语训练
模型完全使用西班牙语数据从头训练,针对西班牙语文本优化。
基于RoBERTa架构
采用RoBERTa-base架构,具有强大的文本表示能力。
大规模训练数据
训练数据集来自mc4,包含约5000万份西班牙语文档。

模型能力

西班牙语文本理解
填充掩码预测

使用案例

自然语言处理
文本补全
预测句子中缺失的单词或短语
语言模型微调
作为基础模型用于下游NLP任务的微调