AIbase

M

Modernbert Base Is New Arxiv Dataset

由 davanstrien 开发
基于ModernBERT-base在arxiv-new-datasets数据集上微调的模型，主要用于文本分类任务
大型语言模型
Transformers
开源协议:Apache-2.0#arXiv论文分类#高准确率BERT#学术文本处理
下载量 10.40k
发布时间 : 4/25/2025
模型介绍
内容详情
替代品

模型简介

本模型是基于ModernBERT-base在arxiv-new-datasets数据集上微调的版本，适用于学术论文分类任务。

模型特点

高准确率
在评估集上达到94.5%的准确率和94.39%的F1值
优化训练
采用余弦学习率调度器和标签平滑技术，优化训练过程
学术领域适用
基于arXiv论文数据集训练，适合学术文本处理

模型能力

文本分类
学术论文分析
自然语言理解

使用案例

学术研究
论文分类
对arXiv学术论文进行分类
准确率94.5%
学术文本分析
分析学术论文内容并分类