DistilBART是BART模型的蒸馏版本,专为文本摘要任务优化,在保持较高性能的同时显著减少模型大小和推理时间。
下载量 2,198
发布时间 : 3/2/2022
模型简介
基于BART架构的蒸馏模型,主要用于生成式文本摘要任务,支持英语文本处理。通过知识蒸馏技术压缩原始模型,实现更高效的推理。
模型特点
高效推理
相比原始BART-large模型,推理速度提升1.68倍,同时保持90%以上的Rouge分数
多版本配置
提供不同参数规模的子版本(12-1/6-6/12-3等),平衡性能与效率需求
双数据集适配
分别针对CNN/DailyMail和XSum数据集优化,适应不同摘要风格需求
模型能力
生成式文本摘要
长文本压缩
关键信息提取
使用案例
新闻媒体
新闻简报生成
自动将长篇新闻报道压缩为简洁摘要
在XSum数据集上达到22.12 Rouge-2分数
内容分析
文档概要生成
从长文档中提取核心内容形成执行摘要
在CNN/DailyMail数据集上达到21.26 Rouge-2分数
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers

支持多种语言
L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers

英语
C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统
中文
R
uer
2,694
98
AIbase是一个专注于MCP服务的平台,为AI开发者提供高质量的模型上下文协议服务,助力AI应用开发。
简体中文