G

Gpt3 Finnish Xl

由 TurkuNLP 开发
面向芬兰语的15亿参数生成式预训练Transformer模型,基于BLOOM架构训练3000亿token
下载量 103
发布时间 : 2/15/2023
模型介绍
内容详情
替代品

模型简介

该模型是纯语言模型,未经过指令微调,可作为基础模型通过微调用于对话或问答场景

模型特点

大规模单语训练
专门针对芬兰语训练,使用超过2070亿字符的多源数据
参数可扩展
提供从1.86亿到133亿参数的不同规模模型选择
数据加权采样
对不同数据源采用智能加权策略优化训练效果

模型能力

芬兰语文本生成
语言模型预训练
基础模型微调

使用案例

自然语言处理
芬兰语聊天机器人
通过指令微调构建芬兰语对话系统
文本自动生成
生成芬兰语新闻、故事等内容
教育
芬兰语学习辅助
生成芬兰语学习材料和练习