C

Consilience 40b 7Y9v38s5

由 PsycheFoundation 开发
Nous Consilience 40B是一个400亿参数的生成式文本模型,通过去中心化方式从零开始预训练,支持多种语言,代表人类多元创造性产出。
下载量 44
发布时间 : 5/9/2025
模型介绍
内容详情
替代品

模型简介

这是一个仅解码器的Transformer模型,采用DeepSeek v3 + MLA架构,预训练数据整合了FineWeb、FineWeb 2和The Stack v2数据集,总计约20T token。

模型特点

去中心化预训练
模型通过互联网以去中心化方式从零开始预训练,每500个训练步骤自动更新。
持续训练策略
采用持续训练策略,不设最终数据'退火'步骤,以保持创造力和有趣行为。
多语言支持
支持超过30种语言,涵盖全球主要语种。
双重许可协议
默认采用CC0许可(贡献至公共领域),同时允许用户选择附带署名与免责声明的MIT许可。

模型能力

多语言文本生成
创造性内容生成
大规模文本处理

使用案例

内容创作
多语言文章生成
生成各种语言的创意文章或技术文档
创意写作辅助
帮助作家进行故事构思和内容创作
教育
多语言学习辅助
为语言学习者提供多语言文本示例