pipeline_tag: 文本生成 license: apache-2.0 language:

• 中文
• 英文 datasets:
• hon9kon9ize/粤语羊驼数据集
• indiejoseph/维基百科中港翻译对照
• indiejoseph/粤语维基百科摘要
• indiejoseph/粤语维基百科问答 tags:
• 粤语
• 广东话
• 香港
• 廣東話
• 粵語

Breeze-7B-粤语版v0.1模型卡

Breeze-7B是基于Mistral-7B构建的语言模型系列，专为繁体中文场景优化。鸣谢联发科研发团队。
Breeze-7B係以Mistral-7B為基礎，專為正體中文打造嘅模型系列，由聯發科研發團隊開發。

[Breeze-7B-粤语版]源自基础模型Breeze-7B-Base，通过hon9kon9ize提供的数据集进行微调，使模型具备粤语对话能力。
[Breeze-7B-粤语版]係由基礎模型Breeze-7B-Base演變而來，使用hon9kon9ize整理嘅數據集進行微調，令呢個模型識講廣東話。

选择[Breeze-7B-Base]作为基础模型，因其专为繁体中文优化的扩展词表特性，且其语言风格与香港用语习惯高度契合，非常适合本项目开发。
我揀[Breeze-7B-Base]做基礎模型係因為佢有正體中文擴充詞彙表，而且佢嘅語言風格同香港好夾，所以好適合呢個項目。

现开源axolotl配置文件axolotl-config.yml，供开发者自行训练使用。
為咗等大家可以自己訓練模型，我開源咗axolotl設定檔axolotl-config.yml。

特别感谢hon9kon9ize和indiejoseph提供优质数据集，本项目得以实现全赖他们的重要贡献。
多謝hon9kon9ize同indiejoseph分享嘅數據集，先至有呢個項目誕生。