微件：

• 文本："沙特前国脚侯赛因·阿卜杜勒·加尼称赞伊蒂哈德俱乐部的签约"
• 文本："美国总统乔·拜登晚间返回白宫时表示"
• 文本："沙特王储穆罕默德·本·萨勒曼在吉达举行的美阿峰会上强调，国际社会共同努力对全球经济复苏至关重要"
• 文本："其言：以右手支付全额聘礼——拉斐仪据巴格维传述并确认"
• 文本："安塔拉·本·舍达德以豪迈诗行彰显部族荣耀，其诗蕴含深刻哲理：\n位高者不怀怨恨之念，\n易怒者难登卓越之巅"
• 文本："安塔拉·本·舍达德以豪迈诗行彰显部族荣耀，其诗蕴含深刻哲理：\n位高者不怀怨恨之念，\n易怒者难登卓越之巅"
• 文本："其典雅诗作有云：\n任时光恣意流转 ** 命运裁决处之泰然\n莫为夜之灾厄哀叹 ** 世间无常终归虚幻\n危难当前须刚毅如山 ** 此乃男儿本色"

茉莉花-3.5亿参数版

JASMINE：面向小样本学习的阿拉伯语GPT模型

本代码库配套我们发表于EMNLP2023的论文《JASMINE：面向小样本学习的阿拉伯语GPT模型》（论文链接）。JASMINE是一系列基于自回归Transformer架构的阿拉伯语大模型，参数量从3亿至67亿不等，预训练数据规模达235GB文本。

引用格式

若您在科研工作中使用茉莉花模型，或认为本资源有价值，请引用我们的论文（格式待更新）：

@inproceedings{billah-nagoudi-etal-2023-jasmine,
    title = "{JASMINE}: {A}rabic {GPT} Models for Few-Shot Learning",
    author = "Billah Nagoudi, El Moatez  and
      Abdul-Mageed, Muhammad  and
      Elmadany, AbdelRahim  and
      Inciarte, Alcides  and
      Islam Khondaker, Md Tawkat",
    editor = "Bouamor, Houda  and
      Pino, Juan  and
      Bali, Kalika",
    booktitle = "Proceedings of the 2023 Conference on Empirical Methods in Natural Language Processing",
    month = dec,
    year = "2023",
    address = "Singapore",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2023.emnlp-main.1040",
    doi = "10.18653/v1/2023.emnlp-main.1040",
    pages = "16721--16744",
}

致谢

本研究获得加拿大自然科学与工程研究委员会、加拿大社会科学与人文研究委员会、加拿大创新基金会、ComputeCanada及UBC ARC-Sockeye支持。特别感谢Google TensorFlow研究云计划(TFRC)提供的免费TPU算力支持。