🚀 BERTu

BERTu是一个马耳他语单语模型，它基于BERT（基础）架构，在Korpus Malti v4.0语料库上从头开始预训练。该模型可用于多种自然语言处理任务，为马耳他语的相关研究和应用提供了有力支持。

✨ 主要特性

• 多任务表现出色：在依存句法分析、词性标注、命名实体识别和情感分析等多个自然语言处理任务中都有良好的表现。
• 单语模型：专门为马耳他语设计，能够更好地处理马耳他语的语言特性。

📚 详细文档

模型评估结果

模型信息

📄 许可证

本作品采用知识共享署名 - 非商业性使用 - 相同方式共享 4.0 国际许可协议进行许可。超出此许可范围的权限可在 https://mlrs.research.um.edu.mt/ 获取。

🔗 引用

本研究成果首次发表于 Pre-training Data Quality and Quantity for a Low-Resource Language: New Corpus and BERT Models for Maltese。引用格式如下：

@inproceedings{BERTu,
    title = "Pre-training Data Quality and Quantity for a Low-Resource Language: New Corpus and {BERT} Models for {M}altese",
    author = "Micallef, Kurt  and
              Gatt, Albert  and
              Tanti, Marc  and
              van der Plas, Lonneke  and
              Borg, Claudia",
    booktitle = "Proceedings of the Third Workshop on Deep Learning for Low-Resource Natural Language Processing",
    month = jul,
    year = "2022",
    address = "Hybrid",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2022.deeplo-1.10",
    doi = "10.18653/v1/2022.deeplo-1.10",
    pages = "90--101",
}