语言: da 标签:

• 丹麦语
• bert
• 掩码语言模型
• botxo 许可证: cc-by-4.0 数据集:
• 通用爬虫
• 维基百科
• dindebat.dk
• hestenettet.dk
• 丹麦语_OpenSubtitles 小部件:
• 文本: "Chili Jensen, som bor på Danmarksgade 12, køber chilifrugter fra Netto."

丹麦语BERT（第2版，无大小写）由Certainly（前身为BotXO）预训练，并由Malte Højmark-Bertelsen在DaNE数据集（Hvingelby等人，2020年）上针对命名实体识别任务进行微调。

大量的功劳应归于Certainly（前身为BotXO），他们预训练了丹麦语BERT模型。有关数据和训练细节，请参阅他们的GitHub仓库或这篇文章。您也可以访问他们在Hugging Face上的组织页面。

该模型同时提供TensorFlow和PyTorch格式。原始TensorFlow版本可通过此链接下载。

以下是如何使用🤗Transformers库在PyTorch中加载丹麦语BERT进行令牌分类的示例：

from transformers import AutoTokenizer, AutoModelForTokenClassification

tokenizer = AutoTokenizer.from_pretrained("Maltehb/danish-bert-botxo-ner-dane")
model = AutoModelForTokenClassification.from_pretrained("Maltehb/danish-bert-botxo-ner-dane")

参考文献

丹麦语BERT. (2020). BotXO. https://github.com/botxo/nordic_bert (原始作品发布于2019年)

Hvingelby, R., Pauli, A. B., Barrett, M., Rosted, C., Lidegaard, L. M., & Søgaard, A. (2020). DaNE: 丹麦语的命名实体资源. 第12届语言资源与评估会议论文集, 4597–4604. https://www.aclweb.org/anthology/2020.lrec-1.565

联系方式

如需帮助或进一步信息，请随时通过hjb@kmd.dk与作者Malte Højmark-Bertelsen联系，或通过以下平台：