许可证: mit 语言:

• 高棉语 库名称: transformers 管道标签: 填充掩码 指标:
• 字符错误率(CER)

模型描述

这是一个基于FacebookAI/xlm-roberta-base预训练模型构建的高棉语填充掩码模型。 该模型使用约26,000+条高棉语句子/分句进行微调（80%作为训练集，20%作为验证集）。 本模型仅在高棉语中表现良好。

模型使用示例

>>> from transformers import pipeline
>>> unmasker = pipeline('fill-mask', model='channudam/khmer-xlm-roberta-base')
>>> unmasker("天气非常炎热 请多喝<mask>。")

[
  {
    'score': 0.9788032174110413,
    'token': 41440,
    'token_str': '水',
    'sequence': '天气非常炎热 请多喝水。'
  },
  {
    'score': 0.012485685758292675,
    'token': 191670,
    'token_str': '酒',
    'sequence': '天气非常炎热 请多喝酒。'
  },
  {
    'score': 0.0014946138253435493,
    'token': 162483,
    'token_str': '饭',
    'sequence': '天气非常炎热 请多吃饭。'
  },
  {
    'score': 0.001305083278566599,
    'token': 49245,
    'token_str': '吃',
    'sequence': '天气非常炎热 请多吃。'
  },
  {
    'score': 0.0007108347490429878,
    'token': 51863,
    'token_str': '水',
    'sequence': '天气非常炎热 请多喝 水。'
  }
]