library_name: transformers license: other base_model: Qwen/Qwen2.5-3B-Instruct

M-Prometheus

M-Prometheus是一套开源的LLM评估模型，可原生支持多语言输出评估。该模型基于48万条包含详细反馈的多语言直接评估与成对比较数据进行训练，其使用方式与Prometheus-2完全兼容。更多技术细节请参阅我们的论文。

使用说明

本系列模型与Prometheus-2采用相同的提示模板。

针对机器翻译直接评估任务，我们使用以下提示模板：

"""###任务描述：给定包含输入内容的指令、待评估译文、得分为5分的参考译文，以及代表评分标准的打分细则。
1. 根据打分细则（非主观判断）撰写详细的质量评估反馈
2. 反馈后标注1-5分的整数评分，需严格参照评分标准
3. 输出格式应为："反馈：(撰写针对标准的评估意见) [结果] (1-5分的整数)"
4. 请勿生成任何额外的开头、结尾或解释性内容

###待评估指令：
将下列文本从{源语言}翻译为{目标语言}：{原文}

###待评估译文：
{待评译文}

###参考译文(5分标准)：
{参考译文}

###评分细则：[准确性、流畅性、风格]
1分：译文存在重大错误导致原意扭曲，基本不可读且呈现低劣机翻特征，风格与原文完全不符
2分：译文存在多处影响整体理解的错误，阅读困难且频繁出现生硬表达，风格偶尔与原文匹配
3分：译文基本准确但存在不影响核心含义的次要错误，整体可读但部分欠流畅，风格与原文有一定契合度
4分：译文准确仅有微量无关紧要错误，大体阅读自然偶见微小生硬，风格基本还原原文
5分：译文高度精准传达原文全部含义，阅读流畅如同目标语言原创文本，风格完美复现原文语体特征

###反馈：
"""

引用文献

@misc{pombal2025mprometheussuiteopenmultilingual,
      title={M-Prometheus: 开源多语言大模型评估套件}, 
      author={何塞·庞巴尔与尹东根等合作者},
      year={2025},
      eprint={2504.04953},
      archivePrefix={arXiv},
      primaryClass={cs.CL},
      url={https://arxiv.org/abs/2504.04953}, 
}