语言:

• 英文 许可证: 其他 模型索引:
• 名称: Hathor_Stable-v0.2-L3-8B 结果:
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: IFEval (0样本) 类型: HuggingFaceH4/ifeval 参数: 少量样本数: 0 指标:
    • 类型: 实例级严格准确率和提示级严格准确率 值: 71.75 名称: 严格准确率 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: BBH (3样本) 类型: BBH 参数: 少量样本数: 3 指标:
    • 类型: 标准化准确率 值: 32.83 名称: 标准化准确率 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: MATH 5级 (4样本) 类型: hendrycks/competition_math 参数: 少量样本数: 4 指标:
    • 类型: 精确匹配 值: 9.21 名称: 精确匹配 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: GPQA (0样本) 类型: Idavidrein/gpqa 参数: 少量样本数: 0 指标:
    • 类型: 标准化准确率 值: 4.92 名称: 标准化准确率 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: MuSR (0样本) 类型: TAUR-Lab/MuSR 参数: 少量样本数: 0 指标:
    • 类型: 标准化准确率 值: 5.56 名称: 标准化准确率 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜
  • 任务: 类型: 文本生成 名称: 文本生成 数据集: 名称: MMLU-PRO (5样本) 类型: TIGER-Lab/MMLU-Pro 配置: 主要 分割: 测试 参数: 少量样本数: 5 指标:
    • 类型: 准确率 值: 29.96 名称: 准确率 来源: 网址: https://huggingface.co/spaces/open-llm-leaderboard/open_llm_leaderboard?query=Nitral-AI/Hathor_Stable-v0.2-L3-8B 名称: 开放LLM排行榜

Bartowski的量化版本 <3: https://huggingface.co/bartowski/Hathor-L3-8B-v.02-GGUF https://huggingface.co/bartowski/Hathor-L3-8B-v.02-exl2

说明: Hathor基于Llama 3 8B指令模型，训练了3轮私有数据、合成指令数据、轻量/经典小说数据混合以及角色扮演对话对。(扩展版)

开放LLM排行榜评估结果

详细结果请查看此处