license: other license_name: glm-4 license_link: https://huggingface.co/THUDM/glm-4-9b/main/LICENSE language:

• 中文
• 英文 tags:
• glm
• chatglm
• thudm inference: false pipeline_tag: 文本生成

GLM-4-9B

English版本说明

2024年8月12日更新：本仓库代码已升级适配transformers>=4.44.0版本，请及时更新依赖项。

GLM-4-9B是智谱AI推出的GLM-4系列最新开源预训练模型。在语义理解、数学推理、编程能力及知识问答等多项基准测试中，GLM-4-9B及其人类偏好对齐版本GLM-4-9B-Chat均显著超越Llama-3-8B。除多轮对话外，GLM-4-9B-Chat还具备网页浏览、代码执行、自定义工具调用（Function Call）及超长文本推理（最高支持128K上下文）等高级功能。本代模型新增26种语言支持，涵盖日语、韩语、德语等。我们同时发布了支持100万上下文长度（约200万中文字符）的GLM-4-9B-Chat-1M模型，以及基于GLM-4-9B的多模态模型GLM-4V-9B。该多模态模型支持1120*1120高分辨率下的中英双语多轮对话，在中英文综合能力、感知推理、OCR文字识别、图表理解等多模态评测中，其表现超越GPT-4-turbo-2024-04-09、Gemini 1.0 Pro、Qwen-VL-Max及Claude 3 Opus等顶尖模型。

GLM-4-9B基座模型在典型任务中的评测表现如下：

更多推理代码及依赖项信息，请访问GitHub仓库。

本仓库为GLM-4-9B基座版本，支持8K上下文长度。

使用协议

GLM-4模型权重使用需遵守LICENSE协议。

引用文献

若我们的工作对您有所助益，请考虑引用以下论文：

@misc{glm2024chatglm,
      title={ChatGLM：从GLM-130B到全功能GLM-4的大模型家族}, 
      author={GLM团队及多位贡献者},
      year={2024},
      eprint={2406.12793},
      archivePrefix={arXiv},
      primaryClass={id='cs.CL' full_name='计算与语言' is_active=True alt_name='cmp-lg' in_archive='cs' is_general=False description='涵盖自然语言处理领域。大致对应ACM学科分类I.2.7。需注意，若人工语言（编程语言、逻辑系统、形式化系统）研究未明确涉及广义自然语言问题（自然语言处理、计算语言学、语音、文本检索等），则不属于本领域范畴。'}
}