library_name: transformers base_model: DISLab/SummLlama3.1-8B pipeline_tag: summarization tags:

• TensorBlock
• GGUF

DISLab/SummLlama3.1-8B - GGUF

本仓库包含DISLab/SummLlama3.1-8B的GGUF格式模型文件。

这些文件由TensorBlock提供的机器进行量化，并与截至commit b4242版本的llama.cpp兼容。

我们的项目

Awesome MCP Servers	TensorBlock Studio
模型上下文协议(MCP)服务器的全面集合。	轻量级、开放且可扩展的多LLM交互工作室。
👀 查看我们的成果 👀	👀 查看我们的成果 👀

<|begin_of_text|><|start_header_id|>system<|end_header_id|>

知识截止日期：2023年12月
当前日期：2024年7月26日

{system_prompt}<|eot_id|><|start_header_id|>user<|end_header_id|>

{prompt}<|eot_id|><|start_header_id|>assistant<|end_header_id|>

模型文件规格

下载指南

命令行方式

首先安装Huggingface客户端

pip install -U "huggingface_hub[cli]"

然后下载单个模型文件到本地目录

huggingface-cli download tensorblock/SummLlama3.1-8B-GGUF --include "SummLlama3.1-8B-Q2_K.gguf" --local-dir MY_LOCAL_DIR

如需批量下载符合特定模式的文件（如*Q4_K*gguf），可执行：

huggingface-cli download tensorblock/SummLlama3.1-8B-GGUF --local-dir MY_LOCAL_DIR --local-dir-use-symlinks False --include='*Q4_K*gguf'