🚀 Easy-Systems/easy-ko-Llama3-8b-Instruct-v1
Easy-Systems/easy-ko-Llama3-8b-Instruct-v1是(주)이지시스템的首个大语言模型(LLM)。该模型基于英文基础模型meta-llama/Meta-Llama-3-8B-Instruct,经过韩语微调而成。此LLM模型后续将持续更新。
✨ 主要特性
- 以英文基础模型meta-llama/Meta-Llama-3-8B-Instruct为基础,进行了韩语的微调。
- 后续会持续对模型进行更新迭代。
DALL-E로 생성한 이미지입니다.
📦 安装指南
此部分文档未提供具体安装步骤,若使用该模型,可参考以下依赖库的安装:
pip install torch transformers
💻 使用示例
基础用法
import torch
from transformers import AutoModelForCausalLM, AutoTokenizer
model_id = "Easy-Systems/easy-ko-Llama3-8b-Instruct-v1"
model = AutoModelForCausalLM.from_pretrained(model_id,
attn_implementation="flash_attention_2",
torch_dtype=torch.bfloat16,
device_map="auto")
tokenizer = AutoTokenizer.from_pretrained(model_id, add_special_tokens=True)
prompt="리눅스 프로세스를 강제로 종료하는 방법은?"
messages = [
{"role": "system", "content": "당신은 친절한 AI chatbot 입니다. 요청에 대해서 step-by-step 으로 간결하게 한국어(Korean)로 답변해주세요."},
{"role": "user", "content": f"\n\n### 명령어: {prompt}\n\n### 응답:"}
]
input_ids = tokenizer.apply_chat_template(
messages,
add_generation_prompt=True,
return_tensors="pt"
).to(model.device)
terminators = [
tokenizer.eos_token_id,
tokenizer.convert_tokens_to_ids("<|eot_id|>")
]
outputs = model.generate(
input_ids,
max_new_tokens=1024,
eos_token_id=terminators,
pad_token_id=tokenizer.eos_token_id,
do_sample=True,
temperature=0.2,
repetition_penalty = 1.3,
top_p=0.9,
top_k=10,
)
response = outputs[0][input_ids.shape[-1]:]
print(tokenizer.decode(response, skip_special_tokens=True).strip())
输出示例
리눅스의 경우, `kill` 또는 `pkill` 명령을 사용하여 특정 프로세스를 강제로 종료할 수 있습니다.
1단계: ps -ef | grep <프로세스_이름>`으로 현재 실행 중인 모든 프로세스가 표시됩니다.
2단계: kill <프로세스_ID>`를 입력하면 해당 프로세스가 즉시 종료됩니다.
또는 `-9`(SIGKILL 신호)를 지정하여 프로세스를 강제로 종료하도록 할 수도 있으며, 이는 운영 체제에서 정상적으로 종료하기 전에 마지막 기회를 주지 않고 바로 죽게 됩니다:
3단계: kill -9 <프로세스_ID>`를 입력합니다.
참고로, 시스템의 안정을 위해 필요한 파일이나 서비스가 있는 경우에는 직접 삭제하지 말아야 하며, 적절한 권한과 지시에 따라 처리해야 합니다. 또한 일부 프로그램들은 강제종료 시 데이터 손실 등의 문제가 발생할 가능성이 있으므로 미리 저장된 작업 내용 등을 확인하고 종료하시기 바랍니다.
📚 详细文档
数据
- 使用AI hub (https://www.aihub.or.kr/) 的数据,经过多种任务(问答、摘要、翻译等)处理后用于微调。
- 利用公司内部自行处理的数据进行微调。
📄 许可证
- 本模型采用知识共享署名 - 非商业性使用 - 相同方式共享 4.0 国际许可协议(Creative Commons Attribution-NonCommercial-ShareAlike 4.0,即CC-BY-NC-SA-4.0)。
- 如需商业使用,请通过以下联系方式进行咨询。
📞 联系我们
如果您有商业使用需求或其他咨询事项,请通过以下邮箱联系:
📋 模型信息
属性 |
详情 |
模型类型 |
文本生成 |
训练数据 |
AI hub数据(经多种任务处理)、公司内部自行处理的数据 |
许可证 |
Creative Commons Attribution-NonCommercial-ShareAlike 4.0 (CC-BY-NC-SA-4.0) |