模型介绍
内容详情
替代品
模型简介
spaCy的中等规模韩语处理模型,基于UD Korean Kaist和KLUE数据集训练,支持韩语文本的多任务处理
模型特点
多任务处理
单一流程同时处理分词、词性标注、依存分析、命名实体识别等任务
CPU优化
专门针对CPU环境进行优化,适合资源受限的生产环境
高质量词向量
包含floret词向量(50000个词,300维),支持更好的语义理解
完整韩语支持
覆盖韩语特有的语法结构和形态变化,包括复杂的助词和词尾变化
模型能力
分词
词性标注(XPOS/UPOS)
词形还原
依存句法分析
命名实体识别
句子分割
使用案例
文本处理
韩语文本分析
对韩语新闻、社交媒体内容进行语法分析和结构解析
准确识别句子成分和语法关系
信息提取
从韩语文档中提取人名、地点、机构等命名实体
NER F值达82.86%
语言学习
韩语语法分析
帮助学习者理解韩语句子结构和词法变化
词性标注准确率83.52-94.58%
标签:
- spacy
- 标记分类 语言:
- 韩语 许可证: cc-by-sa-4.0 模型索引:
- 名称: ko_core_news_md
结果:
- 任务:
名称: 命名实体识别
类型: 标记分类
指标:
- 名称: NER精确率 类型: 精确率 值: 0.8497178497
- 名称: NER召回率 类型: 召回率 值: 0.8084775698
- 名称: NER F值 类型: f值 值: 0.8285848749
- 任务:
名称: 词性标注
类型: 标记分类
指标:
- 名称: 词性标注(XPOS)准确率 类型: 准确率 值: 0.8351991772
- 任务:
名称: 词性标注(UPOS)
类型: 标记分类
指标:
- 名称: 词性标注(UPOS)准确率 类型: 准确率 值: 0.9458443768
- 任务:
名称: 词形还原
类型: 标记分类
指标:
- 名称: 词形还原准确率 类型: 准确率 值: 0.8994244348
- 任务:
名称: 无标记依存关系
类型: 标记分类
指标:
- 名称: 无标记依存分数(UAS) 类型: f值 值: 0.8389181
- 任务:
名称: 有标记依存关系
类型: 标记分类
指标:
- 名称: 有标记依存分数(LAS) 类型: f值 值: 0.8087068889
- 任务:
名称: 句子分割
类型: 标记分类
指标:
- 名称: 句子F值 类型: f值 值: 1.0
- 任务:
名称: 命名实体识别
类型: 标记分类
指标:
详情: https://spacy.io/models/ko#ko_core_news_md
针对CPU优化的韩语处理流程。组件包括: tok2vec, tagger, morphologizer, parser, lemmatizer (trainable_lemmatizer), senter, ner。
特性 | 描述 |
---|---|
名称 | ko_core_news_md |
版本 | 3.7.0 |
spaCy | >=3.7.0,<3.8.0 |
默认流程 | tok2vec , tagger , morphologizer , parser , lemmatizer , attribute_ruler , ner |
组件 | tok2vec , tagger , morphologizer , parser , lemmatizer , senter , attribute_ruler , ner |
向量 | floret (50000, 300) |
来源 | UD Korean Kaist v2.8 (Choi, Jinho; Han, Na-Rae; Hwang, Jena; Chun, Jayeol) KLUE v1.1.0 (Sungjoon Park, Jihyung Moon, Sungdong Kim, Won Ik Cho, Jiyoon Han, Jangwon Park, Chisung Song, Junseong Kim, Youngsook Song, Taehwan Oh, Joohong Lee, Juhyun Oh, Sungwon Ryu, Younghoon Jeong, Inkwon Lee, Sangwoo Seo, Dongjun Lee, Hyunwoo Kim, Myeonghwa Lee, Seongbo Jang, Seungwon Do, Sunkyoung Kim, Kyungtae Lim, Jongwon Lee, Kyumin Park, Jamin Shin, Seonghyun Kim, Lucy Park, Alice Oh, Jung-Woo Ha, Kyunghyun Cho) Explosion Vectors (OSCAR 2109 + Wikipedia + OpenSubtitles + WMT News Crawl) (Explosion) |
许可证 | CC BY-SA 4.0 |
作者 | Explosion |
标签方案
查看标签方案(4个组件的2028个标签)
组件 | 标签 |
---|---|
tagger |
_SP , ecs , etm , f , f+f+jcj , f+f+jcs , f+f+jct , f+f+jxt , f+jca , f+jca+jp+ecc , f+jca+jp+ep+ef , f+jca+jxc , f+jca+jxc+jcm , f+jca+jxt , f+jcj , f+jcm , f+jco , f+jcs , f+jct , f+jct+jcm , f+jp+ef , f+jp+ep+ef , f+jp+etm , f+jxc , f+jxt , f+ncn , f+ncn+jcm , f+ncn+jcs , f+ncn+jp+ecc , f+ncn+jxt , f+ncpa+jcm , f+npp+jcs , f+nq , f+xsn , f+xsn+jco , f+xsn+jxt , ii , jca , jca+jcm , jca+jxc , jca+jxt , jcc , jcj , jcm , jco , jcr , jcr+jxc , jcs , jct , jct+jcm , jct+jxt , jp+ecc , jp+ecs , jp+ef , jp+ef+jcr , jp+ef+jcr+jxc , jp+ep+ecs , jp+ep+ef , jp+ep+etm , jp+ep+etn , jp+etm , jp+etn , jp+etn+jco , jp+etn+jxc , jxc , jxc+jca , jxc+jco , jxc+jcs , jxt , mad , mad+jxc , mad+jxt , mag , mag+jca , mag+jcm , mag+jcs , mag+jp+ef+jcr , mag+jxc , mag+jxc+jxc , mag+jxt , mag+xsn , maj , maj+jxc , maj+jxt , mma , mmd , nbn , nbn+jca , nbn+jca+jcj , nbn+jca+jcm , nbn+jca+jp+ef , nbn+jca+jxc , nbn+jca+jxt , nbn+jcc , nbn+jcj , nbn+jcm , nbn+jco , nbn+jcr , nbn+jcs , nbn+jct , nbn+jct+jcm , nbn+jct+jxt , nbn+jp+ecc , nbn+jp+ecs , nbn+jp+ecs+jca , nbn+jp+ecs+jcm , nbn+jp+ecs+jco , nbn+jp+ecs+jxc , nbn+jp+ecs+jxt , nbn+jp+ecx , nbn+jp+ef , nbn+jp+ef+jca , nbn+jp+ef+jco , nbn+jp+ef+jcr , nbn+jp+ef+jcr+jxc , nbn+jp+ef+jcr+jxt , nbn+jp+ef+jp+etm , nbn+jp+ef+jxc , nbn+jp+ef+jxf , nbn+jp+ef+jxt , nbn+jp+ep+ecc , nbn+jp+ep+ecs , nbn+jp+ep+ecs+jxc , nbn+jp+ep+ecx , nbn+jp+ep+ef , nbn+jp+ep+ef+jcr , nbn+jp+ep+ef+jcr+jxc , nbn+jp+ep+ef+jxc , nbn+jp+ep+ef+jxf , nbn+jp+ep+ef+jxt , nbn+jp+ep+ep+etm , nbn+jp+ep+etm , nbn+jp+ep+etn , nbn+jp+ep+etn+jca , nbn+jp+ep+etn+jca+jxc , nbn+jp+ep+etn+jco , nbn+jp+ep+etn+jcs , nbn+jp+ep+etn+jxt , nbn+jp+etm , nbn+jp+etn , nbn+jp+etn+jca , nbn+jp+etn+jca+jxc , nbn+jp+etn+jca+jxt , nbn+jp+etn+jco , nbn+jp+etn+jcs , nbn+jp+etn+jct , nbn+jp+etn+jxc , nbn+jp+etn+jxt , nbn+jxc , nbn+jxc+jca , nbn+jxc+jca+jxc , nbn+jxc+jca+jxt , nbn+jxc+jcc , nbn+jxc+jcm , nbn+jxc+jco , nbn+jxc+jcs , nbn+jxc+jct+jxt , nbn+jxc+jp+ef , nbn+jxc+jp+ef+jcr , nbn+jxc+jp+ep+ecs , nbn+jxc+jp+ep+ef , nbn+jxc+jp+etm , nbn+jxc+jxc , nbn+jxc+jxt , nbn+jxt , nbn+jxt+jcm , nbn+jxt+jxc , nbn+nbn , nbn+nbn+jca , nbn+nbn+jcm , nbn+nbn+jcs , nbn+nbn+jp+ecc , nbn+nbn+jp+ep+ef , nbn+nbn+jxc , nbn+nbn+jxt , nbn+nbu , nbn+nbu+jca , nbn+nbu+jcm , nbn+nbu+jco , nbn+nbu+jp+ef , nbn+nbu+jxc , nbn+nbu+ncn , nbn+ncn , nbn+ncn+jca , nbn+ncn+jca+jcc , nbn+ncn+jca+jcm , nbn+ncn+jca+jxc , nbn+ncn+jca+jxc+jcm , nbn+ncn+jca+jxc+jxc , nbn+ncn+jca+jxt , nbn+ncn+jcc , nbn+ncn+jcj , nbn+ncn+jcm , nbn+ncn+jco , nbn+ncn+jcr , nbn+ncn+jcs , nbn+ncn+jct , nbn+ncn+jct+jcm , nbn+ncn+jct+jxc , nbn+ncn+jct+jxt , nbn+ncn+jp+ecc , nbn+ncn+jp+ecs , nbn+ncn+jp+ef , nbn+ncn+jp+ef+jcm , nbn+ncn+jp+ef+jcr , nbn+ncn+jp+ef+jcs , nbn+ncn+jp+ep+ecc , nbn+ncn+jp+ep+ecs , nbn+ncn+jp+ep+ef , nbn+ncn+jp+ep+ef+jcr , nbn+ncn+jp+ep+ep+etm , nbn+ncn+jp+ep+etm , nbn+ncn+jp+ep+etn , nbn+ncn+jp+etm , nbn+ncn+jp+etn , nbn+ncn+jp+etn+jca , nbn+ncn+jp+etn+jco , nbn+ncn+jp+etn+jxc , nbn+ncn+jxc , nbn+ncn+jxc+jca , nbn+ncn+jxc+jcc , nbn+ncn+jxc+jcm , nbn+ncn+jxc+jco , nbn+ncn+jxc+jcs , nbn+ncn+jxc+jxc , nbn+ncn+jxt , nbn+ncn+nbn , nbn+ncn+ncn , nbn+ncn+ncn+jca , nbn+ncn+ncn+jca+jcm , nbn+ncn+ncn+jca+jxt , nbn+ncn+ncn+jcj , nbn+ncn+ncn+jcm , nbn+ncn+ncn+jco , nbn+ncn+ncn+jcs , nbn+ncn+ncn+jct+jxt , nbn+ncn+ncn+jp+etn+jxc , nbn+ncn+ncn+jxt , nbn+ncn+ncn+ncn+jca , nbn+ncn+ncn+ncn+jca+jxt , nbn+ncn+ncn+ncn+jco , nbn+ncn+ncn+xsn+jp+etm , nbn+ncn+ncpa , nbn+ncn+ncpa+jca , nbn+ncn+ncpa+jcm , nbn+ncn+ncpa+jco , nbn+ncn+ncpa+jcs , nbn+ncn+ncpa+jxc , nbn+ncn+ncpa+jxt , nbn+ncn+ncpa+ncn , nbn+ncn+ncpa+ncn+jca , nbn+ncn+ncpa+ncn+jcj , nbn+ncn+ncpa+ncn+jcm , nbn+ncn+ncpa+ncn+jxt , nbn+ncn+xsn , nbn+ncn+xsn+jca , nbn+ncn+xsn+jca+jxt , nbn+ncn+xsn+jcj , nbn+ncn+xsn+jcm , nbn+ncn+xsn+jco , nbn+ncn+xsn+jcs , nbn+ncn+xsn+jct , nbn+ncn+xsn+jp+ecs , nbn+ncn+xsn+jp+ep+ef , nbn+ncn+xsn+jp+etm , nbn+ncn+xsn+jxc , nbn+ncn+xsn+jxc+jcs , nbn+ncn+xsn+jxt , nbn+ncn+xsv+ecc , nbn+ncn+xsv+etm , nbn+ncpa , nbn+ncpa+jca , nbn+ncpa+jca+jcm , nbn+ncpa+jca+jxc , nbn+ncpa+jca+jxt , nbn+ncpa+jcc , nbn+ncpa+jcj , nbn+ncpa+jcm , nbn+ncpa+jco , nbn+ncpa+jcr , nbn+ncpa+jcs , nbn+ncpa+jct , nbn+ncpa+jct+jcm , nbn+ncpa+jct+jxt , nbn+ncpa+jp+ecc , nbn+ncpa+jp+ecc+jxc , nbn+ncpa+jp+ecs , nbn+ncpa+jp+ecs+jxc , nbn+ncpa+jp+ef , nbn+ncpa+jp+ef+jcr , nbn+ncpa+jp+ef+jcr+jxc , nbn+ncpa+jp+ep+ef , nbn+ncpa+jp+ep+etm , nbn+ncpa+jp+ep+etn , nbn+ncpa+jp+etm , nbn+ncpa+jxc , nbn+ncpa+jxc+jca+jxc , nbn+ncpa+jxc+jco , nbn+ncpa+jxc+jcs , nbn+ncpa+jxt , nbn+ncpa+nbn+jcs , nbn+ncpa+ncn , nbn+ncpa+ncn+jca , nbn+ncpa+ncn+jca+jcm , nbn+ncpa+ncn+jca+jxc , nbn+ncpa+ncn+jca+jxt , nbn+ncpa+ncn+jcj , nbn+ncpa+ncn+jcm , nbn+ncpa+ncn+jco , nbn+ncpa+ncn+jcs , nbn+ncpa+ncn+jct , nbn+ncpa+ncn+jct+jcm , nbn+ncpa+ncn+jp+ef+jcr , nbn+ncpa+ncn+jp+ep+etm , nbn+ncpa+ncn+jxc , nbn+ncpa+ncn+jxt , nbn+ncpa+ncn+xsn+jcm , nbn+ncpa+ncn+xsn+jxt , nbn+ncpa+ncpa , nbn+ncpa+ncpa+jca , nbn+ncpa+ncpa+jcj , nbn+ncpa+ncpa+jcm , nbn+ncpa+ncpa+jco , nbn+ncpa+ncpa+jcs , nbn+ncpa+ncpa+jp+ep+ef , nbn+ncpa+ncpa+jxt , nbn+ncpa+ncpa+ncn , nbn+ncpa+xsn , nbn+ncpa+xsn+jcm , nbn+ncpa+xsn+jco , nbn+ncpa+xsn+jcs , nbn+ncpa+xsn+jp+ecc , nbn+ncpa+xsn+jp+etm , nbn+ncpa+xsn+jxt , nbn+ncpa+xsv+ecc , nbn+ncpa+xsv+ecs , nbn+ncpa+xsv+ecx , nbn+ncpa+xsv+ecx+px+etm , nbn+ncpa+xsv+ef , nbn+ncpa+xsv+ef+jcm , nbn+ncpa+xsv+ef+jcr , nbn+ncpa+xsv+etm , (截断:完整列表见流程元数据) |
morphologizer |
POS=连词 , POS=副词 , POS=从属连词 , POS=限定词 , POS=名词 , POS=动词 , POS=形容词 , POS=标点 , POS=空格 , POS=助动词 , POS=代词 , POS=专有名词 , POS=数词 , POS=感叹词 , POS=小品词 , POS=其他 , POS=介词 , POS=符号 |
parser |
根节点 , 形容词性从句修饰 , 副词性从句修饰 , 状语修饰 , 形容词修饰 , 同位语 , 助动词 , 格标记 , 并列连词 , 补语从句 , 复合词 , 并列关系 , 系动词 , 主语从句 , 依赖关系 , 限定词 , 错位成分 , 固定搭配 , 扁平结构 , 间接宾语 , 标记 , 名词修饰 , 名词主语 , 数词修饰 , 宾语 , 旁格 , 标点 , 开放式补语 |
ner |
日期时间 , 位置 , 机构 , 人名 , 数量 , 时间 |
准确率
类型 | 得分 |
---|---|
TOKEN_ACC |
100.00 |
TOKEN_P |
100.00 |
TOKEN_R |
100.00 |
TOKEN_F |
100.00 |
TAG_ACC |
83.52 |
POS_ACC |
94.58 |
SENTS_P |
100.00 |
SENTS_R |
100.00 |
SENTS_F |
100.00 |
DEP_UAS |
83.89 |
DEP_LAS |
80.87 |
LEMMA_ACC |
89.94 |
ENTS_P |
84.97 |
ENTS_R |
80.85 |
ENTS_F |
82.86 |
Indonesian Roberta Base Posp Tagger
MIT
这是一个基于印尼语RoBERTa模型微调的词性标注模型,在indonlu数据集上训练,用于印尼语文本的词性标注任务。
序列标注
Transformers

其他
I
w11wo
2.2M
7
Bert Base NER
MIT
基于BERT微调的命名实体识别模型,可识别四类实体:地点(LOC)、组织机构(ORG)、人名(PER)和杂项(MISC)
序列标注
英语
B
dslim
1.8M
592
Deid Roberta I2b2
MIT
该模型是基于RoBERTa微调的序列标注模型,用于识别和移除医疗记录中的受保护健康信息(PHI/PII)。
序列标注
Transformers

支持多种语言
D
obi
1.1M
33
Ner English Fast
Flair自带的英文快速4类命名实体识别模型,基于Flair嵌入和LSTM-CRF架构,在CoNLL-03数据集上达到92.92的F1分数。
序列标注
PyTorch
英语
N
flair
978.01k
24
French Camembert Postag Model
基于Camembert-base的法语词性标注模型,使用free-french-treebank数据集训练
序列标注
Transformers

法语
F
gilf
950.03k
9
Xlm Roberta Large Ner Spanish
基于XLM-Roberta-large架构微调的西班牙语命名实体识别模型,在CoNLL-2002数据集上表现优异。
序列标注
Transformers

西班牙语
X
MMG
767.35k
29
Nusabert Ner V1.3
MIT
基于NusaBert-v1.3在印尼语NER任务上微调的命名实体识别模型
序列标注
Transformers

其他
N
cahya
759.09k
3
Ner English Large
Flair框架内置的英文4类大型NER模型,基于文档级XLM-R嵌入和FLERT技术,在CoNLL-03数据集上F1分数达94.36。
序列标注
PyTorch
英语
N
flair
749.04k
44
Punctuate All
MIT
基于xlm-roberta-base微调的多语言标点符号预测模型,支持12种欧洲语言的标点符号自动补全
序列标注
Transformers

P
kredor
728.70k
20
Xlm Roberta Ner Japanese
MIT
基于xlm-roberta-base微调的日语命名实体识别模型
序列标注
Transformers

支持多种语言
X
tsmatz
630.71k
25
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers

支持多种语言
L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers

英语
C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统
中文
R
uer
2,694
98
AIbase是一个专注于MCP服务的平台,为AI开发者提供高质量的模型上下文协议服务,助力AI应用开发。
简体中文