基于DistilBERT的轻量级命名实体识别模型，专为英语文本优化，不区分大小写。

PERT是一个基于BERT的预训练语言模型，支持英语文本处理任务。

基于英语语料库预训练的Transformer模型，采用ELECTRA相似的目标任务，通过自监督学习获取文本表征

基于印尼语维基百科预训练的BERT基础模型，采用掩码语言建模（MLM）目标训练，不区分大小写。

IndoBERT是基于BERT模型的印尼语最先进的语言模型，通过掩码语言建模和下一句预测目标进行训练。

这是一个基于印尼语维基百科数据预训练的GPT2-small模型，专注于印尼语文本生成任务。

基于BERT基础uncased模型在SQuAD1.1数据集上微调的问答系统模型

PERT是一个基于BERT架构的预训练语言模型，支持英语任务处理。

Funnel Transformer是一种基于自监督学习的英语文本预训练模型，采用类似ELECTRA的目标任务，通过过滤序列冗余实现高效语言处理。