S

Scandi Fine Web Cleaner

由 davanstrien 开发
该模型是一个演示分类器,用于识别丹麦语和瑞典语网页文本中的问题内容(错误语言、乱码文本)。
下载量 42
发布时间 : 1/10/2025
模型介绍
内容详情
替代品

模型简介

该模型通过在FineWeb-c数据集上微调XLM-RoBERTa-base而开发,旨在作为网页文本的初步过滤器,以提高标注效率。

模型特点

高精确率
精确率达到95.2%,意味着误报较少
双语支持
专门针对丹麦语和瑞典语内容进行优化
网页文本过滤
设计用于提高网页数据标注效率的初步过滤器

模型能力

识别错误语言内容
检测乱码文本
网页文本分类

使用案例

数据清洗
网页数据预处理
在数据标注前过滤低质量内容
提高标注效率和质量