FRIDA

由 ai-forever 开发

FRIDA 是一个多任务评估模型，支持多种自然语言处理任务，包括分类、聚类和重新排序等。

文本嵌入

Transformers

支持多种语言

开源协议:MIT #多标签分类 #俄语重排序 #高精度情感分析

下载量 9,491

发布时间 : 12/26/2024

模型介绍

内容详情

替代品

模型简介

FRIDA 是一个多功能模型，适用于多种自然语言处理任务，如文本分类、情感分析、聚类和重新排序。

模型特点

多任务支持

支持多种自然语言处理任务，包括分类、聚类和重新排序。

高性能

在多个数据集上表现出色，尤其是在标题分类和不当内容分类任务中。

多语言支持

主要支持俄语，但在多语言任务中也有一定表现。

模型能力

文本分类

情感分析

聚类

重新排序

多标签分类

使用案例

内容审核

不当内容检测

用于检测和分类不当内容，如仇恨言论或不良信息。

准确率78.33%，F1分数78.20%

情感分析

电影评论情感分类

用于分析电影评论的情感倾向。

准确率70.47%，F1分数65.84%

信息检索

MIRACL重新排序

用于信息检索中的文档重新排序任务。

NDCG@10 66.04%，MAP@10 60.21%

模型索引

名称: FRIDA
结果:
- 数据集:
  配置: 默认
  名称: MTEB CEDR分类（默认）
  版本: c0ba03d058e3e1b2f3fd20518875a4563dd12db4
  拆分: 测试
  类型: ai-forever/cedr-classification
  指标:
  - 类型: 准确率
    值: 64.60148777895856
  - 类型: F1分数
    值: 70.36630348039266
  - 类型: LRAP
    值: 92.47290116896953
  - 类型: 主要分数
    值: 64.60148777895856
    任务:
    类型: 多标签分类
- 数据集:
  配置: 默认
  名称: MTEB 地理评论分类（默认）
  版本: 3765c0d1de6b7d264bc459433c45e5a75513839c
  拆分: 测试
  类型: ai-forever/georeview-classification
  指标:
  - 类型: 准确率
    值: 57.70996093750001
  - 类型: F1分数
    值: 53.18542982057098
  - 类型: 加权F1分数
    值: 53.17663229582108
  - 类型: 主要分数
    值: 57.70996093750001
    任务:
    类型: 分类
- 数据集:
  配置: 默认
  名称: MTEB 地理评论聚类P2P（默认）
  版本: 97a313c8fc85b47f13f33e7e9a95c1ad888c7fec
  拆分: 测试
  类型: ai-forever/georeview-clustering-p2p
  指标:
  - 类型: 主要分数
    值: 78.25468393043356
  - 类型: V度量
    值: 78.25468393043356
  - 类型: V度量标准差
    值: 0.5094366871364238
    任务:
    类型: 聚类
- 数据集:
  配置: 默认
  名称: MTEB 标题分类（默认）
  版本: 2fe05ee6b5832cda29f2ef7aaad7b7fe6a3609eb
  拆分: 测试
  类型: ai-forever/headline-classification
  指标:
  - 类型: 准确率
    值: 89.0185546875
  - 类型: F1分数
    值: 88.993933120612
  - 类型: 加权F1分数
    值: 88.99276764225768
  - 类型: 主要分数
    值: 89.0185546875
    任务:
    类型: 分类
- 数据集:
  配置: 默认
  名称: MTEB 不当内容分类（默认）
  版本: 601651fdc45ef243751676e62dd7a19f491c0285
  拆分: 测试
  类型: ai-forever/inappropriateness-classification
  指标:
  - 类型: 准确率
    值: 78.330078125
  - 类型: AP
    值: 73.17856750532495
  - 类型: 加权AP
    值: 73.17856750532495
  - 类型: F1分数
    值: 78.20169867599041
  - 类型: 加权F1分数
    值: 78.20169867599041
  - 类型: 主要分数
    值: 78.330078125
    任务:
    类型: 分类
- 数据集:
  配置: 默认
  名称: MTEB 电影评论情感分类（默认）
  版本: 5911f26666ac11af46cb9c6849d0dc80a378af24
  拆分: 测试
  类型: ai-forever/kinopoisk-sentiment-classification
  指标:
  - 类型: 准确率
    值: 70.46666666666665
  - 类型: F1分数
    值: 65.83951766538878
  - 类型: 加权F1分数
    值: 65.83951766538878
  - 类型: 主要分数
    值: 70.46666666666665
    任务:
    类型: 分类
- 数据集:
  配置: ru
  名称: MTEB MIRACL重新排序（ru）
  版本: 6d1962c527217f8927fca80f890f14f36b2802af
  拆分: 开发
  类型: miracl/mmteb-miracl-reranking
  指标:
  - 类型: MAP@1(MIRACL)
    值: 39.023
  - 类型: MAP@10(MIRACL)
    值: 60.208
  - 类型: MAP@100(MIRACL)
    值: 61.672000000000004
  - 类型: MAP@1000(MIRACL)
    值: 61.672000000000004
  - 类型: MAP@20(MIRACL)
    值: 61.30799999999999
  - 类型: MAP@3(MIRACL)
    值: 53.33
  - 类型: MAP@5(MIRACL)
    值: 57.289
  - 类型: NDCG@1(MIRACL)
    值: 63.352
  - 类型: NDCG@10(MIRACL)
    值: 66.042
  - 类型: NDCG@100(MIRACL)
    值: 68.702
  - 类型: NDCG@1000(MIRACL)
    值: 68.702
  - 类型: NDCG@20(MIRACL)
    值: 67.768
  - 类型: NDCG@3(MIRACL)
    值: 61.925
  - 类型: NDCG@5(MIRACL)
    值: 63.327
  - 类型: P@1(MIRACL)
    值: 63.352
  - 类型: P@10(MIRACL)
    值: 16.512
  - 类型: P@100(MIRACL)
    值: 1.9529999999999998
  - 类型: P@1000(MIRACL)
    值: 0.19499999999999998
  - 类型: P@20(MIRACL)
    值: 9.13
  - 类型: P@3(MIRACL)
    值: 37.878
  - 类型: P@5(MIRACL)
    值: 27.586
  - 类型: Recall@1(MIRACL)
    值: 39.023
  - 类型: Recall@10(MIRACL)
    值: 72.35000000000001
  - 类型: Recall@100(MIRACL)
    值: 79.952
  - 类型: Recall@1000(MIRACL)
    值: 79.952
  - 类型: Recall@20(MIRACL)
    值: 76.828
  - 类型: Recall@3(MIRACL)
    值: 57.769999999999996
  - 类型: Recall@5(MIRACL)
    值: 64.91900000000001
  - 类型: 主要分数
    值: 66.042
  - 类型: nAUC_MAP@1000_diff1(MIRACL)
    值: 27.150388833033052
  - 类型: nAUC_MAP@1000_max(MIRACL)
    值: 55.15672274267081
  - 类型: nAUC_MAP@1000_std(MIRACL)
    值: 30.088939934575553
  - 类型: nAUC_MAP@100_diff1(MIRACL)
    值: 27.150388833033052
  - 类型: nAUC_MAP@100_max(MIRACL)
    值: 55.15672274267081
  - 类型: nAUC_MAP@100_std(MIRACL)
    值: 30.088939934575553
  - 类型: nAUC_MAP@10_diff1(MIRACL)
    值: 27.853691773641742
  - 类型: nAUC_MAP@10_max(MIRACL)
    值: 52.89390350055654
  - 类型: nAUC_MAP@10_std(MIRACL)
    值: 28.08732516551691
  - 类型: nAUC_MAP@1_diff1(MIRACL)
    值: 43.23179150244192
  - 类型: nAUC_MAP@1_max(MIRACL)
    值: 29.923943954188864
  - 类型: nAUC_MAP@1_std(MIRACL)
    值: 7.447084370195121
  - 类型: nAUC_MAP@20_diff1(MIRACL)
    值: 27.328384072311675
  - 类型: nAUC_MAP@20_max(MIRACL)
    值: 54.60286379835721
  - 类型: nAUC_MAP@20_std(MIRACL)
    值: 29.8084128980043
  - 类型: nAUC_MAP@3_diff1(MIRACL)
    值: 31.244971536944554
  - 类型: nAUC_MAP@3_max(MIRACL)
    值: 43.63984692803854
  - 类型: nAUC_MAP@3_std(MIRACL)
    值: 18.609234683765887
  - 类型: nAUC_MAP@5_diff1(MIRACL)
    值: 29.088760492638286
  - 类型: nAUC_MAP@5_max(MIRACL)
    值: 48.30474364461509
  - 类型: nAUC_MAP@5_std(MIRACL)
    值: 23.817514353844224
  - 类型: nAUC_NDCG@1000_diff1(MIRACL)
    值: 23.12754356408408
  - 类型: nAUC_NDCG@1000_max(MIRACL)
    值: 64.24894553363303
  - 类型: nAUC_NDCG@1000_std(MIRACL)
    值: 38.19318050598967
  - 类型: nAUC_NDCG@100_diff1(MIRACL)
    值: 23.12754356408408
  - 类型: nAUC_NDCG@100_max(MIRACL)
    值: 64.24894553363303
  - 类型: nAUC_NDCG@100_std(MIRACL)
    值: 38.19318050598967
  - 类型: nAUC_NDCG@10_diff1(MIRACL)
    值: 24.779856373697275
  - 类型: nAUC_NDCG@10_max(MIRACL)
    值: 60.4054459738118
  - 类型: nAUC_NDCG@10_std(MIRACL)
    值: 35.148950441182784
  - 类型: nAUC_NDCG@1_diff1(MIRACL)
    值: 35.605865569438556
  - 类型: nAUC_NDCG@1_max(MIRACL)
    值: 65.77787399715454
  - 类型: nAUC_NDCG@1_std(MIRACL)
    值: 34.34726892885082
  - 类型: nAUC_NDCG@20_diff1(MIRACL)
    值: 23.71231783125691
  - 类型: nAUC_NDCG@20_max(MIRACL)
    值: 62.89676599488004
  - 类型: nAUC_NDCG@20_std(MIRACL)
    值: 37.697052941884316