Dunzhang Stella En 400M V5

由 Marqo 开发

Stella 400M 是一个中等规模的英语文本处理模型，专注于分类和信息检索任务。

文本分类

Transformers

其他

开源协议:MIT #高精度文本分类 #电商评论分析 #多任务评估

下载量 17.20k

发布时间 : 9/25/2024

模型介绍

内容详情

替代品

模型简介

该模型主要用于文本分类和信息检索任务，在多个标准数据集上表现出色。

模型特点

高性能分类

在Amazon产品评论分类任务中达到97.19%的准确率

多任务能力

支持多种文本处理任务，包括分类和信息检索

中等规模

400M参数的平衡设计，兼顾性能和效率

模型能力

文本分类

情感分析

信息检索

文本相似度计算

使用案例

电子商务

产品评论分类

自动分类Amazon产品评论的情感倾向

在Amazon极性分类任务中达到97.19%准确率

评论多分类

对Amazon评论进行多星级分类

在Amazon评论多分类任务中达到59.53%准确率

信息检索

论点检索

在ArguAna数据集上进行论点匹配检索

达到64.24的主要评分

模型索引

名称: stella_en_400M_v5
结果:
- 数据集:
  - 配置: en
  - 名称: MTEB AmazonCounterfactualClassification (en)
  - 修订版本: e8379541af4e31359cca9fbcf4b00f2671dba205
  - 分割: test
  - 类型: mteb/amazon_counterfactual
  - 指标:
    - 类型: accuracy
      - 值: 92.35820895522387
    - 类型: ap
      - 值: 70.81322736988783
    - 类型: ap_weighted
      - 值: 70.81322736988783
    - 类型: f1
      - 值: 88.9505466159595
    - 类型: f1_weighted
      - 值: 92.68630932872613
    - 类型: main_score
      - 值: 92.35820895522387
  - 任务:
    - 类型: Classification
- 数据集:
  - 配置: default
  - 名称: MTEB AmazonPolarityClassification
  - 修订版本: e2d317d38cd51312af73b3d32a06d1a08b442046
  - 分割: test
  - 类型: mteb/amazon_polarity
  - 指标:
    - 类型: accuracy
      - 值: 97.1945
    - 类型: ap
      - 值: 96.08192192244094
    - 类型: ap_weighted
      - 值: 96.08192192244094
    - 类型: f1
      - 值: 97.1936887167346
    - 类型: f1_weighted
      - 值: 97.1936887167346
    - 类型: main_score
      - 值: 97.1945
  - 任务:
    - 类型: Classification
- 数据集:
  - 配置: en
  - 名称: MTEB AmazonReviewsClassification (en)
  - 修订版本: 1399c76144fd37290681b995c656ef9b2e06e26d
  - 分割: test
  - 类型: mteb/amazon_reviews_multi
  - 指标:
    - 类型: accuracy
      - 值: 59.528000000000006
    - 类型: f1
      - 值: 59.21016819840188
    - 类型: f1_weighted
      - 值: 59.21016819840188
    - 类型: main_score
      - 值: 59.528000000000006
  - 任务:
    - 类型: Classification
- 数据集:
  - 配置: default
  - 名称: MTEB ArguAna
  - 修订版本: c22ab2a51041ffd869aaddef7af8d8215647e41a
  - 分割: test
  - 类型: mteb/arguana
  - 指标:
    - 类型: main_score
      - 值: 64.24
    - 类型: map_at_1
      - 值: 40.398
    - 类型: map_at_10
      - 值: 56.215
    - 类型: map_at_100
      - 值: 56.833999999999996
    - 类型: map_at_1000
      - 值: 56.835
    - 类型: map_at_20
      - 值: 56.747
    - 类型: map_at_3
      - 值: 52.181
    - 类型: map_at_5
      - 值: 54.628
    - 类型: mrr_at_1
      - 值: 41.25177809388336
    - 类型: mrr_at_10
      - 值: 56.570762491815216
    - 类型: mrr_at_100
      - 值: 57.17548614361504
    - 类型: mrr_at_1000
      - 值: 57.176650626377466
    - 类型: mrr_at_20
      - 值: 57.08916253512566
    - 类型: mrr_at_3
      - 值: 52.47747747747754
    - 类型: mrr_at_5
      - 值: 54.94547178757718
    - 类型: nauc_map_at_1000_diff1
      - 值: 22.408086887100158
    - 类型: nauc_map_at_1000_max
      - 值: -8.730419096847543
    - 类型: nauc_map_at_1000_std
      - 值: -17.789262741255737
    - 类型: nauc_map_at_100_diff1
      - 值: 22.407371684274025
    - 类型: nauc_map_at_100_max
      - 值: -8.732263549026266
    - 类型: nauc_map_at_100_std
      - 值: -17.79550515579994
    - 类型: nauc_map_at_10_diff1
      - 值: 21.925005073301246
    - 类型: nauc_map_at_10_max
      - 值: -8.990323944492134
    - 类型: nauc_map_at_10_std
      - 值: -18.199246301671458
    - 类型: nauc_map_at_1_diff1
      - 值: 26.23276644969203
    - 类型: nauc_map_at_1_max
      - 值: -12.376511389571245
    - 类型: nauc_map_at_1_std
      - 值: -18.11411715207284
    - 类型: nauc_map_at_20_diff1
      - 值: 22.32455790850922
    - 类型: nauc_map_at_20_max
      - 值: -8.664671547236034
    - 类型: nauc_map_at_20_std
      - 值: -17.8290016125137
    - 类型: nauc_map_at_3_diff1
      - 值: 22.395462147465064
    - 类型: nauc_map_at_3_max
      - 值: -8.206580750918844
    - 类型: nauc_map_at_3_std
      - 值: -17.604490446911484
    - 类型: nauc_map_at_5_diff1
      - 值: 21.95307379904799
    - 类型: nauc_map_at_5_max
      - 值: -8.03958102978443
    - 类型: nauc_map_at_5_std
      - 值: -17.36578866595004
    - 类型: nauc_mrr_at_1000_diff1
      - 值: 20.124236798365587
    - 类型: nauc_mrr_at_1000_max
      - 值: -9.587376069575898
    - 类型: nauc_mrr_at_1000_std
      - 值: -17.79191612151833
    - 类型: nauc_mrr_at_100_diff1
      - 值: 20.123612603474033
    - 类型: nauc_mrr_at_100_max
      - 值: -9.589187218607831
    - 类型: nauc_mrr_at_100_std
      - 值: -17.7981617777748
    - 类型: nauc_mrr_at_10_diff1
      - 值: 19.723683875738075
    - 类型: nauc_mrr_at_10_max
      - 值: -9.774151729178815
    - 类型: nauc_mrr_at_10_std
      - 值: -18.168668675495162
    - 类型: nauc_mrr_at_1_diff1
      - 值: 23.945332059908132
    - 类型: nauc_mrr_at_1_max
      - 值: -12.260461466152819
    - 类型: nauc_mrr_at_1_std
      - 值: -18.007194922921148
    - 类型: nauc_mrr_at_20_diff1
      - 值: 20.04819461810257
    - 类型: nauc_mrr_at_20_max
      - 值: -9.518368283588936
    - 类型: nauc_mrr_at_20_std
      - 值: -17.831608149836136
    - 类型: nauc_mrr_at_3_diff1
      - 值: 19.8571785245832
    - 类型: nauc_mrr_at_3_max
      - 值: -9.464375021240478
    - 类型: nauc_mrr_at_3_std
      - 值: -17.728533927330453
    - 类型: nauc_mrr_at_5_diff1
      - 值: 19.670313652167827
    - 类型: nauc_mrr_at_5_max
      - 值: -8.966372585728434
    - 类型: nauc_mrr_at_5_std
      - 值: -17.468955834324817
    - 类型: nauc_ndcg_at_1000_diff1
      - 值: 21.863049281767417
    - 类型: nauc_ndcg_at_1000_max
      - 值: -8.18698520924057
    - 类型: nauc_ndcg_at_1000_std
      - 值: -17.634483364794804
    - 类型: nauc_ndcg_at_100_diff1
      - 值: 21.849924385738586
    - 类型: nauc_ndcg_at_100_max
      - 值: -8.226437560889345
    - 类型: nauc_ndcg_at_100_std
      - 值: -17.774648478087002
    - 类型: nauc_ndcg_at_10_diff1
      - 值: 19.888395590413573
    - 类型: nauc_ndcg_at_10_max
      - 值: -8.968706085632382
    - 类型: nauc_ndcg_at_10_std
      - 值: -19.31386964628115
    - 类型: nauc_ndcg_at_1_diff1
      - 值: 26.23276644969203
    - 类型: nauc_ndcg_at_1_max
      - 值: -12.376511389571245
    - 类型: nauc_ndcg_at_1_std
      - 值: -18.11411715207284
    - 类型: nauc_ndcg_at_20_diff1
      - 值: 21.38413342416933
    - 类型: nauc_ndcg_at_20_max
      - 值: -7.636238194084164
    - 类型: nauc_ndcg_at_20_std
      - 值: -17.946390844693028
    - 类型: nauc_ndcg_at_3_diff1
      - 值: 21.29169165029195
    - 类型: nauc_ndcg_at_3_max
      - 值: -6.793840499730093
    - 类型: nauc_ndcg_at_3_std
      - 值: -17.52359001586737
    - 类型: nauc_ndcg_at_5_diff1
      - 值: 20.238297656671364
    - 类型: nauc_ndcg_at_5_max
      - 值: -6.424992706950072
    - 类型: nauc_ndcg_at_5_std
      - 值: -17.082391132291356
    - 类型: nauc_precision_at_1000_diff1
      - 值: -7.05195108528572
    - 类型: nauc_precision_at_1000_max
      - 值: 34.439879624882145
    - 类型: nauc_precision_at_1000_std
      - 值: 68.72436351659353
    - 类型: nauc_precision_at_100_diff1
      - 值: -2.769464113932605
    - 类型: nauc_precision_at_100_max
      - 值: 9.89562961226698
    - 类型: nauc_precision_at_100_std
      - 值: -0.5880967482224028
    - 类型: