Exhubert

由 amiriparian 开发

ExHuBERT是基于HuBERT Large模型扩展和微调的语音情感识别模型，使用EmoSet++数据集（37个数据集，150,907个样本）进行训练，支持多种语言的情感分析。

支持多种语言

下载量 940

发布时间 : 6/4/2024

模型介绍

内容详情

替代品

模型简介

该模型通过块扩展和大量情感数据集的微调增强了HuBERT，专注于语音情感识别任务，能够识别低/高唤醒度与消极/中性/积极效价的组合。

多语言支持

支持14种语言的语音情感识别，涵盖欧洲、亚洲和中东地区的主要语言。

大规模数据集训练

使用EmoSet++（37个数据集，150,907个样本，119.5小时）进行微调，覆盖广泛的情感表达场景。

情感维度识别

能够识别唤醒度（低/高）和效价（消极/中性/积极）的情感维度组合。

扩展架构

在HuBERT Large基础上进行块扩展，增强了模型的情感识别能力。

语音情感识别

多语言音频分析

情感维度分类

心理健康分析

情绪状态监测

通过语音分析用户的情绪状态，用于心理健康应用。

可识别抑郁、焦虑等情绪倾向

人机交互

智能客服情绪响应

根据用户语音情绪调整客服响应策略。

提升客户服务体验

娱乐应用

游戏情绪互动

根据玩家语音情绪调整游戏难度或剧情走向。

增强游戏沉浸感