VideoChat-Flash-2B是基于UMT-L(300M)和Qwen2.5-1.5B构建的多模态模型,支持视频文本转文本任务,仅使用每帧16个标记,并扩展上下文窗口至128k。
下载量 904
发布时间 : 1/11/2025
模型简介
该模型专注于多模态任务,特别是视频与文本之间的转换,能够处理长视频输入(最多约10,000帧)。
模型特点
高效视频处理
仅使用每帧16个标记,显著降低计算资源需求。
长视频支持
通过Yarn扩展上下文窗口至128k,支持最多约10,000帧的输入序列。
多模态能力
结合视觉和语言模型,实现视频与文本之间的高效转换。
模型能力
视频文本转换
多模态理解
长视频处理
使用案例
视频分析
视频内容理解
分析视频内容并生成文本描述。
在MLVU数据集上准确率达65.7%
长视频处理
处理长视频并提取关键信息。
在长视频基准上准确率达58.3%
多模态测试
感知测试
进行多模态感知能力测试。
在感知测试上准确率达70.5%
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers

支持多种语言
L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers

英语
C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统
中文
R
uer
2,694
98
AIbase是一个专注于MCP服务的平台,为AI开发者提供高质量的模型上下文协议服务,助力AI应用开发。
简体中文