许可协议：Apache-2.0
任务类型：图文转文本
库名称：transformers
论文链接：https://arxiv.org/abs/2409.03277

ChartMoE

ICLR2025 口头报告

ChartMoE 是基于InternLM-XComposer2的多模态大语言模型，采用专家混合连接器，具备高级图表功能：1)理解、2)重绘、3)编辑、4)高亮和5)转换。

通过Transformers导入

使用以下代码通过Transformers加载ChartMoE模型：

import torch
from transformers import AutoTokenizer, AutoModelForCausalLM
ckpt_path = "IDEA-FinAI/chartmoe"
tokenizer = AutoTokenizer.from_pretrained(ckpt_path, trust_remote_code=True)
model = AutoModelForCausalLM.from_pretrained(ckpt_path, trust_remote_code=True).half().cuda().eval()

快速开始 & Gradio演示

我们提供了简单示例和gradio网页演示，展示如何使用ChartMoE。详情请参阅https://github.com/IDEA-FinAI/ChartMoE。

开源许可

本代码采用Apache-2.0许可证授权。