🚀 梅林（Merlin）：用于3D计算机断层扫描的视觉语言基础模型

梅林（Merlin）是一款用于计算机断层扫描的3D视觉语言模型（VLM），它在预训练过程中同时利用了结构化电子健康记录（EHR）和非结构化放射学报告。此Hugging Face仓库提供了模型权重和示例图像文件。

[💻 GitHub] [📄 论文]

🚀 快速开始

梅林（Merlin）能够借助电子健康记录和放射学报告进行预训练，为3D计算机断层扫描相关任务提供有力支持。

📦 安装指南

常规安装

要安装梅林（Merlin），你可以直接运行以下命令：

pip install merlin-vlm

可编辑安装

若要进行可编辑安装，请使用以下命令克隆并安装此仓库：

git clone https://github.com/StanfordMIMI/Merlin.git
cd merlin
pip install -e .

有关使用说明，请访问GitHub 仓库。

📁 项目结构

.
├── README.md
├── i3_resnet_clinical_longformer_best_clip_04-02-2024_23-21-36_epoch_99.pt <梅林（Merlin）权重>
├── image1.nii.gz <示例图像>

📄 许可证

本项目采用MIT许可证。

📎 引用

如果您发现此仓库对您的工作有帮助，请引用原文：

@article{blankemeier2024merlin,
  title={Merlin: A vision language foundation model for 3d computed tomography},
  author={Blankemeier, Louis and Cohen, Joseph Paul and Kumar, Ashwin and Van Veen, Dave and Gardezi, Syed Jamal Safdar and Paschali, Magdalini and Chen, Zhihong and Delbrouck, Jean-Benoit and Reis, Eduardo and Truyts, Cesar and others},
  journal={Research Square},
  pages={rs--3},
  year={2024}
}