license: apache-2.0 pipeline_tag: image-to-3d library_name: 3dtopia-xl tags:

• text-to-3d
• image-to-3d

3DTopia-XL

本仓库包含3DTopia-XL：基于基元扩散的高质量3D资产规模化生成的预训练权重。

项目主页 | Arxiv论文 | 权重下载 | 代码仓库

简介

3DTopia-XL采用基于高效3D表征PrimX的扩散Transformer（DiT）架构，实现了高质量3D资产的规模化生成。仅需5秒去噪过程即可从文本/图像输入生成可直接用于图形管线的PBR材质3D资产。

模型详情

该模型在Objaverse约256K子集上训练。更多细节请参阅我们的论文。

使用方式

下载模型：

from huggingface_hub import hf_hub_download
ckpt_path = hf_hub_download(repo_id="frozenburning/3DTopia-XL", filename="model_sview_dit_fp16.pt")
vae_ckpt_path = hf_hub_download(repo_id="frozenburning/3DTopia-XL", filename="model_vae_fp16.pt")

加载与推理的详细说明请参考我们的代码仓库。

引用

@article{chen2024primx,
  title={3DTopia-XL：基于基元扩散的高质量PBR材质3D资产生成},
  author={陈兆曦, 唐家祥, 董宇豪, 曹子昂, 洪方舟, 蓝雨诗, 王腾飞, 谢浩哲, 吴桐, 斋藤俊介, 潘亮, 林达华, 刘子纬},
  journal={arXiv预印本 arXiv:2409.12957},
  year={2024}
}