在 ComfyUI 里运行 TRELLIS 2：模型本体、扩展轮子与两条工作流
TRELLIS 2 是 40 亿参数的图生 3D 模型，而它的 ComfyUI 封装依赖若干编译型 CUDA 扩展，必须与 Python、torch、CUDA 版本对齐。本文是总览：它能产出什么、机器需要什么，以及两条工作流怎么搭。
图生 3D 模型能看到的，只有你交给它的那些像素。只给一张正面图，轮廓背后的一切都得靠它编：背面的厚度、侧面怎么收口、四肢在哪里接上。有些猜测落在合理的位置，有些则会变成一层空壳、一团乱飞的碎面，或者一块和正面毫无关系的背板。
多视图输入存在的意义，就是把这部分猜测压下去。管线会拿到同一个物体的一圈相机视角，它们全部由你那一张输入图推出来，重建过程要同时满足这些视角。通常的收益是背面更合理、破洞更少，模型转一圈也不露馅；代价是采样时间更长、显存占用更高。
多视图这一步到底改变了什么
TRELLIS 2 属于结构化潜空间的图生 3D 模型：图像编码器给出条件，稀疏结构阶段据此建立结构表示，再进入结构化潜空间，最后由解码器还原出几何与贴图。多视图版本在形状采样之前多加了一步——一个更小的视角生成模型接收你的输入图与一组目标相机位姿，为每个位姿生成一张图，这些图随后一起参与稀疏结构与潜空间阶段的采样。因此这一圈视角图的内容就是最终网格的上限：硬阴影、与正面图对不上的透视关系，都会变成扭曲、压扁的几何。多视图也补不出输入里没有的细节，一张 512 像素、本身发虚的手办照片，产出依旧是柔和的资产。
动节点图之前的准备工作
| 项目 | 需要什么 | 说明 |
|---|---|---|
| 显卡 | 默认多视图路径建议 16 GB 显存 | 24 GB 在更高视角分辨率下跑 6 个视角更从容；8–12 GB 需要降低分辨率并开启 CPU 卸载 |
| 工具链 | 较新的 ComfyUI、带 CUDA 的 PyTorch、TRELLIS 2 权重 | 部分阶段依赖编译好的 CUDA 扩展，编译环境能不能用，比显卡的绝对速度更重要 |
| 节点包 | 一个暴露 TRELLIS 2 多视图节点的扩展包 | 不同移植版本的节点名并不统一，请以该包 README 为准，别照抄截图 |
| 磁盘 | 权重加视角图需要几十 GB | 视角图会写进输出目录，跑久一点很容易把盘塞满 |
第一步：准备输入图与提示词
- 用接近正方形、光照均匀的图片，主体居中并占据画面大部分面积。柔和的光比强烈的侧光更合适，因为硬阴影会在它出现的那张生成视角里被当成几何和贴图复刻下来。
- 把背景处理成干净底。背景杂乱时，视角生成模型需要猜测物体边界，而手柄、背带、天线这类细结构是最先崩掉的部分。
- 提示词写短，但要写明材质，例如哑光塑料、拉丝金属、釉面陶瓷。这些词对贴图阶段的影响不亚于对几何的影响。
- 把第一个相机位姿固定成输入图的角度，多数实现会把这一视角当作锚点，其余视角都相对它生成。
- 尽量避开角度很偏的四分之三侧视，以及主体被画幅裁掉边缘的图。生成的一圈视角会和锚点视角互相矛盾，一致性约束彼此拉扯，这种情况应当重新拍或先扩展画布。
第二步：排布相机环
方位角、仰角与半径
- 方位角：均匀分布。4 个视角大致是 0、90、180、270 度，6 个视角则是每 60 度左右一张。均匀铺开比把视角挤在正面更有效，因为单视图生成最薄弱的地方正是两侧。
- 仰角：整圈保持较低仰角，一般高出水平线 10–20 度即可。所有视角共用一个仰角会让顶部偏弱，把两三个后方视角略微抬高，是补顶面最省事的做法。
- 半径与构图：每个视角里物体大小必须一致。物体在几张视角图之间忽大忽小，会被当成形状变化处理。
- 视角数量：3 到 6 个是实用区间。再多很少带来新覆盖，只会更慢；减到 2 个基本等于视野更宽的正面图。
- 光照：整圈的光照方向和色温要一致。这些图也会参与贴图阶段，它们之间的差异最终会以接缝的形式出现在基础色贴图上。
第三步：跑图，先看视角图再看网格
| 阶段 | 对应的节点类型 | 要检查什么 |
|---|---|---|
| 加载与预处理 | 图像加载、去背景或裁剪节点 | 画布接近正方形、主体居中、透明通道干净 |
| 生成视角图 | 带位姿列表的多视图生成节点 | 每个视角里的物体身份一致，画面里没有烤进去的阴影 |
| 条件注入 | 把视角图与位姿配对的相机条件节点 | 位姿数量与图片数量一致，锚点视角与输入图一致 |
| 稀疏结构 | 结构采样阶段 | 只看正面视角时整体比例是否正确 |
| 结构化潜空间 | 潜空间采样阶段 | 从侧面视角看，轮廓厚度是否成立 |
| 解码与贴图 | 几何解码、贴图、预览与导出节点 | 背面表面是否连续，有没有飘在空中的碎片 |
关于耗时，有两点很实际。会话第一次运行还要从磁盘加载几十 GB 权重，所以那个总时长并不等于单次生成的耗时。显存占用同时受视角数量与视角分辨率影响，如果在采样阶段报显存不足，先把生成视角的分辨率减半，再去考虑关掉各种优化。
视角数量怎么选：3、4 还是 6
几种方案的对比
| 视角数 | 覆盖面 | 额外开销 | 适用情况 |
|---|---|---|---|
| 3 | 正面加两侧，没有背面信息 | 最低 | 接近对称、主要从正面观看的物体：胸像、挂牌、浮雕 |
| 4 | 正面、背面和两侧 | 中等 | 游戏道具、手办和打印小雕像的默认选择 |
| 6 | 相机环更完整，转角与倒角更准 | 三者中最高 | 非对称或中空物体，以及要在转台预览里被仔细检查的模型 |
| 1 | 只有正面 | 基准 | 平板背面的物体、带贴图的板件，以及太糊、支撑不起推断视角的输入图 |
这些数字应当当作相对量，而不是绝对承诺。在 24 GB 显存的卡上，中等视角分辨率下 4 个视角加贴图，通常几分钟能出一件资产，6 个视角会明显再多一截；同样任务放到 8–12 GB 显存并开启卸载，耗时还要继续拉长，请以自己机器上的实测为准。
排障与它做不到的事
| 症状 | 常见原因 | 处理方式 |
|---|---|---|
| 背面偏平 | 视角数量太少，或所有视角仰角相同且过低 | 补两个后方视角，并把它们的仰角略微抬高 |
| 轮廓出现缺口 | 几张视角图对物体宽度的判断不一致 | 重新检查裁剪与缩放是否统一，然后重新生成整圈视角 |
| 网格像融化过 | 视角图里带有互相矛盾的阴影或透视 | 清理背景、把光打柔，用更正的输入图重新生成 |
| 贴图出现明显接缝 | 各视角之间的光照或白平衡发生漂移 | 固定提示词与光照方向，让整圈保持一致 |
| 显存不足 | 视角数量过多，同时视角分辨率过高 | 先把视角分辨率减半，仍然失败再减少视角数量 |
当物体需要从多个角度看、背面确实重要时，多视图的开销是值得的：玩家可以绕着走的游戏道具、要打印的手办、任何准备放进转台预览的模型。物体本身很薄、中空或者带有开口时也值得，因为这些位置恰恰是单视图放任模型乱猜的地方。
带贴图的板件、浮雕和背面是平面的东西就不值得，多一个角度只会多花几分钟。它也不是修复工具：输入图本身发虚或过曝时，硬生成 6 个视角只会把模糊成倍放大。一张干净的正面图，加上在 Blender 或 Meshmixer 里几分钟的网格清理，往往是更划算的选择。
本地跑，还是先从在线对比入手
本地跑 TRELLIS 2 意味着节点图、权重和故障都归你自己管，换来的是对相机环位姿和每一张中间图的完全控制。本站介绍的 Open3DAI 运行一个本地程序化生成引擎，并可选择接入第三方引擎 API 适配器，由你用自己的 API 密钥连接，支持文生 3D、图生 3D 与多视图输入。它提供 AI 贴图，也能把同一个提示词或图片交给可用引擎分别生成、在导出前并排对比结果，导出格式包括 GLB、glTF、OBJ、STL、PLY、3MF。这缩短的是对比环节：同一个主体，单视图和多视图各跑一次，对比两者的背面，再决定那几个视角要不要放进节点图。
多视图改变的是条件输入，不是输出格式：跑出来的依旧是带烘焙贴图的密集三角面网格，进入正式流程之前仍然需要减面、UV 处理或网格修复。Open3DAI 同样不训练、不托管这些第三方模型，也不做重拓扑与 UV 展开，更不保证输出封闭或可直接打印，桌面端网格工具依然是流程的一部分。各引擎的可用性、积分价格与第三方条款都会变动，投入预算前请先到厂商页面核对。
常见问题
TRELLIS 2 多视图需要几张输入图？
一张就够。多视图工作流接收单张图片，其余角度的图像由它自己作为中间步骤生成，所以你不必先拍或先渲染一整圈转台。真正需要保证的是输入图干净、光照均匀，因为后续每个角度都会继承它的构图和光影。
为什么单视图生成的模型背面经常破洞？
因为模型从没看到过背面。只以一张正面图作为约束时，形状阶段在轮廓提供不了证据的地方可以自由地生成薄壁、脱离的壳层或零碎面片。补上后方视角后，这些区域会同时受到多个方向约束，这类缺陷通常会减少，但清理工作并不会因此变成可选项。
多视图输入会明显增加显存和耗时吗？
相比单视图确实会增加。采样时间和显存占用同时随视角数量与生成分辨率上升，6 个视角已经处在实用区间的上限。16 GB 显存的卡上，中等分辨率 4 个视角是比较稳妥的默认值；如果在采样阶段报显存不足，先把视角分辨率降下来。
多视图跑完之后贴图为什么会出现接缝？
几乎都是视角图之间不一致造成的，而不是贴图阶段本身的问题。如果一张图从左打光、另一张从右打光，或者白平衡来回漂移，基础色贴图就会在这些视角之间取平均，差异便以接缝的形式显现。请让整圈视角的物体提示词、构图、缩放和光照方向保持一致。
在 Open3DAI 中试一下
把同一份提示词或图片交给多个引擎，并排对比网格，然后导出 GLB、glTF、OBJ、STL、PLY 或 3MF。注册即赠免费积分，无需信用卡。