推荐工具
PlayCanvas 本身不提供将照片或视频转为高斯泼溅的工具,但有许多各具优缺点的第三方选项。
快速比较
| 工具 | 难度 | 平台 | 费用 | 开源 | 主要用途 | 要求 |
|---|---|---|---|---|---|---|
| Polycam | 简单 | iOS、Web | 免费增值‡ | ❌ | 采集与训练 | 移动设备 |
| Scaniverse | 简单 | iOS、Android、Web | 免费增值 | ❌ | 采集与训练 | 移动设备 |
| RealityScan | 中等 | Windows | 免费* | ❌ | 相机位姿 | |
| Postshot | 中等 | Windows | 免费增值† | ❌ | 相机位姿与训练 | CUDA GPU |
| LichtFeld Studio | 中等 | Windows、Linux | 源码免费,安装包收费 | ✔️ | 训练 | CUDA GPU |
| Spirula Studio | 中等 | Windows、Linux、macOS | 免费 | ✔️ | 相机位姿与训练 | |
| Brush | 中等 | Windows、Linux、macOS、Android、Web | 免费 | ✔️ | 训练 | |
| COLMAP | 高级 | Windows、Linux、macOS | 免费 | ✔️ | 相机位姿 | |
| nerfstudio | 高级 | Linux、Windows | 免费 | ✔️ | 研究与训练 | CUDA GPU |
| INRIA Tools | 高级 | Windows、Linux | 免费,非商业 | ❌ | 研究与参考 | CUDA GPU |
*RealityScan 对年总收入低于 100 万美元的个人和公司免费开放商业使用。
†Postshot 免费方案仅限非商业用途,不能导出高斯泼溅。
‡Polycam 免费方案不含高斯泼溅,创建和导出需要 Basic 或更高方案。
简单与消费级工具
这些工具适合希望快速创建内容、无需技术经验的用户:
Polycam(iOS、Web) 商业采集应用与 Web 平台,可从照片或视频创建高斯泼溅,内置编辑和分享。需要付费方案:Basic 每次最多 300 张图像,Business 或 Enterprise 最多 1,000 张。Android 应用只生成摄影测量网格。
导出时选择 Splat PLY。普通 PLY 导出的是点云,而非高斯泼溅。
Scaniverse(iOS、Android、Web) Niantic Spatial 的采集应用,在设备本地训练。免费方案提供不限量本地采集与处理,付费方案增加云处理,包括从 360 度相机视频生成。可导出 PLY。
中级与专业工具
比消费级应用提供更多控制和定制,同时保持专业工作流的配置难度可控:
RealityScan(Windows) Epic Games 的桌面应用,用于相机对齐与稀疏点云生成,不直接训练高斯泼溅。其 COLMAP 格式相机位姿可供 Postshot、LichtFeld Studio 和 Brush 训练。对齐无需 CUDA GPU,只有网格和纹理阶段需要受支持 GPU。
Postshot(Windows) 商业桌面应用,本地完成相机跟踪与训练,结果快、界面易用,可导出 PLY。免费方案限非商业且不可导出,因此导入 PlayCanvas 需要付费。要求计算能力 7.5 或更高的 NVIDIA GPU,即 RTX 2060 或更新。
LichtFeld Studio(Windows、Linux) 开源桌面应用,可训练、编辑和渲染,含变换、裁剪和选择工具。它从现有 COLMAP 数据集训练,不自行计算相机位姿,导出 PLY 和 SOG。SuperSplat 插件可直接发布。要求支持 CUDA 12.8+ 的 NVIDIA GPU。
Spirula Studio(Windows、Linux、macOS) 开源桌面应用,单个独立程序即可从照片或视频完成训练,内置提帧、运动恢复结构和 AI 遮罩。通过 Vulkan 支持 NVIDIA、AMD、Intel 和 Apple Silicon,无需 CUDA,原生处理鱼眼与 360 度相机。也可从现有 COLMAP、Nerfstudio 或 Metashape 数据集训练,导出 PLY。
Brush(Windows、Linux、macOS、Android、Web) 开源跨平台引擎,设备兼容广。使用 WebGPU 渲染,提供实时训练可视化,无 CUDA 依赖,支持浏览器和移动设备。需要 COLMAP 或 Nerfstudio 数据集中的既有相机位姿,不自行生成。
高级与技术工具
这些灵活的底层或研究工作流适合熟悉复杂配置和命令行的用户:
COLMAP(Windows、Linux、macOS) 开源运动恢复结构(SfM)管线,用于相机对齐和稀疏点云生成。跨平台,重建质量高,提供命令行和 GUI,是许多训练工作流的基础,尤其适合非 Windows 用户。
nerfstudio(Linux、Windows) NeRF 和高斯泼溅的开源研究框架,其泼溅方法名为 Splatfacto。命令行驱动、可高度配置,数据处理时可通过 COLMAP 计算相机位姿,训练结果导出 PLY。主要支持 Linux,Windows 测试较少,要求 CUDA GPU。
INRIA Tools(Windows、Linux) 3D 高斯泼溅论文的原始参考实现,依赖 COLMAP 位姿。提供研究级质量和完整参数控制,但配置复杂,需要 CUDA GPU,达到论文质量需 24 GB 显存,更适合实验。源码公开,但许可仅允许研究和评估,不允许商业使用。
输出 PLY 文件
本页所有训练工具均可导出 PLY;COLMAP 和 RealityScan 只产生训练所需位姿和点云。PLY 是标准交换格式,方便在不同应用和工作流间传递场景。文件内容与用法参见 PLY 格式。