VisiPrint：从真实材料样本预览3D打印外观

文献标题

VisiPrint: Previewing 3D-Print Appearance from Real Material Samples

出版信息

• 主题领域: 聚焦于3D打印外观的预览工具
• 关键词: 3D打印, FDM, 材料外观, 切片模式, 逼真预览, 扩散模型, HCI, 材料迁移, 示例驱动合成, 制造工具

背景与问题

• 问题/挑战: 现有的3D打印预览工具主要关注工具路径或高保真渲染，但无法准确预测最终打印外观，包括材料和切片特定的视觉特征。
• 重要性: 精确的预览可以通过使用户期望与实际打印结果一致来减少时间、耗材和精力的浪费，特别是在美学和原型设计应用中。
• 动机与相关工作: 之前的研究强调了预览精度的不足，包括颜色偏移、光泽变化和层线高光等问题。虽然像Blender和CAD软件这样的渲染工具可以提供高保真图像，但它们无法考虑切片引起的伪影。现有的示例驱动方法和材料迁移模型忽略了FDM特有的线条层压和接缝等线索。本文通过将材料和切片特性整合到一个统一的预览工具中来解决这些问题。

解决方案

• 提出的方法: VisiPrint，一种后切片预览工具，将材料示例照片与切片器截图结合起来，生成逼真的3D打印对象预览。
• 创新点:
  1. 将基于示例的材料迁移与切片器生成的几何形状和切片模式相结合。
  2. 使用基于扩散的合成管道，结合深度、边缘和材料示例进行条件生成。
  3. 引入用户友好的控制功能，用于平衡切片和材料的影响。
  4. 提供独立界面以及Ultimaker Cura的插件。
• 流程与关键技术:
  • 输入: 切片器截图和材料示例照片。
  • 预处理: 从切片器截图中提取深度和Canny边缘。
  • 材料迁移: 使用CLIP编码材料特征，并通过深度和边缘图进行条件合成。
  • 生成: 使用Stable Diffusion XL与多ControlNet进行逼真预览合成。
  • 输出: 包含切片模式、材料外观以及可选颜色校正的预览。

结果

• 具体发现:
  • 在用户研究中，VisiPrint实现了100%的任务完成率，而Cura为63%，Blender为13%。
  • 平均任务完成时间: VisiPrint为66.4秒，Cura为158.5秒，Blender为250.2秒。
  • 定量指标: PSNR = 15.587, LPIPS = 0.278, CLIP = 0.911，优于基线方法如ZeST和IP-Adapter。
• 相较基线的优势:
  • 相较于Cura、Blender及其他材料迁移方法，具有更高的逼真度、材料保真度和切片细节表现。
  • 改善用户体验，降低工作负担，提高对预览的信心。
• 实验/评估:
  • 用户研究: 15名参与者比较VisiPrint、Cura和Blender的预览任务表现。
  • 感知研究: 比较VisiPrint预览、基线预览和真实照片。
  • 技术基准测试: 使用PSNR、LPIPS和CLIP相似性指标进行评估。
• 局限性与未来工作:
  • 依赖单目深度估计和示例质量，可能引入伪影。
  • 仅限于FDM打印和标准PLA材料；尚未测试在SLA/树脂打印及复杂材料上的性能。
  • 未建模物理可行性或支撑结构伪影。
  • 未来工作可探索任意光照调整、自动姿态对齐及支持其他打印技术。

总结

VisiPrint是一种通过结合材料示例照片与切片器截图生成逼真3D打印对象预览的新工具。它通过整合材料外观和切片模式解决了现有工具的不足。用户研究和技术评估显示，与Cura和Blender等流行工具相比，VisiPrint显著提高了任务完成率，减少了工作负担，并增强了预览的真实感。尽管该系统目前针对PLA材料的FDM打印进行了优化，未来工作可以扩展其功能以支持其他打印技术和材料。VisiPrint代表了向更具信息性和外观驱动的3D打印工作流程迈出的重要一步。