SpineLoft: 基于脊柱的交互式2D到3D建模

研究背景与问题

• 问题与挑战: 当前的3D建模工具缺乏灵活性，无法直接从2D图像或低质量草图中高效生成复杂的3D模型。此外，许多工具要求专业知识和时间投入，难以满足初学用户的需求。典型问题包括图像中边界缺失、遮挡和噪声。
• 重要性: 丰富可用的3D建模方法将显著降低创作门槛，吸引初学者，同时为专业艺术家提供快速原型工具。这将提升在设计、艺术、动画等领域的创意过程。
• 研究动机与相关工作: 作者受到既有方法局限性的启发，这些方法例如“3-Sweep”和“Teddy”，无法处理噪声或边界不完整的问题。虽然深度学习在自动建模领域取得了进展，但用户的控制和编辑能力仍有限。

解决方案

• 提出的方法: SpineLoft系统利用用户注释的“脊柱-肋骨”方法从2D图像或草图中生成3D几何模型。使用了创新的显式(\ell^2)距离函数来支持区域提取和操控。
• 创新之处:
  • 创造性地将“脊柱-肋骨”结构与传统的曲面生成方法结合，用于3D建模。
  • 提出了显式(\ell^2)距离函数，具有流畅梯度计算和无交叉的性能。
  • 优化用户交互，通过交互式肋骨编辑和局部调整来增强精确性。
• 实施步骤:
  • 输入图像和用户注释: 用户画出粗略的脊柱线（代表目标区域的中心线）。
  • 生成肋骨: 利用显式(\ell^2)距离函数生成非交叉的肋骨线，逐步沿梯度方向延伸至图像边界。
  • 肋骨长度优化: 使用一个基于对称性和边界信息的优化算法处理遮挡和噪声。
  • 3D模型生成: 最终通过肋骨和脊柱组合并选择合适的截面执行“铺展”过程来生成模型。

研究成果

• 具体成果: SpineLoft成功从噪声或边界缺失的图像生成易于编辑的3D模型，同时不需要精确的用户输入。
• 与现有解决方案的比较优势:
  • 比“Teddy”和“RigMesh”更灵活，可以处理不完整边界或噪声输入。
  • 与“3-Sweep”相比，能够支持更复杂的截面和局部编辑。
  • 用户对系统的学习曲线较低，对初学者友好。
• 实验与评估结果:
  • 用户实验: 初学者与专家参与了一系列任务完成时间和满意度评估，平均评分在4-4.5（满分5），说明系统的易用性和创造力鼓励作用。
  • 比较测评: SpineLoft在处理遮挡、噪声和缺失边界等方面的鲁棒性显著优于比较方法。
  • 实际应用演示: 示例展示了复杂组件的组合和自定义截面生成的能力。
• 局限性与未来方向:
  • 无法处理复杂多曲率表面、螺旋形结构和非均匀缩放对象。
  • 当前系统限制为2D脊柱，拓展到3D交互需要进一步开发。
  • 在CAD和高级建模软件中，缺乏与现有工具的充分集成。

总结

SpineLoft为2D至3D建模交互领域带来了新的创意，尤其在快速原型设计和初学者训练方面展示了显著的应用潜力。未来可以通过扩展到3D空间、复杂表面建模和插件开发进一步提升系统的使用范围和灵活性。