We-toon：网络漫画草图修订中作者与画师协作沟通支持系统

文献标题

We-toon: A Communication Support System between Writers and Artists in Collaborative Webtoon Sketch Revision

文献信息

• 主题领域: 人机交互、协作系统、生成式人工智能在艺术创作中的应用
• 关键词: Webtoon, 协作, 通信, 人机交互, 人工智能支持创造力, 交互系统, 用户界面, GAN, 用户研究, 可用性研究

研究背景与问题

• 发现的问题与挑战:

  1. 在创作 Webtoon（网络漫画）过程中，作者（Writers）和画家（Artists）的协作需要高效沟通，尤其在角色设计和草稿修订阶段。然而，作家难以通过文字准确描述绘画细节，常导致重复修订。
  2. 现有方法主要依赖文本说明和图片搜索（如 Google、Pinterest）提供参考，这种方式效率低下且不直观。
  3. 缺乏专注于 Webtoon 创作领域的工具来简化沟通和提高协作效率。

• 研究的重要性:

  • 随着移动设备普及，Webtoon 的行业迅速发展，其协作环境变得更加复杂和系统化。改善合作作者之间的沟通效率将直接影响作品质量和发布效率。

• 研究动机与相关工作:

  • 本研究基于对四位专业作者的前置访谈，提出提升协作效率的需求。通过结合前沿技术（如生成对抗网络 GAN），研究如何解决 “反馈模糊” 和 “修订效率” 的问题。
  • 相关文献侧重于多用户在线协作系统和图像生成技术，但未涉及 Webtoon 创作具体场景。

解决方案

• 方法与系统概述:

  • 提出 We-toon 系统：一个基于 GAN 的通信支持工具，帮助作家生成参考图像并将修改意图传达给画家。
  • 系统采用两阶段流程：
    1. 图像准备：通过用户定义的属性生成或者直接选择预定义的参考图像。
    2. 图像合成：将参考图像的局部区域整合到画家绘制的源图像中。

• 创新之处:

  1. 使用 StyleGAN2-Ada 和 StyleMapGAN 生成高质量参考图像，并支持局部图像编辑。
  2. 系统综合使用文本描述、手绘标记、高智能合成图像，提升沟通的直观性。
  3. 引入“属性过滤”和“微调”等交互方式，使作家无需专业绘画技能即可快速生成参考材料。

• 实施步骤及关键技术:

  1. 图像生成与筛选：
     • 构建了包含 47,233 张网络漫画角色面部图像的数据集，利用 StyleGAN2-Ada 生成无限制的新图像。
     • 作家可通过多种交互方式调整生成图像的属性（如性别、发型、眼睛大小）。
  2. 图像合成：
     • 使用 StyleMapGAN 实现局部风格的迁移，允许用户定义“修改内容”与“修改位置”。
  3. 用户界面设计：
     • 设计专门界面以便作家传达“修订请求”，包含文本指令、标记区域和合成图。

研究成果

• 具体成果:

  • 基于 24 位专业作者的用户实验表明，We-toon 能够显著提高协作者间的交流效率。
  • 作家通过 We-toon 对图像的满意度（外观、和谐性、细节反映）在评分中优于传统方法。

• 与现有解决方案的比较优势:

  1. 更高的通信清晰度:
     • 生成的图像直观、具体，解决了纯文字描述的模糊和不直观问题。
     • 降低了对图像搜索的依赖，无需外部资源即可生成符合预期的参考图片。
  2. 时间效率提升:
     • We-toon 显著减少修订请求的次数和每次修订花费的时间（平均减少至 4.6 分钟）。
  3. 用户满意度提高:
     • 作家和画家均认为系统改善了彼此之间的理解，并为最终产出提供了更优质的支持。

• 实验及评估结果:

  • 主要发现：
    • 86% 的作家认为 We-toon 能够生成丰富且高质量的参考图像；
    • 83% 的画家反馈认为基于 We-toon 的修订请求比传统方法更易理解。
    • 基于外观、和谐性和细节完整度，平均得分较传统方法（Baseline）提高了 12%。
  • 局限与改进方向:
    1. 目前仅支持面部特写和固定表达，需扩展至全身角色和动态表达。
    2. 系统暂不支持全局语义修改，未来可引入更多模型（如 HyperStyle）以提升灵活性。
    3. 属性分类仍需手动完成，未来计划通过自监督学习实现自动化。

• 未来方向:

  1. 探索 We-toon 在其他艺术形式（如动画、插图设计）中的应用潜力；
  2. 针对复杂场景和动态对象，开发更加多功能的 GAN 模块；
  3. 研究针对 AI 生成内容的版权和法律相关问题。