C5.14.1Online versus offline handwriting recognition设计研究

联机识别利用笔画顺序与书写动态信息,离线识别只依赖最终图像

别名: 联机识别 · 离线识别 · online HWR · offline HWR

概念解释

联机识别(online recognition)吃的是带时间的笔迹:点的顺序、速度、抬笔。离线识别(offline)只看写完后的点阵或矢量图,像读一张扫描件。同一段字,联机知道“先横后竖”,离线只看见交叉。这是识别器的输入通道差异,不是纠错入口怎么摆,也不是认完以后当键盘文本来改。

机制

联机特征包括笔画数、方向序列、曲率、速度峰(顿笔)、以及抬笔把轨迹切开的结构。许多形近字在静态图像上几乎一样,在笔画顺序上分开。离线要把墨渲染成图,再做切分与分类,丢失时间后只能靠外观和语言模型。把联机轨迹扔掉只送图,等于主动放弃通道。反向:只有照片或打印件时,不存在联机信号,必须走离线。混合系统常把联机轨迹同时渲成图,两路打分融合,以应付乱序书写——有人并不按规范笔顺。动态信息对潦草特别值钱:速度和压力轮廓还在,即使轮廓糊成一团。采样丢包或只存了最终位图的笔记应用,事后无法补回联机通道。

怎么研究

同一批墨同时保存轨迹和渲染图,分别跑联机、离线、融合。再加入故意乱序的笔画。

自变量:输入通道(轨迹 / 图 / 两者)、是否保留速度、笔顺是否规范。 因变量:字错率、乱序时的下降、推断时间。

不要用印刷体扫描当联机对照。那是另一类数据。

边界

拍照白板、作业纸只有离线。笔顺极不规范的使用者,联机的顺序特征会帮倒忙,融合或纯外观可能更好。法律存证若只留图,日后无法用联机引擎重认。加密墨水若去掉时间戳,通道也被关掉。

怎么落地

  • 能拿到笔事件就做联机或融合,不要先把墨烧成图再认。
  • 存盘保留原始轨迹(可压缩),不只存渲染层,以便换引擎重认。
  • 对只提供图的导入路径单独走离线模型,并在 UI 上降低“当场出字”的预期。
  • 验证:同一段字,轨迹版与只看图版的 CER 对比,规范笔顺应是轨迹更好;乱序样本上看融合是否稳住。删掉时间戳再认,应接近离线结果。

延伸

  • 同组C5.14.2 字符切分错误会连锁影响后续字符的识别,一步错步步错 · C5.14.3 识别延迟与识别准确率互相权衡,实时识别通常牺牲部分准确率 · C5.14.4 手写识别对连笔与草书的准确率明显低于工整的楷体书写
  • 相邻C5.05 手写识别与纠错 · C5.15 手写的纠错与后编辑
  • 站内检索online handwriting · offline handwriting · stroke order

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/C5.14.1