C5.14.1Online versus offline handwriting recognition设计研究
联机识别利用笔画顺序与书写动态信息,离线识别只依赖最终图像
别名: 联机识别 · 离线识别 · online HWR · offline HWR
概念解释
联机识别(online recognition)吃的是带时间的笔迹:点的顺序、速度、抬笔。离线识别(offline)只看写完后的点阵或矢量图,像读一张扫描件。同一段字,联机知道“先横后竖”,离线只看见交叉。这是识别器的输入通道差异,不是纠错入口怎么摆,也不是认完以后当键盘文本来改。
机制
联机特征包括笔画数、方向序列、曲率、速度峰(顿笔)、以及抬笔把轨迹切开的结构。许多形近字在静态图像上几乎一样,在笔画顺序上分开。离线要把墨渲染成图,再做切分与分类,丢失时间后只能靠外观和语言模型。把联机轨迹扔掉只送图,等于主动放弃通道。反向:只有照片或打印件时,不存在联机信号,必须走离线。混合系统常把联机轨迹同时渲成图,两路打分融合,以应付乱序书写——有人并不按规范笔顺。动态信息对潦草特别值钱:速度和压力轮廓还在,即使轮廓糊成一团。采样丢包或只存了最终位图的笔记应用,事后无法补回联机通道。
怎么研究
同一批墨同时保存轨迹和渲染图,分别跑联机、离线、融合。再加入故意乱序的笔画。
自变量:输入通道(轨迹 / 图 / 两者)、是否保留速度、笔顺是否规范。 因变量:字错率、乱序时的下降、推断时间。
不要用印刷体扫描当联机对照。那是另一类数据。
边界
拍照白板、作业纸只有离线。笔顺极不规范的使用者,联机的顺序特征会帮倒忙,融合或纯外观可能更好。法律存证若只留图,日后无法用联机引擎重认。加密墨水若去掉时间戳,通道也被关掉。
怎么落地
- 能拿到笔事件就做联机或融合,不要先把墨烧成图再认。
- 存盘保留原始轨迹(可压缩),不只存渲染层,以便换引擎重认。
- 对只提供图的导入路径单独走离线模型,并在 UI 上降低“当场出字”的预期。
- 验证:同一段字,轨迹版与只看图版的 CER 对比,规范笔顺应是轨迹更好;乱序样本上看融合是否稳住。删掉时间戳再认,应接近离线结果。