入状态； 52、在用户输入完一个笔划后，判断当前输入笔划是否为新笔划，如果是新笔划，则启动定时器计时并根据当前输入状态标志判断当前输入状态，如果不是新笔划则直接根据当前输入状态标志判断当前输入状态；在当前输入状态为草图输入状态时，跳转到步骤S3，在当前输入状态为文字输入状态时，跳转到步骤S4，在当前输入状态为图文输入状态时，跳转到步骤S5 ； 53、将当前输入笔划的笔迹送入草图识别基元分类器进行识别，判断当前输入笔划是否为文字输入手势，是则跳转到步骤S6，否则跳转到步骤S8 ; 54、将当前输入笔划的笔迹送入文字识别分类器识别，反馈当前文字识别结果，跳转到步骤S9 ； 55、将当前笔划笔迹送入文字识别分类器识别，判断当前文字识别结果结合文字输入手势输入之前的草图识别结果是否与目标符号集中的任一图文符号相匹配，如果是，反馈当前图文符号识别结果，跳转到步骤S9，否则，跳转到步骤S12 ; 56、判断当前输入笔划是否为新笔划，如果是，则将当前输入状态标志变更为文字输入状态，跳转到步骤S12，否则，跳转到步骤S7 ； 57、判断截止到上一笔的当前草图识别结果是否与目标符号集中的任一图文符号的图形部分相匹配，如果是，将当前输入状态标志变更为图文输入状态，跳转到步骤S12，否则，跳转到步骤S8 ； 58、将当前笔划笔迹送入草图识别复合图形分类器识别，反馈当前草图识别结果； 59、判断用户是否选取候选识别结果，如果是，跳转到步骤S10，否则，跳转到步骤S12; 510、判断当前输入状态是否为文字输入状态，如果是，跳转到步骤S11，否则将用户选择的识别结果以标准目标符号的形式输出到显示界面，跳转到步骤S12 ; 511、进行文字输入状态判断处理，并根据处理结果进行反馈显示，跳转到步骤S12; 512、判断定时器是否截止，如果是，将当前输入状态标志变更为草图输入状态，取消定时器，跳转到步骤S13 ;否则，直接跳转到步骤S13 ; 513、重复执行步骤S2至S12，进入新的循环，直至用户不再输入新的笔划。
2.如权利要求1所述的基于手写输入状态自适应判断处理的笔式交互方法，其特征在于:所述文字输入手势为区别于现有基本图形之外的自定义的基本图形；或者为与组成复合图形的基本图形具有二义性定义的图形。
3.如权利要求1所述的基于手写输入状态自适应判断处理的笔式交互方法，其特征在于:所述步骤Sll中文字输入状态判断处理包括如下子步骤: 5101、开始本次文字输入状态判断处理； 5102、判断当前是否有目标符号被选中，如果有，跳转到步骤S103，否则将用户选中的文字识别结果以独立文字对象形式输出到显示界面，转入步骤S106 ; 5103、判断当前被选中的目标符号是否包含多个注记框，如果是转入步骤S104，否则转入步骤S105 ； 5104、进行注记位置判断处理，跳转到步骤S106; 5105、将目标符号的注记内容更新为用户选中的文字识别结果； 5106、结束本次文字输入状态判断处理。
4.如权利要求3所述的基于手写输入状态自适应判断处理的笔式交互方法，其特征在于:所述的注记位置判断处理方法为:计算当前输入文字位置与被选中目标符号的不同注记框位置之间的相对位置关系，并将用户选中的文字识别结果更新到与当前文字输入位置最接近的目标符号注记框中。
5.—种基于手写输入状态自适应判断处理的笔式交互系统，其特征在于，其包括如下模块: 初始化模块，用于将输入状态标志初始化为草图输入状态； 综合判断模块，用于在用户输入完一个笔划后，判断当前输入笔划是否为新笔划，如果是新笔划，则启动定时器计时并根据当前输入状态标志判断当前输入状态，如果不是新笔划则直接根据当前输入状态标志判断当前输入状态；在当前输入状态为草图输入状态时，启动草图输入状态处理模块的功能，在当前输入状态为文字输入状态时，启动文字输入状态处理模块的功能，在当前输入状态为图文输入状态时，启动图文输入状态处理模块的功會K ; 草图输入状态处理模块，用于将当前输入笔划的笔迹送入草图识别基元分类器进行识另O，判断当前输入笔划是否为文字输入手势，是则启动文字输入状态变更条件判断模块的功能，否则启动复合图形识别模块的功能； 文字输入状态处理模块，用于将当前输入笔划的笔迹送入文字识别分类器识别，反馈当前文字识别结果，启动候选识别结果选择判断模块的功能； 图文输入状态处理模块，用于将当前笔划笔迹送入文字识别分类器识别，判断当前文字识别结果结合文字输入手势输入之前的草图识别结果是否与目标符号集中的任一图文符号相匹配，如果是，反馈当前图文符号识别结果，启动候选识别结果选择判断模块的功能，否则启动定时器状态判断模块的功能； 文字输入状态变更条件判断模块，用于判断当前输入笔划是否为新笔划，如果是，则将当前输入状态标志变更为文字输入状态，启动定时器状态判断模块的功能，否则启动图文输入状态变更条件判断模块的功能； 图文输入状态变更条件判断模块，用于判断截止到上一笔的当前草图识别结果是否与目标符号集中的任一图文符号的图形部分相匹配，如果是，将当前输入状态标志变更为图文输入状态，启动定时器状态判断模块的功能，否则启动复合图形识别模块的功能； 复合图形识别模块，用于将当前笔划笔迹送入草图识别复合图形分类器识别，反馈当前草图识别结果； 候选识别结果选择判断模块，用于判断用户是否选取候选识别结果，如果是则启动标准目标符号输出模块的功能，否则启动定时器状态判断模块的功能； 标准目标符号输出模块，用于判断当前输入状态是否为文字输入状态，如果是则启动文字输入状态细分处理模块的功能，否则将用户选择的识别结果以标准目标符号的形式输出到显示界面，启动定时器状态判断模块的功能； 文字输入状态细分处理模块，用于对文字输入的不同状态进行判断处理，并根据处理结果进行反馈显示，启动定时器状态判断模块的功能； 定时器状态判断模块，用于判断定时器是否截止，如果是，将当前输入状态标志变更为草图输入状态，取消定时器，启动循环模块的功能；否则，直接启动循环模块的功能； 循环模块，用于重复依次启动综合判断模块、草图输入状态处理模块、文字输入状态处理模块、图文输入状态处理模块、文字输入状态变更条件判断模块、图文输入状态变更条件判断模块、复合图形识别模块、候选识别结果选择判断模块、标准目标符号输出模块、文字输入状态细分处理模块以及定时器状态判断模块的功能，进入新的循环，直至用户不再输入新的笔划。
6.如权利要求5所述的基于手写输入状态自适应判断处理的笔式交互系统，其特征在于:所述文字输入手势为区别于现有基本图形之外的自定义的基本图形；或者为与组成复合图形的基本图形具有二义性定义的图形。
7.如权利要求5所述的基于手写输入状态自适应判断处理的笔式交互系统，其特征在于:所述输入状态判断处理模块包括如下单元: 初始单元，用于开始本次文字输入状态判断处理； 第一判断单元，用于判断当前是否有目标符号被选中，如果有，则启动第二判断单元的功能，否则将用户选中的文字识别结果以独立文字对象形式输出到显示界面，启动终止单元的功能； 第二判断单元，用于判断当前被选中的目标符号是否包含多个注记框，如果是则启动注记位置判断处理单元的功能，否则启动更新单元的功能； 注记位置判断处理单元，用于进行注记位置判断处理，启动终止单元的功能； 注记内容更新单元，用于将目标符号的注记内容更新为用户选中的文字识别结果； 终止单元，用于结束本次文字输入状态判断处理。
8.如权利要求7所述的基于手写输入状态自适应判断处理的笔式交互系统，其特征在于:注记位置判断处理单元中注记位置判断处理方法为:计算当前输入文字位置与被选中目标符号的不同注记框位置之间的相对位置关系，并将用户选中的文字识别结果更新到与当前文字输入位置最接近的目标符号注记框中。
【专利摘要】一种基于手写输入状态自适应判断处理的笔式交互方法，在用户进行手绘图形输入和手写文字输入的过程中，自动判断用户当前输入状态并进行实时的处理反馈，用户无需通过鼠标、键盘等交互设备介入，无需进行显式状态切换，流畅地表达交互意图。该方法定义了文字输入手势，该手势既可区别于其它基本图形，也可与组成复合图形的基本图形具有二义性定义。所设计的文字输入状态判断处理方法和注记位置判断方法，能实现对独立文字对象或目标符号注记输入状态、以及注记位置的自动判断。本方法能简化用户操作流程，使用户自然、高效地完成笔式交互，具备一定的通用性和可扩展性，可应用于基于笔式交互的机械辅助设计、指挥控制等专业领域等。
【IPC分类】G06F3-0488, G06K9-22
【公开号】CN104615367
【申请号】CN201510018914
【发明人】李恒, 黄博
【申请人】中国船舶重工集团公司第七0九研究所
【公开日】2015年5月13日
【申请日】2015年1月14日