一种听写熟练度评估方法及可穿戴设备与流程

文档序号:18466540发布日期:2019-08-17 02:31阅读:201来源:国知局
一种听写熟练度评估方法及可穿戴设备与流程

本发明涉及可穿戴设备技术领域,具体涉及一种听写熟练度评估方法及可穿戴设备。



背景技术:

听写训练是孩子在学习语言时常用的一种练习方法。目前,市面上出现了一些能够辅助孩子进行听写训练的电子设备(如家教机、智能手表等)。这些电子设备可以代替老师或者家长读出听写内容,使得孩子可以随时随地进行听写训练。

但是,在实践中发现,这些电子设备大部分只能机械地读出单词,难以如家长或老师一样观察孩子在听写训练过程中的表现,从而难以根据孩子的表现评估孩子对听写内容的熟练程度。



技术实现要素:

本发明实施例公开了一种听写熟练度评估方法及可穿戴设备,能够评估用户对听写内容的熟练程度。

本发明实施例第一方面公开一种听写熟练度评估方法,所述方法应用于包括智能主机的可穿戴设备,所述智能主机上相对的顶侧和底侧各自设有一个拍摄模组,所述智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向,所述方法包括:

所述智能主机在播放听写内容时,控制任意一个所述拍摄模组拍摄位于书写区域中的书写物体的运动图像;

所述智能主机根据所述运动图像,跟踪所述书写物体的移动轨迹;

所述智能主机识别所述移动轨迹中的停顿点,并将所述智能主机播放的与所述停顿点对应的部分听写内容确定为不熟练的听写内容。

作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:

所述智能主机检测所述可穿戴设备的佩戴肢体是否为握笔的肢体,如果否,执行所述在播放听写内容时,控制任意一个所述拍摄模组拍摄位于书写区域中的书写物体的运动图像。

作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:

所述智能主机在所述听写内容播放完毕之后,输出提示信息;所述提示信息用于提示所述可穿戴设备的佩戴者转动所述智能主机,以使任意一个所述拍摄模组拍摄到所述书写区域中的书写内容;

所述智能主机对比所述书写内容与所述智能主机播放的所有听写内容,并将所述智能主机播放的所有听写内容中与所述书写内容不一致的部分确定为所述不熟练的听写内容。

作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:

所述智能主机在任意一个所述拍摄模组拍摄到所述书写区域中的书写内容时,控制另一个所述拍摄模组拍摄所述佩戴者的人脸图像;

所述智能主机根据所述人脸图像识别所述佩戴者的身份标识;

所述智能主机将所述不熟练的书写内容发送至与所述身份标识绑定的终端设备。

作为一种可选的实施方式,在本发明实施例第一方面中,所述书写物体为握笔的手或者笔。

本发明实施例第二方面公开一种可穿戴设备,所述可穿戴设备包括智能主机,所述智能主机上相对的顶侧和底侧各自设有一个拍摄模组,所述智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向;所述智能主机包括:

控制单元,用于在所述智能主机播放听写内容时,控制任意一个所述拍摄模组拍摄位于书写区域中的书写物体的运动图像;

第一检测单元,用于根据所述运动图像,跟踪所述书写物体的移动轨迹;

确定单元,用于识别所述移动轨迹中的停顿点,并将所述智能主机播放的与所述停顿点对应的部分听写内容确定为不熟练的听写内容。

作为一种可选的实施方式,在本发明实施例第二方面中,所述智能主机还包括:

第二检测单元,用于检测所述可穿戴设备的佩戴肢体是否为握笔的肢体;

所述控制单元,用于在所述智能主机播放听写内容时,控制任意一个所述拍摄模组拍摄位于书写区域中的书写物体的运动图像的方式具体为:

所述控制单元,用于在所述第二检测单元检测到所述佩戴肢体不为所述握笔的肢体以及在所述智能主机播放听写内容时,控制任意一个所述拍摄模组拍摄位于书写区域中的书写物体的运动图像。

作为一种可选的实施方式,在本发明实施例第二方面中,所述智能主机还包括:

提示单元,用于在所述听写内容播放完毕之后,输出提示信息;所述提示信息用于提示所述可穿戴设备的佩戴者转动所述智能主机,以使任意一个所述拍摄模组拍摄到所述书写区域中的书写内容;

所述确定单元,还用于对比所述书写内容与所述智能主机播放的所有听写内容,并将所述智能主机播放的所有听写内容中与所述书写内容不一致的部分确定为所述不熟练的听写内容。

作为一种可选的实施方式,在本发明实施例第二方面中,所述控制单元,还用于在任意一个所述拍摄模组拍摄到所述书写区域中的书写内容时,控制另一个所述拍摄模组拍摄所述佩戴者的人脸图像;

以及,所述智能主机还包括:

识别单元,用于根据所述人脸图像识别所述佩戴者的身份标识;

通信单元,用于将所述不熟练的书写内容发送至与所述身份标识绑定的终端设备。

作为一种可选的实施方式,在本发明实施例第二方面中,所述书写物体为握笔的手或者笔。

本发明实施例第三方面公开一种可穿戴设备,可穿戴设备包括智能主机,所述智能主机上相对的顶侧和底侧各自设有一个拍摄模组,所述智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向;该智能主机包括:

拍摄组件,具体可以包括设置在智能主机顶侧的拍摄模组和设置在智能主机底侧的拍摄模组;

存储有可执行程序代码的存储器;

与所述存储器耦合的处理器;

显示面板,具体可以包括设置在智能主机顶侧的显示屏幕和设置在智能主机底侧的显示屏幕;

其中,所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的任一项方法。

本发明第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的任一项方法。

本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行本发明实施例第一方面公开的任一项方法。

与现有技术相比,本发明实施例具有以下有益效果:

所述可穿戴设备的智能主机可转动并且设置有拍摄模组,用户可以转动智能主机,使得听写时上述拍摄模组的取景范围可以包括书写区域中的书写物体。听写时,智能主机播放听写内容,控制拍摄模组拍摄书写物体的运动图像;通过在多帧运动图像中跟踪书写物体,检测出书写物体的移动轨迹;识别移动轨迹中的停顿点,从而将停顿点对应的听写内容确定为不熟练的听写内容。实施本发明实施例,可以通过图像识别出书写物体的移动轨迹,从而可以判断出用户在撰写听写内容的过程中是否存在停顿。可见,可穿戴设备不只是机械地播放听写内容,还可以进一步检测用户对听写内容的反应,从而评估用户对听写内容的熟练程度。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种可穿戴设备的结构示意图;

图2是本发明实施例公开的另一种可穿戴设备的结构示意图;

图3是本发明实施例公开的另一种可穿戴设备的结构示意图;

图4是本发明实施例公开的一种听写熟练度评估方法的流程示意图;

图5是本发明实施例公开的另一种听写熟练度评估方法的流程示意图;

图6是本发明实施例公开的一种可穿戴设备的结构示意图;

图7是本发明实施例公开的另一种可穿戴设备的结构示意图;

图8是本发明实施例公开的又一种可穿戴设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

在本发明中,术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本发明及其实施例,并非用于限定所指示的装置、元件或组成部分必须具有特定方位,或以特定方位进行构造和操作。

并且,上述部分术语除了可以用于表示方位或位置关系以外,还可能用于表示其他含义,例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言,可以根据具体情况理解这些术语在本发明中的具体含义。

此外,术语“安装”、“设置”、“设有”、“连接”、“相连”应做广义理解。例如,可以是固定连接,可拆卸连接,或整体式构造;可以是机械连接,或电连接;可以是直接相连,或者是通过中间媒介间接相连,又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。

此外,术语“第一”、“第二”等主要是用于区分不同的装置、元件或组成部分(具体的种类和构造可能相同也可能不同),并非用于表明或暗示所指示装置、元件或组成部分的相对重要性和数量。除非另有说明,“多个”的含义为两个或两个以上。

此外,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

下面将结合实施例和附图对本发明实施例的技术方案作进一步的说明。

为了更好理解本发明实施例公开的一种听写熟练度评估方法,下面先介绍本发明实施例公开的一种可穿戴设备。请参阅图1-图3,本发明实施例公开的一种可穿戴设备可以包括:底部支架10、智能主机20以及侧带30,底部支架10连接于侧带30的两侧带端部之间。智能主机20的主机顶侧20a正对智能主机20的主机底侧20b,并且智能主机20的主机顶侧20a设有拍摄模组22,智能主机20的主机底侧20b设有拍摄模组23。智能主机20的一端通过第一转轴21与底部支架10的第一端转动连接,智能主机20可以相对底部支架10转动不同的角度,从而使得拍摄模组22、拍摄模组23可以获得不同的拍摄角度。其中,侧带30的一个侧带端部通过第一转轴21轴接于底部支架10的第一端,而侧带30的另一个侧带端部连接底部支架10的第二端。

在本发明实施例公开的可穿戴设备中,通过上述所描述的结构,可穿戴设备包括的智能主机20以可转动方式设在所述可穿戴设备包括的侧带30的两侧带端部之间。其中,通过第一转轴21可以实现智能主机20相对底部支架10的转动,从而使得设于智能主机20的拍摄模组22、拍摄模组23也能随着智能主机20的转动而获得不同的拍摄角度,这不仅解决了现有的可穿戴设备(通常仅有一个顶侧拍摄模组)需要社交用户扭转手臂才能实现的调整拍摄角度的问题,同时还可满足社交用户的不同角度的拍摄需求。

本发明实施例中,在实现智能主机20相对底部支架10转动时,由于侧带30的一个侧带端部通过第一转轴21轴接于底部支架10的第一端,因此,侧带30的一个侧带端部、底部支架10的第一端以及智能主机20的一端三者之间为共用第一转轴21的共轴转动设计,从而能够减少可穿戴设备的部件设计,简化可穿戴设备的部件组装流程,进而使得可穿戴设备的结构更加紧凑。

本发明实施例中,智能主机20的主机顶侧20a上可以设置有顶侧显示屏(图中未标注);可选地,智能主机20的主机底侧20b上也可以设置有底侧显示屏(图中未标注)。在通常情况下,智能主机20可以叠在底部支架10上,即智能主机20的主机底侧20b与底部支架10的上表面贴合;而当智能主机20以第一转轴21发生转动时,智能主机20的主机顶侧20a以及主机底侧20b均与底部支架10的上表面形成一定角度。

在本发明实施例中,该智能主机20作为拍摄角度可调的可穿戴设备的主机使用,其不仅包括设于内部的主板、用于实现触控、显示功能的触控屏/或显示屏、对主板、触控屏/显示屏进行供电的电池、实现智能主机20的拍摄功能的拍摄模组22和拍摄模组23、实现智能主机20的通信功能的通信器件(例如无线通信器件、蓝牙通信器件、红外通信器件等)、实现智能主机20的检测功能的传感器(例如重力传感器、加速度传感器、距离传感器、气压传感器、紫外线检测器、玩水检测识别模块)、实现对用户的心率进行检测的心率检测器、实现智能主机20的定时功能的定时器、对用户的身份进行识别的元件,例如指纹模组、面部识别模组,以及实现音频输入和/或输出的麦克风、扬声器等。应该得知的是,上述各器件、功能模组均设于智能主机20内部,且与主板电连接,通过主板实现对这些器件、功能模组的控制,进而控制其实现对应的功能。

因此,本发明实施例中,智能主机20是有别于传统的手表的仅能实现时间显示、定时等功能的表盘的。

进一步地,由于智能主机20与底部支架10通过第一转轴21可以实现可转动连接,因此,可以通过调整智能主机20与底部支架10的转动角度来调整拍摄模组22和拍摄模组23的拍摄角度。例如,当智能主机20叠在底部支架10上时,智能主机20与底部支架10之间的角度为0°,而当智能主机20发生转动后,该智能主机20与底部支架10之间的角度可优选可以为90°。当智能主机20与底部支架10之间的角度为0°时,智能主机20上的拍摄模组22和拍摄模组23相对底部支架10的夹角也为0°夹角;当智能主机20相对底部支架10转动形成90°夹角时,智能主机20的拍摄模组22和拍摄模组23相对底部支架10的夹角为90°夹角,从而可以实现拍摄模组22和拍摄模组23的拍摄角度的调整。特别的,当智能主机20的主机顶侧20a上设置有顶侧显示屏以及主机底侧20b上也设置有底侧显示屏时,若智能主机20的拍摄模组22和拍摄模组23相对底部支架10的夹角为90°夹角,那么主机顶侧20a上设置的顶侧显示屏以及主机底侧20b上设置的底侧显示屏相对底部支架10的夹角也为90°夹角,从而可以方便位于智能主机20一侧的用户观看顶侧显示屏,以及方便位于智能主机20另一侧的用户观看底侧显示屏。本发明实施例中,智能主机20与底部支架10的转动角度可以在任意角度之间调整,优选地,该转动角度可为0°、30°、45°、60°、75°、90°、120°或150°。

在本发明实施例中,由于智能主机20通过第一转轴21与底部支架10转动连接,因此,智能主机20可以包括相对设置的转动端20c和自由端20d,该转动端20c为智能主机20通过第一转轴21与底部支架10的第一端连接的一端,而该自由端20d则为可随着转动端20c相对底部支架10实现转动并相对底部支架10可形成角度的一端。具体地,为了避免影响拍摄模组22和拍摄模组23的拍摄视角,拍摄模组22可以优选设于该自由端20d的端部顶侧(属于主机顶侧20a的一部分),而拍摄模组23可以优选设于该自由端20d的端部底侧(属于主机底侧20b的一部分)。

在本发明实施例中,该底部支架10可为板状结构。当底部支架10为板状结构时,底部支架10的材质可优选为隔热材质,例如塑胶。当用户佩戴可穿戴设备时,能够避免智能主机20发热量大而可能对用户的手腕皮肤造成烫伤的情况。因此,该底部支架10不仅可实现承载智能主机20转动的功能,同时还可实现对智能主机20与用户的手腕皮肤进行隔热的效果。

进一步地,当底部支架10为板状结构时,底部支架10上可以设置有一个或多个通孔10a,以使得智能主机20通过通孔10a可以实现包括对用户的心率进行检测在内的各项生理特征检测。其中,通孔10的形状可以是圆形、方形或者椭圆形等,本发明实施例不作限定。

可以理解的是,在其他实施例中,该底部支架10也可以是闭合环状结构,本发明实施例不作限定。

在用户需调整智能主机20相对底部支架10的角度时,可通过手动调整智能主机20相对底部支架10的转动角度,当智能主机20转动至用户的目标角度时,此时,用户停止调整智能主机20,智能主机20可保持在当前角度不变,此时,拍摄模组22和/或拍摄模组23可处于可拍摄状态,用户可根据实际拍摄需求选择拍摄模组22和/或拍摄模组23执行对应的拍摄操作。

当用户想将智能主机20叠在底部支架10上时,则可再次通过手动调整智能主机20,使得智能主机20可再次被调整而相对底部支架10转动,直至智能主机20叠于底部支架10上,此时用户停止调整智能主机20。

本发明实施例公开的一种可穿戴设备使得拍摄模组22和拍摄模组23可随着智能主机的转动而获得不同的拍摄角度,满足用户的不同拍摄角度需求。

实施例一

请参阅图4,图4是本发明实施例公开的一种听写熟练度评估方法的流程示意图。其中,图4所描述的听写熟练度评估方法可以应用于前述内容所描述的可穿戴设备。如前述内容描述的,可穿戴设备包括智能主机,该智能主机上相对的顶侧和底侧各自设有一个拍摄模组的智能主机,该智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向。如图4所示,该听写熟练度评估方法可以包括以下步骤:

401、智能主机在播放听写内容时,控制任意一个拍摄模组拍摄位于书写区域中的书写物体的运动图像。

本发明实施例中,根据前述内容可知,可穿戴设备的佩戴者在利用智能主机播放听写内容之前,可以调整智能主机20相对底部支架10的角度,相应的智能主机20的拍摄模组22和拍摄模组23相对底部支架10的夹角也随之被调整;在此基础上,智能主机可以控制拍摄模组22或者拍摄模组23拍摄书写物体的运动图像,具体可以通过可穿戴设备的佩戴方向确定选择哪个拍摄模组拍摄书写物体的运动图像;如果佩戴可穿戴设备之后,第一转轴21位于远离佩戴者身体的一侧,那么可以控制拍摄模组23拍摄书写物体的运动图像;如果第一转轴22位于靠近佩戴者身体的一侧,那么可以控制拍摄模组22拍摄书写物体的运动图像。

此外,听写内容可以包括中文单词、英文单词等听写资料,书写区域可以为纸面(如书本、练习本等),本发明实施例不做限定。此外,在本发明实施例中,书写物体可以为握笔的手或者笔。一些笔的体积较小,如果图像的背景较为复杂,从图像中识别出小体积的笔的难度相对高于从图像中识别出握笔的手的难度。因此,具体的书写物体可以根据实际应用和经验确定,旨在降低从图像中识别出书写物体的难度以及提高识别准确率。

402、智能主机根据运动图像,跟踪上述书写物体的移动轨迹。

本发明实施例中,智能主机可以从包含书写物体的第一帧运动图像开始,通过meanshift、粒子滤波、卡尔曼滤波等目标跟踪算法,跟踪书写物体在第一帧运动图像之后的每一帧运动图像中的位置;基于书写物体在上述第一帧运动图像以及在第一帧运动图像之后的每一帧运动图像中的位置,可以确定出书写物体的移动轨迹。可选的,针对上述包含书写物体的第一帧运动图像,智能主机可以通过颜色、纹理等特征先从第一帧运动图像中识别出书写区域,然后以书写区域为中心,在第一帧运动图像中选定搜索范围,在该搜索范围内识别书写物体;逐步扩大搜索范围的面积,直至从第一帧运动图像中识别出书写物体。

403、智能主机识别移动轨迹中的停顿点,并将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容。

本发明实施例中,书写物体的移动轨迹中如果两个相邻的位置点之间的位置变化小于指定阈值,那么这两个位置点可以认为是上述的停顿点。移动轨迹中的每个位置点对应一个时间点(具体可以为拍摄到处于该位置点的书写物体的运动图像时,该运动图像的拍摄时刻),表示书写物体在该时间点位于该位置点。相应地,与停顿点对应的部分听写内容可以为播放的时间点与停顿点对应的时间点相同的听写内容;或者,以停顿点对应的时间点为基准,向前和/或向后指定一定时长,得到包含停顿点对应的时间点的时间段,将播放的时间点位于上述时间段的听写内容确定为与停顿点对应的部分听写内容。

此外,根据前述内容可知,智能主机可以包括实现对用户的心率进行检测的心率检测器。作为一种可选的实施方式,智能主机在识别出移动轨迹中的停顿点之后,以及在将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容之前,还可以执行以下步骤:

智能主机获取与上述停顿点对应的可穿戴设备佩戴者的用户心率,并判断该用户心率是否超过该佩戴者的静坐心率(即佩戴者处于平静状态且为坐姿时的心率),如果是,判断该用户心率超过上述静坐心率的程度是否高于指定的浮动幅度,如果是,执行上述将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容的步骤。

实施上述的实施方式,可以通过用户心率判断可穿戴设备的佩戴者是否处于紧张的状态。一般来说,当佩戴者在听写过程中碰到不熟悉的,难以回忆起的内容时,容易处于紧张状态;当人处于紧张状态时,通常会存在一定程度的心跳加速。因此,结合用户心率可以进一步确定用户(佩戴者)的停顿原因是对听写内容不熟悉,从而提高听写熟练度评估方法的评估精度。

可见,在图4所描述的方法中,可穿戴设备的佩戴者可以在无需扭转佩戴肢体(如手臂)的情况下调整拍摄角度,从而拍摄到书写物体的运动图像,避免扭转佩戴可穿戴设备的佩戴肢体调整拍摄角度时带来的疲惫感,改善用户体验。并且,在该方法中,可穿戴设备根据书写物体的运动图像跟踪书写物体的移动轨迹,进一步识别移动轨迹中的停顿点,从而将与停顿点对应的部分听写内容确定为佩戴者不熟练的听写内容,使得可穿戴设备不只是机械地读出听写内容,还可以评估用户(佩戴者)对听写内容的熟练程度。

实施例二

请参阅图5,图5是本发明实施例公开的另一种听写熟练度评估方法的流程示意图。如图5所示,该听写熟练度评估方法可以包括以下步骤:

501、智能主机检测可穿戴设备的佩戴肢体是否为握笔的肢体,如果是,结束本流程,如果否,执行步骤502。

本发明实施例中,如果可穿戴设备的佩戴在握笔的肢体,摄像模组与书写物体的距离较小,加上摄像模组取景范围的限制,难以通过图像识别出书写物体的移动轨迹;反之,如果可穿戴设备佩戴在另一肢体,摄像模组与书写物体的距离较为合适,可以通过图像识别出书写物体的移动轨迹。因此,在执行步骤502之前先检测佩戴肢体的类型(握笔的肢体或者非握笔的肢体),可以减少不必要的计算操作,减少电量消耗,改善用户体验。

具体地,在本发明实施例中,用于撰写的笔具体可以为具有无线信号收发功能的智能笔,该智能笔能够与可穿戴设备建立通信连接。智能主机可以接收智能笔发射的无线信号,并检测该无线信号的接收信号强度,当接收信号强度大于等于预设的强度阈值时,智能主机可以将佩戴肢体确定为握笔的肢体;当接收信号强度小于预设的强度阈值时,智能主机可以将佩戴肢体确定为非握笔的肢体;其中,上述的强度阈值可以根据可穿戴设备佩戴在用户(佩戴者)握笔惯用手的手腕时,接收智能笔发射的无线信号的接收信号强度确定。

此外,作为一种可选的实施方式,智能主机在检测出佩戴肢体为握笔的肢体时,可以通过智能主机的运动传感器采集其运动数据,从而根据运动数据确定出可穿戴设备在智能主机播放听写内容时的移动轨迹,进一步根据可穿戴设备的移动轨迹中可能存在停顿点评估佩戴者对听写内容的熟练程度。

502、智能主机在播放听写内容时,控制任意一个拍摄模组拍摄位于书写区域中的书写物体的运动图像。

本发明实施例中,书写物体可以为握笔的手或者笔。

503、智能主机根据运动图像,跟踪上述书写物体的移动轨迹。

504、智能主机识别移动轨迹中的停顿点,并将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容。

505、智能主机在听写内容播放完毕之后,输出提示信息。

本发明实施例中,提示信息用于提示可穿戴设备的佩戴者转动智能主机,以使任意一个拍摄模组拍摄到书写区域中的书写内容。根据前述内容可知,可穿戴设备的佩戴者可以调整智能主机20相对底部支架10的角度,优选的,可以调整智能主机20相对底部支架10的角度为150°,相应的智能主机20的拍摄模组22和拍摄模组23相对底部支架10的夹角也随之被调整为150°夹角。在此基础上,可穿戴设备的佩戴者可以抬高佩戴肢体以使佩戴肢体与书写区域之间存在一定距离,使得书写区域可以尽可能地被包括在拍摄模组的取景范围内。

此外,作为一种可选的实施方式,在本发明实施例中,智能主机控制任意一个拍摄模组拍摄书写区域中的书写内容的方式具体可以为:

智能主机控制另一个与上述拍摄模组相对设置的拍摄模组拍摄手势图像;

智能主机识别上述的手势图像中的手势是否与预设的拍照控制手势相匹配,如果是,控制朝向书写区域的拍摄模组拍摄书写区域中的书写内容。

实施上述的实施方式,当佩戴者转动智能主机使得某个拍摄模组朝向书写区域时,与该拍摄模组相对设置的另一拍摄模组可能背向书写区域,此时,控制该拍摄模组拍摄手势图像,可以通过手势控制拍摄模组拍摄书写区域中的书写内容,避免在智能主机面积较小的表盘上进行操作,使得拍摄操作更为便捷。此外,本发明实施例利用两个朝向相反的拍摄模组同时进行拍摄,在拍摄手势图像的同时不会影响对书写内容的拍摄,不会造成干扰。

506、智能主机对比拍摄到的书写内容与智能主机播放的所有听写内容,并将智能主机播放的所有听写内容中与上述书写内容不一致的部分确定为不熟练的听写内容。

本发明实施例中,智能主机可以通过拍摄模组拍摄书写区域的图像,并对书写区域的图像进行字符识别,以识别出书写区域中的书写内容。智能主机播放的所有听写内容中与上述书写内容不一致的部分可以包括以下情况:书写内容中完全没有与该部分内容相似的内容(比如佩戴者完全无法写出某个听写单词,在书写区域上留空);书写内容中存在与该部分内容相似的内容,但书写内容的拼写不正确。

可见,执行上述的步骤502~504,可以检测出用户听写正确但在撰写过程中存在停顿的部分;执行上述的步骤505~步骤506,可以检测出用户听写不正确的部分。本发明实施例中,智能主机可以评估用户对听写内容的熟练程度,进一步地还可以评判用户的书写内容是否正确,可以模拟家长或老师的批改过程。

可选的,该方法还可以包括以下步骤:

507、智能主机在任意一个拍摄模组拍摄到书写区域中的书写内容时,控制另一个拍摄模组拍摄佩戴者的人脸图像。

本发明实施例中,智能主机的顶侧和底侧还可以分别设置有显示屏幕。智能主机在控制另一个拍摄模组拍摄佩戴者的人脸图像时,还可以在上述另一个拍摄模组所在一侧的显示屏幕中输出显示该拍摄模组取景范围内的实时预览图像,以使佩戴者可以根据人脸在实时预览图像中的位置转动智能主机或者移动头部的位置,使得该拍摄模组拍摄到的人脸图像中人脸部分较为完整,有利于通过人脸图像识别佩戴者的身份标识。

508、智能主机根据人脸图像识别佩戴者的身份标识。

509、智能主机将上述不熟练的听写内容发送至与佩戴者的身份标识绑定的终端设备。

本发明实施例中,不熟练的书写内容可以包括听写正确但在撰写过程中存在停顿的部分以及听写不正确的部分。与佩戴者的身份标识绑定的终端设备可以为老师或者家长的手机、平板电脑、个人电脑等设备。本发明实施例中,智能主机可以将本次听写训练的评估结果反馈给老师或家长,即使老师或家长不在进行听写训练的现场,他们也可以及时知悉本次听写训练的情况,从而可以进行下一步的教学辅导安排。

可见,在图5所描述的方法中,可穿戴设备可以通过图像识别书写物体的移动轨迹,从而可以将移动轨迹中的停顿点对应的部分听写内容确定为不熟练的听写内容。进一步地,可穿戴设备还可以在听写内容播放完毕之后,通过提示用户转动智能主机,拍摄得到书写区域中的书写内容,从而可以将智能主机播放的所有听写内容中与书写内容不一致的部分也确定为不熟练的听写内容。可穿戴设备既可以评估用户对听写内容的熟练程度,还可以对听写结果进行评判。更进一步地,可穿戴设备还可以将被确定为不熟练的听写内容发送至绑定的终端设备,使得终端设备的使用者(如家长或老师)也可以及时知悉本次听写训练的情况。

实施例三

请参阅图6,图6是本发明实施例公开的另一种可穿戴设备的结构示意图。如图6所示,该可穿戴设备包括智能主机,该智能主机相对的顶侧和底侧各自设有一个拍摄模组,并且该智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向;如图6所示,该智能主机可以包括:

控制单元601,用于在智能主机播放听写内容时,控制任意一个拍摄模组拍摄位于书写区域中的书写物体的运动图像;

本发明实施例中,书写物体可以为握笔的手或者笔,本发明实施例不做限定;

第一检测单元602,用于根据控制单元601控制拍摄模组拍摄到的运动图像,跟踪书写物体的移动轨迹;

可选的,针对包含书写物体的第一帧运动图像,第一检测单元602可以通过颜色、纹理等特征先从第一帧运动图像中识别出书写区域,然后以书写区域为中心,在第一帧运动图像中选定搜索范围,在该搜索范围内识别书写物体;逐步扩大搜索范围的面积,直至从第一帧运动图像中识别出书写物体;

确定单元603,用于识别第一检测单元602确定出的移动轨迹中的停顿点,并将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容;

进一步可选的,该智能主机还可以包括实现对用户的心率进行检测的心率检测器。上述的确定单元603在识别出移动轨迹中的停顿点之后,以及在将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容之前,还可以获取与上述停顿点对应的可穿戴设备佩戴者的用户心率,并判断该用户心率是否超过该佩戴者的静坐心率,如果是,判断该用户心率超过上述静坐心率的程度是否高于指定的浮动幅度,如果是,执行将智能主机播放的与上述停顿点对应的部分听写内容确定为不熟练的听写内容的操作。确定单元603执行上述的操作,可以结合用户心率进一步确定用户(佩戴者)在撰写过程中停顿的原因为对听写内容不熟悉,从而可以提高可穿戴设备评估听写熟练度的评估精度。

可见,实施如图6所示的可穿戴设备,其佩戴者可以在无需扭转佩戴肢体(如手臂)的情况下调整拍摄角度,从而拍摄到书写物体的运动图像,避免扭转佩戴可穿戴设备的佩戴肢体调整拍摄角度时带来的疲惫感,改善用户体验。此外,还可以通过图像跟踪书写物体的移动轨迹,以通过移动轨迹中可能存在的停顿点识别出用户不熟练的听写内容,从而评估用户对听写内容的熟练程度。

实施例四

请参阅图7,图7是本发明实施例公开的另一种可穿戴设备的结构示意图。其中,图7所示的可穿戴设备是由图6所示的可穿戴设备进行优化得到的。与图6所示的可穿戴设备包括的智能主机相比,图7所示的可穿戴设备包括的智能主机还可以包括:

第二检测单元604,用于检测可穿戴设备的佩戴肢体是否为握笔的肢体;

本发明实施例中,用于撰写的笔具体可以为具有无线信号收发功能的智能笔,第二检测单元604可以接收智能笔发射的无线信号,并检测该无线信号的接收信号强度;当接收信号强度大于等于预设的强度阈值时,第二检测单元604可以将佩戴肢体确定为握笔的肢体;当接收信号强度小于预设的强度阈值时,第二检测单元604可以将佩戴肢体确定为非握笔的肢体;其中,上述的强度阈值可以根据可穿戴设备佩戴在用户(佩戴者)握笔惯用手的手腕时,接收智能笔发射的无线信号的接收信号强度确定;

上述的控制单元601,用于在智能主机播放听写内容时,控制任意一个拍摄模组拍摄位于书写区域中的书写物体的运动图像的方式具体可以为:

所述控制单元601,用于在第二检测单元604检测到佩戴肢体不为握笔的肢体以及在智能主机播放听写内容时,控制任意一个拍摄模组拍摄位于书写区域中的书写物体的运动图像;

可选的,图7所示的可穿戴设备包括的智能主机还可以包括:

提示单元605,用于听写内容播放完毕之后,输出提示信息;提示信息用于提示可穿戴设备的佩戴者转动智能主机,以使任意一个拍摄模组拍摄到书写区域中的书写内容;可以理解的是,在本发明实施例中,提示单元605在输出提示信息之后,可以触发上述的控制单元601控制任意一个拍摄模组拍摄书写区域中的书写内容;此外,作为一种可选的实施方式,控制单元601控制任意一个拍摄模组拍摄书写区域中的书写内容的方式具体可以为:

控制单元601控制另一个与上述拍摄模组相对设置的拍摄模组拍摄手势图像;识别上述的手势图像中的手势是否与预设的拍照控制手势相匹配,如果是,控制朝向书写区域的拍摄模组拍摄书写区域中的书写内容;

上述的确定单元603,还用于对比控制单元601控制拍摄模组拍摄到的书写内容与智能主机播放的所有听写内容,并将智能主机播放的所有听写内容中与上述的书写内容不一致的部分确定为不熟练的听写内容;执行上述操作,确定单元603可以进一步评判用户的书写内容是否正确;

进一步可选的,在图7所示的可穿戴设备包括的智能主机中:

上述的控制单元601,还用于在任意一个拍摄模组拍摄到书写区域中的书写内容时,控制另一个拍摄模组拍摄佩戴者的人脸图像;

本智能主机的顶侧和底侧还可以分别设置有显示屏幕。控制单元601在控制上述的另一个拍摄模组拍摄佩戴者的人脸图像时,还可以触发智能主机的显示单元(图中未标注)将该拍摄模组取景范围内的实时预览图像输出至与该拍摄模组处于同一侧的显示屏幕中显示;

上述的智能主机还可以包括:

识别单元606,用于根据控制单元601控制拍摄模组拍摄到的人脸图像识别佩戴者的身份标识;

通信单元607,用于将确定单元603确定出的不熟练的书写内容发送至与识别单元606识别出的身份标识绑定的终端设备;

本发明实施例中,智能主机还可以将被确定为不熟练的听写内容反馈至绑定的终端设备,使得这些终端设备的使用者(如老师或家长)也可以及时知悉本次听写训练的情况。

可见,实施图6所示的可穿戴设备,可以通过图像识别书写物体的移动轨迹,从而可以将移动轨迹中的停顿点对应的部分听写内容确定为不熟练的听写内容。进一步地,还可以在听写内容播放完毕之后,通过拍摄书写内容进一步对用户的听写结果进行评判;更进一步地,还可以将被确定为不熟练的听写内容发送至绑定的终端设备,使得终端设备的使用者(如家长或老师)也可以及时知悉本次听写训练的情况。

实施例五

请参阅图8,图8是本发明实施例公开的又一种可穿戴设备的结构示意图。如图8所示,可穿戴设备包括智能主机,该智能主机上相对的顶侧和底侧各自设有一个拍摄模组,并且该智能主机能够发生转动以实现同时调整两个拍摄模组的拍摄方向;如图8所示,该智能主机包括:

拍摄组件801,具体可以包括设置在智能主机顶侧的拍摄模组8011和设置在智能主机底侧的拍摄模组8012;

存储有可执行程序代码的存储器802;

与存储器701耦合的处理器803;

可选的,图8所示的智能主机还可以包括显示面板804,具体可以包括设置在智能主机顶侧的显示屏幕8041和设置在智能主机底侧的显示屏幕8042;

其中,处理器803调用存储器802中存储的可执行程序代码,执行图4或图5所示的任一种听写熟练度评估方法;具体地,可以控制拍摄组件801中的任意一个拍摄模组拍摄书写物体的运动图像,以及控制任意一个拍摄模组拍摄书写区域中的书写内容,在某个拍摄模组拍摄到上述的书写内容时控制另一个拍摄模组拍摄可穿戴设备佩戴者的人脸图像;并且,还可以在控制上述的另一个拍摄模组拍摄佩戴者的人脸图像时,将该拍摄模组取景范围内的实时预览图像输出至与该拍摄模组处于同一侧的显示屏幕中显示;例如,如果使用拍摄模组8011拍摄人脸图像,那么将拍摄模组8011取景范围内的实时预览图像输出至显示屏幕8041中显示;如果使用拍摄模组8012拍摄人脸图像,那么将拍摄模组8012取景范围内的实时预览图像输出至显示屏幕8042中显示;

需要说明的是,图8所示的智能主机还可以包括电源、扬声器、rf电路、wi-fi模块、蓝牙模块、传感器(例如重力传感器、加速度传感器、距离传感器、气压传感器、紫外线检测器、玩水检测识别模块)等未显示的组件,本实施例不作赘述。

本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图4或图5所示的任一种听写熟练度评估方法。

本发明实施例公开一种计算机程序产品,该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,且该计算机程序可操作来使计算机执行图4或图5所示的任一种听写熟练度评估方法。

应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。

在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(read-onlymemory,rom)、随机存储器(randomaccessmemory,ram)、可编程只读存储器(programmableread-onlymemory,prom)、可擦除可编程只读存储器(erasableprogrammablereadonlymemory,eprom)、一次可编程只读存储器(one-timeprogrammableread-onlymemory,otprom)、电子抹除式可复写只读存储器(electrically-erasableprogrammableread-onlymemory,eeprom)、只读光盘(compactdiscread-onlymemory,cd-rom)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种听写熟练度评估方法及可穿戴设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1