一种基于学习设备的学习辅助方法及学习设备与流程

文档序号:17762997发布日期:2019-05-24 21:52阅读:174来源:国知局
一种基于学习设备的学习辅助方法及学习设备与流程

本发明涉及学习设备技术领域,具体涉及一种基于学习设备的学习辅助方法及学习设备。



背景技术:

市面上的学习设备能够为学生用户的学习提供很多辅助作用,特别是在学生用户遇到问题时,大部分学生用户选择通过在线搜题的方式获取到答案。其中,现有的搜题方式主要是通过语音输入方式、拍照输入方式或者手动输入方式将问题输入到学习设备,然后由学习设备搜索相应的答案。然而,对于小部分学生用户而言,可能他们的自主控制能力较弱,有时候为了能够尽快完成作业后出去玩耍,还没有对作业题目进行自己的思考就直接通过搜索来获得答案,对学生用户的学习提高不但没有起到积极作用,反而使得他们养成不良的学习习惯,影响自身学习发展。



技术实现要素:

本发明实施例公开了一种基于学习设备的学习辅助方法及学习设备,能够帮助学生用户养成良好的学习习惯,提高学习效果。

本发明第一方面公开了一种基于学习设备的学习辅助方法,可包括:

检测学生用户输入的语音搜索消息,并从所述语音搜索消息中识别所述学生用户的搜索意图;以及

拍摄练习本的当前页面以获得页面图像,并从所述页面图像中识别所述学生用户在所述当前页面上的指定坐标;

从所述页面图像中检测所述指定坐标的特定范围内是否存在书写痕迹;

如果存在,以所述搜索意图为依据,识别所述页面图像中所述指定坐标对应的内容以获得待搜索内容;

搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,在本发明第一方面中,所述方法还包括:

在所述指定坐标的特定范围内不存在所述书写痕迹时,输出提示消息,所述提示消息用于提示所述学生用户先进行解答。

作为一种可选的实施方式,在本发明第一方面中,所述拍摄练习本的当前页面以获得页面图像,并从所述页面图像中识别所述学生用户在所述当前页面上的指定坐标,包括:

通过设置于所述学习设备且外置有反光镜的摄像头对放置于所述摄像头的特定拍摄区域内的所述练习本的当前页面进行拍摄预览,并在检测到所述学生用户通过手指在所述当前页面上的指定操作时,控制所述摄像头拍摄所述当前页面获得页面图像,并根据所述指定操作在所述页面图像中识别出所述学生用户在所述当前页面上的指定坐标。

作为一种可选的实施方式,在本发明第一方面中,所述搜索与所述待搜索内容相匹配的推送内容并输出之前,所述方法还包括:

从所述语音搜索消息中提取声纹特征;

根据所述声纹特征识别所述学生用户的年龄信息;

根据所述年龄信息确定出所述学生用户的年级信息;

所述搜索与所述待搜索内容相匹配的推送内容并输出,包括:

基于所述年级信息,搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,在本发明第一方面中,所述方法还包括:

如果所述指定坐标的特定范围内存在所述书写痕迹,从所述页面图像中识别所述书写痕迹对应的书写内容;

所述搜索与所述待搜索内容相匹配的推送内容并输出,包括:

搜索与所述待搜索内容相匹配的推送内容;

判断所述书写内容与所述推送内容是否相匹配;

如果匹配,在所述学习设备输出提示信息,所述提示信息用于提示所述学生用户所述书写内容为正确内容并询问是否需要进一步输出所述推送内容;并在接收到所述学生用户在所述学习设备中输入的确认需要输出所述推送内容时在所述学习设备输出所述推送内容;

如果不匹配,在所述学习设备输出所述推送内容。

本发明第二方面公开了一种学习设备,可包括:

语音检测单元,用于检测学生用户输入的语音搜索消息,并从所述语音搜索消息中识别所述学生用户的搜索意图;

拍摄单元,用于拍摄练习本的当前页面以获得页面图像,并从所述页面图像中识别所述学生用户在所述当前页面上的指定坐标;

书写检测单元,用于从所述页面图像中检测所述指定坐标的特定范围内是否存在书写痕迹;

内容识别单元,用于在所述书写检测单元检测到所述指定坐标的特定范围内存在书写痕迹时,以所述搜索意图为依据,识别所述页面图像中所述指定坐标对应的内容以获得待搜索内容;

搜索单元,用于搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,在本发明第二方面中,所述学习设备还包括:

提醒单元,用于在所述书写检测单元检测到所述指定坐标的特定范围内不存在所述书写痕迹时,输出提示消息,所述提示消息用于提示所述学生用户先进行解答。

作为一种可选的实施方式,在本发明第二方面中,所述拍摄单元,具体用于通过设置于所述学习设备且外置有反光镜的摄像头对放置于所述摄像头的特定拍摄区域内的所述练习本的当前页面进行拍摄预览,并在检测到所述学生用户通过手指在所述当前页面上的指定操作时,控制所述摄像头拍摄所述当前页面获得页面图像,并根据所述指定操作在所述页面图像中识别出所述学生用户在所述当前页面上的指定坐标。

作为一种可选的实施方式,在本发明第二方面中,所述学习设备还包括:

用户识别单元,用于在所述搜索单元搜索与所述待搜索内容相匹配的推送内容并输出之前,从所述语音搜索消息中提取声纹特征;以及,根据所述声纹特征识别所述学生用户的年龄信息;以及,根据所述年龄信息确定出所述学生用户的年级信息;

所述搜索单元用于搜索与所述待搜索内容相匹配的推送内容并输出的方式具体为:

所述搜索单元,用于基于所述年级信息,搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,在本发明第二方面中,所述内容识别单元,还用于在所述书写检测单元检测到所述指定坐标的特定范围内存在所述书写痕迹时,从所述页面图像中识别所述书写痕迹对应的书写内容;

所述搜索单元用于搜索与所述待搜索内容相匹配的推送内容并输出的方式具体为:

所述搜索单元,用于搜索与所述待搜索内容相匹配的推送内容;以及,判断所述书写内容与所述推送内容是否相匹配;以及,在匹配时,在所述学习设备输出提示信息,所述提示信息用于提示所述学生用户所述书写内容为正确内容并询问是否需要进一步输出所述推送内容;并在接收到所述学生用户在所述学习设备中输入的确认需要输出所述推送内容时在所述学习设备输出所述推送内容;以及,在不匹配时,在所述学习设备输出所述推送内容。

本发明第三方面公开了一种学习设备,可包括:

存储有可执行程序代码的存储器;

与所述存储器耦合的处理器;

所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种基于学习设备的学习辅助方法。

本发明第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种基于学习设备的学习辅助方法。

本发明第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比,本发明实施例具有以下有益效果:

在本发明实施例中,学习设备通过检测学生用户输入的语音搜索消息,然后从语音搜索消息中识别该学生用户的搜索意图,以及拍摄练习本的当前页面以获得页面图像,然后从该页面图像中识别该学生用户在该当前页面上的指定坐标,从页面图像中检测该指定坐标的特定范围内是否存在书写轨迹,如果存在书写轨迹,以该搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容,搜索与该待搜索内容相匹配的推送内容并输出,通过本发明实施例,能够结合语音和拍照获取待搜索内容,并进一步判断学生用户是否已经对待搜索内容进行了独立思考,只有经过了独立思考之后才会进行内容搜索,以培养学生用户养成良好的学习习惯,提高学习效果。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明实施例公开的学习设备的应用示意图;

图2为本发明一实施例公开的基于学习设备的学习辅助方法的流程示意图;

图3为本发明另一实施例公开的基于学习设备的学习辅助方法的流程示意图;

图4为本发明一实施例公开的学习设备的结构示意图;

图5为本发明另一实施例公开的学习设备的结构示意图;

图6为本发明又一实施例公开的学习设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

需要说明的是,本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种基于学习设备的学习辅助方法,用于帮助学生用户养成良好的学习习惯,提高学习效果。本发明实施例还相应地公开了一种学习设备。

请参阅图1,图1为本发明实施例公开的学习设备的应用示意图,可以理解,图1仅为本发明实施例公开的学习设备的一应用示意图,其它任何在图1所示的基础上进行优化或者变形得到的应用示意图,且能够用于实现本发明技术方案的均属于本发明保护范围,对此不做具体限定。在图1中,将学习设备10放置于底座支架20上,学习设备10设置有前置摄像头30,且学习设备10以预设方式(垂直放置在水平面上或者放置于图1所示的底座支架上等)放置时摄像头30对应有特定拍摄区域(如图1所示),特定拍摄区域用于放置练习本(也可以是教材课本等任何纸质材料),其中,特定拍摄区域并不是固定的,是指摄像头30的视角相交的区域,会随着学习设备10的放置而发生变化,被放置在该特定拍摄区域内的练习本可以被学习设备10清晰拍摄及识别。为了更加清晰地拍摄到特定拍摄区域,可以在将学习设备10放置于底座支架20,使得学习设备10与水平面成75°角,从而能够获得更好的拍摄角度。

本发明实施例提供的学习设备包括但不仅限于家教机、平板电脑等,学习设备的操作系统可包括但不限于android操作系统、ios操作系统、symbian(塞班)操作系统、blackberry(黑莓)操作系统、windowsphone8操作系统等等,本发明实施例不做限定。下面将从学习设备角度出发,通过具体实施例对本发明技术方案进行详细介绍。

实施例一

请参阅图2,图2为本发明一实施例公开的基于学习设备的学习辅助方法的流程示意图;如图2所示,该基于学习设备的学习辅助方法可包括:

201、学习设备检测学生用户输入的语音搜索消息,并从该语音搜索消息中识别学生用户的搜索意图。

在本发明实施例中,学生用户使用学习设备作为学习辅助工具,在进行作业等学习过程中,可以打开学习设备,将学习设备放置于前方。可以进一步理解,结合图1,学习设备提供了智能学习模式,学生用户开启学习设备,并进入智能学习模式,在智能学习模式下,学习设备开启摄像头和语音功能,实时进行拍摄预览和语音检测。

其中,学习设备检测学生用户输入的语音搜索消息,该语音搜索消息为学生用户用于指示出其搜索意图。举例来说,学习用户将练习本放置于特定拍摄区域,当通过手指或者书写笔等指着练习本上的某一个位置并同时输入语音搜索消息,该语音搜索消息携带有例如“这个成语是什么意思?”,学习设备在检测到该语音搜索消息后,从语音搜索消息中分析出其搜索意图,即确认学生用户需要搜索其所指定的成语的意思。另外,学生用户输入的语音搜索消息表达比较含糊或者用的是地方方言,学习设备可能无法成功从语音搜索消息中识别出搜索意图,导致识别搜索意图失败。

作为一种可选的实施方式,在学习设备从语音搜索消息中识别搜索意图失败时,语音播放第一提示消息,该第一提示消息用于提示学生用户其未能清晰获知到搜索意图并请学生用户重新输入;当检测到学生用户再次输入的语音搜索消息时,再次从语音搜索消息中识别搜索意图,如果继续识别失败,获取连续识别失败的失败次数,当该失败次数大于或者等于失败阈值,则语音播放第二提示消息,该第二提示消息用于提示学生用户失败次数已超过失败阈值并请学生用户等待预设时长后再次尝试;当该失败次数小于该失败阈值,则再次语音播放第一提示消息,直至成功识别到搜索意图时转向步骤202,或者失败次数大于或者等于失败阈值结束流程。

202、学习设备拍摄练习本的当前页面以获得页面图像,并从页面图像中识别该学生用户在当前页面上的指定坐标。

可以理解,步骤201和202可以同时执行,也可以先执行步骤201后执行步骤202,或者先执行步骤202后执行步骤201,本发明实施例对此不做具体限定。

作为一种可选的实施方式,学习设备在检测到语音搜索消息时,通过摄像头预览特定拍摄区域内的练习本的当前页面,并拍摄该当前页面获得页面图像,然后通过拍摄得到的页面图像分析学习用户在当前页面上的指定坐标。在该实施方式中,学习用户语音输入语音搜索消息,并同时通过手指或者书写笔指着练习本当前页面上的某个位置,学习设备能够通过拍摄得到的页面图像,从页面图像中分析出学生用户的手指或者书写笔,然后获取手指指尖或者书写笔笔尖在当前页面上的坐标,从而获得指定坐标。

203、学习设备从页面图像中检测指定坐标的特定范围内是否存在书写痕迹。其中,如果指定坐标的特定范围内存在书写痕迹,转向步骤204;如果指定坐标的特定范围内不存在书写痕迹,结束该流程。

在步骤203中,如果检测到学生用户输入的语音搜索消息,并且确定出学生用户在当前页面上的指定坐标,进一步通过判断页面图像中的指定坐标周围是否存在书写痕迹,如果存在书写痕迹,说明学生用户已经针对其指定坐标所在位置的内容进行了思考,允许其进行搜索。

其中,指定坐标的特定范围可以根据实际情况设定,例如,指定坐标所在位置对应的练习题与其它练习题之间的空白区域、或者指定坐标所在位置对应的练习题的解答区域等,例如,若指定坐标所在位置对应的练习题的解答区域已经有了解答信息,说明学生用户已经完成了独立思考并进行了解答,此时可以允许学生用户进行搜索。

其中,作为一种可选的实施方式,当指定坐标的特定范围包括指定坐标所在位置对应的练习题的解答区域时,学习设备识别该解答区域是否记载有解答信息,如果有,转向步骤204。

进一步可选地,当解答区域未记载有解答信息,进一步识别指定坐标所在位置对应的练习题与其它练习题之间的空白区域是否存在书写痕迹,若存在,转向步骤204。通过该实施方式,能够通过检测解答区域和空白区域来准确分析出学生用户是否对所要搜索的内容进行了独立思考。

作为一种可选的实施方式,在指定坐标的特定范围内不存在书写痕迹时,输出提示消息,该提示消息用于提示学生用户先进行解答。通过该实施方式,能够在指定坐标的特定范围内不存在书写痕迹时,先提醒学生用户进行独立思考完成解答后再进行搜索,以帮助学生用户培养良好的学习习惯,从而提高学习效果。

进一步地,在指定坐标的特定范围内不存在书写痕迹时,识别页面图像中除去该指定坐标所在位置和特定范围之外的地方是否存在书写痕迹,如果存在,识别该书写痕迹对应的书写内容,判断该书写内容与指定坐标所在位置的练习题的题干内容的匹配度,如果该匹配度大于或者等于预设匹配值,则转向步骤204,如果该匹配度小于预设匹配值,则输出提示消息。通过该实施方式,能够在学生用户通过草稿纸进行解答演算时,也能准确检测出来,从而提高判断学生用户是否进行了独立思考的准确率。

204、学习设备以搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容。

举例来说,语音搜索消息为“这个成语是什么意思?”,学习设备在检测到该语音搜索消息后,从语音搜索消息中分析出其要搜索指定坐标对应的成语的意思的搜索意图,学习设备从指定坐标对应的内容中提取出相应的成语,然后获得一个“xxx是什么意思”的待搜索内容,其中,xxx为指定坐标所在位置对应的成语。

205、学习设备搜索与待搜索内容相匹配的推送内容并输出。

学习设备可以在搜索到推送内容之后,在当前显示界面上弹出小窗口进行显示或者以页面形式加载显示,对此不作限定。

实施上述实施例,学习设备通过检测学生用户输入的语音搜索消息,然后从语音搜索消息中识别该学生用户的搜索意图,以及拍摄练习本的当前页面以获得页面图像,然后从该页面图像中识别该学生用户在该当前页面上的指定坐标,从页面图像中检测该指定坐标的特定范围内是否存在书写轨迹,如果存在书写轨迹,以该搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容,搜索与该待搜索内容相匹配的推送内容并输出,通过本发明实施例,能够结合语音和拍照获取待搜索内容,并进一步判断学生用户是否已经对待搜索内容进行了独立思考,只有经过了独立思考之后才会进行内容搜索,以培养学生用户养成良好的学习习惯,提高学习效果。

实施例二

请参阅图3,图3为本发明另一实施例公开的基于学习设备的学习辅助方法的流程示意图;如图3所示,该基于学习设备的学习辅助方法可包括:

301、学习设备检测学生用户输入的语音搜索消息,并从该语音搜索消息中识别学生用户的搜索意图。

302、学习设备通过外置有反光镜的摄像头对放置于摄像头的特定拍摄区域内的练习本的当前页面进行拍摄预览,并在检测到学生用户通过手指在当前页面上的指定操作时,控制摄像头拍摄当前页面获得页面图像,并根据指定操作在页面图像中识别出该学生用户在当前页面上的指定坐标。

在本发明实施例中,在摄像头上外置有反光镜,通过反光镜能够使特定拍摄区域内的练习本的当前页面的反射光增强,以便摄像头拍摄到的当前页面更加清楚,另外,可以结合图1将学习设备放置于底座支架上,从而达到调整反光镜的倾斜角度,能够解决因光线太强或太亮时造成的拍摄不清楚的问题。

作为一种可选的实施方式,特定拍摄区域上放置有学习感应板,在学习感应板的上表面上放置练习本,该学习感应板与学习设备电连接,学生用户可以通过学习感应板配套的点读笔在练习本上进行操作,在步骤302中,学习设备通过控制摄像头拍摄当前页面获得页面图像之后,还将从学习感应板接收触及压力值和触及坐标值,该触及压力值为学生用户通过点读笔在当前页面上进行指定坐标定位时,该学习感应板所检测到的压力值,而触及坐标值为感应到该压力值的坐标位置。进而,学习设备通过页面图像分析练习本与学习感应板的位置关系,然后根据该位置关系和触及坐标值,分析出学生用户通过点读笔在该当前页面上的指定坐标。

进一步可选地,学习设备在接收到学习感应板反馈的触及压力值和触及坐标值后,判断该触及压力值是否大于预设阈值,如果大于预设阈值,执行学习设备通过页面图像分析练习本与学习感应板的位置关系,然后根据该位置关系和触及坐标值,分析出学生用户通过点读笔在该当前页面上的指定坐标的步骤,通过该实施方式,能够避免误操作。

303、学习设备从页面图像中检测指定坐标的特定范围内是否存在书写痕迹。其中,如果指定坐标的特定范围内存在书写痕迹,转向步骤304;如果指定坐标的特定范围内不存在书写痕迹,结束该流程。

304、学习设备以搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容。

305、学习设备从语音搜索消息中提取声纹特征。

306、学习设备根据声纹特征识别该学生用户的年龄信息。

307、学习设备根据年龄信息确定出学生用户的年级信息。

由于同一练习题可能在不同的年级中具有不同的解答过程或者不同的答案,因此,在本发明实施例中,学习设备进一步从语音搜索消息中提取声纹特征,通过声纹特征识别出学生用户的年龄信息及年级信息,然后能够针对学生用户的年级信息搜索推荐内容,从而能够匹配学生用户的个人情况来获得匹配的推荐内容,以提高搜索的准确率。

308、学习设备基于年级信息,搜索与该待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,如果在步骤303中确定出指定坐标的特定范围内存在书写痕迹时,从页面图像中识别书写痕迹对应的书写内容;进而,搜索与待搜索内容相匹配的推送内容并输出可以包括:

搜索与待搜索内容相匹配的推送内容;判断该书写内容与推送内容是否相匹配;如果匹配,学习设备输出提示信息,该提示信息用于提示学生用户书写内容为正确内容并询问是否需要进一步输出推送内容;并在接收到学生用户在学习设备中输入的确认需要输出推送内容时在学习设备输出该推送内容;如果不匹配,学习设备输出推送内容。在该实施方式中,如果书写内容与推送内容说明学生用户解答正确,可以进一步询问学生用户是否需要继续输出该推送内容,如果不匹配,则直接输出该推送内容。

通过该实施方式,通过声纹特征识别出学生用户的年龄信息及年级信息,然后能够针对学生用户的年级信息搜索推荐内容,从而能够匹配学生用户的个人情况来获得匹配的推荐内容,以提高搜索的准确率。

实施例三

请参阅图4,图4为本发明一实施例公开的学习设备的结构示意图;如图4所示,该学习设备可包括:

语音检测单元410,用于检测学生用户输入的语音搜索消息,并从语音搜索消息中识别该学生用户的搜索意图;

拍摄单元420,用于拍摄练习本的当前页面以获得页面图像,并从页面图像中识别学生用户在当前页面上的指定坐标;

书写检测单元430,用于从页面图像中检测指定坐标的特定范围内是否存在书写痕迹;

内容识别单元440,用于在上述书写检测单元430检测到指定坐标的特定范围内存在书写痕迹时,以搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容;

搜索单元450,用于搜索与待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,语音检测单元410如果从语音搜索消息中识别搜索意图失败时,语音播放第一提示消息,该第一提示消息用于提示学生用户其未能清晰获知到搜索意图并请学生用户重新输入;当检测到学生用户再次输入的语音搜索消息时,再次从语音搜索消息中识别搜索意图,如果继续识别失败,获取连续识别失败的失败次数,当该失败次数大于或者等于失败阈值,则语音播放第二提示消息,该第二提示消息用于提示学生用户失败次数已超过失败阈值并请学生用户等待预设时长后再次尝试;当该失败次数小于该失败阈值,则再次语音播放第一提示消息,直至成功识别到搜索意图时触发拍摄单元420执行相应操作,或者失败次数大于或者等于失败阈值结束流程。

作为一种可选的实施方式,语音检测单元410在检测到语音搜索消息时,拍摄单元420通过摄像头预览特定拍摄区域内的练习本的当前页面,并拍摄该当前页面获得页面图像,然后通过拍摄得到的页面图像分析学习用户在当前页面上的指定坐标。在该实施方式中,学习用户语音输入语音搜索消息,并同时通过手指或者书写笔指着练习本当前页面上的某个位置,学习设备能够通过拍摄得到的页面图像,从页面图像中分析出学生用户的手指或者书写笔,然后获取手指指尖或者书写笔笔尖在当前页面上的坐标,从而获得指定坐标。

作为另一种可选的实施方式,上述拍摄单元420用于通过设置于学习设备且外置有反光镜的摄像头对放置于摄像头的特定拍摄区域内的练习本的当前页面进行拍摄预览,并在检测到学生用户通过手指在当前页面上的指定操作时,控制摄像头拍摄当前页面获得页面图像,并根据指定操作在页面图像中识别出学生用户在当前页面上的指定坐标。通过在摄像头上外置有反光镜,通过反光镜能够使特定拍摄区域内的练习本的当前页面的反射光增强,以便摄像头拍摄到的当前页面更加清楚,另外,可以结合图1将学习设备放置于底座支架上,从而达到调整反光镜的倾斜角度,能够解决因光线太强或太亮时造成的拍摄不清楚的问题。

进一步可选地,特定拍摄区域上放置有学习感应板,在学习感应板的上表面上放置练习本,该学习感应板与学习设备电连接,学生用户可以通过学习感应板配套的点读笔在练习本上进行操作,拍摄单元420通过控制摄像头拍摄当前页面获得页面图像之后,还将从学习感应板接收触及压力值和触及坐标值,该触及压力值为学生用户通过点读笔在当前页面上进行指定坐标定位时,该学习感应板所检测到的压力值,而触及坐标值为感应到该压力值的坐标位置。进而,拍摄单元420通过页面图像分析练习本与学习感应板的位置关系,然后根据该位置关系和触及坐标值,分析出学生用户通过点读笔在该当前页面上的指定坐标。

进一步可选地,拍摄单元420在接收到学习感应板反馈的触及压力值和触及坐标值后,判断该触及压力值是否大于预设阈值,如果大于预设阈值,执行学习设备通过页面图像分析练习本与学习感应板的位置关系,然后根据该位置关系和触及坐标值,分析出学生用户通过点读笔在该当前页面上的指定坐标的步骤,通过该实施方式,能够避免误操作。

实施上述学习设备,能够通过检测学生用户输入的语音搜索消息,然后从语音搜索消息中识别该学生用户的搜索意图,以及拍摄练习本的当前页面以获得页面图像,然后从该页面图像中识别该学生用户在该当前页面上的指定坐标,从页面图像中检测该指定坐标的特定范围内是否存在书写轨迹,如果存在书写轨迹,以该搜索意图为依据,识别页面图像中指定坐标对应的内容以获得待搜索内容,搜索与该待搜索内容相匹配的推送内容并输出,通过本发明实施例,能够结合语音和拍照获取待搜索内容,并进一步判断学生用户是否已经对待搜索内容进行了独立思考,只有经过了独立思考之后才会进行内容搜索,以培养学生用户养成良好的学习习惯,提高学习效果。

实施例四

请参阅图5,图5为本发明另一实施例公开的学习设备的结构示意图;图5所示的学习设备是在图4所示的学习设备的基础上进行优化得到的,如图5所示,该学习设备还包括:提醒单元510和用户识别单元520。

其中,上述提醒单元510,用于在书写检测单元430检测到指定坐标的特定范围内不存在书写痕迹时,输出提示消息,该提示消息用于提示学生用户先进行解答。

作为一种可选的实施方式,当指定坐标的特定范围包括指定坐标所在位置对应的练习题的解答区域时,书写检测单元430识别该解答区域是否记载有解答信息,如果有,触发内容识别单元440执行相应步骤。

进一步可选地,当解答区域未记载有解答信息,书写检测单元430进一步识别指定坐标所在位置对应的练习题与其它练习题之间的空白区域是否存在书写痕迹,若存在,触发内容识别单元440执行相应步骤。通过该实施方式,能够通过检测解答区域和空白区域来准确分析出学生用户是否对所要搜索的内容进行了独立思考。

进一步地,在指定坐标的特定范围内不存在书写痕迹时,书写检测单元430识别页面图像中除去该指定坐标所在位置和特定范围之外的地方是否存在书写痕迹,如果存在,识别该书写痕迹对应的书写内容,判断该书写内容与指定坐标所在位置的练习题的题干内容的匹配度,如果该匹配度大于或者等于预设匹配值,则触发内容识别单元440执行相应步骤,如果该匹配度小于预设匹配值,则输出提示消息。通过该实施方式,能够在学生用户通过草稿纸进行解答演算时,也能准确检测出来,从而提高判断学生用户是否进行了独立思考的准确率。

上述用户识别单元520,用于在搜索单元450搜索与待搜索内容相匹配的推送内容并输出之前,从语音搜索消息中提取声纹特征;以及,根据声纹特征识别学生用户的年龄信息;以及,根据年龄信息确定出学生用户的年级信息。

进而上述搜索单元450用于搜索与待搜索内容相匹配的推送内容并输出的方式具体为:上述搜索单元450,用于基于年级信息,搜索与待搜索内容相匹配的推送内容并输出。

在本发明实施例中,学习设备进一步从语音搜索消息中提取声纹特征,通过声纹特征识别出学生用户的年龄信息及年级信息,然后能够针对学生用户的年级信息搜索推荐内容,从而能够匹配学生用户的个人情况来获得匹配的推荐内容,以提高搜索的准确率。

作为一种可选的实施方式,上述内容识别单元440,还用于在书写检测单元430检测到指定坐标的特定范围内存在书写痕迹时,从页面图像中识别所述书写痕迹对应的书写内容;

进而,上述搜索单元450用于搜索与待搜索内容相匹配的推送内容并输出的方式具体为:

上述搜索单元450,用于搜索与待搜索内容相匹配的推送内容;以及,判断书写内容与推送内容是否相匹配;以及,在匹配时,在学习设备输出提示信息,该提示信息用于提示学生用户书写内容为正确内容并询问是否需要进一步输出推送内容;并在接收到该学生用户在学习设备中输入的确认需要输出推送内容时在学习设备输出推送内容;以及,在不匹配时,在学习设备输出推送内容。

实施例五

请参阅图6,图6为本发明又一实施例公开的学习设备的结构示意图;图6所示的学习设备可包括:至少一个处理器610,例如cpu,通信总线630用于实现这些组件之间的通信连接。存储器620可以是高速ram存储器,也可以是非不稳定的存储器(non-volatilememory),例如至少一个磁盘存储器。存储器620可选的还可以是至少一个位于远离前述处理器610的存储装置。其中,处理器610可以结合图4至图5所描述的学习设备,存储器610中存储一组程序代码,且处理器610调用存储器620中存储的程序代码,用于执行以下操作:

检测学生用户输入的语音搜索消息,并从所述语音搜索消息中识别所述学生用户的搜索意图;以及拍摄练习本的当前页面以获得页面图像,并从所述页面图像中识别所述学生用户在所述当前页面上的指定坐标;从所述页面图像中检测所述指定坐标的特定范围内是否存在书写痕迹;如果存在,以所述搜索意图为依据,识别所述页面图像中所述指定坐标对应的内容以获得待搜索内容;搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,上述处理器610还用于执行以下步骤:

在所述指定坐标的特定范围内不存在所述书写痕迹时,输出提示消息,所述提示消息用于提示所述学生用户先进行解答。

作为一种可选的实施方式,上述处理器610还用于执行以下步骤:

通过设置于所述学习设备且外置有反光镜的摄像头对放置于所述摄像头的特定拍摄区域内的所述练习本的当前页面进行拍摄预览,并在检测到所述学生用户通过手指在所述当前页面上的指定操作时,控制所述摄像头拍摄所述当前页面获得页面图像,并根据所述指定操作在所述页面图像中识别出所述学生用户在所述当前页面上的指定坐标。

作为一种可选的实施方式,上述处理器610还用于执行以下步骤:

所述搜索与所述待搜索内容相匹配的推送内容并输出之前,从所述语音搜索消息中提取声纹特征;根据所述声纹特征识别所述学生用户的年龄信息;根据所述年龄信息确定出所述学生用户的年级信息;基于所述年级信息,搜索与所述待搜索内容相匹配的推送内容并输出。

作为一种可选的实施方式,上述处理器610还用于执行以下步骤:

如果所述指定坐标的特定范围内存在所述书写痕迹,从所述页面图像中识别所述书写痕迹对应的书写内容;搜索与所述待搜索内容相匹配的推送内容;判断所述书写内容与所述推送内容是否相匹配;如果匹配,在所述学习设备输出提示信息,所述提示信息用于提示所述学生用户所述书写内容为正确内容并询问是否需要进一步输出所述推送内容;并在接收到所述学生用户在所述学习设备中输入的确认需要输出所述推送内容时在所述学习设备输出所述推送内容;如果不匹配,在所述学习设备输出所述推送内容。

本发明实施例还公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行图2至图3公开的一种基于学习设备的学习辅助方法。

本发明实施例还公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行图2至图3公开的任意一种方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行图2至图3公开的任意一种方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(read-onlymemory,rom)、随机存储器(randomaccessmemory,ram)、可编程只读存储器(programmableread-onlymemory,prom)、可擦除可编程只读存储器(erasableprogrammablereadonlymemory,eprom)、一次可编程只读存储器(one-timeprogrammableread-onlymemory,otprom)、电子抹除式可复写只读存储器(electrically-erasableprogrammableread-onlymemory,eeprom)、只读光盘(compactdiscread-onlymemory,cd-rom)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种基于学习设备的学习辅助方法及学习设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1