一种阅读辅导方法及装置与流程

文档序号:23054737发布日期:2020-11-25 17:32阅读:112来源:国知局
一种阅读辅导方法及装置与流程

本发明属于智能设备技术领域,特别涉及一种阅读辅导方法及装置。



背景技术:

在语文学习过程中,一个人的语文素养是靠长期大量的阅读积累形成的。因此,对于学生来说,培养阅读兴趣和能力是极其重要的。

目前,市面上有很多供学生阅读的课外书籍,但是,书籍上一般只标注有拼音,并没有列出文章的阅读重点、阅读思路、需要掌握的知识点等内容。而对于小学阶段的学生,其阅读能力有限,需要家长进行阅读辅导。但是家长工作较忙,不能时刻辅导孩子的阅读。当家长没空辅导孩子阅读时,学生阅读文章仅仅阅读的是文章的表面意思,其并不能理解文章中想要表达的意思,无法增强孩子的课外阅读积累,达不到阅读的目的,导致孩子的阅读能力和知识储备无法提高。



技术实现要素:

本发明的目的是提供一种阅读辅导方法及装置,在用户阅读前,向用户展示文章的阅读难点和阅读测试,不仅可帮助用户了解待阅读文章中的生字和难点,而且使用户带着问题去阅读,提高阅读效果。

本发明提供的技术方案如下:

一方面,本发明实施例提供一种阅读辅导方法,包括:

获取待阅读文章的信息;

在预设数据库中查找所述待阅读文章对应的阅读信息;其中,所述阅读信息包括阅读难点和阅读测试;

投影所述待阅读文章对应的阅读信息;

实时采集用户的语音信息;

当识别出所述语音信息为回答所述阅读测试的答案时,将所述答案与所述阅读测试的正确答案进行比对,并输出比对结果。

进一步优选地,还包括:

当识别出所述语音信息中包含提问信息时,采集放置于预设区域的所述待阅读文章的图像;

识别所述图像中的指示信息;

在所述图像中获取所述指示信息指向的文字区域;

识别所述文字区域中的文字信息;

根据所述语音信息中包含的提问信息和所述文字信息,得到提问内容;

获取所述提问内容对应的答案,并对所述答案进行投影或语音输出。

进一步优选地,还包括:

获取所述用户的用户信息;

根据所述用户信息和所述待阅读文章的总字数,计算所述待阅读文章所需的目标阅读时长;

周期性采集放置于预设区域的所述待阅读文章的图像;

识别所述图像中的指示信息;

根据所述指示信息,计算所述用户的实际阅读时长;

投影所述目标阅读时长和所述实际阅读时长。

进一步优选地,所述识别所述图像中的指示信息之后还包括:

确定连续采集的多张图像中的指示信息指向的文字区域是否相同;

若所述指示信息指向的文字区域相同的图像的张数大于预设阈值,则输出提示信息。

进一步优选地,还包括:

当识别出所述语音信息为朗读所述待阅读文章的朗读发声时,判断所述朗读发声是否正确;

若所述朗读发声正确时,继续实时采集所述用户的语音信息;

若所述朗读发声不正确时,记录朗读发声不正确的文字。

另一方面,还提供一种阅读辅导装置,包括:

文章信息获取模块,用于获取待阅读文章的信息;

阅读信息获取模块,用于在预设数据库中查找所述待阅读文章对应的阅读信息;其中,所述阅读信息包括阅读难点和阅读测试;

投影模块,用于投影所述待阅读文章对应的阅读信息;

语音采集模块,用于实时采集用户的语音信息;

答案比对模块,用于当识别出所述语音信息为回答所述阅读测试的答案时,将所述答案与所述阅读测试的正确答案进行比对;

所述投影模块,还用于输出比对结果。

进一步优选地,还包括:

图像采集模块,用于当识别出所述语音信息中包含提问信息时,采集放置于预设区域的所述待阅读文章的图像;

指示信息识别模块,用于识别所述图像中的指示信息;

文字区域获取模块,用于在所述图像中获取所述指示信息指向的文字区域;

文字信息识别模块,用于识别所述文字区域中的文字信息;

提问内容获取模块,用于根据所述语音信息中包含的提问信息和所述文字信息,得到提问内容;

答案获取模块,用于获取所述提问内容对应的答案;

所述投影模块,用于对所述答案进行投影;

语音输出模块,用于对所述答案进行语音输出。

进一步优选地,还包括:

用户信息获取模块,用于获取所述用户的用户信息;

目标时长计算模块,用于根据所述用户信息和所述待阅读文章的总字数,计算所述待阅读文章所需的目标阅读时长;

图像采集模块,用于周期性采集放置于预设区域的所述待阅读文章的图像;

指示信息识别模块,用于识别所述图像中的指示信息;

实际时长计算模块,用于根据所述指示信息,计算所述用户的实际阅读时长;

所述投影模块,用于投影所述目标阅读时长和所述实际阅读时长。

进一步优选地,还包括:

图像判断模块,确定连续采集的多张图像中的指示信息指向的文字区域是否相同;

语音输出模块,用于若所述指示信息指向的文字区域相同的图像的张数大于预设阈值,则输出提示信息。

进一步优选地,还包括:

发声判断模块,用于当识别出所述语音信息为朗读所述待阅读文章的朗读发声时,判断所述朗读发声是否正确;

所述语音采集模块,还用于若所述朗读发声正确时,继续实时采集所述用户的语音信息;

文字记录模块,用于若所述朗读发声不正确时,记录朗读发声不正确的文字。

与现有技术相比,本发明提供的一种阅读辅导方法及装置具有的有益效果为:通过获取并投影用户待阅读文章的阅读难点和阅读测试,事先帮助用户了解待阅读文章中的生字和难点,以帮助用户更好、更顺畅地进行阅读,同时还可使用户带着问题去阅读,提高阅读效果;此外,在阅读完成后对用户进行阅读测试,以便用户更好地掌握文章中的内容,进而提高孩子的知识储备。

附图说明

下面将以明确易懂的方式,结合附图说明优选实施方式,对一种阅读辅导方法及装置的上述特性、技术特征、优点及其实现方式予以进一步说明。

图1是本发明一种阅读辅导方法的实施例一的流程示意图;

图2是本发明一种阅读辅导方法的实施例二的流程示意图;

图3是本发明一种阅读辅导方法的实施例三的流程示意图;

图4是本发明一种阅读辅导方法的实施例四的流程示意图;

图5是本发明一种阅读辅导方法的实施例五的流程示意图;

图6是本发明一种阅读辅导装置的一个实施例的结构示意框图。

附图标号说明

1、文章信息获取模块;2、阅读信息获取模块;3、投影模块;4、语音采集模块;5、答案比对模块;6、图像采集模块;7、指示信息识别模块;8、文字区域获取模块;9、文字信息识别模块;10、提问内容获取模块;11、答案获取模块;12、语音输出模块;13、用户信息获取模块;14、目标时长计算模块;15、实际时长计算模块;16、图像判断模块;17、发声判断模块;18、文字记录模块。

具体实施方式

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对照附图说明本发明的具体实施方式。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,并获得其他的实施方式。

为使图面简洁,各图中只示意性地表示出了与本发明相关的部分,它们并不代表其作为产品的实际结构。另外,以使图面简洁便于理解,在有些图中具有相同结构或功能的部件,仅示意性地绘示了其中的一个,或仅标出了其中的一个。在本文中,“一个”不仅表示“仅此一个”,也可以表示“多于一个”的情形。

图1是本发明实施例一的提供的一种阅读辅导方法的流程图,该阅读辅导方法可以应用于智能台灯,通过带投影的智能台灯来实现阅读辅导的功能,无需另外使用家教机等产品。该阅读辅导方法具体包括:

s100获取待阅读文章的信息;

具体地,孩子在书桌前阅读课外读物等文章时,通过书桌上放置的智能台灯来获取孩子需要阅读的待阅读文章的信息。

智能台灯获取待阅读文章信息的方式有多种:

第一种:智能台灯可通过孩子的语音输入来获取待阅读文章的信息;示例性的,孩子在需要阅读时,语音输入“我要阅读背影”或“查找背影”等,智能台灯根据孩子输入的该语音信息,即可获取孩子需要阅读的待阅读文章为“背景”。

第二种:通过智能台灯上的摄像头拍摄书本上的文章图像,然后识别文章图像中的文字信息,将文字信息与智能台灯中预先构建的文章库里的文章进行匹配,最后根据匹配结果来获取待阅读文章信息。在通过摄像头拍摄书本上的文章图像时,若文章为多页,则最少需要拍摄一页的文字内容,以便提高文章匹配的准确率。

s200在预设数据库中查找所述待阅读文章对应的阅读信息;其中,所述阅读信息包括阅读难点和阅读测试;

具体地,阅读信息是指帮助孩子阅读的相关信息,其包括阅读难点和阅读测试。阅读难点可为文章中的生字、生字的意思、生字的读音、需要重点阅读的段落、需要重点理解的段落等。阅读测试可以是让孩子概括文章的中心思想、为生词或生字设置的填空题、词语的应用、背诵的句子或段落等。

在预设数据库中存储了海量的阅读文章,例如,教科书上的文章,市面上出现的书籍中的各种文章。预设数据库中存储的每个文章对应的都设置有阅读信息。在获取到待阅读文章后,即可在预设数据库中查找到待阅读文章对应的阅读信息。

s300投影所述待阅读文章对应的阅读信息;

具体地,在预设数据库中获取到待阅读文章对应的阅读信息后,通过智能台灯上的投影功能将阅读信息进行投影,以方便孩子进行观看。在进行投影时,还可辅助以语音播报,例如,对于生字和生词,可以通过语音播放正确的读音,以便孩子学习相应的读音。通过投影展示对应的阅读信息后,可帮助孩子理解不认识的生词和生字,以便更好地帮助孩子去理解文章意思,同时还可使孩子带着问题去阅读文章,提高孩子的阅读效果。

s400实时采集用户的语音信息;

具体地,通过智能台灯上的麦克风实时采集用户的语音信息,该语音信息可以为用户在阅读过程中与智能台灯的语音交互;也可以为阅读完成后,回答阅读测试内容时的语音信息。例如,用户在阅读过程中碰到不认识的生字且在阅读难点中并未展示时,与智能台灯进行的语音交互。

s500当识别出所述语音信息为回答所述阅读测试的答案时,将所述答案与所述阅读测试的正确答案进行比对,并输出比对结果。

具体地,采集到用户的语音信息后,采用现有的语义识别技术对语音信息进行语义识别。例如,先将语音信息转换为文本信息,然后对文本信息进行分词标注,最后采用正则表达式等对分词标注后的文本信息进行语义识别。

对语音信息进行语义识别后,当识别出该语音信息中包含阅读测试中的题目信息时,则说明该语音信息为回答阅读测试的答案时,将该答案与阅读测试对应的正确答案进行比对。例如,用户的语音信息为“文章的中心思想为a”,当识别出语音信息中包含“中心思想”语句时,则认为该语音信息回答的是阅读测试中的中心思想的问题,然后将答案“a”与预设数据库中存储的中心思想的正确答案进行比对,若匹配相似度大于一预设阈值(如50%),则认为用户回答的正确,并投影显示回答正确的符号,如显示对勾,以增强孩子的积极性;若孩子回答错误,则显示感叹号,在示意孩子答案不完全正确的同时,避免打击孩子的信心。在输出比对结果后,同时投影显示预设数据中存储的中心思想的正确答案,以便孩子进行答案对比。

本实施例中,通过获取并投影用户待阅读文章的阅读难点和阅读测试,事先帮助用户了解待阅读文章中的生字和难点,以帮助用户更好、更顺畅地进行阅读,同时还可使用户带着问题去阅读,提高阅读效果;此外,在阅读完成后对用户进行阅读测试,以便用户更好地掌握文章中的内容,进而提高孩子的知识储备。

图2是本发明实施例二的提供的一种阅读辅导方法的流程图,本实施例在上述实施例一的基础上,还包括:

s410当识别出所述语音信息中包含提问信息时,采集放置于预设区域的所述待阅读文章的图像;

具体地,预设区域可以根据台灯位置和预设长度确定,预设区域的形状可以是规则的,也可以是不规则的,比如预设区域可以是一个矩形区域、也可以是一个椭圆区域、还可以是一个圆形区域。示例性的,将智能台灯放置在桌面上时,以智能台灯为中心,预设长度为半径确定一个圆形区域,该圆形区域即为预设区域。待阅读文章放置在预设区域时,即可通过智能台灯上的摄像头拍摄获取待阅读文章的图像。

在用户阅读文章的过程中,通过对实时采集的语音信息进行语义识别,若识别出语音信息中包含提问信息时,“这个字是什么意思”、“这个字怎么读”、“这个字怎么组词”、“这个词怎么造句”等,则通过智能台灯上的摄像头采集放置于预设区域的待阅读文章的图像。提问信息可为“什么意思”、“怎么读”、“怎么读”等类似提问语。

s420识别所述图像中的指示信息;

具体地,采集放置于预设区域的待阅读文章的图像后,识别图像中的指示信息,该指示信息可为用户的手指或用户手中握着的笔。示例性的,用户在阅读过程中,当碰到不认识的生字时,会用手指或笔指向该生字,并同时说“这个字是什么意思”;智能台灯接收“这个字是什么意思”的语音信息后,通过摄像头采集放置于预设区域的待阅读文章的图像,该图像中包含手指等指示信息,然后在图像中识别手指所在的位置。

s430在所述图像中获取所述指示信息指向的文字区域;

具体地,在图像中识别出指示信息所在的位置后,获取该指示信息所指向的文字区域,如获取指示信息指向的一个字或一个词或一句话。在获取指示信息指向的文字区域时,可结合语音信息来判断是获取一个字、还是一个词、还是一句话。例如,若语音信息是“这个字是什么意思”,则获取指示信息指向的一个字;若语音信息是“这个词是什么意思”,则获取指示信息指向的一个词;或语音信息是“这句话该怎么理解”,则获取指示信息指向的一句话。

s440识别所述文字区域中的文字信息;

具体地,根据语音信息获取到指示信息指向的文字区域后,通过现有的图像识别技术识别文字区域中的文字信息。

s450根据所述语音信息中包含的提问信息和所述文字信息,得到提问内容;

具体地,将图像中识别出的文字信息与语音信息中包含的提问信息进行结合,即可得到提问内容。例如,识别出的文字信息是“漂亮”,语音信息中包含的提问信息是“这个词怎么造句”,则将“漂亮”与“这个词怎么造句”进行结合,得到提问内容“漂亮怎么造句”。

s460获取所述提问内容对应的答案,并对所述答案进行投影或语音输出。

具体地,得到提问内容后,还可将提问内容发送至服务器。在服务器端可预先存储有数据库,服务器根据提问内容,在数据库中查找相应的答案,并将答案返回至智能台灯,由智能台灯将答案进行投影和/或语音输出。当然,也可以将数据库直接存储在智能台灯上。

本方案中,在用户阅读的过程中,当用户碰到不认识的字时,可与智能台灯进行交互,通过智能台灯给出相应的释义,以帮助用户进行阅读,提高用户的阅读效果。

图3是本发明实施例三的提供的一种阅读辅导方法的流程图,本实施例在上述实施例一或实施例二的基础上,还包括:

s610获取所述用户的用户信息;

具体地,用户信息可包括用户年级等信息。例如,可通过智能台灯上的摄像头获取用户的图像,然后通过图像分析用户的年龄,根据年龄推测得到用户的年级信息;或者在用户使用智能台灯时,通过用户注册时输入的信息来获取用户的用户信息;或者通过语音询问用户的年级信息。本步骤可位于步骤s100至步骤s500任意步骤之前或之后。

s620根据所述用户信息和所述待阅读文章的总字数,计算所述待阅读文章所需的目标阅读时长。

具体地,根据用户的年级信息和待阅读文章的总字数、难易程度等,来计算该待阅读文章所需的目标阅读时长。对于同一篇文章,不同年级的用户感觉的阅读难度不同,因此,需要充分考虑用户的年级、待阅读文章的总字数和待阅读文章的难易程度,以使得计算得到的目标阅读时长更符合用户的水平。本步骤可位于步骤s100至步骤s500任意步骤之前或之后

s630周期性采集放置于预设区域的所述待阅读文章的图像;

具体地,在智能台灯未接收到提问信息等语音信息时,智能台灯上的摄像头以预设拍摄频率拍摄放置于预设区域的待阅读文章的图像。当在阅读过程中,用户用手或用笔指着文章中的某部分文字时,采集的该图像中还包括该指示信息。

s640识别所述图像中的指示信息;

s650根据所述指示信息,计算所述用户的实际阅读时长;

具体地,通过图像识别技术识别出每张图像中的指示信息所处的位置后,根据图像中指示信息的位置变化,来计算用户的实际阅读时长。

示例性的,假设采集的第一张图像中,指示信息位于待阅读文章的开头;采集的第n张图像中,指示信息位于待阅读文章的结尾,根据预设的拍摄频率(拍摄每张图像的间隔时长)即可计算出用户的实际阅读时长为(n-1)*拍摄频率。

s660投影所述目标阅读时长和所述实际阅读时长。

具体地,在根据图像中的指示信息判断用户阅读完成后,将用户的实际阅读时长和计算得到的目标阅读时长进行投影,让用户知晓自己的阅读速率是否有待提高。若实际阅读时长大于目标阅读时长,且实际阅读时长与目标阅读时长的差值大于某一预设阈值时,则搜索提高阅读速率的方法并进行投影,以便让用户思考在阅读时存在哪些可以改进的地方,进而提高用户的阅读能力。

本方案中,通过计算目标阅读时长和用户的实际阅读时长,并将该实际阅读时长与目标阅读时长进行对比,以便于判断用户的阅读能力是否需要提高;在需要提高时,获取提高阅读能力的方法并输出给用户,以便于用户根据自身情况进行改进,提高用户的阅读能力。

图4是本发明实施例四的提供的一种阅读辅导方法的流程图,本实施例在上述实施例一或实施例二的基础上,还包括:

s610获取所述用户的用户信息;

s620根据所述用户信息和所述待阅读文章的总字数,计算所述待阅读文章所需的目标阅读时长;

s630周期性采集放置于预设区域的所述待阅读文章的图像;

s640识别所述图像中的指示信息;

s650根据所述指示信息,计算所述用户的实际阅读时长;

s660投影所述目标阅读时长和所述实际阅读时长;

s670确定连续采集的多张图像中的指示信息指向的文字区域是否相同;

s680若所述指示信息指向的文字区域相同的图像的张数大于预设阈值,则输出提示信息。

具体地,在识别出每张图像中的指示信息所处的位置后,可根据图像中的指示信息所处的位置判断多张图像中的指示信息指向的文字区域是否相同。若多张图像的指示信息指向的文字区域相同,则说明用户并未在进行阅读,而且在发呆或走神了,此时,输出语音提示信息,提醒用户进入阅读状态。在正常状态下,若用户在进行正常阅读时,用户的手指或笔等指示信息是会随着阅读的进行而变换位置的,若多张连续的图像都指向同一个字词,说明用户并未在进行正常阅读,需要提醒用户,以将用户的注意力集中在阅读上。

图5是本发明实施例五的提供的一种阅读辅导方法的流程图,本实施例在上述实施例一或实施例二或实施例三或实施例四的基础上,还包括:

s700当识别出所述语音信息为朗读所述待阅读文章的朗读发声时,判断所述朗读发声是否正确;

s800若所述朗读发声正确时,继续实时采集所述用户的语音信息;

s900若所述朗读发声不正确时,记录朗读发声不正确的文字。

具体地,智能台灯上的麦克风采集到用户输入的语音信息后,判断该语音信息是否为朗读发声,若是朗读发声,则判断该朗读发声是否正确。如可将该朗读发声与预设数据库中存储的该待阅读文章的正确朗读发声进行比对,当发声与预设数据库中存储的该待阅读文章对应的正确发声相同时,则说明该朗读发声正确,若不相同,则说明该朗读发声不正确。

当该朗读发声正确时,则继续实时采集用户的语音信息,并继续对该语音信息进行发声比对,判断该语音信息是否正确。当该朗读发声不正确时,记录朗读发声不正确的文字,在用户朗读完后,投影用户朗读错误的文字和正确的发声,并提供语音功能,以语音输出正确的读音。在记录朗读发声不正确的文字时,还需要记录包含该朗读发声不正确的文字的句子,并投影包含朗读发声不正确的文字的句子,然后在该句子后显示朗读发声不正确的文字,并标注正确的发声,以便用户快速知晓自己朗读错误的地方,并方便用户纠正自己的发音,提高用户的朗读效果。

应理解,在上述各实施例中,各步骤序号的大小并不意味着执行顺序的先后,各步骤的执行顺序应以功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。

图6是本发明实施例六的提供的一种阅读辅导装置的结构示意框图,该阅读辅导装置具体包括:

文章信息获取模块1,用于获取待阅读文章的信息;

具体地,孩子在书桌前阅读课外读物等文章时,通过书桌上放置的智能台灯来获取孩子需要阅读的待阅读文章的信息。

智能台灯获取待阅读文章信息的方式有多种:

第一种:智能台灯可通过孩子的语音输入来获取待阅读文章的信息;示例性的,孩子在需要阅读时,语音输入“我要阅读背影”或“查找背影”等,智能台灯根据孩子输入的该语音信息,即可获取孩子需要阅读的待阅读文章为“背景”。

第二种:通过智能台灯上的摄像头拍摄书本上的文章图像,然后识别文章图像中的文字信息,将文字信息与智能台灯中预先构建的文章库里的文章进行匹配,最后根据匹配结果来获取待阅读文章信息。在通过摄像头拍摄书本上的文章图像时,若文章为多页,则最少需要拍摄一页的文字内容,以便提高文章匹配的准确率。

阅读信息获取模块2,用于在预设数据库中查找所述待阅读文章对应的阅读信息;其中,所述阅读信息包括阅读难点和阅读测试;

具体地,阅读信息是指帮助孩子阅读的相关信息,其包括阅读难点和阅读测试。阅读难点可为文章中的生字、生字的意思、生字的读音、需要重点阅读的段落、需要重点理解的段落等。阅读测试可以是让孩子概括文章的中心思想、为生词或生字设置的填空题、词语的应用、背诵的句子或段落等。

在预设数据库中存储了海量的阅读文章,例如,教科书上的文章,市面上出现的书籍中的各种文章。预设数据库中存储的每个文章对应的都设置有阅读信息。在获取到待阅读文章后,即可在预设数据库中查找到待阅读文章对应的阅读信息。

投影模块3,用于投影所述待阅读文章对应的阅读信息;

具体地,在预设数据库中获取到待阅读文章对应的阅读信息后,通过智能台灯上的投影功能将阅读信息进行投影,以方便孩子进行观看。在进行投影时,还可辅助以语音播报,例如,对于生字和生词,可以通过语音播放正确的读音,以便孩子学习相应的读音。通过投影展示对应的阅读信息后,可帮助孩子理解不认识的生词和生字,以便更好地帮助孩子去理解文章意思,同时还可使孩子带着问题去阅读文章,提高孩子的阅读效果。

语音采集模块4,用于实时采集用户的语音信息;

具体地,通过智能台灯上的麦克风实时采集用户的语音信息,该语音信息可以为用户在阅读过程中与智能台灯的语音交互;也可以为阅读完成后,回答阅读测试内容时的语音信息。例如,用户在阅读过程中碰到不认识的生字且在阅读难点中并未展示时,与智能台灯进行的语音交互。

答案比对模块5,用于当识别出所述语音信息为回答所述阅读测试的答案时,将所述答案与所述阅读测试的正确答案进行比对;

投影模块3,还用于输出比对结果。

具体地,采集到用户的语音信息后,采用现有的语义识别技术对语音信息进行语义识别。例如,先将语音信息转换为文本信息,然后对文本信息进行分词标注,最后采用正则表达式等对分词标注后的文本信息进行语义识别。

对语音信息进行语义识别后,当识别出该语音信息中包含阅读测试中的题目信息时,则说明该语音信息为回答阅读测试的答案时,将该答案与阅读测试对应的正确答案进行比对。例如,用户的语音信息为“文章的中心思想为a”,当识别出语音信息中包含“中心思想”语句时,则认为该语音信息回答的是阅读测试中的中心思想的问题,然后将答案“a”与预设数据库中存储的中心思想的正确答案进行比对,若匹配相似度大于一预设阈值(如50%),则认为用户回答的正确,并投影显示回答正确的符号,如显示对勾,以增强孩子的积极性;若孩子回答错误,则显示感叹号,在示意孩子答案不完全正确的同时,避免打击孩子的信心。在输出比对结果后,同时投影显示预设数据中存储的中心思想的正确答案,以便孩子进行答案对比。

本方案中,通过获取并投影用户待阅读文章的阅读难点和阅读测试,事先帮助用户了解待阅读文章中的生字和难点,以帮助用户更好、更顺畅地进行阅读,同时还可使用户带着问题去阅读,提高阅读效果;此外,在阅读完成后对用户进行阅读测试,以便用户更好地掌握文章中的内容,进而提高孩子的知识储备。

优选地,还包括:

图像采集模块6,用于当识别出所述语音信息中包含提问信息时,采集放置于预设区域的所述待阅读文章的图像;

具体地,预设区域可以根据台灯位置和预设长度确定,预设区域的形状可以是规则的,也可以是不规则的,比如预设区域可以是一个矩形区域、也可以是一个椭圆区域、还可以是一个圆形区域。示例性的,将智能台灯放置在桌面上时,以智能台灯为中心,预设长度为半径确定一个圆形区域,该圆形区域即为预设区域。待阅读文章放置在预设区域时,即可通过智能台灯上的摄像头拍摄获取待阅读文章的图像。

在用户阅读文章的过程中,通过对实时采集的语音信息进行语义识别,若识别出语音信息中包含提问信息时,“这个字是什么意思”、“这个字怎么读”、“这个字怎么组词”、“这个词怎么造句”等,则通过智能台灯上的摄像头采集放置于预设区域的待阅读文章的图像。提问信息可为“什么意思”、“怎么读”、“怎么读”等类似提问语。

指示信息识别模块7,用于识别所述图像中的指示信息;

具体地,采集放置于预设区域的待阅读文章的图像后,识别图像中的指示信息,该指示信息可为用户的手指或用户手中握着的笔。示例性的,用户在阅读过程中,当碰到不认识的生字时,会用手指或笔指向该生字,并同时说“这个字是什么意思”;智能台灯接收“这个字是什么意思”的语音信息后,通过摄像头采集放置于预设区域的待阅读文章的图像,该图像中包含手指等指示信息,然后在图像中识别手指所在的位置。

文字区域获取模块8,用于在所述图像中获取所述指示信息指向的文字区域;

具体地,在图像中识别出指示信息所在的位置后,获取该指示信息所指向的文字区域,如获取指示信息指向的一个字或一个词或一句话。在获取指示信息指向的文字区域时,可结合语音信息来判断是获取一个字、还是一个词、还是一句话。例如,若语音信息是“这个字是什么意思”,则获取指示信息指向的一个字;若语音信息是“这个词是什么意思”,则获取指示信息指向的一个词;或语音信息是“这句话该怎么理解”,则获取指示信息指向的一句话。

文字信息识别模块9,用于识别所述文字区域中的文字信息;

具体地,根据语音信息获取到指示信息指向的文字区域后,通过现有的图像识别技术识别文字区域中的文字信息。

提问内容获取模块10,用于根据所述语音信息中包含的提问信息和所述文字信息,得到提问内容;

具体地,将图像中识别出的文字信息与语音信息中包含的提问信息进行结合,即可得到提问内容。例如,识别出的文字信息是“漂亮”,语音信息中包含的提问信息是“这个词怎么造句”,则将“漂亮”与“这个词怎么造句”进行结合,得到提问内容“漂亮怎么造句”。

答案获取模块11,用于获取所述提问内容对应的答案;

投影模块3,用于对所述答案进行投影;

语音输出模块12,用于对所述答案进行语音输出。

具体地,得到提问内容后,还可将提问内容发送至服务器。在服务器端可预先存储有数据库,服务器根据提问内容,在数据库中查找相应的答案,并将答案返回至智能台灯,由智能台灯将答案进行投影和/或语音输出。当然,也可以将数据库直接存储在智能台灯上。

本方案中,在用户阅读的过程中,当用户碰到不认识的字时,可与智能台灯进行交互,通过智能台灯给出相应的释义,以帮助用户进行阅读,提高用户的阅读效果。

优选地,还包括:

用户信息获取模块13,用于获取所述用户的用户信息;

具体地,用户信息可包括用户年级等信息。例如,可通过智能台灯上的摄像头获取用户的图像,然后通过图像分析用户的年龄,根据年龄推测得到用户的年级信息;或者在用户使用智能台灯时,通过用户注册时输入的信息来获取用户的用户信息;或者通过语音询问用户的年级信息。

目标时长计算模块14,用于根据所述用户信息和所述待阅读文章的总字数,计算所述待阅读文章所需的目标阅读时长;

具体地,根据用户的年级信息和待阅读文章的总字数、难易程度等,来计算该待阅读文章所需的目标阅读时长。对于同一篇文章,不同年级的用户感觉的阅读难度不同,因此,需要充分考虑用户的年级、待阅读文章的总字数和待阅读文章的难易程度,以使得计算得到的目标阅读时长更符合用户的水平。

图像采集模块6,用于周期性采集放置于预设区域的所述待阅读文章的图像;

具体地,在智能台灯未接收到提问信息等语音信息时,智能台灯上的摄像头以预设拍摄频率拍摄放置于预设区域的待阅读文章的图像。当在阅读过程中,用户用手或用笔指着文章中的某部分文字时,采集的该图像中还包括该指示信息。

指示信息识别模块7,用于识别所述图像中的指示信息;

实际时长计算模块15,用于根据所述指示信息,计算所述用户的实际阅读时长;

具体地,通过图像识别技术识别出每张图像中的指示信息所处的位置后,根据图像中指示信息的位置变化,来计算用户的实际阅读时长。

示例性的,假设采集的第一张图像中,指示信息位于待阅读文章的开头;采集的第n张图像中,指示信息位于待阅读文章的结尾,根据预设的拍摄频率(拍摄每张图像的间隔时长)即可计算出用户的实际阅读时长为(n-1)*拍摄频率。

投影模块3,用于投影所述目标阅读时长和所述实际阅读时长。

具体地,在根据图像中的指示信息判断用户阅读完成后,将用户的实际阅读时长和计算得到的目标阅读时长进行投影,让用户知晓自己的阅读速率是否有待提高。若实际阅读时长大于目标阅读时长,且实际阅读时长与目标阅读时长的差值大于某一预设阈值时,则搜索提高阅读速率的方法并进行投影,以便让用户思考在阅读时存在哪些可以改进的地方,进而提高用户的阅读能力。

本方案中,通过计算目标阅读时长和用户的实际阅读时长,并将该实际阅读时长与目标阅读时长进行对比,以便于判断用户的阅读能力是否需要提高;在需要提高时,获取提高阅读能力的方法并输出给用户,以便于用户根据自身情况进行改进,提高用户的阅读能力。

优选地,还包括:

图像判断模块16,确定连续采集的多张图像中的指示信息指向的文字区域是否相同;

语音输出模块12,用于若所述指示信息指向的文字区域相同的图像的张数大于预设阈值,则输出提示信息。

具体地,在识别出每张图像中的指示信息所处的位置后,可根据图像中的指示信息所处的位置判断多张图像中的指示信息指向的文字区域是否相同。若多张图像的指示信息指向的文字区域相同,则说明用户并未在进行阅读,而且在发呆或走神了,此时,输出语音提示信息,提醒用户进入阅读状态。在正常状态下,若用户在进行正常阅读时,用户的手指或笔等指示信息是会随着阅读的进行而变换位置的,若多张连续的图像都指向同一个字词,说明用户并未在进行正常阅读,需要提醒用户,以将用户的注意力集中在阅读上。

优选地,还包括:

发声判断模块17,用于当识别出所述语音信息为朗读所述待阅读文章的朗读发声时,判断所述朗读发声是否正确;

语音采集模块4,还用于若所述朗读发声正确时,继续实时采集所述用户的语音信息;

文字记录模块18,用于若所述朗读发声不正确时,记录朗读发声不正确的文字。

具体地,智能台灯上的麦克风采集到用户输入的语音信息后,判断该语音信息是否为朗读发声,若是朗读发声,则判断该朗读发声是否正确。如可将该朗读发声与预设数据库中存储的该待阅读文章的正确朗读发声进行比对,当发声与预设数据库中存储的该待阅读文章对应的正确发声相同时,则说明该朗读发声正确,若不相同,则说明该朗读发声不正确。

当该朗读发声正确时,则继续实时采集用户的语音信息,并继续对该语音信息进行发声比对,判断该语音信息是否正确。当该朗读发声不正确时,记录朗读发声不正确的文字,在用户朗读完后,投影用户朗读错误的文字和正确的发声,并提供语音功能,以语音输出正确的读音。在记录朗读发声不正确的文字时,还需要记录包含该朗读发声不正确的文字的句子,并投影包含朗读发声不正确的文字的句子,然后在该句子后显示朗读发声不正确的文字,并标注正确的发声,以便用户快速知晓自己朗读错误的地方,并方便用户纠正自己的发音,提高用户的朗读效果。

应当说明的是,上述实施例均可根据需要自由组合。以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1