日程提醒方法、装置、电子设备及存储介质与流程

文档序号:26101115发布日期:2021-07-30 18:12阅读:60来源:国知局
日程提醒方法、装置、电子设备及存储介质与流程

本公开涉及增强现实技术领域,具体而言,涉及一种日程提醒方法、装置、电子设备及存储介质。



背景技术:

在一些日常生活场景,如办公场景下,由于用户每天都会有多项日程安排,在不同时间点都会有不同的任务,为了方便记录每日的日程安排,通常通过如下两种方式记录:

方式一、在实体日历的空白区域记录每日的日程安排,但是由于实体日历中可供编辑的空白区域有限,会存在手写日程安排的操作繁琐以及记录不清楚的问题。

方式二、在电子日历中记录每日的日程安排,并在到达输入的提醒时间点后弹出消息框来进行提醒。但是这种提醒方式也仅限于消息框的提醒形式,提醒效果的形式单一,很容易被用户所忽略。

故以上两种常用方式很难达到快捷有效的日程提醒。



技术实现要素:

有鉴于此,本公开至少提供一种日程提醒方法、装置、电子设备及存储介质。

第一方面,本公开提供了一种日程提醒方法,包括:

获取当前采集的现实场景图像并识别所述现实场景图像中的日历区域;

基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型;

检测作用在虚拟日期模型上的编辑信息,并生成与所述编辑信息对应的日程提醒信息;其中,所述日程提醒信息用于对所述编辑信息进行提醒。

上述方法中,通过识别到的日历区域,获取与日历区域的日期信息对应的虚拟日期模型,检测作用在虚拟日期模型上的编辑信息,并生成与编辑信息对应的日程提醒信息,由于虚拟日期模型上没有空间的限制,故该编辑信息可以为输入的较详细的信息,进而可以生成与编辑信息对应的、较为详细的日程提醒信息。同时,本公开中无需在实体日历上记录日程安排,通过输入编辑信息的方式,生成与编辑信息对应的日程提醒信息,使得生成过程简单、易操作,提高了日程提醒的效率。

一种可能的实施方式中,所述基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型,包括:

识别所述日历区域中的数字标记和/或文字标记;

基于所述数字标记和/或文字标记,确定所述日历区域当前显示的日期信息;

从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,其中所述虚拟日期模型库中包括不同日期信息分别对应的预设的虚拟日期模型。

这里,通过识别日历区域中的数字标记和/或文字标记,确定日历区域当前显示的日期信息,无需人工输入当前的日期信息,实现了日期信息的自动确定,进而可以从虚拟日期模型库中获取与日期信息匹配的虚拟日期模型,提高了虚拟日期模型的获取效率。

一种可能的实施方式中,所述从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,包括:

响应于检测到手势动作、语音信息、触摸操作中的至少一种操作,从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型。

一种可能的实施方式中,所述检测作用在虚拟日期模型上的编辑信息,包括:

识别所述现实场景图像中出现的手部动作;

根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息。

一种可能的实施方式中,所述根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息,包括:

在检测到所述手部动作指示的手势类型满足设定手势类型的情况下,触发展示与所述设定手势类型匹配的日程编辑页面;

检测在所述日程编辑页面上的输入信息;

基于所述输入信息,确定作用在虚拟日期模型上的编辑信息。

这里,不同的手势类型可以对应不同的日程编辑页面,不同的日程编辑页面可以对应不同的编辑内容,通过确定与设定手势类型匹配的日程编辑页面,该日程编辑页面能够满足用户的需求,进而在确定的日程编辑页面中输入信息时,可以提高信息输入的效率。

一种可能的实施方式中,所述检测在所述日程编辑页面上的输入信息,包括:

检测在所述日程编辑页面上输入的语音信息;和/或,

检测作用在屏幕上显示的所述日程编辑页面的触摸操作信息;

检测所述手部动作的移动位置,基于所述移动位置,确定作用在通过增强现实效果展示的所述日程编辑页面上的输入信息。

本公开实施方式中,设置多种确定编辑信息的方式,使得编辑信息的确定过程较为灵活、多样,以满足不同设备的不同需求。

一种可能的实施方式中,所述日程提醒信息包括提醒事项,提醒时间,处理进度,优先级中的至少一种。

第二方面,本公开提供了一种日程提醒方法,包括:

检测到当前时间达到目标日程提醒信息中录入的提醒时间;所述目标日程提醒信息包括基于第一方面任一所述的日程提醒方法生成的日程提醒信息;

在ar设备上展示当前采集的现实场景图像、所述目标日程提醒信息对应的虚拟日期模型以及提醒事项。

上述方法中,在当前时间达到目标日程提醒信息中录入的提醒时间时,在ar设备上展示当前采集的现实场景图像、目标日程提醒信息对应的虚拟日期模型以及提醒事项,使得ar设备上展示的内容较为丰富,日程提醒的效果较佳。

一种可能的实施方式中,所述方法还包括:

识别所述现实场景图像中出现的日历区域;

所述在ar设备上展示当前采集的现实场景图像以及所述目标日程提醒信息对应的虚拟日期模型以及提醒事项,包括:

在所述ar设备展示的现实场景图像中与所述日历区域对应的展示位置处展示所述虚拟日期模型以及提醒事项。

一种可能的实施方式中,所述提醒事项包括多个提醒事项,所述方法还包括:

基于预先编辑的所述多个提醒事项分别对应的优先级,采用不同的渲染效果展示所述多个提醒事项。

这里,在提醒事项包括多个时,可以根据多个提醒事项分别对应的优先级,采用不同的渲染效果展示多个提醒事项,比如可以将优先级高的提醒事项的渲染效果设置的较为绚丽,将优先级低的提醒事项的渲染效果设置的较为单一,以便使得用户可以根据不同的渲染效果,确定提醒事项的处理顺序,日程提醒的效果较佳。

一种可能的实施方式中,所述方法还包括:

检测到所述多个提醒事项中任一提醒事项被触发,在所述ar设备上展示被触发的提醒事项对应的处理进度。

这里,可以对被触发的提醒事项的处理进度进行展示,丰富了日程提醒的内容,以便用户能够对该提醒事项有个清晰的认知。

一种可能的实施方式中,所述方法还包括:

检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度;

基于更新后的被触发的提醒事项的处理进度,调整所述ar设备上展示的所述被触发的提醒事项的展示效果。

一种可能的实施方式中,所述检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度,包括:

基于所述现实场景图像,确定所述现实场景图像中出现的手部动作的检测结果;

根据所述手部动作的检测结果,更新所述被触发的提醒事项的处理进度。

这里,可以通过手部动作的检测结果,更新被触发的提醒事项的处理进度,更新过程简便、更新效率较高。

以下装置、电子设备等的效果描述参见上述方法的说明,这里不再赘述。

第三方面,本公开提供了一种日程提醒装置,包括:

第一获取模块,用于获取当前采集的现实场景图像并识别所述现实场景图像中的日历区域;

第二获取模块,用于基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型;

确定模块,用于检测作用在虚拟日期模型上的编辑信息,并生成与所述编辑信息对应的日程提醒信息;其中,所述日程提醒信息用于对所述编辑信息进行提醒。

一种可能的实施方式中,所述第二获取模块,在基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型时,用于:

识别所述日历区域中的数字标记和/或文字标记;

基于所述数字标记和/或文字标记,确定所述日历区域当前显示的日期信息;

从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,其中所述虚拟日期模型库中包括不同日期信息分别对应的预设的虚拟日期模型。

一种可能的实施方式中,所述第二获取模块,在从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型时,用于:

响应于检测到手势动作、语音信息、触摸操作中的至少一种操作,从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型。

一种可能的实施方式中,所述确定模块,在检测作用在虚拟日期模型上的编辑信息时,用于:

识别所述现实场景图像中出现的手部动作;

根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息。

一种可能的实施方式中,所述确定模块,在根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息时,用于:

在检测到所述手部动作指示的手势类型满足设定手势类型的情况下,触发展示与所述设定手势类型匹配的日程编辑页面;

检测在所述日程编辑页面上的输入信息;

基于所述输入信息,确定作用在虚拟日期模型上的编辑信息。

一种可能的实施方式中,所述确定模块,在检测在所述日程编辑页面上的输入信息时,用于:

检测在所述日程编辑页面上输入的语音信息;和/或,

检测作用在屏幕上显示的所述日程编辑页面的触摸操作信息;

检测所述手部动作的移动位置,基于所述移动位置,确定作用在通过增强现实效果展示的所述日程编辑页面上的输入信息。

一种可能的实施方式中,所述日程提醒信息包括提醒事项,提醒时间,处理进度,优先级中的至少一种。

第四方面,本公开提供了一种日程提醒装置,包括:

检测模块,用于检测到当前时间达到目标日程提醒信息中录入的提醒时间;所述目标日程提醒信息包括基于第一方面任一所述的日程提醒方法生成的日程提醒信息;

第一展示模块,用于在ar设备上展示当前采集的现实场景图像、所述目标日程提醒信息对应的虚拟日期模型以及提醒事项。

一种可能的实施方式中,所述装置还包括:识别模块,用于:

识别所述现实场景图像中出现的日历区域;

所述第一展示模块,在ar设备上展示当前采集的现实场景图像以及所述目标日程提醒信息对应的虚拟日期模型以及提醒事项时,用于:

在所述ar设备展示的现实场景图像中与所述日历区域对应的展示位置处展示所述虚拟日期模型以及提醒事项。

一种可能的实施方式中,所述提醒事项包括多个提醒事项,所述装置还包括:第二展示模块,用于:

基于预先编辑的所述多个提醒事项分别对应的优先级,采用不同的渲染效果展示所述多个提醒事项。

一种可能的实施方式中,所述装置还包括:第三展示模块,用于:

检测到所述多个提醒事项中任一提醒事项被触发,在所述ar设备上展示被触发的提醒事项对应的处理进度。

一种可能的实施方式中,所述装置还包括:更新模块,用于:

检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度;

基于更新后的被触发的提醒事项的处理进度,调整所述ar设备上展示的所述被触发的提醒事项的展示效果。

一种可能的实施方式中,所述更新模块,在检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度时,用于:

基于所述现实场景图像,确定所述现实场景图像中出现的手部动作的检测结果;

根据所述手部动作的检测结果,更新所述被触发的提醒事项的处理进度。

第五方面,本公开提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述第一方面或任一实施方式所述的日程提醒方法的步骤;或执行如上述第二方面或任一实施方式所述的日程提醒方法的步骤。

第六方面,本公开提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述第一方面或任一实施方式所述的日程提醒方法的步骤;或执行如上述第二方面或任一实施方式所述的日程提醒方法的步骤。

为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。

附图说明

为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。

图1示出了本公开实施例所提供的一种日程提醒方法的流程示意图;

图2示出了本公开实施例所提供的一种日程提醒方法中,基于日历区域,获取与日历区域的日期信息对应的虚拟日期模型的具体方式的流程示意图;

图3示出了本公开实施例所提供的一种日程提醒方法中,检测作用在虚拟日期模型上的编辑信息的具体方式的流程示意图;

图4示出了本公开实施例所提供的另一种日程提醒方法的流程示意图;

图5示出了本公开实施例所提供的另一种日程提醒方法的流程示意图;

图6示出了本公开实施例所提供的一种日程提醒装置的架构示意图;

图7示出了本公开实施例所提供的另一种日程提醒装置的架构示意图;

图8示出了本公开实施例所提供的一种电子设备的结构示意图;

图9示出了本公开实施例所提供的另一种电子设备的结构示意图。

具体实施方式

为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。

考虑到通过实体日历的空白区域记录每日的日程安排时,由于实体日历中可供编辑的空白区域有限,会存在手写日程安排的操作繁琐以及记录不清楚的问题。而通过电子日历记录每日的日程安排,在到达输入的提醒时间点后弹出消息框来进行提醒时,该提醒方式限于消息框的提醒形式,使得提醒效果的形式单一,且容易被用户忽略。为了解决上述问题,本公开实施例提供了一种日程提醒方法。

针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。

下面将结合本公开中附图,对本公开中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。

应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。

为便于对本公开实施例进行理解,首先对本公开实施例所公开的一种日程提醒方法进行详细介绍。本公开实施例所提供的日程提醒方法的执行主体一般为具有一定计算能力的电子设备,该电子设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(userequipment,ue)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(personaldigitalassistant,pda)、手持设备、计算设备、车载设备、可穿戴设备、增强现实(augmentedreality,ar)设备等。在一些可能的实现方式中,该日程提醒方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。

参见图1所示,为本公开实施例所提供的日程提醒方法的流程示意图,该方法包括s101-s103,其中:

s101,获取当前采集的现实场景图像并识别所述现实场景图像中的日历区域;

s102,基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型;

s103,检测作用在虚拟日期模型上的编辑信息,并生成与所述编辑信息对应的日程提醒信息;其中,所述日程提醒信息用于对所述编辑信息进行提醒。

上述方法中,通过识别到的日历区域,获取与日历区域的日期信息对应的虚拟日期模型,检测作用在虚拟日期模型上的编辑信息,并生成与编辑信息对应的日程提醒信息,由于虚拟日期模型上没有空间的限制,故该编辑信息可以为输入的较详细的信息,进而可以生成与编辑信息对应的、较为详细的日程提醒信息。同时,本公开中无需在实体日历上记录日程安排,通过输入编辑信息的方式,生成与编辑信息对应的提成提醒信息,使得生成过程简单、易操作,提高了日程提醒的效率。

下述针对s101-s103进行具体说明。

针对s101:

可以通过图像采集设备采集现实场景图像,图像采集设备可以为ar设备上设置的摄像头,也可以为现实场景中部署的摄像设备等。示例性的,在获取当前采集的现实场景图像之后,可以利用用于进行对象识别的神经网络,对现实场景图像中的日历进行识别,确定现实场景图像中的日历区域。其中,该日历区域可以为实体日历对应的区域,也可以为电子日历对应的区域,比如,电子日历可以为现实场景中的电子设备上展示的日历。

针对s102:

一种可选实施方式中,参见图2所示,在s102中,基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型,包括:

s1021,识别所述日历区域中的数字标记和/或文字标记;

s1022,基于所述数字标记和/或文字标记,确定所述日历区域当前显示的日期信息;

s1023,从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,其中所述虚拟日期模型库中包括不同日期信息分别对应的预设的虚拟日期模型。

在s1021中,可以使用标记物marker识别算法对现实场景图像上的日历区域进行识别,确定日历区域中的数字标记和/或文字标记。或者,也可以使用光学字符识别(opticalcharacterrecognition,ocr)算法对现实场景图像上的日历区域进行识别,确定日历区域中的数字标记和/或文字标记。数字标记比如可以为日历区域中包括的阿拉伯数字,比如,可以为2020、3、6等;文字标记比如可以为日历区域中包括的文字,比如,可以为年、月、日、周、一、二等。

在s1022中,比如,若数字标记为2020、3、6,可以确定当前显示的日期信息为2020-3-6;若文字标记为周一,可以确定当前显示的日期信息为周一;或者,若数字标记为2020、3、6,文字标记为年、月、日、周、一等,则确定日历区域当前显示的日期信息为2020年3月6日、周一。

在s1023中,虚拟日期模型库中可以存储有不同日期信息分别对应的预设的虚拟日期模型;即可以从虚拟日期模型库中获取与日期信息匹配的虚拟日期模型。

或者,虚拟日期模型库中还可以存储有设置的多个数字标记对应的第一虚拟模型,比如,阿拉伯数字0-9中每个数字对应的第一虚拟模型,和/或设置的多个文字标记对应的第二虚拟模型,比如,多个文字标记可以包括年、月、日、周、一、二、三、四、五、六、日等,第二虚拟模型中包括每个文字标记对应的虚拟模型,则可以从虚拟日期模型库中选取与日期信息匹配的第一虚拟模型、第二虚拟模型,再基于选取的第一虚拟模型、第二虚拟模型,构成与日期信息匹配的虚拟日期模型。

一种可选实施方式中,所述从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,包括:响应于检测到手势动作、语音信息、触摸操作中的至少一种操作,从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型。

在实施时,若在虚拟日期模型库中存在多个虚拟日期模型与日期信息匹配时,可以对检测到的手势动作进行识别,根据动作识别结果,从与日期信息匹配的多个虚拟日期模型中,选择一个作为日期信息对应的虚拟日期模型;或者,可以对语音信息进行识别,根据语音识别结果,从日期信息匹配的多个虚拟日期模型中,选择一个作为与日期信息对应的虚拟日期模型;或者,也可以响应于触摸操作,从与日期信息匹配的多个虚拟日期模型中,选择一个作为日期信息对应的虚拟日期模型。

这里,通过识别日历区域中的数字标记和/或文字标记,确定日历区域当前显示的日期信息,无需人工输入当前的日期信息,实现了日期信息的自动确定,进而可以从虚拟日期模型库中获取与日期信息匹配的虚拟日期模型,提高了虚拟日期模型的获取效率。

针对s103:

该编辑信息可以为文字信息、语音信息、图像信息等;日程提醒信息包括提醒事项,提醒时间,处理进度,优先级中的至少一种,比如,提醒事项可以为开会、购物、约会、生日等;提醒时间可以为编辑的任一时间点;处理进度可以为未处理、已处理、已完成等,优先级可以为高级、中级、低级等。

一种可选实施方式中,参见图3所示,在s103中检测作用在虚拟日期模型上的编辑信息,包括:

s1031,识别所述现实场景图像中出现的手部动作;

s1032,根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息。

示例性的,可以使用用于进行动作识别的神经网络,识别现实场景图像中出现的手部动作;或者,也可以使用用于进行手部检测的神经网络,确定现实场景图像中的手部的位置信息,并基于手部的位置信息,确定手部所在的局部图像;再使用用于进行手部检测的神经网络,确定局部图像中出现的手部动作。再可以根据识别到的手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息。

一种可选实施方式中,s1032中,根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息,包括:

步骤a1,在检测到所述手部动作指示的手势类型满足设定手势类型的情况下,触发展示与所述设定手势类型匹配的日程编辑页面;

步骤a2,检测在所述日程编辑页面上的输入信息;

步骤a3,基于所述输入信息,确定作用在虚拟日期模型上的编辑信息。

这里,不同的手势类型可以对应不同的日程编辑页面,不同的日程编辑页面可以对应不同的编辑内容,通过确定与设定手势类型匹配的日程编辑页面,该日程编辑页面能够满足用户的需求,进而在确定的日程编辑页面中输入信息时,可以提高信息输入的效率。

在步骤a1中,手部动作的检测结果可以为手部动作的手势类型,可以预先设置每种手势类型对应的日程编辑页面,不同的日程编辑页面对应的编辑信息的类型不同。比如,可以设置“ok”的手势类型对应的日程编辑页面为会议提醒的日程编辑页面,在会议提醒的日程编辑页面中的编辑信息可以包括:会议地点、会议时间、会议参与人员、会议主题等;可以设置“手掌”的手势类型对应的日程编辑页面为购物提醒的日程编辑页面等,购物提醒的日程编辑页面中的编辑信息可以包括:购物时间、购物种类、购物开销。其中手势类型对应的日程编辑页面可以根据实际需求进行设置。

在检测到手部动作对应的手势类型为设定手势类型时,可以基于预设的手势类型与日程编辑页面之间的映射关系,确定与手部动作指示的手势类型匹配的日程编辑页面,再触发展示确定的日程编辑页面。

其中,日程编辑页面可以为实体设备上设置的实体日程编辑页面,也可以为渲染在现实场景图像上的虚拟日程编辑页面。

在步骤a2中,可以通过下述方式检测在所述日程编辑页面上的输入信息:

方式一,检测在所述日程编辑页面上输入的语音信息;

方式二,检测作用在屏幕上显示的所述日程编辑页面的触摸操作信息;

方式三、检测所述手部动作的移动位置,基于所述移动位置,确定作用在通过增强现实效果展示的所述日程编辑页面上的输入信息。

在方式一中,可以通过语音的方式在日程编辑页面上输入信息,该日程编辑页面可以为实体日程编辑页面,也可以为虚拟日程编辑页面。比如,在日程编辑页面为实体日程编辑页面时,可以通过实体设备上设置的语音采集模块检测在日程编辑页面上输入的语音信息,并通过检测到的语音信息,确定作用在虚拟日期模型上的编辑信息,再生成编辑信息对应的日程提醒信息之后,可以在实体设备的显示界面上展示日程提醒信息。

在日程编辑页面为虚拟编辑页面时,可以通过渲染虚拟日程编辑页面的ar设备上的语音采集模块检测输入的语音信息,并通过检测到的语音信息,确定作用在虚拟日期模型上的编辑信息,再生成编辑信息对应的日程提醒信息之后,可以控制ar设备生成并展示日程提醒信息。

在方式二中,日程编辑页面为实体日程编辑页面,通过在实体设备的屏幕上显示实体日程编辑页面,通过检测在实体日程编辑页面上的触摸操作信息,确定作用在虚拟日期模型上的编辑信息。比如,在检测到在实体日程编辑页面上触摸了“开会”对应的触发按钮,则确定作用在虚拟日程模型上的编辑信息包括开会的提醒事项。

在方式三中,可以实时的检测手部动作的移动位置,将手部动作的移动位置转换至通过ar效果展示的日程编辑页面(虚拟日程编辑页面)对应的坐标系下,确定手部动作在虚拟日程编辑页面上的实时位置;再可以根据手部动作,确定手部在实时位置处是否执行了点击操作,比如,若手部动作指示的手部拇指的移动深度大于其他手指的移动深度,则确定手部拇指执行了点击操作。进而根据手部执行了点击操作的位置,确定在虚拟日程编辑页面上的输入信息。比如,确定的输入信息可以包括:“开会”等。

本公开实施方式中,设置多种确定编辑信息的方式,使得编辑信息的确定过程较为灵活、多样,以满足不同设备的不同需求。

最后可以根据检测到的输入信息,确定作用在虚拟日期模型上的编辑信息。并生成与编辑信息对应的日程提醒信息,示例性的,可以从编辑信息中提取关键信息,根据提取的关键信息,生成与编辑信息对应的日程提醒信息,该关键信息可以包括提醒类型、提醒时间、提醒内容等。

以执行主体为ar设备进行示例性说明:步骤1、通过ar设备获取现实场景图像,从现实场景图像中识别日历区域,该日历区域包括电子日历和/或实体日历。步骤2、识别日历区域出现的数字标记和/或文字标记,比如1号、2号等;步骤3、基于数字标记和/或文字标记,确定日历区域当前显示的日期信息,并从虚拟日期模型库中获取与日期信息匹配的虚拟日期模型;可选的,在日期信息匹配有多个虚拟日期模型时,可以通过手势操作、语音信息或者触摸操作,从多个虚拟日期模型中确定一个虚拟日期模型;步骤4、通过ar设备接收作用在虚拟日期模型上的编辑信息,并生成与编辑信息对应的日程提醒信息。其中,日程提醒信息包括但不限于提醒事项、提醒时间、处理进度、优先级等。

其中,不同的ar设备对应不同的编辑信息的编辑过程:

(1)、在ar设备为ar眼镜时,包括下述两种方式:

方式1、在展示虚拟日期模型后,通过调取语音采集模块接收语音信息,提取语音信息中用户录入的编辑信息。

方式2、通过ar眼镜获取当前采集的现实场景图像,检测现实场景图像中出现的手部检测框以及手部关键点;再利用手部检测框和手部关键点,确定手部动作以及手部动作的实时位置;在手部动作符合设定手势的情况下,确定触发了虚拟日程编辑页面上展示的虚拟键盘;进一步将手部关键点的位置映射到虚拟键盘对应的坐标系下,得到手部关键点所触发的虚拟键盘的位置,以便录入编辑信息。

(2)、在ar设备为手机或平板电脑等设备时:可以直接在实体键盘中录入编辑信息。

进一步地,可以保存录入的编辑信息,以便在满足日程提醒的触发条件时进行相应的日程提醒流程。

下述对本公开实施例所公开的另一种日程提醒方法进行详细介绍。本公开实施例所提供的日程提醒方法的执行主体一般为具有一定计算能力的电子设备,该电子设备例如包括:增强现实(augmentedreality,ar)设备,该ar设备比如可以为ar眼镜、手机、平板电脑等具有ar功能的设备。在一些可能的实现方式中,该日程提醒方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。

参见图4所示,为本公开实施例所提供的日程提醒方法的流程示意图,该方法包括s401-s402,其中:

s401,检测到当前时间达到目标日程提醒信息中录入的提醒时间;所述目标日程提醒信息包括基于上述实施方式任一所述的日程提醒方法生成的日程提醒信息;

s402,在ar设备上展示当前采集的现实场景图像、所述目标日程提醒信息对应的虚拟日期模型以及提醒事项。

其中,目标日程提醒信息可以是在当前的ar设备上生成的,也可以为在其他设备上生成的,通过当前的ar设备进行展示。

上述方法中,在当前时间达到目标日程提醒信息中录入的提醒时间时,在ar设备上展示当前采集的现实场景图像、目标日程提醒信息对应的虚拟日期模型以及提醒事项,使得ar设备上展示的内容较为丰富,日程提醒的效果较佳。

一种可选实施方式中,可以将目标日程提醒信息对应的虚拟日期模型以及提醒事项,展示在当前采集的现实场景图像上的预设位置处。比如,该预设位置处可以为现实场景图像的中心位置,也可以为现实场景图像的左上角位置处等。或者,还可以响应于位置确定操作,确定现实场景图像上的目标展示位置,将目标日程提醒信息对应的虚拟日期模型以及提醒事项,展示在当前采集的现实场景图像上的目标展示位置处。

另一种可选实施方式中,在执行步骤401之前,所述方法还包括:

s403,识别所述现实场景图像中出现的日历区域。

在s402中,在ar设备上展示当前采集的现实场景图像以及所述目标日程提醒信息对应的虚拟日期模型以及提醒事项,包括:

s4021,在所述ar设备展示的现实场景图像中与所述日历区域对应的展示位置处展示所述虚拟日期模型以及提醒事项。

这里,可以对当前采集的现实场景图像进行识别,确定现实场景图像中包括的日历区域,比如,可以通过训练的用于进行目标检测的神经网络,识别现实场景图像中出现的日历区域。

再可以根据识别到的日历区域,在ar设备展示的现实场景图像中确定与日历区域对应的展示位置,比如,可以将日历区域对应的位置确定为展示位置,或者,也可以将日历区域周围的位置确定为展示位置;并可以在ar设备展示的现实场景图像中,与日历区域对应的展示位置处展示虚拟日期模型以及提醒事项。

一种可选实施方式中,所述提醒事项包括多个提醒事项,所述方法还包括:基于预先编辑的所述多个提醒事项分别对应的优先级,采用不同的渲染效果展示所述多个提醒事项。

不同的优先级可以对应不同的渲染效果,示例性的,优先级高的提醒事项对应的渲染效果可以较绚丽,优先级低的提醒事项对应的渲染效果可以较为单调,以实现对优先级高的提醒事项进行重点提醒。比如,优先级低的提醒事项对应的渲染效果可以为静态效果,优先级高的提醒事项对应的渲染效果可以为动态效果,以便使得用户可以根据不同的渲染效果,确定提醒事项的处理顺序,日程提醒的效果较佳。

一种可选实施方式中,所述方法还包括:检测到所述多个提醒事项中任一提醒事项被触发,在所述ar设备上展示被触发的提醒事项对应的处理进度。

这里,可以对被触发的提醒事项的处理进度进行展示,丰富了日程提醒的内容,以便用户能够对该提醒事项有个清晰的认知。

一种可选实施方式中,参见图5所示,所述方法还包括:

s404、检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度;

s405、基于更新后的被触发的提醒事项的处理进度,调整所述ar设备上展示的所述被触发的提醒事项的展示效果。

在步骤一中,可以对被触发的提醒事项对应的处理进行编辑操作,该编辑操作可以包括手部动作操作、也可以为点击操作等。

一种可选实施方式中,可以通过触发处理进度的更新按钮,更新被触发的提醒事项的处理进行,比如,将被触发的提醒事项的处理进度更新为已完成。

另一种可选实施方式中,所述检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度,包括:

基于所述现实场景图像,确定所述现实场景图像中出现的手部动作的检测结果;根据所述手部动作的检测结果,更新所述被触发的提醒事项的处理进度。

具体实施时,可以利用手势识别神经网络,对获取的现实场景图像进行手部动作识别,确定现实场景图像中出现的手部动作的检测结果,比如,该检测结果中可以包括手部动作类型。

再可以根据手部动作的检测结果指示的目标手部动作类型、和预先设置的每种手部动作类型与处理进度之间的映射关系,确定目标手部动作类型对应的处理进度,并更新触发的提醒事项的处理进度。比如,在检测到目标手部动作类型为ok的手势时,则更新后的提醒事项的处理进度可以为已完成;在检测到目标手部动作类型为手掌的手势,则更新后的提醒事项的处理进度可以为未完成等。

在步骤二中,不同处理进度的提醒事项,可以对应不同的展示效果,比如,处理进度为初始阶段的提醒事项,对应的展示效果可以包括字体闪烁、字体颜色加深的效果;处理进度为已完成的提醒事项,对应的展示效果可以包括字体静态展示的效果。

这里,可以通过手部动作的检测结果,更新被触发的提醒事项的处理进度,更新过程简便、更新效率较高。

本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。

基于相同的构思,本公开实施例还提供了一种日程提醒装置,参见图6所示,为本公开实施例提供的日程提醒装置的架构示意图,包括第一获取模块601、第二获取模块602、确定模块603,具体的:

第一获取模块601,用于获取当前采集的现实场景图像并识别所述现实场景图像中的日历区域;

第二获取模块602,用于基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型;

确定模块603,用于检测作用在虚拟日期模型上的编辑信息,并生成与所述编辑信息对应的日程提醒信息;其中,所述日程提醒信息用于对所述编辑信息进行提醒。

一种可能的实施方式中,所述第二获取模块602,在基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型时,用于:

识别所述日历区域中的数字标记和/或文字标记;

基于所述数字标记和/或文字标记,确定所述日历区域当前显示的日期信息;

从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型,其中所述虚拟日期模型库中包括不同日期信息分别对应的预设的虚拟日期模型。

一种可能的实施方式中,所述第二获取模块602,在从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型时,用于:

响应于检测到手势动作、语音信息、触摸操作中的至少一种操作,从虚拟日期模型库中获取与所述日期信息匹配的虚拟日期模型。

一种可能的实施方式中,所述确定模块603,在检测作用在虚拟日期模型上的编辑信息时,用于:

识别所述现实场景图像中出现的手部动作;

根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息。

一种可能的实施方式中,所述确定模块603,在根据所述手部动作的检测结果,确定作用在虚拟日期模型上的编辑信息时,用于:

在检测到所述手部动作指示的手势类型满足设定手势类型的情况下,触发展示与所述设定手势类型匹配的日程编辑页面;

检测在所述日程编辑页面上的输入信息;

基于所述输入信息,确定作用在虚拟日期模型上的编辑信息。

一种可能的实施方式中,所述确定模块603,在检测在所述日程编辑页面上的输入信息时,用于:

检测在所述日程编辑页面上输入的语音信息;和/或,

检测作用在屏幕上显示的所述日程编辑页面的触摸操作信息;

检测所述手部动作的移动位置,基于所述移动位置,确定作用在通过增强现实效果展示的所述日程编辑页面上的输入信息。

一种可能的实施方式中,所述日程提醒信息包括提醒事项,提醒时间,处理进度,优先级中的至少一种。

基于相同的构思,本公开实施例还提供了另一种日程提醒装置,参见图7所示,为本公开实施例提供的日程提醒装置的架构示意图,包括检测模块701、第一展示模块702,具体的:

检测模块701,用于检测到当前时间达到目标日程提醒信息中录入的提醒时间;所述目标日程提醒信息包括基于上述实施方式任一所述的日程提醒方法生成的日程提醒信息;

第一展示模块702,用于在ar设备上展示当前采集的现实场景图像以及所述目标日程提醒信息对应的虚拟日期模型以及提醒事项。

一种可能的实施方式中,所述装置还包括:识别模块703,用于:

识别所述现实场景图像中出现的日历区域;

所述第一展示模块702,在ar设备上展示当前采集的现实场景图像以及所述目标日程提醒信息对应的虚拟日期模型以及提醒事项时,用于:

在所述ar设备展示的现实场景图像中与所述日历区域对应的展示位置处展示所述虚拟日期模型以及提醒事项。

一种可能的实施方式中,所述提醒事项包括多个提醒事项,所述装置还包括:第二展示模块704,用于:

基于预先编辑的所述多个提醒事项分别对应的优先级,采用不同的渲染效果展示所述多个提醒事项。

一种可能的实施方式中,所述装置还包括:第三展示模块705,用于:

检测到所述多个提醒事项中任一提醒事项被触发,在所述ar设备上展示被触发的提醒事项对应的处理进度。

一种可能的实施方式中,所述装置还包括:更新模块706,用于:

检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度;

基于更新后的被触发的提醒事项的处理进度,调整所述ar设备上展示的所述被触发的提醒事项的展示效果。

一种可能的实施方式中,所述更新模块706,在检测对所述被触发的提醒事项对应的处理进度的编辑操作,更新所述被触发的提醒事项的处理进度时,用于:

基于所述现实场景图像,确定所述现实场景图像中出现的手部动作的检测结果;

根据所述手部动作的检测结果,更新所述被触发的提醒事项的处理进度。

在一些实施例中,本公开实施例提供的装置具有的功能或包含的模板可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。

基于同一技术构思,本公开实施例还提供了一种电子设备。参照图8所示,为本公开实施例提供的电子设备的结构示意图,包括处理器801、存储器802、和总线803。其中,存储器802用于存储执行指令,包括内存8021和外部存储器8022;这里的内存8021也称内存储器,用于暂时存放处理器801中的运算数据,以及与硬盘等外部存储器8022交换的数据,处理器801通过内存8021与外部存储器8022进行数据交换,当电子设备800运行时,处理器801与存储器802之间通过总线803通信,使得处理器801在执行以下指令:

获取当前采集的现实场景图像并识别所述现实场景图像中的日历区域;

基于所述日历区域,获取与所述日历区域的日期信息对应的虚拟日期模型;

检测作用在虚拟日期模型上的编辑信息,并生成与所述编辑信息对应的日程提醒信息;其中,所述日程提醒信息用于对所述编辑信息进行提醒。

基于同一技术构思,本公开实施例还提供了另一种电子设备。参照图9所示,为本公开实施例提供的电子设备的结构示意图,包括处理器901、存储器902、和总线903。其中,存储器902用于存储执行指令,包括内存9021和外部存储器9022;这里的内存9021也称内存储器,用于暂时存放处理器901中的运算数据,以及与硬盘等外部存储器9022交换的数据,处理器901通过内存9021与外部存储器9022进行数据交换,当电子设备900运行时,处理器901与存储器902之间通过总线903通信,使得处理器901在执行以下指令:

检测到当前时间达到目标日程提醒信息中录入的提醒时间;所述目标日程提醒信息包括基于上述实施方式任一所述的日程提醒方法生成的日程提醒信息;

在ar设备上展示当前采集的现实场景图像、所述目标日程提醒信息对应的虚拟日期模型以及提醒事项。

此外,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的日程提醒方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。

本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的日程提醒方法的步骤,具体可参见上述方法实施例,在此不再赘述。

其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(softwaredevelopmentkit,sdk)等等。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read-onlymemory,rom)、随机存取存储器(randomaccessmemory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。

以上仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1