一种信息推送方法、信息推送装置及终端设备与流程

文档序号:17162418发布日期:2019-03-20 00:56阅读:156来源:国知局
一种信息推送方法、信息推送装置及终端设备与流程

本申请属于终端技术领域,尤其涉及一种信息推送方法、信息推送装置、终端设备及计算机可读存储介质。



背景技术:

目前,当用户想要了解外界的某一物体时(比如,想了解某一处建筑物),通常是利用终端设备,通过网络搜索等手段来了解该物体,显然,这种传统的方式需要用户在终端设备上执行较多的操作之后,才能获得想要的信息。

因此,目前的终端设备无法使用户更快速高效的了解外界事物。



技术实现要素:

有鉴于此,本申请提供了一种信息推送方法、信息推送装置、终端设备及计算机可读存储介质,可以在一定程度上解决目前的终端设备无法使用户更快速高效的了解外界事物的技术问题。

本申请第一方面提供了一种信息推送方法,包括:

获取待检测图像,并对上述待检测图像进行目标检测;

判断是否在上述待检测图像中检测到一个或多个目标对象;

若在上述待检测图像中检测到目标对象,则:

将上述待检测图像中一个或多个目标对象分别所对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息。

本申请第二方面提供了一种信息推送装置,包括:

图像获取模块,用于获取待检测图像,并对上述待检测图像进行目标检测;

目标判断模块,用于判断是否在上述待检测图像中检测到一个或多个目标对象;

三维信息推送模块,用于若在上述待检测图像中检测到目标对象,则将上述待检测图像中一个或多个目标对象分别所对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息。

本申请第三方面提供了一种终端设备,包括存储器、处理器以及存储在上述存储器中并可在上述处理器上运行的计算机程序,上述处理器执行上述计算机程序时实现如上述第一方面方法的步骤。

本申请第四方面提供了一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序被处理器执行时实现如上述第一方面方法的步骤。

本申请第五方面提供了一种计算机程序产品,上述计算机程序产品包括计算机程序,上述计算机程序被一个或多个处理器执行时实现如上述第一方面方法的步骤。

由上可见,本申请提供了一种信息推送方法,首先,获取待检测图像,比如,用户通过终端设备的摄像头所拍摄的图像;其次,对该待检测图像进行目标检测,一旦检测到该待检测图像中包含目标对象(其中,该目标对象可以预设为埃菲尔铁塔、泰姬陵、狗和/或猫等),则将该待检测图像中的一个或多个目标对象分别所对应的三维信息推送给用户。假设上述目标对象预设为埃菲尔铁塔和狗,则若检测到上述待检测图像中包含埃菲尔铁塔,则将该待检测图像中的埃菲尔铁塔对应的三维信息推送给用户。此外,在本申请实施例中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息。因此,本申请所提供的技术方案中,仅仅根据一张图像,就可以向用户推送用于展示该图像中目标对象三维构造的相关信息,能够避免用户自行上网搜索的操作,因此,本申请所提供的技术方案可以在一定程度上解决目前的终端设备无法使用户更快速高效的了解外界事物的技术问题。

附图说明

为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。

图1是本申请实施例一提供的一种信息推送方法的实现流程示意图;

图2是本申请实施例一提供的利用目标检测模型对待检测图像进行目标检测的示意图;

图3是本申请实施例二提供的另一种信息推送方法的实现流程示意图;

图4是本申请实施例二提供的用户感兴趣目标对象的确定方法的实现流程示意图;

图5是本申请实施例二提供的确定用户感兴趣目标对象的示意图;

图6是本申请实施例三提供的一种信息推送装置的结构示意图;

图7是本申请实施例四提供的终端设备的结构示意图。

具体实施方式

以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。

本申请实施例提供的信息推送方法适用于终端设备,示例性地,该终端设备包括但不限于:智能手机、掌上电脑、笔记本、桌上型计算机、智能可穿戴设备等。

应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当进一步理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

另外,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。

为了说明本申请所述的技术方案,下面通过具体实施例来进行说明。

实施例一

下面对本申请实施例一提供的信息推送方法进行描述,本申请实施例一所述的各个步骤应用于终端设备,请参阅附图1,本申请实施例一中的信息推送方法包括:

在步骤s101中,获取待检测图像,并对该待检测图像进行目标检测;

该步骤s101所述的待检测图像可以是用户通过终端设备的相机应用程序(application,app)拍摄的图像,比如,用户启动终端设备中的相机app,利用该相机app拍摄一图像,该终端设备可以将该图像确定为待检测图像;或者,上述待检测图像可以是终端设备中的相机app或者摄像机app所采集预览画面中的一帧预览图像,比如,用户启动终端设备的相机app后,该终端设备可以将该终端设备显示屏上所显示的某一帧图像作为待检测图像;或者,上述待检测图像也可以是终端设备本地所保存的图像,比如,终端设备可以将本地图库中的一张图像作为待检测图像;或者,上述待检测图像还可以是在线观看的视频或本地保存的视频中的某一帧图像,比如,将用户在线观看的动画片中的某一帧图像确定为待检测图像。本申请对上述待检测图像的来源不作限定。

在本申请实施例中,可以利用训练后的目标检测模型(即用于目标检测的神经网络模型)检测所获取的待检测图像中的目标对象;或者,也可以利用本领域常用的其他目标检测方法来检测所获取的待检测图像中的目标对象,此处对目标对象的检测方法不作限定。下面对利用目标检测模型检测目标对象的方法进行详细说明。

若要利用目标检测模型对步骤s101获取的待检测图像进行目标检测,需要事先训练一目标检测模型,得到训练后的目标检测模型,从而利用训练后的目标检测模型对步骤s101获取的待检测图像进行目标检测。其中,当获得一训练后的目标检测模型之后,该训练后的目标检测模型能够检测的目标对象也是固定的,比如,训练后的目标检测模型a可以用于检测埃菲尔铁塔、雷锋塔以及泰姬陵,训练后的目标检测模型b可以用于检测狗、猫、猴子以及大象。因此,在本申请实施例中,终端设备可以根据本申请所提供的信息推送方法的使用人的不同,来下载更新不同的训练后的目标检测模型至该使用人的终端设备中,例如,终端设备可以通过获取使用人的工作类型、年龄范围或者感兴趣对象等信息,来确定需要下载哪一种或哪几种目标检测模型,比如,若终端设备x获取到使用人的年龄为3-5岁,由于该年龄区间的小朋友一般对小动物比较感兴趣,那么该终端设备x可以将用于检测动物的训练后的目标检测模型下载至该终端设备x中;若终端设备y获取到使用人的感兴趣对象为动物以及建筑物,则可以将用于检测动物的训练后的目标检测模型以及用于检测建筑物的训练后的目标检测模型下载至该终端设备y中。

如图2所示,利用训练后的目标检测模型201对待检测图像202进行目标检测,其中,该训练后的目标检测模型201能够检测的目标对象为埃菲尔铁塔、雷峰塔以及泰姬陵,则本领域技术人员可以很容易的得到,该训练后的目标检测模型201可以在该待检测图像202中检测到埃菲尔铁塔,其中该训练后的目标检测模型201所输出的检测结果203可以用于指示埃菲尔铁塔在该待检测图像202中的位置以及该位置所指示的图像区域为埃菲尔铁塔的置信度。

在步骤s102中,判断是否在上述待检测图像中检测到一个或多个目标对象;

在本申请实施例中,需要判断步骤s101所获取的待检测图像中是否包含目标对象,若包含目标对象,则执行后续步骤s103。

比如,若步骤s101所获取的待检测图像为附图2中的图像202,在步骤s101中利用训练后的目标检测模型201对所获取的待检测图像202进行目标检测,则该步骤s102的判断结果就是在待检测图像中检测到一个或多个目标对象;若步骤s101所获取的待检测图像为附图2中的图像203,在步骤s101中利用训练后的目标检测模型201对所获取的待检测图像203进行目标检测,那么该步骤s102的判断结果就是在待检测图像中未检测到一个或多个目标对象。

在步骤s103中,若在上述待检测图像中检测到目标对象,则将上述待检测图像中一个或多个目标对象分别所对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息;

在本申请实施例中,若步骤s102的判断结果是肯定的,则执行该步骤s103,将步骤s101所获取的待检测图像中的一个或多个目标对象分别所对应的三维信息展示给用户。比如,若在待检测图像中检测到一个目标对象,则在该步骤s103中,将该待检测图像中所包含的该目标对象对应的三维信息展示出来,若在该待检测图像中检测到多个目标对象,比如检测到3个目标对象,则在该步骤s103中可以推送3个目标对象中的其中1个目标对象的三维信息,或者可以推送3个目标对象中的其中2个目标对象分别对应的三维信息,或者还可以将3个目标对象分别对应的三维信息都推送给用户,也即是若在待检测图像中检测到多个目标对象时,本申请实施例对推送三维信息的目标对象个数不作限定。

在本申请实施例中,每个目标对象的三维信息可以是对该目标对象进行三维重建后所生成的.obj文件或者.ply文件,.obj文件以及.ply文件不仅可以支持动态播放来展示目标对象的三维构造,还可以支持通过用户手动缩放滑动手机画面来展示目标对象的三维构造,通过这种两种方式来展示三维构造更加直观,而且当本申请所限定的信息推送方法的使用人是儿童时,可以使儿童更容易理解目标对象的三维构造,能够在一定程度上极大地提升儿童的知识面,更好地开发儿童智力。

此外,在本申请实施例中,待检测图像中目标对象的三维信息可以预先保存在服务器或者本地,比如,服务器或者本地预先保存有埃菲尔铁塔的三维信息,一旦在待检测图像中检测到埃菲尔铁塔,直接从服务器或者本地获取埃菲尔铁塔的三维信息并推送给用户即可,此时不需要花费时间对埃菲尔铁塔进行三维重建,因此能够更加快速地向用户推送埃菲尔铁塔的三维构造。在本申请实施例中,为了向用户快速展示目标对象的三维构造,可以根据使用人的不同,将一些目标对象的三维构造保存在终端设备本地,比如,若使用人是小朋友,由于小朋友对小动物以及一些生活物品比较感兴趣,因此可以将一些小动物以及生活物品(比如,狗、猫、猴子、茶杯以及勺子等)的三维信息保存至本地。

或者,待检测图像中目标对象的三维信息并非是预先存储的,而是在检测到待检测图像包含目标对象之后,对该目标对象进行三维重建后获取的。比如,当检测到待检测图像中有一个苹果,则对该苹果进行三维重建,得到该苹果的三维信息,然后再将该苹果的三维信息推送给用户。此时,为了能够对待检测图像中的目标对象进行三维重建,需要获取该目标对象多张不同角度的图像,因此,在这种情况下,可以提示用户对该目标对象拍摄多张不同角度的图像,从而能够对该目标对象进行三维重建,此时,虽然需要花费一定的时间进行三维重建,但是可以向用户展示待检测图像中所包含的目标对象本身的三维构造。比如,待检测图像中的目标对象为一只狗,该狗的品种为德国牧羊犬,终端设备本地预先保存有狗所对应的三维信息,但是预先保存的该三维信息所展示的是博美犬的三维构造,因此,如果向用户推送预先保存的狗所对应的三维信息,可能并不是用户想要的。

另外,在本申请实施例中,若步骤s102的判断结果是肯定的,则本申请实施例所限定的信息推送方法还可以包括如下步骤:

将步骤s101所获取的待检测图像中一个或多个目标对象分别所对应的生产过程、介绍信息、视频信息、图像信息和/或商品信息推送给用户。

也即是,除了上述步骤s103所述的推送目标对象的三维信息之外,还可以推送待检测图像中一个或多个目标对象的生产过程(例如,若在待检测图像中检测到目标对象埃菲尔铁塔,则可以向用户推送埃菲尔铁塔的建造过程)、介绍信息(例如,若在待检测图像中检测到目标对象泰姬陵,则可以向用户推送埃泰姬陵的介绍信息,比如建造泰姬陵的历史背景、泰姬陵的艺术价值和/或泰姬陵的建筑风格等)、视频信息(例如,若在待检测图像中检测到目标对象猴子,则可以向用户推送猴子对应的视频信息,比如动画片《大闹天宫》、电视剧《西游记》和/或动画片《猴子捞月》等)、图像信息(例如,若在待检测图像中检测到目标对象狗,则可以向用户推送狗对应的图像信息,比如,哈士奇的照片、吉娃娃的素描图像和/或德国牧羊犬的油画等)和/或商品信息(比如,若在待检测图像中检测到猫,则可以向用户推送购买宠物猫的链接、购买猫型玩偶的链接、购买图画书《猫和老鼠》的链接和/或附近猫咪咖啡馆的位置等)。

另外,在本申请实施例中,除了步骤s103所述的推送目标对象的三维信息之外,其余要推送信息可以根据用户类型来确定,比如,若本申请所限定的信息推送方法的使用人是3-5岁的小朋友,则除了向小朋友推送目标对象的三维信息之外,还可以向小朋友推送目标对象所对应的动画片和/或玩具购买链接,当使用人是3-5小朋友时,可以尽量避免向小朋友推送全是文字的信息。根据用户类型进行个性化推荐,可以在一定程度上增加用户使用本申请所限定的信息推送方法的粘度。

此外,在本申请实施例中,若步骤s102的判断结果是肯定的,则本申请实施例所限定的信息推送方法也可以包括如下步骤:

输出评价请求信息,该评价请求信息用于指示用户对本次三维信息推送是否满意进行评价。

也即是,在向用户展示完目标对象的三维信息之后,可以请求用户对本次的推送进行评价,终端设备在接收到用户的评价之后,可以发送给后台服务器,以使得本申请所限定的信息推送方法的开发人员可以根据用户评价对实现本申请信息推送方法的软件进行不断的升级更新(比如对所使用的三维重建方法进行更新),从而更好地服务用户。

此外,在本申请实施例中,若步骤s102的判断结果是否定的,即在待检测图像中未检测到目标对象,则可以输出一用于提示用户无法进行三维构造展示的信息;或者,可以提示用户圈出该待检测图像中想要观看三维构造的对象,并将用户所圈出的图像区域传输至后台服务器,以使得开发人员可以根据用户所圈出的图像区域对实现本申请信息推送方法的软件进行的升级更新(使得能够检测出用户圈出的图像区域中的对象),从而更好地服务用户。

由上可见,本申请实施例一所提供的技术方案中,可以仅仅根据一张图像,向用户推送用于展示该图像中目标对象三维构造的相关信息,能够避免用户自行上网搜索的操作,因此,可以在一定程度上解决目前的终端设备无法使用户更快速高效的了解外界事物的技术问题。

实施例二

下面对本申请实施例二提供的另一种信息推送方法进行描述,与实施例一相同,本申请实施例二的信息推送方法也应用于终端设备,请参阅附图3,本申请实施例二的信息推送方法包括:

在步骤s301中,获取待检测图像,并对该待检测图像进行目标检测;

在步骤s302中,判断是否在上述待检测图像中检测到一个或多个目标对象;

在本申请实施例二中,上述步骤s301-s302与实施例一中的步骤s101-s102执行方式完全相同,具体可参见实施例一的描述,此处不再赘述。

在步骤s303中,若在上述待检测图像中检测到目标对象,则在上述待检测图像的目标对象中,确定用户感兴趣的目标对象;

在本申请实施例二中,可以从检测到的目标对象中,确定用户感兴趣的目标对象,然后仅仅将用户感兴趣的目标对象对应的三维信息推送给用户,其中,该步骤s303所述的用户感兴趣的目标对象可以为多个,也可以为一个。

其中,确定用户感兴趣的目标对象的方法可以为:将所检测到的目标对象推送给用户,由用户选择感兴趣的目标对象。

或者,也可以为:计算各个目标对象所占的图像区域分别与预设图像区域(该预设图像区域可以为待检测图像的中间区域)的面积交并比(intersection-over-union,iou)值,将对应iou值大于iou阈值,且对应iou值最大的目标对象确定为用户感兴趣的目标对象,若待检测图像中不存在对应iou值大于iou阈值的目标对象,则可以选择任意一目标对象作为用户感兴趣的目标对象。

或者,还可以采用附图4所示的方法,来确定用户感兴趣的目标对象。

如图4所示,通过步骤s401-s404来确定用户感兴趣的目标对象。

在步骤s401中,判断在上述待检测图像中检测到的目标对象的个数是否为多个,若否,执行步骤s402,若是,执行步骤s403;

在步骤s402中,将上述待检测图像中的目标对象确定为用户感兴趣的目标对象;

若在步骤s301所获取的待检测图像中仅仅只检测到一个目标对象,则直接将该目标对象确定为用户感兴趣的目标对象;

在步骤s403中,获取上述待检测图像中每个目标对象的位置信息、每个位置信息所指示的图像区域分别占上述待检测图像的面积比例信息和/或每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度;

在步骤s404中,根据上述待检测图像中每个目标对象的位置信息、每个位置信息所指示的图像区域分别占上述待检测图像的面积比例信息和/或每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度,确定用户感兴趣的目标对象;

若在步骤s301所获取的待检测图像中检测到多个目标对象,则需要在多个目标对象中确定用户感兴趣的目标对象。在该步骤s403-s404中,就是根据每个目标对象的位置、每个位置所指示的图像区域与待检测图像的面积比例和/或每个位置所指示的图像区域为对应目标对象的置信度,来确定用户感兴趣的目标对象。其中,每个目标对象的位置以及每个位置所指示的图像区域为对应目标对象的置信度可以在步骤s301中对待检测图像进行目标检测后,得到的检测结果中获取。

如图5所示,假设在待检测图像501中检测到两个目标对象,分别为山羊和猴子,山羊的位置信息由图像区域502中各个像素点的位置信息组成,猴子的位置信息由图像区域503中各个像素点的位置信息组成,图像区域502为山羊的置信度为0.8,图像区域503中为猴子的置信度为0.9,我们可以计算出图像区域502与待检测图像501的面积比例以及图像区域503与待检测图像501的面积比例,并且可以将对应面积比例最大的目标对象确定为用户感兴趣的目标对象,因此,可以将图5中的山羊确定为用户感兴趣的目标对象。

此外,上述步骤s403可以包括如下步骤:

s4031:获取上述待检测图像中每个目标对象的位置信息;

s4032:根据每个目标对象的位置信息,计算每个目标对象的位置信息所指示的图像区域分别占上述待检测图像的面积比例信息,得到每个目标对象对应的面积比例信息;

s4033:获取每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度,得到每个目标对象对应的置信度;

相应地,上述步骤s404包括:

s4041:根据每个目标对象的位置信息,计算每个目标对象的位置信息所指示的图像区域分别与预设图像区域的面积交并比iou值,得到每个目标对象分别对应的iou值,其中,上述预设图像区域为上述待检测图像中预设的图像区域,该预设图像区域可以为待检测图像的中间区域,比如附图5中的半透明区域504;

s4042:判断上述待检测图像的各个目标对象中,是否存在对应的iou值大于iou阈值、对应的面积比例信息大于面积比例阈值,且对应的置信度大于置信度阈值的目标对象;

s4043:若存在,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象确定为用户感兴趣的目标对象。此外,若步骤s4042的判断结果为不存在,则可以选择任意一目标对象作为用户感兴趣的目标对象。

另外,上述步骤s4043还可以包括:

若存在,则判断对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象是否为多个;

若仅有一个,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象确定为用户感兴趣的目标对象;

若为多个,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的各个目标对象推送给用户;

将用户选择的对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象,确定为用户感兴趣的目标对象。

在步骤s304中,将上述感兴趣的目标对象对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息;

在该步骤s304中,仅仅向用户展示用户感兴趣的目标对象的三维信息。该步骤s304可以具体包括以下步骤:

s3041:在本地和/或预设服务器中查找所有上述感兴趣的目标对象分别对应的三维信息;

s3042:判断是否查找到所有上述感兴趣的目标对象分别对应的三维信息;

s3043:若查找到所有上述感兴趣的目标对象分别对应的三维信息,则将从本地和/或上述预设服务器中查找到的所有上述感兴趣的目标对象分别对应的三维信息推送给用户;

s3044:若未查找到所有上述感兴趣的目标对象分别对应的三维信息,则对于每一个未查找到三维信息的感兴趣的目标对象,获取该感兴趣的目标对象多个不同角度的图像,并根据该多个不同角度的图像进行三维重建,获取该感兴趣的目标对象的三维信息,将各个所述感兴趣的目标对象分别对应的三维信息推送给用户。

为了更清楚的了解上述步骤s3041-s3044,下面利用附图5来说明:

假设附图5中包括两个用户感兴趣的目标对象,分别为猴子和山羊,则首先在本地和/或预设服务器中查找猴子对应的三维信息以及山羊对应的三维信息,如果查找到猴子以及山羊分别对应的三维信息,则向用户推送查找到的猴子对应的三维信息以及山羊对应的三维信息;若在本地和/或预设服务器中仅仅查找到猴子对应的三维信息,未查找到山羊对应的三维信息时,则可以提醒用户拍摄多张该山羊不同角度的图像,然后基于用户拍摄的多张图像对该山羊进行三维重建,得到该山羊对应的三维信息,然后向用户推送山羊对应的三维信息以及猴子对应的三维信息。

另外,在本申请实施例中,可以将步骤s303中确定的用户感兴趣的目标对象保存至预设兴趣列表中,该预设兴趣列表中保存有用户在预设时间段内感兴趣的目标对象,并可以将上述预设兴趣列表中保存的各个用户感兴趣的目标对象推送给用户。比如,上述预设兴趣列表中保存有用户在今年一年内所感兴趣的各个目标对象,则可以在今年年底晚上24:00向用户推送其年度感兴趣的各个目标对象。

由上可见,本申请实施例二所提供的技术方案是仅仅向用户推送用户感兴趣的目标对象的三维信息,因此,相比于实施例一可以更好地满足用户的需求,此外,本申请实施例二与实施例一相同,也可以在一定程度上解决目前的终端设备无法使用户更快速高效的了解外界事物的技术问题。

应理解,上述方法实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。

实施例三

本申请实施例三提供了一种信息推送装置,如图6所示,该信息推送装置600包括:

图像获取模块601,用于获取待检测图像,并对该待检测图像进行目标检测;

目标判断模块602,用于判断是否在上述待检测图像中检测到一个或多个目标对象;

三维信息推送模块603,用于若在上述待检测图像中检测到目标对象,则将上述待检测图像中一个或多个目标对象分别所对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息。

可选地,上述三维信息推送模块603,包括:

兴趣对象确定子模块,用于在上述待检测图像的目标对象中,确定用户感兴趣的目标对象;

三维信息推送子模块,用于将上述感兴趣的目标对象对应的三维信息推送给用户。

可选地,上述信息推送装置600还包括:

兴趣对象保存模块,用于将所确定的上述感兴趣的目标对象保存至预设兴趣列表中,该预设兴趣列表中保存有用户在预设时间段内感兴趣的目标对象;

兴趣列表显示模块,用于显示上述预设兴趣列表中保存的各个用户感兴趣的目标对象。

可选地,上述三维信息推送子模块包括:

查找单元,用于在本地和/或预设服务器中查找所有上述感兴趣的目标对象分别对应的三维信息;

查找判断单元,用于判断是否查找到所有上述感兴趣的目标对象分别对应的三维信息;

第一推送单元,用于若查找到所有上述感兴趣的目标对象分别对应的三维信息,则将从本地和/或上述预设服务器中查找到的所有上述感兴趣的目标对象分别对应的三维信息推送给用户;

第二推送单元,用于若未查找到所有上述感兴趣的目标对象分别对应的三维信息,则对于每一个未查找到三维信息的感兴趣的目标对象,获取该感兴趣的目标对象多个不同角度的图像,并根据该多个不同角度的图像进行三维重建,获取该感兴趣的目标对象的三维信息,将各个上述感兴趣的目标对象分别对应的三维信息推送给用户。

可选地,上述兴趣对象确定子模块包括:

对象个数判断单元,用于判断在上述待检测图像中检测到的目标对象的个数是否为多个;

第一兴趣对象确定单元,用于若检测到的目标对象的个数仅一个,则将上述待检测图像中该目标对象确定为用户感兴趣的目标对象;

信息获取单元,用于若检测到的目标对象的个数为多个,则获取上述待检测图像中每个目标对象的位置信息、每个目标对象的位置信息所指示的图像区域分别占上述待检测图像的面积比例信息和/或每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度;

第二兴趣对象确定单元,根据上述待检测图像中每个目标对象的位置信息、上述每个目标对象的位置信息所指示的图像区域分别占上述待检测图像的面积比例信息和/或上述每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度,确定用户感兴趣的目标对象。

可选地,上述信息获取单元包括:

位置信息子单元,用于获取上述待检测图像中每个目标对象的位置信息;

面积比例子单元,用于根据每个目标对象的位置信息,计算每个目标对象的位置信息所指示的图像区域分别占上述待检测图像的面积比例信息,得到每个目标对象对应的面积比例信息;

置信度子单元,用于获取每个目标对象的位置信息所指示的图像区域为对应目标对象的置信度,得到每个目标对象对应的置信度;

相应地,上述第二兴趣对象确定单元包括:

iou子单元,用于根据每个目标对象的位置信息,计算每个目标对象的位置信息所指示的图像区域分别与预设图像区域的面积交并比iou值,得到每个目标对象分别对应的iou值,其中,该预设图像区域为上述待检测图像中预设的图像区域;

判断子单元,用于判断上述待检测图像的各个目标对象中,是否存在对应的iou值大于iou阈值、对应的面积比例信息大于面积比例阈值,且对应的置信度大于置信度阈值的目标对象;

第二兴趣对象确定子单元,用于若存在,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象确定为用户感兴趣的目标对象。

可选地,上述第二兴趣对象确定子单元包括:

个数判断小单元,用于若存在,则判断对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象是否为多个;

第一兴趣对象确定小单元,用于若仅有一个,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象确定为用户感兴趣的目标对象;

推送小单元,用于若为多个,则将对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的各个目标对象推送给用户;

第二兴趣对象确定小单元,用于将用户选择的对应iou值大于上述iou阈值、对应面积比例信息大于上述面积比例阈值,且对应置信度大于上述置信度阈值的目标对象,确定为用户感兴趣的目标对象。

可选地,上述信息推送装置600还包括:

其余信息推送模块,用于将上述待检测图像中一个或多个目标对象分别所对应的生产过程、介绍信息、视频信息、图像信息和/或商品信息推送给用户;

和/或

评价请求模块,用于输出评价请求信息,该评价请求信息用于指示用户对本次三维信息推送是否满意进行评价。

需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。

实施例四

图7是本申请实施例四提供的终端设备的示意图。如图7所示,该实施例的终端设备7包括:处理器70、存储器71以及存储在上述存储器71中并可在上述处理器70上运行的计算机程序72。上述处理器70执行上述计算机程序72时实现上述各个方法实施例中的步骤,例如图1所示的步骤s101至s103。或者,上述处理器70执行上述计算机程序72时实现上述各装置实施例中各模块/单元的功能,例如图6所示模块601至603的功能。

示例性的,上述计算机程序72可以被分割成一个或多个模块/单元,上述一个或者多个模块/单元被存储在上述存储器71中,并由上述处理器70执行,以完成本申请。上述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述上述计算机程序72在上述终端设备7中的执行过程。例如,上述计算机程序72可以被分割成图像获取模块、目标判断模块以及三维信息推送模块,各模块具体功能如下:

获取待检测图像,并对该待检测图像进行目标检测;

判断是否在上述待检测图像中检测到一个或多个目标对象;

若在上述待检测图像中检测到目标对象,则将上述待检测图像中一个或多个目标对象分别所对应的三维信息推送给用户,其中,每个目标对象所对应的三维信息为对该目标对象进行三维重建后,得到的用于展现该目标对象三维构造的信息。

上述终端设备可包括,但不仅限于,处理器70、存储器71。本领域技术人员可以理解,图7仅仅是终端设备7的示例,并不构成对终端设备7的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如上述终端设备还可以包括输入输出设备、网络接入设备、总线等。

所称处理器70可以是中央处理单元(centralprocessingunit,cpu),还可以是其它通用处理器、数字信号处理器(digitalsignalprocessor,dsp)、专用集成电路(applicationspecificintegratedcircuit,asic)、现场可编程门阵列(field-programmablegatearray,fpga)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

上述存储器71可以是上述终端设备7的内部存储单元,例如终端设备7的硬盘或内存。上述存储器71也可以是上述终端设备7的外部存储设备,例如上述终端设备7上配备的插接式硬盘,智能存储卡(smartmediacard,smc),安全数字(securedigital,sd)卡,闪存卡(flashcard)等。进一步地,上述存储器71还可以既包括上述终端设备7的内部存储单元也包括外部存储设备。上述存储器71用于存储上述计算机程序以及上述终端设备所需的其它程序和数据。上述存储器71还可以用于暂时地存储已经输出或者将要输出的数据。

所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将上述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。

在本申请所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,上述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。

上述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,上述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,上述计算机程序包括计算机程序代码,上述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。上述计算机可读介质可以包括:能够携带上述计算机程序代码的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom,read-onlymemory)、随机存取存储器(ram,randomaccessmemory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,上述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。

以上上述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1