一种全景图像拍摄方法及移动终端与流程

文档序号:12496985阅读:207来源:国知局
一种全景图像拍摄方法及移动终端与流程

本发明涉及通信技术领域,尤其涉及一种全景图像拍摄方法及移动终端。



背景技术:

随着电子产品的不断发展,具有拍摄功能的移动终端越来越普及,用户可以随时随地用它来进行拍照,即拍即得,方便快捷。智能手机等移动终端已经不再是简单的通信工具,而是集休闲、娱乐和通信等功能的智能终端。与此同时,用户对拍摄效果的要求也越来越高。

目前,在用户使用移动终端的全景模式拍摄动态的全景图像后,所生成的全景图像仅包含整个全景图像的动态画面,无法获取某个角度或者某个运动对象的动态信息,用户预览或查看动态的全景图像的时候,只能播放整个全景图像的动态画面,导致用户无法查看某个角度或者某个运动对象的动态细节。



技术实现要素:

本发明实施例提供一种全景图像拍摄方法及移动终端,以解决现有的全景拍摄方法无法获取某个角度或者某个运动对象的动态细节的问题。

第一方面,提供了一种全景图像拍摄方法,所述方法应用于具有摄像头的移动终端,所述方法包括:

在全景图像拍摄过程中,控制摄像头连续采集每帧图像;

基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征;

基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

另一方面,还提供了一种移动终端,包括摄像头,所述移动终端还包括:

控制模块,用于在全景图像拍摄过程中,控制摄像头连续采集每帧图像;

视频数据获取模块,用于基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征;

全景图像生成模块,用于基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

本发明实施例中,通过在全景图像拍摄过程中,控制摄像头连续采集每帧图像,基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征,基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像,将每个角度或每个人的动态细节以视频数据的方式完整记录,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例的一种全景图像拍摄方法第一实施例的流程图;

图2是本发明实施例的一种全景图像拍摄方法第二实施例的流程图;

图3是本发明实施例的一种全景图像拍摄方法第三实施例的流程图;

图4是本发明实施例中第四实施例的一种移动终端的结构框图之一;

图4a是本发明实施例中第四实施例的一种移动终端的结构框图之一;

图4b是本发明实施例中第四实施例的一种视频数据获取模块的结构框图之一;

图4c是本发明实施例中第四实施例的一种全景图像生成模块的结构框图之一;

图4d是本发明实施例中第四实施例的一种视频数据获取模块的结构框图之一;

图4e是本发明实施例中第四实施例的一种全景图像生成模块的结构框图之一;

图5是本发明实施例中第五实施例的一种移动终端的结构框图;

图6是本发明实施例中第六实施例的一种移动终端的结构框图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

第一实施例

参照图1,示出了本发明实施例的一种全景图像拍摄方法实施例一的流程图,应用于具有摄像头的移动终端,所述移动终端具有全景模式,具体可以包括如下步骤:

步骤101,在全景图像拍摄过程中,控制摄像头连续采集每帧图像。

在具体实现中,本发明实施例可以应用在移动终端中,例如,手机、平板电脑、个人数字助理、穿戴设备(如眼镜、手表等)等等。在本发明实施例中,移动终端的操作系统可以包括Android(安卓)、IOS、Windows Phone、Windows等等。

本发明实施例中,所述移动终端包括摄像头,同时,所述移动终端具有全景模式,全景模式是指所有拍摄的多张图像拼成一张全景图像.它的基本拍摄原理是搜索两张图像的边缘部分,并将成像效果最为接近的区域加以重合,以完成图像的自动拼接的模式,当然该移动终端还可以包括其他的模式,如美颜模式,背景虚化模式,美颜模式可以是针对用户的皮肤颜色及人像特征进行调整的模式,背景虚化模式是突出图像中某一主题的模式,本发明实施例对此不作限制。

本发明实施例中,用户在需要进行全景拍摄时,打开移动终端的摄像头,在摄像头的模式中选择全景模式,则移动终端进入全景模式,该移动终端进入全景模式后,移动终端在全景拍摄过程中,控制摄像头连续采集每帧图像,即用户按照预设方向进行旋转拍摄,所述预设方向可以为用户自定义或移动终端设定的任何方向,本发明实施例对此不作限制。

需要说明的是,可以采用移动终端的前置摄像头或后置摄像头在该全景模式下进行拍摄,该移动终端的前置摄像头的数量可以为两个,也可以为多个,同样地,该移动终端的后置摄像头的数据可以为两个,也可以为多个,进一步地,所述摄像头可以包括翻转形式的摄像头,即原来是后置摄像头,经过翻转后,成为前置摄像头,本发明实施例中对摄像头的位置、数量及设置的形式不作具体的限制。

步骤102,基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征。

本发明实施例中,移动终端基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据;即移动终端基于拍摄场景的拍摄角度,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据;或者,移动终端基于拍摄场景的人脸特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据;举例而言,移动终端可以设定预设角度,当摄像头每旋转预设角度,则生成一个视频数据,同时为每一视频数据关联一角度索引信息,该预设角度可以是用户设定的任何角度,本发明实施例对此不作限制,优先该预设角度可以为1-180度,如预设角度为30度,则每次转过30度后,移动终端可以将采集的图像生成一个视频数据,将每个角度的动态细节以视频数据的方式完整地记录。

进一步地,获取摄像头所采集的图像,对所述拍摄场景进行人脸特征识别,将识别出的人脸确定为目标对象,对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据,为所生成的每一个视频数据关联一人物索引信息;将每个拍摄主体确定为目标对象,生成目标对象的动作信息的视频数据,每个视频数据关联一个人物索引信息,举例而言,当所述拍摄主体为11个人(拍摄主体),则每个人的动作信息作为一个视频数据,每个视频数据关联一个人物索引信息,将每个人的动态细节以视频数据的方式完整地记录。

步骤103,基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

实际到本发明实施例中,移动终端基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像,可以取每个视频数据的最后一帧图像或第一帧图像,或者可以取每个视频数据的任意一帧图像,进行拼接,生成全景图像,本发明实施例对此不作具体的限制。

本发明实施例中,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像,基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征,基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像,本发明实施例中,将每个角度或每个人的动态细节以视频数据的方式完整记录,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

第二实施例

参照图2,示出了本发明实施例的一种全景图像拍摄方法实施例二的流程图,应用于具有摄像头的移动终端,所述移动终端具有全景模式,具体可以包括如下步骤:

步骤201,在全景图像拍摄过程中,控制摄像头连续采集每帧图像。

本发明实施例中,移动终端在全景图像拍摄过程中,可以控制摄像头按照预设方向进行旋转拍摄;该预设方向可以是用户自定义的方向或移动终端预设的方向,本发明实施例对此不作限制。

本发明实施例以拍摄包括多用户的全景图像为例进行说明,例如,30个用户围成一个圈,需要拍摄包括这30个用户的全景图像,在拍摄过程中,从第一个用户开始,每个用户做一套30秒以内的动作,然后保持一个姿势站好。

步骤202,获取摄像头所采集的图像。

实际应用到本发明实施例中,移动终端获取摄像头所采集的图像,移动终端可以采集预设方向上连续的每帧图像。

举例而言,用户点击全景模式的按钮,进入所述全景模式,控制摄像头针对上述的30用户进行图像的采集。

步骤203,对所述拍摄场景进行人脸特征识别。

进一步地,本发明实施例中,移动终端还可以对拍摄场景进行人脸特征识别,识别出拍摄场景中的每个用户,人脸特征识别的方式可以是采用模型训练的方式,本发明实施例对此不作限制。具体地,可以在摄像头采集图像的同时,进行人脸特征识别。

在拍摄过程中,移动终端先对每个用户进行用户脸识别,即移动终端可以对30个用户进行用户脸特征识别,移动终端可以在全景图像拍摄过程中逐一进行用户脸特征识别。

步骤204,将识别出的人脸确定为目标对象。

本发明实施例中,移动终端可以将识别出的人脸确定为目标对象,即可以有一个或多个目标对象,再将识别出每一用户的用户脸确定为目标对象。

步骤205,对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据。

实际应用中,移动终端对每个目标对象,采用摄像头采集的包含该目标对象的图像,生成包含该目标对象的视频数据,即对每个识别出的人脸(目标对象)都生成一个包括动作信息的视频数据;举例而言,可以在旋转拍摄过程中,进行人脸特征识别,识别出每个用户的人脸,依次拍摄每个用户30秒的动作,分别生成30个包含用户动作信息的视频数据。

本发明实施例中,通过针对每个运动对象单独生成视频数据,从而用户可以查看任意运动对象的动态细节。

步骤206,为所生成的每一个视频数据关联一人物索引信息。

进一步地,移动终端可以为所生成的每一个视频数据关联一人物索引信息,该人物索引信息可以包括数据标签、链接等,移动终端将该人物索引信息关联到每个对应的视频数据中,为该30个视频数据关联对应的30个用户物索引信息。

需要说明的是,本发明实施例中的人物索引信息与视频数据的关系可以是一对一的关系,也可以是一对多的关系,可以将人物索引信息添加到一个或多个视频数据上,本发明实施例具体不作限制,采用将人物索引信息将视频数据与全景图像相关联,方便用户查看细节。

步骤207,依据人物索引信息,分别获取每个视频数据的最后一帧图像。

具体而言,可以将根据人物索引信息,获取到对应的每个视频数据,进一步地获取到每个视频数据的最后一帧图像,当然,本发明实施例中,还可以根据人物索引信息获取到每个视频数据的任意帧图像,本发明实施例对此不作限制,进一步,按照人物索引信息,获取到该30个视频数据中的任意帧图像,如最后一帧图像。

步骤208,将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像。

进一步,移动终端可以将所述每个视频数据的最后一帧图像依次进行图像拼接,对最后一帧图像进行局部特征点的识别,再根据局部特征点进行图像的拼接,生成拍摄场景下全景图像,举例而言,采用该30个视频数据中的最后一帧图像,进行拼接,生成包含30个用户的全景图像。

需要说明的是,本发明实施例中,还可以采用每个视频数据中的任意帧进行图像的拼接,生成全景图像,本发明实施例不作具体的限制;生成全景图像后,可以将每个人物索引信息添加到全景图像对应的人脸,这样,人物索引信息分别关联关全景图像中的用户及对应的视频数据。

本发明实施例的一种优选实施例中,所述方法还包括:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的人物索引信息;播放与所述操作区域的人物索引信息相关联的视频数据,本发明实施例中,还可以在用户的选择操作下,播放任意一个人的视频数据。例如,上述包括这30个用户的全景图像中,当用户点击30个用户中的用户A的头像后,确定用户A的头像对应的人物索引信息,则可以播放用户A的视频数据。

本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像;获取摄像头所采集的图像;对所述拍摄场景进行人脸特征识别,将识别出的人脸确定为目标对象;对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据;为所生成的每一个视频数据关联一人物索引信息,依据人物索引信息,分别获取每个视频数据的最后一帧图像,将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;将每个人的动态细节以视频数据的方式完整记录,采用视频数据生成对应的全景图像,采用将人物索引信息将视频数据与全景图像相关联,方便用户查看细节,将每个人的动态细节以视频数据的方式完整记录,通过针对每个运动对象单独生成视频数据,从而用户可以查看任意运动对象的动态细节。

第三实施例

参照图3,示出了本发明实施例的一种全景图像拍摄方法实施例三的流程图,应用于具有摄像头的移动终端,所述移动终端具有全景模式,具体可以包括如下步骤:

步骤301,在全景图像拍摄过程中,控制摄像头连续采集每帧图像。

本发明实施例中,移动终端在全景图像拍摄过程中,可以控制摄像头按照预设方向进行旋转拍摄;该预设方向可以是用户自定义的方向或移动终端预设的方向,本发明实施例对此不作限制,本发明实施例以拍摄180度的全景图像、预设角度为1度为例进行说明。

步骤302,获取摄像头所采集的图像。

实际应用到本发明实施例中,移动终端获取摄像头所采集的图像,移动终端可以采集预设方向上连续的每帧图像。

步骤303,当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据。

具体到本发明实施例中,用户打开摄像头应用程序,点击图标,进入该全景模式,朝固定方向(如向右、或向左)移动所述摄像头,获取由所述摄像头采集的移动过程中一个或多个预设角度的视频数据,在拍摄全景图像的过程中,将拍摄过程摄像头转过的角度中分成若干个预设角度,获取到该若干个预设角度的视频数据,如拍摄过程摄像头转过的角度为180度,预设角度为1度,则可以获取到180个视频数据;另外,还可以将在特定角度范围开始及结束时,添加开始数据标签及结束数据标签,即上述的180个视频数据中,每个的视频数据中的都含有一个开始数据标签及一个结束数据标签,再将该180个视频数据的开始数据标签及结束数据标签首尾连接编码合成为一个完整视频,本发明实施例对视频数据的存在形式不作具体的限制。

本发明实例中,通过针对每个角度单独生成视频数据,从而用户可以查看任意角度的动态细节。

步骤304,为所生成的每一个视频数据关联一角度索引信息。

进一步地,本发明实施例中,生成视频数据后,将在每一视频数据中关联一个角度索引信息,举例而言,上述获取到的180个视频数据;可以在该180个视频数据添加到180个角度索引信息,需要说明的是,角度索引信息可以包括预设角度、视频数据编号等,本发明实施例具体不作限制,采用将角度索引信息将视频数据与全景图像相关联,方便用户查看细节。

步骤305,依据所述角度索引信息,分别获取每个视频数据的第N帧图像;其中,N小于或等于视频数据的总帧数,且N为正整数。

具体而言,可以将根据角度索引信息,获取到对应的每个视频数据,进一步地获取到每个视频数据的第N帧图像,其中,N小于或等于视频数据的总帧数,且N为正整数;当然,本发明实施例中,还可以根据第N帧索引信息获取到每个视频数据的任意帧图像,本发明实施例对此不作限制。

举例而言,可以取第一帧图像进行拼接,将180个视频数据中的180个第一帧图像进行拼接,生成一张全景图像,当该180个视频数据每个视频数据含有180帧图像,则可以取每个视频数据中相同的图像帧数,生成180张全景图像,即将180个视频数据中的180个第二帧图像进行拼接,生成一张全景图像;将180个视频数据中的180个第三帧图像进行拼接,生成一张全景图像;将180个视频数据中的180个第四帧图像进行拼接,生成一张全景图像;以此类推,最后将180个视频数据中的180个最后一帧图像进行拼接,生成一张全景图像。还可以取180个视频数据每个视频数据中的图像帧进行组合,如,取第1个视频数据中的第一帧,第2个视频数据中的第二帧,第3个视频数据中的第三帧,……第179个视频数据的第一百七十九帧,第180个视频数据的第一百八十帧,共180帧图像,采用该180帧图像生成一张全景图像,本发明实施例对此不作具体的限制。

步骤306,将所述每个视频数据的第N帧图像依次进行图像拼接,生成所述拍摄场景的全景图像。

本发明实施例中,获取到每个角度索引信息下的视频数据,提取多个视频数据的第N帧数据,将该多个视频数据的第N帧数据进行拼合操作,拼接成全景图像,优选地,N可以为1,即取第一帧数据进行拼合操作,需要说明的是,本发明实施例中,还将该多个视频数据的最后一帧数据进行拼合操作,还可以将每个视频数据的经过清晰度优选的帧数据进行拼合操作,本发明实施例对拼接的帧数据对象具体不作限制。

本发明实施例的一种优选实施例中,所述方法还包括:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的角度索引信息;播放与所述操作区域的角度索引信息相关联的视频数据,本发明实施例中,还可以在用户的选择操作下,播放任意角度的视频数据。例如,上述包括这30个用户的全景图像中,当用户点击全景图像中某一个角度的区域,确定用户点击区域对应的角度索引信息,则可以播放用户点击区域对应的视频数据。

需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。

本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像,获取摄像头所采集的图像;当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据;为所生成的每一个视频数据关联一角度索引信息;依据所述角度索引信息,分别获取每个视频数据的第N帧图像;将所述每个视频数据的第N帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;将每个角度的动态细节以视频数据的方式完整记录,采用视频数据生成对应的全景图像,采用将角度索引信息将视频数据与全景图像相关联,方便用户查看细节,将每个角度的动态细节以视频数据的方式完整记录,通过针对每个角度单独生成视频数据,从而用户可以查看任意角度的动态细节。

第四实施例

图4是本发明一个实施例的移动终端的结构框图,所述移动终端包括摄像头,图4所示的移动终端400包括控制模块401、视频数据获取模块402及全景图像生成模块403:

控制模块401,用于在全景图像拍摄过程中,控制摄像头连续采集每帧图像;

视频数据获取模块402,用于基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征;

全景图像生成模块403,用于基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

参照图4b,示出了本发明实施例的一种视频数据获取模块402,所述视频数据获取模块402包括:

第一图像采集子模块4021,用于获取摄像头所采集的图像;

识别子模块4022,用于对所述拍摄场景进行人脸特征识别;

目标对象确定子模块4023,用于将识别出的人脸确定为目标对象;

第一视频数据生成子模块4024,用于对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据;

第一关联子模块4025,用于为所生成的每一个视频数据关联一人物索引信息。

参照图4c,示出了本发明实施例的一种全景图像生成模块403,所述全景图像生成模块403包括:

第一图像获取子模块4031,用于依据所述人物索引信息,分别获取每个视频数据的最后一帧图像;

第一全景图像生成子模块4032,用于将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像。

移动终端400还包括:

第一选择操作检测模块404,用于检测移动终端用户在所述全景图像上的选择操作;

人物索引信息获取模块405,用于当检测到选择操作时,获取所述选择操作对应的操作区域的人物索引信息;

第一视频数据播放模块406,用于播放与所述操作区域的人物索引信息相关联的视频数据。

参照图4d,示出了本发明实施例的一种频数据获取模块402,所述视频数据获取模块402包括:

第二图像采集子模块4026,用于获取摄像头所采集的图像;

第二视频数据生成子模块4027,用于当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据;

第二关联子模块4028,用于为所生成的每一个视频数据关联一角度索引信息。

参照图4e,示出了本发明实施例的一种全景图像生成模块403,所述全景图像生成模块403包括:

第二图像获取子模块4033,用于依据所述角度索引信息,分别获取每个视频数据的第N帧图像;

第二全景图像生成子模块4034,用于将所述每个视频数据的第一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;其中,N小于或等于视频数据的总帧数,且N为正整数。

参照图4a,示出了本发明实施例的一种移动终端400,移动终端400还包括:

第二选择操作检测模块407,用于检测移动终端用户在所述全景图像上的选择操作;

角度索引信息获取模块408,用于当检测到选择操作时,获取所述选择操作对应的操作区域的角度索引信息;

第二视频数据播放模块409,用于播放与所述操作区域的角度索引信息相关联的视频数据。

本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像,基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征,基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像,本发明实施例中,将每个角度或每个人的动态细节以视频数据的方式完整记录,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

第五实施例

图5是本发明另一个实施例的移动终端的结构框图。图5所示的移动终端500包括:至少一个处理器501、存储器502、至少一个网络接口504和用户接口503和摄像头506。移动终端500中的各个组件通过总线系统505耦合在一起。可理解,总线系统505用于实现这些组件之间的连接通信。总线系统505除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图5中将各种总线都标为总线系统505。

其中,用户接口503可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。

可以理解,本发明实施例中的存储器502可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-OnlyMemory,ROM)、可编程只读存储器(ProgrammableROM,PROM)、可擦除可编程只读存储器(ErasablePROM,EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(StaticRAM,SRAM)、动态随机存取存储器(DynamicRAM,DRAM)、同步动态随机存取存储器(SynchronousDRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM,DRRAM)。本发明实施例描述的系统和方法的存储器502旨在包括但不限于这些和任意其它适合类型的存储器。

在一些实施方式中,存储器502存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作系统5021和应用程序5022。

其中,操作系统5021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序5022,包含各种应用程序,例如媒体播放器(MediaPlayer)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序5022中。

在本发明实施例中,通过调用存储器502存储的程序或指令,具体的,可以是应用程序5022中存储的程序或指令,处理器501用于:在全景图像拍摄过程中,控制摄像头连续采集每帧图像;基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征;基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

上述本发明实施例揭示的方法可以应用于处理器501中,或者由处理器501实现。处理器501可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器、数字信号处理器(DigitalSignalProcessor,DSP)、专用集成电路(ApplicationSpecific IntegratedCircuit,ASIC)、现成可编程门阵列(FieldProgrammableGateArray,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502,处理器501读取存储器502中的信息,结合其硬件完成上述方法的步骤。

可以理解的是,本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecificIntegratedCircuits,ASIC)、数字信号处理器(DigitalSignalProcessing,DSP)、数字信号处理设备(DSPDevice,DSPD)、可编程逻辑设备(ProgrammableLogicDevice,PLD)、现场可编程门阵列(Field-ProgrammableGateArray,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。

对于软件实现,可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。

可选地,处理器501还用于:获取摄像头所采集的图像;对所述拍摄场景进行人脸特征识别;将识别出的人脸确定为目标对象;对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据;为所生成的每一个视频数据关联一人物索引信息。

可选地,处理器501还用于:依据所述人物索引信息,分别获取每个视频数据的最后一帧图像;将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像。

可选地,处理器501还用于:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的人物索引信息;播放与所述操作区域的人物索引信息相关联的视频数据。

可选地,处理器501还用于:获取摄像头所采集的图像;当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据;为所生成的每一个视频数据关联一角度索引信息。

可选地,处理器501还用于:依据所述角度索引信息,分别获取每个视频数据的第N帧图像;将所述每个视频数据的第N帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;其中,N小于或等于视频数据的总帧数,且N为正整数。

可选地,处理器501还用于:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的角度索引信息;播放与所述操作区域的角度索引信息相关联的视频数据。

移动终端500能够实现前述实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。

本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像;获取摄像头所采集的图像;对所述拍摄场景进行人脸特征识别,将识别出的人脸确定为目标对象;对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据;为所生成的每一个视频数据关联一人物索引信息,依据人物索引信息,分别获取每个视频数据的最后一帧图像,将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;将每个角度或每个人的动态细节以视频数据的方式完整记录,采用视频数据生成对应的全景图像,采用将人物索引信息将视频数据与全景图像相关联,方便用户查看细节,将每个角度或每个人的动态细节以视频数据的方式完整记录,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

第六实施例

图6是本发明另一个实施例的移动终端的结构框图。具体地,图6中的移动终端600可以为手机、平板电脑、个人数字助理(PersonalDigital Assistant,PDA)、或车载电脑等。

图6中的移动终端600包括射频(RadioFrequency,RF)电路610、存储器620、输入单元630、显示单元640、处理器650、音频电路670、WiFi(WirelessFidelity)模块680和电源690和摄像头6100。

其中,输入单元630可用于接收用户输入的数字或字符信息,以及产生与移动终端600的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元630可以包括触控面板631。触控面板631,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板631上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板631可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器660,并能接收处理器660发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板631。除了触控面板631,输入单元630还可以包括其他输入设备632,其他输入设备632可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

其中,显示单元640可用于显示由用户输入的信息或提供给用户的信息以及移动终端600的各种菜单界面。显示单元640可包括显示面板641,可选的,可以采用LCD或有机发光二极管(OrganicLight-EmittingDiode,OLED)等形式来配置显示面板641。

应注意,触控面板631可以覆盖显示面板641,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器660以确定触摸事件的类型,随后处理器660根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。

触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。

其中处理器660是移动终端600的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器621内的软件程序和/或模块,以及调用存储在第二存储器622内的数据,执行移动终端600的各种功能和处理数据,从而对移动终端600进行整体监控。可选的,处理器660可包括一个或多个处理单元。

在本发明实施例中,通过调用存储该第一存储器621内的软件程序和/或模块和/或该第二存储器622内的数据,处理器660用于:在全景图像拍摄过程中,控制摄像头连续采集每帧图像;基于拍摄场景的场景特征,获取所述摄像头在连续采集每帧图像的过程中所生成的至少一个视频数据,其中,所述场景特征包括拍摄角度和人脸特征;基于所述至少一个视频数据,进行图像拼接,生成所述拍摄场景的全景图像。

可选地,处理器660还用于:获取摄像头所采集的图像;对所述拍摄场景进行人脸特征识别;将识别出的人脸确定为目标对象;对于每个所述目标对象,基于所述摄像头所采集的图像,生成包含所述目标对象的动作信息的视频数据;为所生成的每一个视频数据关联一人物索引信息。

可选地,处理器660还用于:依据所述人物索引信息,分别获取每个视频数据的最后一帧图像;将所述每个视频数据的最后一帧图像依次进行图像拼接,生成所述拍摄场景的全景图像。

可选地,处理器660还用于:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的人物索引信息;播放与所述操作区域的人物索引信息相关联的视频数据。

可选地,处理器660还用于:获取摄像头所采集的图像;当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据;为所生成的每一个视频数据关联一角度索引信息。

可选地,处理器660还用于:依据所述角度索引信息,分别获取每个视频数据的第N帧图像;将所述每个视频数据的第N帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;其中,N小于或等于视频数据的总帧数,且N为正整数。

可选地,处理器660还用于:检测移动终端用户在所述全景图像上的选择操作;当检测到选择操作时,获取所述选择操作对应的操作区域的角度索引信息;播放与所述操作区域的角度索引信息相关联的视频数据。

可见,本发明实施例中,在全景图像拍摄过程中,控制摄像头连续采集每帧图像,获取摄像头所采集的图像;当所述摄像头每旋转预设角度,基于所述摄像头所采集的图像,生成一个视频数据;为所生成的每一个视频数据关联一角度索引信息;依据所述角度索引信息,分别获取每个视频数据的第N帧图像;将所述每个视频数据的第N帧图像依次进行图像拼接,生成所述拍摄场景的全景图像;将每个角度或每个人的动态细节以视频数据的方式完整记录,采用视频数据生成对应的全景图像,采用将角度索引信息将视频数据与全景图像相关联,方便用户查看细节,通过针对每个角度或者每个运动对象单独生成视频数据,从而用户可以查看任意角度或者任意运动对象的动态细节。

本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1