一种全景拍摄的方法及移动终端与流程

文档序号:11254279阅读:650来源:国知局
一种全景拍摄的方法及移动终端与流程

本发明涉及电子应用的技术领域,尤其涉及一种全景拍摄的方法及移动终端。



背景技术:

随着智能手机的普及,智能手机所需要面对的使用环境也越来越复杂,摄像头的使用场景也越来越多。目前,为使被拍摄物体具有更多角度的取景内容,许多智能手机都包含全景拍照功能。具体的,智能手机开启摄像头,启用全景拍照模式,如图1所示,沿与手机竖直放置方向相垂直的方向向右转动或者移动手机,已拍摄和未拍摄部分有一条分界线,以左侧已拍摄完成的基准照片为基础,分界线逐步向右移动,不断合入新取景照片,最终完成全景照片的拍摄。

但上述智能手机通过实时转动或者移动手机,并将基准照片和新取景内容逐步叠加的方式合成全景照片的方案存在以下不足:由于全景照片拍摄过程中,手机竖直放置方向与手转动或者移动方向只能一直保持垂直角度,否则无法合入新取景内容。因此,在拍摄全景图像时必须按照单一预设方向移动手机才能进行拍摄,影响了全景拍照的用户体验。另外,在用户手动旋转或者移动速度不均时,会出现基准照片和实时新合入的当前取景照片分界线过度不连续的现象,从而影响成像效果。



技术实现要素:

本发明的目的在于提供一种全景拍摄的方法及移动终端,用以解决目前用户需按照单一预设方向移动手机才能拍全景图像的问题。

为了实现上述目的,本发明提供了一种全景拍摄的方法,应用于移动终端,包括:

接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;

将所述全景视频流分解为多个图像帧;

在多个所述图像帧中选取一个图像帧作为基准图像帧;

在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;

将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

为了实现上述目的,本发明的实施例还提供了一种移动终端,包括:

拍摄模块,用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;

分解模块,用于将所述全景视频流分解为多个图像帧;

第一选取模块,用于在多个所述图像帧中选取一个图像帧作为基准图像帧;

第二选取模块,用于在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;

拼接模块,用于将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

为了实现上述目的,本发明的实施例还提供了一种移动终端,包括存储器、处理器及存储在存储器上并可在处理器上运行的全景拍摄的程序,所述处理器执行所述全景拍摄的程序时实现如上所述全景拍摄的方法中的步骤。

为了实现上述目的,本发明的实施例还提供了一种计算机可读存储介质,其上存储有全景拍摄的程序,所述全景拍摄的程序被处理器执行时实现如上所述全景拍摄的方法中的步骤。

本发明实施例具有以下有益效果:

本发明实施例的上述技术方案,接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个图像帧中选取一个图像帧作为基准图像帧;在多个图像帧中选取至少一组待拼接图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像。本发明实施例中在拍摄视频时,用户可沿任意角度移动终端,解决了目前用户需按照单一预设方向移动手机才能拍全景图像的问题,且本发明实施例中的全景图像是由视频流分解得到的图像帧静态合成,避免了拍摄过程中由于用户手动旋转力度不均匀或者移动速度不均而导致的成像效果不佳的问题。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。

图1为现有移动终端拍摄全景图像的显示示意图;

图2为本发明实施例的全景拍摄的方法的第一工作流程图;

图3为本发明实施例中合成全景图像的显示示意图;

图4为本发明实施例中检测被拍摄物体移动速度的显示示意图;

图5为本发明实施例的全景拍摄的方法的第二工作流程图;

图6为本发明实施例的移动终端的第一结构框图;

图7为本发明实施例的移动终端的第二结构框图;

图8为本发明实施例的移动终端的第三结构框图;

图9为本发明实施例的移动终端的第四结构框图;

图10为本发明实施例的移动终端的第五结构框图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

本发明的实施例针对目前用户需按照单一预设方向移动手机才能拍全景图像的问题。本发明提供了一种全景拍摄的方法及移动终端,在拍摄全景图像时,将视频流分解得到的多个图像帧拼接形成全景图像,解决了目前全景照片实时生成照片成像效果不佳及用户需按照单一预设方向移动手机才能拍全景图像的问题。

图2为本发明一实施例提供的全景拍摄的方法的流程图,如图2所示,该方法包括:

步骤201:接收到全景拍摄指令后,进行视频拍摄,得到全景视频流。

在接收到全景拍摄指令后,根据被拍摄物体的移动速度调整拍摄帧率,根据调整后的拍摄帧率进行视频拍摄,如检测到被拍摄物体静止时,则可适当降低拍摄帧率以降低功耗,检测当被拍摄物体的移动速度大于预设阈值(如10m/s)时,则可将拍摄帧率调到最大(如30bps)以保保证拍摄出的全景图像的质量。

这里,接收到全景拍摄指令后,在进行视频拍摄时,移动终端的移动方向不受限制,用户可沿任意方向移动终端,提高了用户的使用体验。

步骤202:将上述全景视频流分解为多个图像帧。

具体的,可将全景视频流中的每个视频帧分解为一个图像帧,以便于后续对多个图像帧进行拼接生成全景图像。

步骤203:在多个上述图像帧中选取一个图像帧作为基准图像帧。

这里,可在多个上述图像帧中选取一部分图像帧提供给用户进行选择,将用户选择的图像帧作为基准图像帧,以便于在合成全景图像时突出用户所拍摄的重点。

步骤204:在多个上述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧。

这里,每组待拼接图像帧中的第一个图像帧为全景视频流中的第一个图像帧,每组待拼接图像帧中的最后一个图像帧为全景视频流中的最后一个图像帧,这里的第一个图像帧是指拍摄时间最早的图像帧,最后一个图像帧是指拍摄时间最晚的图像帧。

假定全景视频流中相邻两个图像帧的拍摄时间间隔值为t,则每组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值可具体为t的整数倍。

优选的,每组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值,可根据全景视频流的拍摄帧率确定,其中,拍摄帧率越大拍摄时间间隔值越大。如拍摄帧率较小时,可选取拍摄时间间隔值为t、2t、3t的三组待拼接图像帧。

这里,若全景视频流的拍摄帧率大于预设阈值,则表明被拍摄物体的移动速度较大,此时需要选取较多的待拼接图像帧(即相邻两个待拼接图像帧的拍摄时间间隔值较小)来合成全景图像,以保证全景图像的质量,若全景视频流的拍摄帧率小于或者等于预设阈值,则表明被拍摄物体的移动速度较小,此时可少选取一部分待拼接图像帧(即相邻两个待拼接图像帧的拍摄时间间隔值较大)来合成全景图像,以降低终端合成全景图像时的功耗。

这里,可选取具有不同拍摄时间间隔值的多组待拼接图像帧,以便于后续能够拼接出多张全景图像,增加了用户的选择范围。

步骤205:将每组待拼接图像帧与基准图像帧进行拼接,生成至少一个全景图像,该全景图像的个数与待拼接图像帧的组数相同。

具体的,根据每组待拼接图像帧中待拼接图像帧与所述基准图像帧的拍摄时间的间隔值,按照间隔值由小到大的顺序,将每组待拼接图像帧中的待拼接图像帧依次与基准图像帧进行拼接,生成至少一个全景图像。

如图3所示,上述全景图像可包括由全景视频流分解得到的多个图像帧逐张合成的全景图像(即间隔时间t合成的全景图像)、以基准图像帧的拍摄时间为基准,向前及向后依次间隔时间t合成的全景图像以及以基准图像帧的拍摄时间为基准,向前及向后依次间隔时间2t合成的全景图像。

假定第i个图像帧为基准图像帧,可以基准图像帧的拍摄时间为基准,拍摄分别向前向后同时拼接,将第i+1个图像帧、第i-1个图像帧与基准图像帧i同时拼接,得到新的基准图像帧i,,再将基准图像帧i,与第i+2个图像帧、第i-2个图像帧同时拼接,得到新的基准图像帧i,,,直至基准照片与第一个图像帧及最后一个图像帧拼接完成,得到逐张合成的全景图像。

同理,可以基准图像帧的拍摄时间为基准,拍摄分别向前向后同时拼接,将第i+2个图像帧、第i-2个图像帧与基准图像帧i同时拼接,得到新的基准图像帧i,,再将基准图像帧i,与第i+4个图像帧、第i-4个图像帧同时拼接,得到新的基准图像帧i,,,直至基准照片与第一个图像帧及最后一个图像帧拼接完成,得到以基准图像帧的拍摄时间为基准,向前及向后依次间隔时间t合成的全景图像。

本发明实施例的全景拍摄的方法,接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将全景视频流分解为多个图像帧;在多个图像帧中选取一个图像帧作为基准图像帧;在多个图像帧中选取至少一组待拼接图像帧;将每组待拼接图像帧与基准图像帧进行拼接,生成至少一个全景图像。本发明实施例中在拍摄视频时,用户可沿任意角度移动终端,解决了目前用户需按照单一预设方向移动手机才能拍全景图像的问题,且本发明实施例中的全景图像是由视频流分解得到的图像帧静态合成,避免了拍摄过程中由于用户手动旋转力度不均匀或者移动速度不均而导致的成像效果不佳的问题。

优选的,上述步骤201包括:接收到全景拍摄指令后,根据被拍摄物体的移动速度,确定拍摄帧率,其中,移动速度越大拍摄帧率越大;根据上述拍摄帧率进行视频拍摄,得到所述全景视频流。

其中,被拍摄物体的移动速度通过以下步骤获取:

通过移动终端内设置的测速雷达检测被拍摄物体的移动速度。

具体的,如图4所示,可在手机后置摄像头正下方内置测速雷达以实时测量被拍摄物体在自由空间的移动速度,再根据测出的物体移动速度来动态调整拍摄帧率,比如检测到物体是静止的,则可以适当降低拍摄帧率以降低功耗、当物体位移速度超过10m/s时则可以将拍摄帧率调到最大(譬如某手机帧率最大可达30bps)以保证拍摄出的全景照片的质量。其中,测速雷达主要系利用多普勒效应原理来测量被拍摄物体的移动速度。当目标向雷达天线靠近,反射信号频率将高于发射机频率;反之,当目标远离天线而去时,反射信号频率将低于发射机频率。如此可借由频率的改变数值,计算出目标与雷达的相对速度。

本发明实施例在接收到全景拍摄指令后,可根据被拍摄物体的移动速度,调整拍摄帧率,以保证全景图像的质量。

进一步地,上述步骤203包括:获取所述全景视频流的拍摄时长,并将拍摄时长划分为预设数量个时间段;在每个时间段对应的图像帧中,选取一个图像帧作为待选基准图像帧,得到预设数量个待选基准图像帧;根据接收到的基准图像帧选择指令,确定基准图像帧选择指令在预设数量个待选基准图像帧中所选取的图像帧作为基准图像帧。

假设全景视频流的拍摄时长为4t,将该拍摄时长划分为四个时间段,(0,t)、(t,2t)、(2t,3t)、(3t,4t),并在四个时间段中分别选取一个待选基准图像帧,如采取折中法,选取0.5t、1.5t、2.5t、3.5t对应的图像帧作为待选基准图像帧。

本发明实施例,通过在多个图像帧中选取部分图像帧作为待选基准图像帧,使得用户无需从太多的图像帧中进行选择,提高了用户的使用体验。

进一步地,上述步骤204包括:

确定第一组待拼接图像帧中相邻两个待拼接图像帧的第一拍摄时间间隔值,所述第一组待拼接图像帧为至少一组待拼接图像帧中的任一组待拼接图像帧;以所述基准图像帧的拍摄时间为基准时间,在多个所述图像帧中选取拍摄时间在所述基准时间之前、且与所述基准时间的间隔为所述第一拍摄时间间隔值的整数倍的所述图像帧为第一部分图像帧,并在多个所述图像帧中选取拍摄时间在所述基准时间之后、且与所述基准时间的间隔为所述第一拍摄时间间隔的整数倍的所述图像帧为第二部分图像帧;根据所述第一部分图像帧和所述第二部分图像帧,得到第一组待拼接图像帧。

本发明实施例中的每组待拼接图像帧包括拍摄时间位于基准时间之前的第一部分图像及拍摄时间位于基准时间之后的第二部分图像,且第一部分图像中相邻两个图像帧的拍摄时间间隔相同,第二部分图像中相邻两个图像帧的拍摄时间间隔相同。

优选的,本发明实施例的全景拍摄的方法,在上述步骤205之后,还包括:

保存上述全景图像,并对移动终端中待拼接图像帧及全景视频流进行删除处理。

本发明实施例的全景拍摄的方法,在全景照片合成后,待用户将全景图片保存完成,手机系统将自动清理所拍摄的视频以及合成全景照片过程中所生成的静态图片以节省手机可用内存空间。

下面对本发明实施例的一具有应用流程说明如下。

如图5所示,该应用流程包括:

步骤501:检测移动终端是否开启全景拍摄模式。

步骤502:若开启全景拍摄模式,则通过测速雷达检测被拍摄物体的移动速度,并根据被拍摄物体的移动速度调整移动终端的拍摄帧率。

步骤503:根据调整后的拍摄帧率拍摄全景视频流。

步骤504:将全景视频流转换成多个图像帧。

步骤505:将用户在预设数量个图像帧中选取的图像帧作为基准图像帧。

步骤506:在多个图像帧中选取至少一组待拼接图像帧,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧。

步骤507:将每组待拼接图像帧与基准图像帧进行拼接,生成至少一个全景图像。

步骤508:保存上述全景图像,并对移动终端中待拼接图像帧及全景视频流进行删除处理。

本发明实施例中,由于全景图像为静态合成,用户从多个全景图像中选择最满意的一张,可以解决目前实时拍摄全景照片中,运动物体经过摄像头取景框或者人手动旋转或者移动速度不均时,会出现基准照片和实时新合入的取景照片分界线过度不连续的现象,提高了成像效果。同时,以时间为轴去分解视频和叠加图像帧,也可打破目前全景照片拍摄方式的局限性。

如图6所示,本发明的实施例还提供了一种移动终端,包括:

拍摄模块601,用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;

分解模块602,用于将所述全景视频流分解为多个图像帧;

第一选取模块603,用于在多个所述图像帧中选取一个图像帧作为基准图像帧;

第二选取模块604,用于在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;

拼接模块605,用于将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

本发明实施例的移动终端,如图7所示,所述拍摄模块601包括:

第一确定子模块6011,用于接收到全景拍摄指令后,根据被拍摄物体的移动速度,确定拍摄帧率,其中,移动速度越大拍摄帧率越大;

拍摄子模块6012,用于根据所述拍摄帧率进行视频拍摄,得到所述全景视频流。

本发明实施例的移动终端,所述第一选取模块603包括:

获取子模块6031,用于获取所述全景视频流的拍摄时长,并将所述拍摄时长划分为预设数量个时间段;

第一选取子模块6032,用于在每个所述时间段对应的图像帧中,选取一个图像帧作为待选基准图像帧,得到预设数量个待选基准图像帧;

第二确定子模块6033,用于根据接收到的基准图像帧选择指令,确定所述基准图像帧选择指令在预设数量个所述待选基准图像帧中所选取的图像帧作为基准图像帧。

本发明实施例的移动终端,所述第二选取模块604包括:

第三确定子模块6041,用于确定第一组待拼接图像帧中相邻两个待拼接图像帧的第一拍摄时间间隔值,所述第一组待拼接图像帧为至少一组待拼接图像帧中的任一组待拼接图像帧;

第二选取子模块6042,用于以所述基准图像帧的拍摄时间为基准时间,在多个所述图像帧中选取拍摄时间在所述基准时间之前、且与所述基准时间的间隔为所述第一拍摄时间间隔值的整数倍的所述图像帧为第一部分图像帧,并在多个所述图像帧中选取拍摄时间在所述基准时间之后、且与所述基准时间的间隔为所述第一拍摄时间间隔的整数倍的所述图像帧为第二部分图像帧;

第四确定子模块6043,用于根据所述第一部分图像帧和所述第二部分图像帧,得到第一组待拼接图像帧。

本发明实施例的移动终端,所述拼接模块605用于根据每组待拼接图像帧中待拼接图像帧与所述基准图像帧的拍摄时间的间隔值,按照间隔值由小到大的顺序,将每组待拼接图像帧中的待拼接图像帧依次与所述基准图像帧进行拼接,生成至少一个全景图像。

本发明实施例的移动终端,接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个图像帧中选取一个图像帧作为基准图像帧;在多个图像帧中选取至少一组待拼接图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像。本发明实施例中在拍摄视频时,用户可沿任意角度移动终端,解决了目前用户需按照单一预设方向移动手机才能拍全景图像的问题,且本发明实施例中的全景图像是由视频流分解得到的图像帧静态合成,避免了拍摄过程中由于用户手动旋转力度不均匀或者移动速度不均而导致的成像效果不佳的问题。

需要说明的是,该移动终端是与上述方法实施例对应的终端,上述方法实施例中所有实现方式均适用于该移动终端的实施例中,也能达到相同的技术效果。

如图8所示,为本发明实施例移动终端的又一结构框图,图8所示的移动终端800包括:至少一个处理器801、存储器802、至少一个网络接口804和其他用户接口803。移动终端800中的各个组件通过总线系统805耦合在一起。可理解,总线系统805用于实现这些组件之间的连接通信。总线系统805除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图8中将各种总线都标为总线系统805。

其中,用户接口803可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。

可以理解,本发明实施例中的存储器802可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(read-onlymemory,rom)、可编程只读存储器(programmablerom,prom)、可擦除可编程只读存储器(erasableprom,eprom)、电可擦除可编程只读存储器(electricallyeprom,eeprom)或闪存。易失性存储器可以是随机存取存储器(randomaccessmemory,ram),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的ram可用,例如静态随机存取存储器(staticram,sram)、动态随机存取存储器(dynamicram,dram)、同步动态随机存取存储器(synchronousdram,sdram)、双倍数据速率同步动态随机存取存储器(doubledataratesdram,ddrsdram)、增强型同步动态随机存取存储器(enhancedsdram,esdram)、同步连接动态随机存取存储器(synchlinkdram,sldram)和直接内存总线随机存取存储器(directrambusram,drram)。本文描述的系统和方法的存储器802旨在包括但不限于这些和任意其它适合类型的存储器。

在一些实施方式中,存储器802存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作系统8021和应用程序8022。

其中,操作系统8021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序8022,包含各种应用程序,例如媒体播放器(mediaplayer)、浏览器(browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序8022中。

在本发明的一实施例中,通过调用存储器802存储的程序或指令,具体的可以是在应用程序8022中存储的程序或指令,处理器801用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个所述图像帧中选取一个图像帧作为基准图像帧;在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

可选地,处理器801还用于:接收到全景拍摄指令后,根据被拍摄物体的移动速度,确定拍摄帧率,其中,移动速度越大拍摄帧率越大;根据所述拍摄帧率进行视频拍摄,得到所述全景视频流。

可选地,处理器801还用于:获取所述全景视频流的拍摄时长,并将所述拍摄时长划分为预设数量个时间段;在每个所述时间段对应的图像帧中,选取一个图像帧作为待选基准图像帧,得到预设数量个待选基准图像帧;根据接收到的基准图像帧选择指令,确定所述基准图像帧选择指令在预设数量个所述待选基准图像帧中所选取的图像帧作为基准图像帧。

可选地,处理器801还用于:确定第一组待拼接图像帧中相邻两个待拼接图像帧的第一拍摄时间间隔值,所述第一组待拼接图像帧为至少一组待拼接图像帧中的任一组待拼接图像帧;以所述基准图像帧的拍摄时间为基准时间,在多个所述图像帧中选取拍摄时间在所述基准时间之前、且与所述基准时间的间隔为所述第一拍摄时间间隔值的整数倍的所述图像帧为第一部分图像帧,并在多个所述图像帧中选取拍摄时间在所述基准时间之后、且与所述基准时间的间隔为所述第一拍摄时间间隔的整数倍的所述图像帧为第二部分图像帧;根据所述第一部分图像帧和所述第二部分图像帧,得到第一组待拼接图像帧。

可选地,处理器801还用于:根据每组待拼接图像帧中待拼接图像帧与所述基准图像帧的拍摄时间的间隔值,按照间隔值由小到大的顺序,将每组待拼接图像帧中的待拼接图像帧依次与所述基准图像帧进行拼接,生成至少一个全景图像。

本发明实施例的移动终端800,处理器801用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个图像帧中选取一个图像帧作为基准图像帧;在多个图像帧中选取至少一组待拼接图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像。本发明实施例中在拍摄视频时,用户可沿任意角度移动终端,解决了目前用户需按照单一预设方向移动手机才能拍全景图像的问题,且本发明实施例中的全景图像是由视频流分解得到的图像帧静态合成,避免了拍摄过程中由于用户手动旋转力度不均匀或者移动速度不均而导致的成像效果不佳的问题。

本发明的移动终端如可以是手机、平板电脑、个人数字助理(personaldigitalassistant,pda)、或车载电脑等等终端。

移动终端800能够实现前述实施例中终端实现的各个过程,为避免重复,这里不再赘述。

上述本发明实施例揭示的方法均可以应用于处理器801中,或者由处理器801实现。处理器801可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器801中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器801可以是通用处理器、数字信号处理器(digitalsignalprocessor,dsp)、专用集成电路(applicationspecificintegratedcircuit,asic)、现成可编程门阵列(fieldprogrammablegatearray,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器802,处理器801读取存储器802中的信息,结合其硬件完成上述方法的步骤。

可以理解的是,本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(applicationspecificintegratedcircuits,asic)、数字信号处理器(digitalsignalprocessing,dsp)、数字信号处理设备(dspdevice,dspd)、可编程逻辑设备(programmablelogicdevice,pld)、现场可编程门阵列(field-programmablegatearray,fpga)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。

对于软件实现,可通过执行本文所述功能的模块(例如过程、函数等)来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。

如图9所示,为本发明实施例的移动终端的再一结构框图。图9所示的移动终端900包括射频(radiofrequency,rf)电路910、存储器920、输入单元930、显示单元940、处理器960、音频电路970、wifi(wirelessfidelity)模块980和电源990。

其中,输入单元930可用于接收用户输入的数字或字符信息,以及产生与移动终端900的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元930可以包括触控面板931。触控面板931,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板931上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板931可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器960,并能接收处理器960发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板931。除了触控面板931,输入单元930还可以包括其他输入设备932,其他输入设备932可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

其中,显示单元940可用于显示由用户输入的信息或提供给用户的信息以及移动终端900的各种菜单界面。显示单元940可包括显示面板941,可选的,可以采用lcd或有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板941。

应注意,触控面板931可以覆盖显示面板941,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器960以确定触摸事件的类型,随后处理器960根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。

触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。

其中处理器960是移动终端900的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器921内的软件程序和/或模块,以及调用存储在第二存储器922内的数据,执行移动终端900的各种功能和处理数据,从而对移动终端900进行整体监控。可选的,处理器960可包括一个或多个处理单元。

在本发明的一实施例中,通过调用存储该第一存储器921内的软件程序和/或模块和/或该第二存储器922内的数据,处理器960用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个所述图像帧中选取一个图像帧作为基准图像帧;在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

可选地,处理器960还用于:接收到全景拍摄指令后,根据被拍摄物体的移动速度,确定拍摄帧率,其中,移动速度越大拍摄帧率越大;根据所述拍摄帧率进行视频拍摄,得到所述全景视频流。

可选地,处理器960还用于:获取所述全景视频流的拍摄时长,并将所述拍摄时长划分为预设数量个时间段;在每个所述时间段对应的图像帧中,选取一个图像帧作为待选基准图像帧,得到预设数量个待选基准图像帧;根据接收到的基准图像帧选择指令,确定所述基准图像帧选择指令在预设数量个所述待选基准图像帧中所选取的图像帧作为基准图像帧。

可选地,处理器960还用于:确定第一组待拼接图像帧中相邻两个待拼接图像帧的第一拍摄时间间隔值,所述第一组待拼接图像帧为至少一组待拼接图像帧中的任一组待拼接图像帧;以所述基准图像帧的拍摄时间为基准时间,在多个所述图像帧中选取拍摄时间在所述基准时间之前、且与所述基准时间的间隔为所述第一拍摄时间间隔值的整数倍的所述图像帧为第一部分图像帧,并在多个所述图像帧中选取拍摄时间在所述基准时间之后、且与所述基准时间的间隔为所述第一拍摄时间间隔的整数倍的所述图像帧为第二部分图像帧;根据所述第一部分图像帧和所述第二部分图像帧,得到第一组待拼接图像帧。

可选地,处理器960还用于:根据每组待拼接图像帧中待拼接图像帧与所述基准图像帧的拍摄时间的间隔值,按照间隔值由小到大的顺序,将每组待拼接图像帧中的待拼接图像帧依次与所述基准图像帧进行拼接,生成至少一个全景图像。

本发明的移动终端如可以是手机、平板电脑、个人数字助理(personaldigitalassistant,pda)、或车载电脑等等终端。

移动终端900能够实现前述实施例中终端实现的各个过程,为避免重复,这里不再赘述。

本发明实施例的移动终端900,处理器960用于接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;将所述全景视频流分解为多个图像帧;在多个图像帧中选取一个图像帧作为基准图像帧;在多个图像帧中选取至少一组待拼接图像帧;将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像。本发明实施例中在拍摄视频时,用户可沿任意角度移动终端,解决了目前用户需按照单一预设方向移动手机才能拍全景图像的问题,且本发明实施例中的全景图像是由视频流分解得到的图像帧静态合成,避免了拍摄过程中由于用户手动旋转力度不均匀或者移动速度不均而导致的成像效果不佳的问题。

如图10所示,为本发明实施例的移动终端的另一结构框图,图10所示的移动终端,包括存储器1020、处理器1000、收发机1010、用户接口1030、总线接口及存储在存储器1020上并可在处理器1000上运行的计算机程序,所述处理器1000用于读取存储器1020中的程序,执行下列过程:

接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;

将所述全景视频流分解为多个图像帧;

在多个所述图像帧中选取一个图像帧作为基准图像帧;

在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;

将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像所述全景图像的个数与待拼接图像帧的组数相同。

其中,在图10中,总线架构可以包括任意数量的互联的总线和桥,具体由处理器1000代表的一个或多个处理器和存储器1020代表的存储器的各种电路链接在一起。总线架构还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口提供接口。收发机1010可以是多个元件,即包括发送机和收发机,提供用于在传输介质上与各种其他装置通信的单元。针对不同的用户设备,用户接口1030还可以是能够外接内接需要设备的接口,连接的设备包括但不限于小键盘、显示器、扬声器、麦克风、操纵杆等。

处理器1000负责管理总线架构和通常的处理,存储器1020可以存储处理器1000在执行操作时所使用的数据。

处理器1000还用于接收到全景拍摄指令后,根据被拍摄物体的移动速度,确定拍摄帧率,其中,移动速度越大拍摄帧率越大;根据所述拍摄帧率进行视频拍摄,得到所述全景视频流。

处理器1000还用于获取所述全景视频流的拍摄时长,并将所述拍摄时长划分为预设数量个时间段;

在每个所述时间段对应的图像帧中,选取一个图像帧作为待选基准图像帧,得到预设数量个待选基准图像帧;根据接收到的基准图像帧选择指令,确定所述基准图像帧选择指令在预设数量个所述待选基准图像帧中所选取的图像帧作为基准图像帧。

可选地,处理器1000还用于确定第一组待拼接图像帧中相邻两个待拼接图像帧的第一拍摄时间间隔值,所述第一组待拼接图像帧为至少一组待拼接图像帧中的任一组待拼接图像帧;以所述基准图像帧的拍摄时间为基准时间,在多个所述图像帧中选取拍摄时间在所述基准时间之前、且与所述基准时间的间隔为所述第一拍摄时间间隔值的整数倍的所述图像帧为第一部分图像帧,并在多个所述图像帧中选取拍摄时间在所述基准时间之后、且与所述基准时间的间隔为所述第一拍摄时间间隔的整数倍的所述图像帧为第二部分图像帧;根据所述第一部分图像帧和所述第二部分图像帧,得到第一组待拼接图像帧。

可选地,处理器1000还用于根据每组待拼接图像帧中待拼接图像帧与所述基准图像帧的拍摄时间的间隔值,按照间隔值由小到大的顺序,将每组待拼接图像帧中的待拼接图像帧依次与所述基准图像帧进行拼接,生成至少一个全景图像。

在本发明的一实施例中,还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以下步骤:

接收到全景拍摄指令后,进行视频拍摄,得到全景视频流;

将所述全景视频流分解为多个图像帧;

在多个所述图像帧中选取一个图像帧作为基准图像帧;

在多个所述图像帧中选取至少一组待拼接图像帧,其中,同一组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值相同,且不同组待拼接图像帧中相邻两个待拼接图像帧的拍摄时间间隔值不同,每组待拼接图像帧中均包括所述基准图像帧;

将每组待拼接图像帧与所述基准图像帧进行拼接,生成至少一个全景图像,所述全景图像的个数与待拼接图像帧的组数相同。

本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(read-onlymemory,rom)或随机存储记忆体(randomaccessmemory,ram)等。

以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1