阵列相机、移动终端、及其操作方法

文档序号:7998955阅读:243来源:国知局
阵列相机、移动终端、及其操作方法
【专利摘要】公开一种阵列相机、移动终端、及其操作方法。用于操作包括多个相机模块的阵列相机的方法包括:将不同于其它的相机模块的相机环境设置应用于多个相机模块中的至少一个;通过多个相机模块获取图像;以及组合所获取的图像。
【专利说明】阵列相机、移动终端、及其操作方法
[0001]相关申请的交叉引用
[0002]本申请要求在韩国知识产权局于2012年11月15日提交的韩国专利申请N0.10-2012-0129626的优先权,其全部内容通过引用合并在此。
【技术领域】
[0003]本发明涉及一种阵列相机、移动终端、及其操作方法,并且更加具体地,涉及一种阵列相机、用于操作阵列相机的方法、具有阵列相机的移动终端、以及用于操作移动终端的方法。
【背景技术】
[0004]通过捕获对象获取特定图像,即,视频和图像的相机已经被型化。因此,诸如移动终端、个人数字助理(PDA)、膝上型计算机、图像显示装置等等的越来越多的数字装置被装备有相机。
[0005]随着朝着小尺寸和细长的趋势,对获取和恢复高质量图像的方法已经进行深入研究。
[0006]移动终端是一种便携式装置,该便携式终端能够执行语音呼叫和视频呼叫功能、信息输入/输出功能、以及数据存储功能中的一个或者多个,同时被用户携带。随着其功能的多样化,移动终端已经被演化为具有诸如拍摄照片、视频记录、音乐或者视频的回放、游戏、广播接收、以及无线因特网的复杂功能的综合多媒体播放器。
[0007]为了在被发展为多媒体播放器的这样移动终端中实现复杂的功能,已经在硬件或者软件方面进行新的尝试。例如,用户界面(UI)环境被创建为呈现用户友好的功能搜索或者功能选择。
[0008]此外,在使用移动终端捕获的图片或者视频的有效管理和利用上正在进行研究。
【发明内容】

[0009]因此,鉴于上述问题已经提出本发明,并且本发明的目的是为了提供一种能够被小型化并且获取高质量图像的阵列相机,和用于操作阵列相机的方法。
[0010]本发明的另一目的是为了提供一种被装备有阵列相机的移动终端和用于操作移动终端的方法,其能够增加用户便利。
[0011]根据本发明的一方面,通过提供一种操作阵列相机的方法能够完成以上和其它的目的,该阵列相机包括多个相机模块,该方法包括,将不同于其它的相机模块的相机环境设置应用于多个相机模块中的至少一个;通过多个相机模块获取图像;以及组合所获取的图像。
[0012]根据本发明的另一方面,提供一种用于操作具有阵列相机的移动终端的方法,该阵列相机包括多个相机模块,该方法包括将不同于其它的相机模块的相机环境设置应用于多个相机模块中的至少一个;通过多个相机模块获取图像;以及组合所获取的图像。【专利附图】

【附图说明】
[0013]根据以下结合附图的详细的描述,将会更加清楚地理解本发明的以上和其它目的、特征以及其它优点,其中:
[0014]图1是涉及用于描述根据本发明的实施例的阵列相机和用于操作阵列相机的方法的视图;
[0015]图2图示根据本发明的阵列相机的示例性的各种布局;
[0016]图3是根据本发明的实施例的阵列相机的框图;
[0017]图4和图5是涉及用于描述根据本发明的实施例的阵列相机和用于操作阵列相机的方法的视图;
[0018]图6是根据本发明的实施例的移动终端的框图;
[0019]图7是根据本发明的实施例的移动终端的前透视图;
[0020]图8是根据本发明的实施例的移动终端的后透视图;
[0021]图9是图示根据本发明的实施例的用于操作阵列相机和具有阵列相机的移动终端的方法的流程图;以及
[0022]图10至图25是涉及用于描述根据本发明的实施例的阵列相机、移动终端、以及用于操作阵列相机和移动终端的方法的视图。
【具体实施方式】
[0023]下面将会参考附图描述本发明的实施例。
[0024]被用于表示组件的术语“模块”和“单元”在此被用于帮助组件的理解并且因此它们不应被认为是具有特定的意义或者作用。因此,术语“模块”和“单元”可以被互换地使用。
[0025]图1是涉及用于描述根据本发明的实施例的阵列相机和用于操作阵列相机的方法的视图。
[0026]参考图1,阵列相机可以包括多个相机模块11至19。多个相机模块11至19可以被排列成MxN矩阵(M和N是I或者大于I的整数)。
[0027]阵列相机可以通过使用可以独立地控制的多个相机模块11至19捕获特定对象来获得静止图像和视频,即,图像和视频数据,并且可以独立地捕获图像。
[0028]例如,当阵列相机捕获特定对象20时,其可以通过同时捕获相同对象20或者在预定的不同时间点利用多个相机模块11至19捕获多个图像31至39。
[0029]另外,阵列相机可以通过使用各种图像组合算法中的至少一个来组合所获取的图像31至39生成高质量合成图像。
[0030]虽然通过示例,在图1中示出的阵列相机包括以3x3矩阵排列的九个相机模块,但是本发明不限于特定示例并且因此被包括在阵列相机中的相机模块的数目和布局可以变化。
[0031]图2图示根据本发明的阵列相机的示例性的各种布局。具体地,在阵列相机包括四个相机模块的情况下,可以以在图2中图示的布局排列相机模块。
[0032]在图2 Ca)中,四个相机模块以2x2矩阵排列。在图2 (b)中,四个相机模块以2x2矩阵排列,相互分开了预定的距离。
[0033]四个相机模块以图2(c)中的1x4矩阵排列。虽然四个相机模块以1x4矩阵排列,但是在图2 (d)中它们被相互隔开了预定的距离。
[0034]不同于在图2中图示的相机模块的布局,四个相机模块可以以4x1矩阵排列。
[0035]图3是根据本发明的实施例的阵列相机的框图,以及图4和图5是涉及用于描述根据本发明的实施例的阵列相机和用于操作阵列相机的方法的视图。
[0036]参考图3,将会描述阵列相机的配置,集中于与图像获取和图像处理有关的组件。阵列相机可以包括多个相机模块121、显示器151、存储器160、以及控制器180。当需要时,阵列相机可以进一步包括其它的组件。例如,阵列相机可以进一步包括用于接收用户输入的用户输入单元(未示出)和用于在阵列相机和其它的电子装置之间进行对接的接口(未示出)。
[0037]在实际实现中,当需要时,在阵列相机100中,两个组件可以被合并到单个组件中或者一个组件可以被分离成两个或者更多个组件。
[0038]在本发明中,相机模块121是多个可独立控制的相机模块121a、121b、121c、......。
各种已知的相机模块作为相机模块 121a、121b、121c、……是可用的。
[0039]相机模块121a、121b、121c、...中的每一个可以包括镜头单元122和相机传感器123。
[0040]通过镜头单元122收集的光可以在相机传感器123上形成对象的用户捕获的图像。相机传感器123可以用作将通过镜头单元122输入的外部图像转换成图像数据。例如,相机传感器123可以是电荷耦合器件(CCD)传感器、互补金属氧化物半导体(CMOS)传感器等等,本发明不限于此。
[0041]相机传感器123可以在正常模式或者快速模式下操作。相机传感器123可以在正常模式下以普通的方式捕获视频,同时其可以以快速或者超快速度捕获视频。或者相机传感器123可以在其中能够以每秒预定数目的帧拍摄照片的模式下操作。
[0042]镜头单元122可以包括多个镜头。
[0043]因为分辨率与镜头的直径成比例地增加,所以具有较大的直径的镜头提供较高的分辨率。然而,由此产生的焦距的增加使其难以呈现小的和细长的相机模块。
[0044]相反地,在生产小、细长的相机模块中具有小直径的镜头是令人满意的,但是使其难以获得高分辨率、高质量图像。
[0045]然而,包括多个相机模块的本发明的阵列相机能够通过组合利用多个相机模块捕获的多个图像来获取高质量图像。因此,能够使用相对小的镜头。因此,相机模块能够被制作得小和细长。
[0046]根据本发明的实施例,多个相机模块121中的至少一个的镜头单元122可以包括在类型、放大率、以及尺寸上不同于其它的相机模块121的那些的镜头。
[0047]控制器180对阵列相机100提供整体控制。控制器180可以从相机模块121中的每一个接收图像数据并且处理该图像数据。
[0048]参考图3,控制器180可以包括处理器181,处理器181用于控制控制器180的整体操作;视频处理器182,视频处理器182用于处理从多个相机模块121接收到的数据;组合器183,组合器183用于组合多个图像或者图片;以及后处理器184,后处理器184用于处理图像或者图片以显示或者存储合成的图像或者图片。
[0049]视频处理器182可以将从相机传感器123接收到的模拟视频数据转换成数字视频数据。
[0050]例如,相机传感器123可以通过捕获对象来获取作为电模拟视频数据的视频帧。视频帧中的每一个可以包括多个像素和关于各个像素的信息。视频处理器182可以在模拟至数字视频数据转换期间处理每像素信息。
[0051]视频处理器182或者后处理器184可以执行增强视频质量的视频处理,包括颜色校正、颜色增强、伽马校正等等。
[0052]组合器183可以在处理器181的控制下执行诸如图像解释、图像识别、图像效果处理等等的主视频处理。对于图像识别,组合器183可以执行对象提取、区域提取、面部识别、场景识别等等。另外,组合器183可以组合多个图像。
[0053]组合器183可以驻留在处理器181中。
[0054]显示器151可以显示阵列相机100的操作状态、操纵屏幕等等。
[0055]显示器151可以从控制器180接收要被显示的数据并且可以基于接收到的数据显示最终图像或者预览图像。
[0056]或者显示器151可以根据设置显示从多个相机模块121当中的预设的基准相机模块121a接收到的图像作为预览图像。
[0057]控制器180可以控制作为能够三维地捕获对象的立体相机的相机模块121中的至少两个的使用。
[0058]控制器180可以通过处理利用多个相机模块121获取的多个图像来创建深度图。深度图可以被用作用于有效图像组合以及用于三维(3D)成像的基准数据。
[0059]根据本发明的实施例,控制器180可以通过已知的图像分析技术从图像数据识别对象。控制器180可以分析被包括在多个图像中的对象的边缘、尺寸、颜色、亮度、以及运动特性中的至少一个。这些参数可以对应于深度提示。
[0060]可以检查诸如对象和背景的颜色、亮度、清洁度、以及尺寸的运动特性,和对象和背景中的图像运动的存在。
[0061]也可以确定对象的时间顺序。在二维(2D)至3D转换期间的设置深度值中或者在组合图像中可以使用被显示在相同的屏幕上的不重叠的对象以及重叠的对象的时间顺序。
[0062]深度提示是这样的因素,通过该因素可以确定2D图像固有的透视。控制器180可以基于深度提示生成深度图。
[0063]例如,深度提示被划分为包括纹理梯度(texture gradient)、线性透视、大气透视、以及阴影的静态提示和包括运动视差和动力深度效果的动态提示。
[0064]控制器180可以控制多个相机模块121以自动地聚焦不同的对象。
[0065]控制器180可以从多个图像提取对象。在图示多个图像的图1的示例中,可以提取人41、高尔夫球杆42、高尔夫球43、以及背景44,如在图4中所图示。控制器180可以将被提取的对象组合成合成图像,如在图5中所示。
[0066]控制器180可以在组合对象中参考深度图。
[0067]或者控制器180可以从多个图像中选择焦点,基于焦点生成深度图,并且使用深度图组合多个图像。[0068]或者控制器180可以使用包括高动态范围(HDR)拍摄的各种图像组合技术。
[0069]在图3中图示的控制器180仅是示例性的。控制器180中的每个组件可以被单独地配置在控制器180外部。也能够将控制器180的组件实现为程序。
[0070]控制器180的两个或者更多个组件可以被合并在单个组件中,或者控制器180的一个组件可以被分离成两个或者更多个组件。另外,在图3中没有图示的新的组件可以被添加到控制器180。
[0071]存储器160可以存储操作阵列相机所要求的程序和在阵列相机的操作期间获得的数据。当需要时,阵列相机可以被设置有用于临时缓冲数据的缓冲器。
[0072]图6是根据本发明的实施例的移动终端的框图。
[0073]如在此提出的移动终端可以是便携式电话、智能电话、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、相机、导航仪、平板计算机、电子书阅读器等等中的任意一个。
[0074]参考图6,下面将会描述移动通信终端的功能组件。
[0075]参考图6,移动终端200可以包括无线通信模块210、音频/视频(A/V)输入单元220、用户输入单元230、传感器单元240、输出单元250、存储器260、接口 270、控制器280、以及电源290。在可替代的实施例中移动终端200的两个或者更多个组件可以被组合成单个组件或者其单个组件可以被分离成两个或者更多个组件。例如,相机211,特别地阵列相机可以驻留在A/V输入单元220中。或者阵列相机221可以被配置成与A/V输入单元220分离。
[0076]无线通信模块210可以包括广播接收模块211、移动通信模块213、无线因特网模块215、短程通信模块217、以及全球定位系统(GPS)模块219。
[0077]广播接收模块211从外部广播管理服务器接收广播信号或者关于广播信道的广播有关信息中的至少一个。广播信道可以是卫星信道、陆地信道等等中的任意一个。广播管理服务器可以指的是用于生成和传输广播信号或者广播有关信息中的至少一个的服务器或者用于接收已经生成的广播信号或者已经生成的广播有关信息中的至少一个并且将接收到的广播信号或者广播有关信息中的至少一个提供给终端的服务器。
[0078]广播信号可以是TV广播信号、无线电广播信号、数据广播信号、或者TV广播信号和数据广播信号或者无线电广播信号和数据广播信号的组合。广播有关信息可以是与广播信道、广播节目、或者广播服务器提供商有关的信息。可以通过移动通信网络提供广播有关信息。在这样的情况下,移动通信模块213可以接收广播有关信息。广播有关信息可以采用各种形式。
[0079]广播接收模块211可以通过广播系统接收广播信号,具体地,通过诸如陆地数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、仅媒体前向链路(MediaFLO)、数字视频广播手持(DVB-H)、或者数字广播-陆地综合业务(ISDB-T)的数字广播系统接收数字广播信号。广播接收模块211可以被适合于提供广播信号的所有其它的广播信号以及数字广播系统。在广播接收模块211处接收到的广播信号和/或者广播有关信息可以被存储在存储器260中。
[0080]移动通信模块213通过移动通信网络将无线电信号传输到基站(BS)、外部终端、或者服务器中的至少一个并且从基站(BS)、外部终端、或者服务器中的至少一个接收无线电信号。无线电信号可以包括在多媒体消息传输和接收中涉及的语音呼叫信号、视频呼叫信号、或者文本/其它各种类型的数据。
[0081]无线因特网模块215是用于将无线互联网连接提供给移动终端200的内置或者外部模块。无线因特网模块215可以符合无线局域网(WLAN)(无线保真(WiFi))、无线宽带(Wibro)、全球微波接入互操作性(WiMAX)、高速下行分组接入(HSDPA)等等操作。
[0082]短程通信模块217被用于短程通信。对于短程通信,短程通信模块217可以符合蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee )、近场通信(NFC)
坐坐寸寸o
[0083]GPS模块219从多个GPS卫星接收位置信息。
[0084]A/V输入单元220被用于接收音频信号或者视频信号并且可以包括相机221和麦克风223。相机221在视频呼叫模式或者相机模式下处理从图像传感器捕获的静止图像或者视频的视频帧。被处理的视频帧可以被显示在显示器251上。
[0085]相机221可以是包括能够独立地控制并且能够独立地获取图像的多个相机模块的阵列相机。
[0086]通过相机221处理的视频帧可以被存储在存储器260中或者通过无线通信模块210被外部地传输。取决于移动终端200的配置规格可以将两个或者更多个相机221提供给移动终端200。例如,相机221可以被设置在移动终端200的前表面和后表面上。在这样的情况下,前相机和后相机221中的至少一个可以是阵列相机。特别地,后相机优选是阵列相机,以便于获取闻质量图像。
[0087]麦克风223在呼叫模式、记录模式、或者语音识别模式下接收外部音频信号并且将该音频信号处理成电语音数据。在呼叫模式下,被处理的语音数据可以被转换成可传输到BS并且通过移动通信模块213输出的格式。为了消除在外部音频信号的输入期间引入的噪声对于麦克风223可用各种噪声消除算法。
[0088]用户输入单元230生成用户输入的键输入数据以控制移动终端200的操作。用户输入单元230可以包括键盘、薄膜开关、(电阻/电容)触摸板等等,以通过用户的按压或者触摸操纵来接收命令或者信息。用户输入单元230可以被配置成以滚轮或者包括键旋转的推动(jog)方式、以操纵杆方式、或者以手指鼠标方式操作。特别当触摸板与显示器251形成层时,所得到的结构可以被称为触摸屏。
[0089]传感器单元240感测诸如移动通信终端200的当前状态,诸如移动通信终端200的打开或者闭合状态、位置、或者用户触摸并且根据感测到的状态生成控制移动终端200的操作的感测信号。例如,如果移动终端200是滑盖电话,则传感器单元240可以感测滑盖电话是否被打开或者闭合。另外,传感器单元240可以感测电源290是否供应电力或者接口 270是否与外部设备耦接。
[0090]传感器单元240可以包括接近传感器241、压力传感器243、以及运动传感器245。在没有机械接触的情况下,接近传感器241可以检测接近移动终端200的对象或者移动终端200的附近的对象的存在或者不存在。接近传感器241可以基于交替或者静电磁场或者电容的变化率检测附近的对象。另外,接近传感器241可以感测用户紧握的移动终端200的表面。取决于移动终端200的规格一个或者多个接近传感器241可以被设置到移动终端200。[0091]压力传感器243可以确定压力是否被施加到移动终端200以及压力是多强。根据使用移动终端200的环境,压力传感器,243可以被安装在需要压力检测的移动终端200的一部分处。
[0092]如果压力传感器243被安装在显示器251上,则根据从压力传感器243输出的信号,可以识别在显示器251上的触摸输入区别于显示器251上的按压触摸输入,对于按压触摸输入施加了比对于触摸输入更强的压力。另外,在按压触摸输入的情况下,也可以从压力传感器243输出的信号获知被施加到显不器251的压力的量级。
[0093]如果压力传感器243被布置在移动终端200的边缘处,那么压力传感器243可以通过检测压力感测用户紧握的移动终端200的表面。
[0094]运动传感器245使用加速度传感器、陀螺仪传感器等等感测移动终端200的位置或者运动。加速度传感器是将方向中的加速度变化转换成电信号的装置。随着微电机系统(MEMS)技术的发展,加速度传感器已经变得普遍。
[0095]存在广范围的加速度传感器,从测量用于感测车辆的安全气囊的碰撞的大的加速度值的加速度传感器到测量用于作为当玩游戏时能够识别精细的手的运动的输入设备而使用的非常小的加速度值的加速度传感器。通常,取决于使用环境,2轴或者3轴加速度传感器被封装到一个封装中或者使用单个z轴加速度传感器。因此,当要使用不是Z轴加速度传感器而是X轴或者Y轴加速度传感器时,借助于基板片段substrate fragment)加速度传感器可以被直立在主基板上。
[0096]陀螺仪传感器测量角速度并且因此感测相对于基准方向的旋转的方向。
[0097]传感器单元240可以包括用于用户认证的传感器。例如,当基于用户的生物信息认证用户时,传感器单元240可以包括用于识别体温、指纹、虹膜、面部等等的传感器。根据为移动终端200设置的认证方法,传感器单元240可以包括必要的传感器。
[0098]输出单元250输出音频信号、视频信号、或者报警信号。输出单元250可以包括显示器251、音频输出模块253、报警发射器255、以及触觉模块257。
[0099]显示器251显示在移动终端200中处理的信息。例如,当移动终端200是处于呼叫模式中时,显示器251显示与呼叫有关的UI或者图形用户界面(GUI)。在视频呼叫模式或者相机模式下,显示器251可以单独地或者同时显示捕获或者接收到的图像并且也可以显示UI或者⑶I。
[0100]如前面所描述的,如果通过将显示器251与触摸板形成层配置触摸屏,则显示器251不仅可以被用作输出装置而且可以被用作能够通过用户的触摸接收信息的输入装置。
[0101]如果显示器251被配置成触摸屏,则其可以包括触摸屏面板、触摸屏面板控制器等等。在这样的情况下,触摸屏面板,其是被附接在触摸屏的外部上的透明面板,可以被连接到移动终端200的内部总线。触摸屏面板保持监视是否被用户触摸。在检测到触摸输入之后,触摸屏面板将与触摸输入相对应的信号提供给触摸屏面板控制器。触摸屏面板控制器将接收到的信号处理成数据,并且将该数据传输到控制器280,使得控制器280可以确定触摸输入的存在或者不存在,并且可以定位触摸屏上的触摸点。
[0102]显示器251可以被配置成电子纸(电子纸)。像纸和墨水一样,电子纸是具有包括高分辨率、宽的视角、以及明亮的白色背景的极好的视觉特性的一种反射显示器。电子纸可以被形成在诸如塑料、金属、纸等等的材料的任何基板上。因为电子纸能够在电源被切断之后保持图像并且不要求背光组件,所以其延长移动终端200的寿命。使用静电充电的半球形扭转球(electrostatic-charged hemispherical twist balls)、电泳沉积(electrophoretic deposition)、或者微囊体(microcapsules),显不器 251 可以被配置成电子纸。
[0103]此外,显示器251可以被配置成液晶显示器(IXD)、薄膜晶体管-1XD、有机发光二极管(OLED)显示器、柔性的显示器、以及3D显示器中的至少一个。取决于移动终端200的实现,移动终端200可以被设置有两个或者更多个显示器251。例如,外部和内部显示器(未示出)都可以被安装到移动终端200。
[0104]在呼叫终止模式、呼叫模式、记录模式、语音识别模式、或者广播接收模式中音频输出单元253输出从无线通信模块210接收到的或者被存储在存储器260中的音频数据。音频输出模块253也输出在通过移动终端200执行的功能中涉及的音频信号,例如,与呼叫来电声音、消息接收声音等等有关的音频信号。音频输出模块253可以包括扬声器、蜂鸣器
坐坐寸寸o
[0105]报警发射器255将通知事件的发生的信号输出到移动终端200。移动终端200的事件包括呼叫信号接收、消息接收、键信号输入等等。报警发射器255可以以除了音频信号或者视频信号的形式输出事件通知信号。例如,可以以振动的形式输出事件通知信号。在接收到呼叫信号或者消息之后,报警单元255可以输出通知呼叫信号或者消息接收的信号。在接收到键信号之后,报警单元255可以输出用于键信号输入的反馈信号。因此,用户根据从报警单元255输出的信号意识到事件的发生。也可以通过移动终端200中的显示器251或者音频输出模块253输出通知事件的发生的信号。
[0106]触觉模块257生成用户能够感觉的各种触觉效果。触觉效果的主要示例是振动。当触觉模块257生成振动作为触觉效果时,可以改变振动的强度和模式。触觉模块257可以合成不同的振动效果并且输出被合成的振动效果。可替代地或另外地,触觉模块257可以顺序地输出不同的振动效果。
[0107]触觉模块257可以提供除了振动之外的各种触觉效果,诸如使用垂直于接触皮肤表面而移动的针阵列获得触觉效果、通过注入孔或者吸入孔注入或者吸入空气获得的触觉效果、通过给予皮肤的表面刺激获得的触觉效果、通过接触电极获得的触觉效果、使用电磁力获得的触觉效果、以及通过使用能够吸收热或者生成热的装置实现热或者冷的感觉获得的触觉效果。触觉模块257可以被配置为使用户使用手指或手臂的肌肉运动感觉能够识别触觉效果。移动终端200可以包括两个或者更多个触觉模块257。
[0108]存储器260可以存储被要求用于在控制器280中处理和控制的程序或者临时存储输入或者输出数据(例如,电话簿、消息、静止图像、视频等等)。
[0109]存储器260可以包括闪存型存储介质、硬盘型存储介质、多媒体卡微型存储介质、卡型存储器(例如,安全数字(SD)或者极限数字(XD)存储器)、随机存取存储器(RAM)或者只读存储器(ROM)中的至少一个。移动终端200可以操作网络存储,其在因特网上执行存储器260的存储功能。
[0110]接口 270在移动终端200和被连接到移动终端200的所有外部设备之间对接。夕卜部设备可以包括有线/无线头带式耳机、外部充电器、有线/无线数据端口、存储卡、诸如用户认证模块(SM)卡或者用户识别模块(UM)卡的卡式插槽、音频输入/输出(1/0)端口、视频I/O端口、耳机等等。接口 270可以从这样的外部装置接收数据或者电力并且将数据或者电力传输到移动终端200的每个组件。另外,接口 270可以将来自移动终端200的数据传输到外部装置。
[0111]当移动终端200被连接到外部托架时,接口 270可以提供用于将来自于外部托架的电力供应到移动终端200或者将来自于外部托架的各种用户输入命令信号传输到移动终端200的路径。
[0112]控制器280通常通过控制每个组件的操作向移动终端200提供整体控制。例如,控制器280控制和处理视频呼叫、数据通信、视频呼叫等等。控制器280可以包括用于播放多媒体的多媒体播放器281。可以以控制器280内部的硬件或者与控制器280分离的软件来配置多媒体播放器281。
[0113]电源290可以从外部电源或者内部电源接收电力并且将电力供应到移动终端200的其它的组件。
[0114]具有上述配置的移动终端200可以被配置成在能够传输帧或者分组中的数据的通信系统中操作,该通信系统包括有线/无线通信系统或者卫星通信系统。
[0115]如果相机221是移动终端200中的阵列相机,则移动终端200不需要多余地包括在图3中图示的阵列相机的所有组件。因此,显然的是,阵列相机的组件能够被替换为移动终端200的对应物。
[0116]例如,因为移动终端200包括显示器251,则移动终端200不需要包括用于显示阵列相机100的操作状态、被操纵的屏幕、预览图像、以及最终图像的附加的显示器,除非明确需要附加的显示器。
[0117]S卩,阵列相机的控制器180、显示器151、以及存储器160可以被替换为移动终端200的控制器280、显示器251、以及存储器260。具有本发明的阵列相机的移动终端200可以以参考图1至图5描述的方式进行操作。
[0118]图7是根据本发明的实施例的移动终端的前透视图,以及图8是在图7中图示的移动终端的后透视图。参考图7和图8,将会描述移动终端的外部,以它的外部组件为中心。虽然在具有前触摸屏的直板式移动终端的背景下给出下面的描述,但是这仅是示例性的。因此要理解的是,本发明也可应用于包括折叠式、摆动式、以及滑盖式的其它类型的移动终端。
[0119]参考图7,前外壳200-1和后外壳200-2形成移动终端200的外壳。大量的电子部件被安装在由前外壳200-1和后外壳200-2限定的空间中。
[0120]显不器251、第一音频输出模块253a、第一相机221a、以及第一、第二和第三用户输入单元230a、230b和230c可以被布置在移动终端200的主体中,特别地在前外壳200-1上。第四和第五用户输入单元230a和230e和麦克风223可以被布置在后外壳200-2的侧
表面上。
[0121]如果触摸板与显示器251层叠,则显示器251可以用作触摸屏使得用户能够通过触摸显示器251将各种类型的信息键入到移动终端200。
[0122]第一音频输出模块253a可以被实现为接收器或者扬声器。第一相机221a可以被配置成适合于捕获用户的静止图像或者视频。麦克风223可以被配置成适当地接收用户的语音或者其它声音。[0123]第一至第五用户输入单元230a至230e和后面描述的第六和第七用户输入单元230f和230g可以被统称为用户输入单元230,并且能够采用任何装置作为第一至第七用户输入单元230a至230f?,只要其能够以触觉的方式进行操作。
[0124]例如,用户输入单元230可以被实现为能够根据通过用户的按压或者触摸操纵接收命令或者信息的薄膜开关或者触摸板,或者可以被实现为轮子或者用于旋转键的滚轮或者操作杆。在功能方面,第一、第二和第三用户输入单元230a、230b以及230c可以作为用于键入诸如开始、结束、或者滚动的命令的功能键进行操作,第四用户输入单元230d可以作为用于选择用于移动终端200的操作模式的功能键进行操作,并且第五用户输入单元230e可以作为用于激活移动终端200内的特定功能的热键进行操作。
[0125]参考图8,第二相机221b可以被附加地提供在后外壳200-2的后表面上,并且第六和第七用户输入单元230f?和230g和接口 270可以被布置在后外壳200-2的一个侧表面上。
[0126]第二相机221b可以具有与第一相机221a的拍摄方向大体上相对的拍摄方向,并且可以具有不同于第一相机221a的分辨率。闪光灯(未示出)和镜子(未示出)可以被附加地布置在第二相机221b的附近。
[0127]为了捕获3D图像,第三相机可以进一步被安装在第二相机221b的附近。
[0128]第一和第二相机221a和221b中的至少一个可以是具有多个相机模块的阵列相机并且能够捕获3D图像。特别地,第二相机221b可以是阵列相机。
[0129]当利用第二相机221b捕获对象的图像时,闪光灯可以照亮对象。当他或者她使用第二相机221b想要捕获他或者她自己的图像(进行自拍)时镜子可以允许用户看到他自己或者她自己。`
[0130]另一音频输出模块(未不出)可以被附加地提供在后外壳200-2上。后外壳200-2上的音频输出模块可以与前外壳200-1上的音频输出模块253 —起实现立体声功能。在免提电话模式下也可以使用后外壳200-2上的音频输出模块。
[0131]接口 270可以被用作允许移动终端200与外部装置交换数据的通道。除了被用于呼叫的天线之外,广播信号接收天线(未示出)可以被布置在前或者后外壳200-1或者200-2的一侧处。广播信号接收天线可以被安装使得其能够从后外壳200-2伸出。
[0132]电源290可以被安装在后外壳200-2以将电力供应到移动终端200。电源290例如可以是可充电电池,其能够被可拆卸地安装到后外壳200-2以被充电。
[0133]第二相机221b和其它的元件已经被描述为被设置在后外壳200-2中,本发明不限于此。
[0134]即使不提供第二相机221b,第一相机221a可以被配置成可旋转,并且因此在第二相机221b的拍摄方向中捕获图像。
[0135]图9是图示根据本发明的实施例的用于操作阵列相机和具有阵列相机的移动终端的方法的流程图,以及图10至图25是涉及用于描述根据本发明的实施例的阵列相机、移动终端、以及用于操作阵列相机和移动终端的方法的视图。
[0136]参考图9,在包括多个相机模块121的阵列相机100或者具有阵列相机100的移动终端200中,不同的相机环境设置被应用于多个相机模块121中的至少一个(S910)。
[0137]例如,当为相机模块121中的至少一个设置高分辨率拍摄条件时,相机模块121包括具有高分辨率设置的相机模块和具有标准分辨率设置的相机模块。因此以后相机模块121可以获取不同分辨率的图像。
[0138]在另一示例中,如果对于相机模块121中的至少一个设置高分辨率拍摄条件并且对于相机模块121中的至少一个设置低分辨率拍摄条件,则具有高分辨率设置的相机模块、具有低分辨率设置的相机、以及具有标准分辨率设置的相机共存于相机模块121中。因此,以后相机模块121可以获取不同分辨率的图像。
[0139]S卩,两个或者更多个不同的设置可以应用于根据本发明的实施例的多个相机模块121。
[0140]在相机环境设置应用步骤S910中,在从用户接收设置输入时或者在加载与用户选择的相机模式相对应的预设设置值时,控制器180或者280可以将设置应用于多个相机模块121。
[0141]例如,控制器180或者280可以通过被显示在显示器151或者251上的设置菜单从用户接收手动设置输入或者为用户提供应用了推荐的设置值的多个相机模块。然后控制器180或者280可以将与用户选择的模式相对应的用户输入设置或者被加载的设置值应用于各个相机模块。
[0142]或者在没有从用户接收设置输入的情况下,控制器180或者280可以根据环境照明、当前时间、要被捕获的图像的类型(视频或者静止图像)等等自动地应用被推荐的设置。
[0143]或者控制器180或者280可以重新使用最后的用户输入或者用户选择设置。
[0144]相机环境设置应用步骤S910其特征在于,控制器180或者280将不同的设置应用于相机模块121中的每一个。例如,如果阵列相机100包括四个相机模块,则不同的分辨率条件可以被应用于各自的四个相机模块。或者其可以通过1、2、3、以及4秒钟的各自的时间延迟设置四个相机模块开始捕获图像。
[0145]随后,控制器180或者280可以响应于用户的拍摄命令通过对其已经应用两个或者更多个设置的多个相机模块121获取图像(S920),并且可以组合所获取的图像(S930)。由于控制器180或者280在至少两种不同的条件下组合捕获的视频或者图像,其能够生成高质量的最终数据。
[0146]在相机环境设置应用步骤S910中,控制器180或者280可以控制不同的分辨率和
中贞率设置的应用。
[0147]在这样的情况下,控制器180或者280可以基于从在图像组合步骤S930中对其已经应用低分辨率和高帧率拍摄条件的相机模块获取的图像,控制具有高分辨率和高帧率的图像的生成。
[0148]例如,多个相机模块121中的至少一个可以在低分辨率、快拍条件下获取图像,并且多个相机模块121中的至少一个可以在高分辨率、慢拍条件下获取图像。
[0149]在低分辨率、快拍条件下捕获的图像包含具有相对低的分辨率的许多帧,而在高分辨率、慢拍条件下捕获的图像包含相对少数目的帧,每个帧具有高分辨率。
[0150]因此,控制器180或者280可以基于通过诸如插值的算法在低分辨率条件下捕获的图像,来创建更多的图像。
[0151]另外,参考关于所获取的图像的时序信息,控制器180或者280可以通过以各种方式将低分辨率图像与高分辨率图像组合或合成来生成高分辨率、高帧率图像。例如,参考关于低分辨率图像的时序信息,控制器180或者280可以在高分辨率图像之间插入低分辨率图像。
[0152]此外,为了生成附加的高分辨率图像并且将它们插入到现有的高分辨率图像中,控制器180或者280可以检测与必要的时序时段相对应的低分辨率图像中的图像变化,并且在生成不能利用在高分辨率条件下捕获的图像来创建的对象或者区域中使用检测到的图像变化。
[0153]相反地,控制器180或者280可以将在低分辨率拍摄条件下捕获的图像的一些对象或者区域替换为在高分辨率拍摄条件下捕获的图像。
[0154]因为阵列相机100包括多个相机模块121,所以其可以在更多不同的拍摄条件下捕获图像并且组合它们。
[0155]例如,如果阵列相机100包括九个相机模块121,则其最多可以在九种不同的拍摄条件下捕获相同的对象。在这样的情况下,相机模块121可以捕获具有不同的帧率以及不同的分辨率的图像,从而在不同的时序处产生图像。
[0156]因此,能够获得关于相同的对象的在分辨率和时序中不同的多个采样图像并且通过各种已知的图像组合技术能够创建高质量的图像。
[0157]例如,控制器180或者280可以通过组合关于在与高分辨率图像的拍摄时序相邻的时序捕获的低分辨率图像中的每一个的像素信息,在高分辨率拍摄条件下捕获的图像中不存在的时序时段生成高分辨率图像评估。
[0158]基于运动的超分辨率算法是评估低分辨率图像之间的运动、补偿运动、并且然后组合低分辨率图像的像素值,从而恢复高分辨率图像的方法。图像之间的运动的精确评估对于通过基于运动的超分辨率算法的高分辨率图像的生成来说是重要的。因为运动评估利用更多的低分辨率图像来变得更加精确,所以产生的图像的质量取决于低分辨率图像的数目。
[0159]关于这一点,本发明能够进一步增加图像质量,因为借助于对其应用不同的设置的多个相机模块能够获取多个图像,特别地,具有各种分辨率的图像。
[0160]考虑到最终的图像质量也受在其它的图像组合技术中采样图像的数目的显著影响,所以在增加合成图像的质量中本发明是高效的。
[0161]根据本发明,能够基于从具有低分辨率、快拍设置的相机模块获取的图像和从具有高分辨率、慢拍设置的相机模块获取的图像生成具有高分辨率和高帧率的图像。
[0162]另外,本发明提供用于使用通过具有不同的分辨率和帧率的阵列相机捕获的图像来选择和提高视频质量的方法和设备。
[0163]为了防止在当在高分辨率和高帧率捕获图像时观察的低照明下的噪声和图像质量的降低,基于像素装仓(binning)通过低分辨率图像的快拍,能够提高低频区域的图像质量并且能够确保具有高帧率的图像,同时通过组合来自于高分辨率、慢拍图像中的图像可以恢复和生成高频率区域。
[0164]因此,本发明能够通过将不同的帧率应用于多个相机模块来减轻在快速捕获视频中涉及的分辨率限制。
[0165]另外,借助于小尺寸的相机模块或者低价格的相机模块,相对于如在传统技术中所实现的图像质量,本发明能够产生高质量视频。[0166]本发明能够获取视频,从该视频消除在低照明处引起的各种噪声分量,并且为此提高归因于低亮度的被降级的图像质量。
[0167]根据本发明,用户能够在各种相机模式下创建视频,并且选择性地存储和再生视频。用户能够选择性地存储和再生具有低分辨率、高帧率以及噪声少的视频,和具有高分辨率和低帧率的视频。
[0168]在图像组合步骤S930中,可以基于从已经应用低分辨率和高帧率的第一设置的相机模块获取的图像和从已经应用高分辨率和低帧率的第二设置的相机模块获取的图像来生成合成图像,并且合成图像可以与从已经应用比第二设置更高的分辨率和更低的帧率的第三设置的相机模块获取的图像组合。
[0169]图10 Ca)图不从已经应用低分辨率和闻巾贞率的第一设置的相机模块获取的图像1011至1018,图10 (b)图示从已经应用高分辨率和低帧率的第二设置的相机模块获取的图像1021至1024,以及图10 (c)图示从已经应用比第二设置更高的分辨率和更低的帧率的第三设置的相机模块获取的图像1031和1032。
[0170]为了在中间分辨率条件下获取的图像1021至1024中不存在的时序时段中生成图像,控制器180或者280可以参考在低分辨率条件下获取的图像1011至1018。
[0171]控制器180或者280可以使用对应于与在中间分辨率条件下获取两个图像1021和1022的相同的时序时段或者相似的时序时段的低分辨率图像1011至1014生成具有与中间分辨率图像相同或者相似的图像质量的高帧率图像。同样地,使用与时序时段对应的低分辨率图像1015至1018可以生成与在两个图像1022和1023之间的特定时序时段对应的图像。
[0172]通过组合从将第一和第二设置的图像与第三设置的图像1031和1032组合产生的合成图像可以生成高分辨率、高帧率图像,如在图11中所图示。当需要时,可以基于所有的合成图像和在不同的设置下,例如,在第一、第二以及第三设置下获取的图像,可以生成最终的合成图像。
[0173]另外,可以使用从已经应用不同于第三设置的第四设置的相机模块获取的图像来生成合成图像。即,通过对在更多其它的拍摄条件下获取的图像重复上述操作可以生成高质量图像。
[0174]在最高分辨率条件下捕获的图像被简单地插入到最终合成图像之间。因此,当要回放被组合的视频时,可以将可用的高分辨率图像的时序指示给用户,使得用户可以选择图像。
[0175]根据本发明的实施例,用户可以借助于具有多个相机模块121的阵列相机100在各种拍摄条件下同时捕获视频图像。
[0176]用户可以为每个相机模块自由地设置帧率、分辨率等等或者可以加载与拍摄模式有关的预设值并且为各自的相机模块设置被加载的值。
[0177]如果阵列相机100包括四个相机模块,则使用同时捕获的四个视频,S卩,具有被减轻噪声分量的高帧率图像和具有高频分量的低帧率图像,可以获取具有噪声少的高分辨率、高帧率视频。
[0178]根据本发明的实施例的用于操作阵列相机和移动终端的方法可以进一步包括基于通过多个相机模块获取的视频图像来生成深度图。[0179]在根据本发明的实施例的阵列相机中,设置能够被应用于各个单独的相机模块。另外,取决于阵列相机,不同的优化设置能够被应用于每个相机模块,并且在拍摄期间移动终端处于风景模式或者肖像模式中。
[0180]传感器单元240,特别地移动终端200中的运动传感器245可以感测关于移动终端200的角度信息。例如,角度信息可以是相对于x、y以及z轴关于移动终端200的角度信息。
[0181]运动传感器245的陀螺仪传感器可以感测相对于x、y以及z轴的角速度信息,并且基于角速度信息计算相对于x、y以及z轴的角度信息。
[0182]可替代地或者另外地,陀螺仪传感器可以感测相对于x、y以及Z轴的角速度信息,并且控制器280可以基于角速度信息计算相对于X、y以及Z轴的角度信息。
[0183]控制器280可以基于从传感器单元240接收到的感测值确定风景模式或者肖像模式,并且可以根据所确定的模式基于相机模块控制设置的应用。
[0184]特别地,如果指定基准相机以便于捕获用于图像组合的预览图像或者基准图像,则控制器280可以取决于风景模式或者肖像模式来控制基准相机的重新指定。
[0185]例如,在包括以2x2矩阵排列的四个相机模块的阵列相机的情况下,在位置(1,2)处的相机模块可以被指定为在风景模式下的基准相机,并且在位置(1,I)处的相机模块可以被指定为在肖像模式下的基准相机。
[0186]或者通过使用深度图定位对象,离该对象最近的相机可以被指定为基准相机。
[0187]根据本发明的实施例,在阵列相机中多个相机模块中的至少一个可以具有不同于其它的相机模块的放大率或者类型的镜头。
[0188]S卩,可以从阵列相机中的具有不同的光学镜头的相机模块获取各种图像。
[0189]例如,阵列相机100可以包括具有X0.5的放大率的镜头1210、具有XL 0的放大率的镜头1220、具有X2.0的放大率的镜头1230、以及具有X3.0的放大率的镜头1240,如在图12中所图示。
[0190]小尺寸的相机,诸如被包括在移动终端中的相机的缺点是由于有限的装置尺寸造成光学缩放的困难。
[0191]然而,根据本发明的实施例的阵列相机和移动终端能够通过同时使用具有不同的放大率的镜头来实现缩放功能。
[0192]借助于具有不同的放大率的镜头1210、1220、1230以及1240可以获取并且存储相同对象的各种图像1310、1320、1330以及1340。
[0193]当用户放大特定图像时,在图像质量方面,可以显示优于数字缩放的图像的光学缩放的图像。例如,如果用户选择放大特定图像1320,则被放大的图像1330可以被显示。如果用户选择缩小特定图像1320,则被缩小的图像1310可以被显示。
[0194]在图像切换期间,在光学缩放之间可以介入数字缩放以在光学缩放之间呈现平滑切换。
[0195]多个相机模块可以包括不同类型的镜头。例如,多个相机模块可以包括具有广角镜头的相机模块和具有长焦镜头的相机模块。
[0196]通过将个别的设置应用于本发明的阵列相机可以以定制的方式拍摄图片。
[0197]用户可以改变用于阵列相机100的相机模块121的包括曝光、视角等等的个别的设置,并且因此可以通过已经应用不同设置的相机模块121获取的个别的帧的图像配准(image registration)来获取自然定制的图片。
[0198]例如,在将设置应用于每个单独的相机模块之后,用户可以进入特定拍摄模式。
[0199]参考图15至图18,当特定拍摄模式被设置时,至少显示器151或者251的部分屏幕1510可以被划分为四个栅格,S卩,左上、右上、左下、以及右下区域。指示拍摄模式的对象1520可以进一步被显示在显示器151或者251的特定区域中。
[0200]阵列相机100的相机模块121自动地聚焦左上、右上、左下、以及右下,并且显示器151或者251通过组合从相机模块121获取的帧来显示预览图像1611至1614。预览图像1611至1614中的每一个对应于相机模块121中的一个。
[0201]用户可以放大或者缩小个别的栅格区域。图17图示通过使用与区域相对应的相机模块121的缩放功能放大右上和右下区域来显示被放大的预览图像1712和1714以及指示放大率的对象1721和1722的示例。
[0202]在拍摄的用户选择时,阵列相机100可以组合从相机模块121获取的图像并且存储合成图像,如在图18中所图示。
[0203]根据本发明的实施例,阵列相机100可以包括不同类型的镜头。
[0204]例如,在阵列相机100中具有广角镜头的相机模块可以与具有长焦镜头的相机模块交替地布置。
[0205]参考图19,具有广角镜头1910和长焦镜头1920的相机模块可以以如在图19 (a)中所图示的1x4矩阵或者以在图19 (b)中所示的2x2矩阵排列。
[0206]在这样的情况下,用于操作根据本发明的实施例的阵列相机和移动终端的方法可以进一步包括,从具有广角镜头的相机模块获取的图像中生成深度图并且从具有长焦镜头的相机模块获取的图像中提取对象区域。
[0207]图像组合步骤S930其特征可以在于,基于深度图对背景进行透视并且插入所提取的对象区域。
[0208]例如,如果广角镜头1910与长焦镜头1920被交替地布置,如在图19 (a)中所示,则广角镜头1910可以聚焦于除了对象之外的背景,而长焦镜头1920可以聚焦于前景中的对象。
[0209]图20 Ca)图示从广角镜头1910获取的示例性图像,并且图20 (b)图示从长焦镜头1920获取的示例性图像。
[0210]控制器180或者280可以从广角镜头1910获取的图像中提取深度图并且从长焦镜头1920获取的图像中单独地提取高分辨率对象区域。
[0211]由于广角拍摄,广角镜头1910在捕获广阔的、遥远的风景时是有利的。然而,因为在对象和相机之间的短距离而不便于利用广角镜头1910捕获诸如人的对象。
[0212]尽管有精确拍摄人的能力,但是长焦镜头1920易于不聚焦,从而呈现除了对象之外的背景模糊。
[0213]控制器180或者280可以基于所提取的深度图对背景进行透视并且组合背景与对象区域。
[0214]因此,可以获取高分辨率3D图像,如在图21中所图示。
[0215]在相机环境设置应用步骤S910中不同的曝光设置可以被应用于单独的相机模块或者单独的相机模块组。
[0216]或者可以使用闪光捕获处于更大亮度级别的图像。例如,可以通过使用或者不使用闪光或者通过变化曝光和闪光条件来设置不同的拍摄条件。除了曝光设置之外,借助于闪光可以获得处于更大亮度级别的图像。
[0217]图22图示其中通过至少两个单独的相机模块在不同的曝光条件下,同时接通或者关闭闪光灯,拍摄图片的示例。
[0218]根据本发明的实施例,可以获取具有各种亮度值的图像,如在图22中所图示,并且可以通过组合具有各种亮度级别的图像来创建高动态范围(HDR)图像,如在图23中所图
/Jn o
[0219]可以通过在各种曝光条件下拍摄图片、适当地提取被曝光的图片、以及组合它们来生成HDR图片。
[0220]根据本发明的实施例,可以使用多个相机拍摄不同亮度值的图片,并且从而通过组合它们可以更加快速地获得HDR图片。
[0221]根据本发明的实施例,因为可以存储在图22中图示的具有各种亮度值的图像和在图23中图示的合成的HDR图片用于管理,所以可以给用户提供各种W。
[0222]例如,当用户选择n上的图像的特定区域并且应用诸如顺时针旋转、逆时针旋转、或者左、右、上或者下触摸的指示方向的触摸输入时,控制器180或者280可以使特定区域变亮或者变暗。控制器180或者280可以识别与所选择的区域相同的区域并且将被识别的区域的亮度变成与所选择的区域的相同的级别。控制器180或者280可以基于在阵列相机100的相机模块之间的焦距差、步长等等识别区域。
[0223]图24图示其中当用户在图像中的人周围绘制顺时针方向的圆圈时控制器180或者280识别人并且使人变亮的示例,并且图25图示其中当用户在图像中的天空上绘制逆时针方向的圆圈时控制器180或者280识别天空或者使天空变暗的示例。
[0224]根据上面的描述显然的是,本发明能够以各种方式将设置应用于阵列相机的各个模块。
[0225]本发明能够使相机小型化并且能够获取高质量图像。此外,因为从多个相机获取各种图像并且进行组合,所以能够满足各种用户喜好并且能够增加用户便利。
[0226]根据前述示例性实施例的阵列相机、移动终端、以及用于操作其的方法不限于在此阐述的示例性实施例。因此,在此阐述的示例性实施例的变化和组合可以落入本发明的范围内。
[0227]本发明能够被实现为能够被写在计算机可读记录介质上并且因此能够由阵列相机和移动终端中的处理器读取的代码。计算机可读记录介质可以是其中以计算机可读方式存储数据的任何类型的记录装置。计算机可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光数据存储、以及载波(例如,通过因特网的数据传输)。可以将计算机可读记录介质分布在连接到网络的多个计算机系统上,使得计算机可读代码被写入其中并且以分散的方式从中执行。本领域的普通技术人员可以构造用于实现本实施例的程序、代码和代码段。
[0228]虽然参考本发明的示例性实施例已经特别地示出并且描述本发明,但是本领域的普通技术人员将理解的是,在没有脱离由下面的权利要求限定的本发明的范围和精神的情况下可以在其中进行形式上和细节上的各种改变。
【权利要求】
1.一种用于操作包括多个相机模块的阵列相机的方法,所述方法包括: 将不同于其它的相机模块的相机环境设置应用于所述多个相机模块中的至少一个; 通过所述多个相机模块获取图像;以及 组合所获取的图像。
2.根据权利要求1所述的方法,其中,所述应用包括根据用户设置输入或者预设设置值的加载将设置应用于所述多个相机模块。
3.根据权利要求1所述的方法,其中,所述应用包括将不同的设置应用于所述多个相机模块中的每一个。
4.根据权利要求1所述的方法,其中,所述应用包括将不同的分辨率和帧率设置应用于所述多个相机模块中的至少一个。
5.根据权利要求4所述的方法,其中,所述组合包括基于在低分辨率、快拍设置下从相机模块获取的图像和在高分辨率、慢拍设置下从相机模块获取的图像生成高分辨率、高帧率图像。
6.根据权利要求4所述的方法,其中,所述组合包括基于在低分辨率和高帧率的第一设置下从相机模块获取的图像和在相对于所述第一设置的高分辨率和低帧率的第二设置下从相机模块获取的图像生 成合成图像。
7.根据权利要求6所述的方法,其中,所述组合进一步包括基于在相对于所述第二设置的高分辨率和低帧率的第三设置下从相机模块获取的图像生成所述合成图像。
8.根据权利要求1所述的方法,进一步包括基于通过所述多个相机模块获取的图像生成深度图。
9.根据权利要求1所述的方法,其中,所述多个相机模块中的至少一个包括不同于所述其它的相机模块的放大率或者类型的镜头。
10.根据权利要求9所述的方法,其中,所述多个相机模块包括被交替地排列的具有广角镜头的相机模块和具有长焦镜头的相机模块。
11.根据权利要求10所述的方法,进一步包括: 从所述具有广角镜头的相机模块获取的图像中生成深度图;和 从所述具有长焦镜头的相机模块获取的图像中提取对象区域, 其中,所述组合包括基于所述深度图对背景区域进行透视并且插入所提取的对象区域。
12.根据权利要求1所述的方法,其中,所述应用包括将不同的曝光设置应用于所述多个相机模块中的至少一个。
13.一种用于操作移动终端的方法,所述移动终端具有包括多个相机模块的阵列相机,所述方法包括: 将不同于其它的相机模块的相机环境设置应用于所述多个相机模块中的至少一个; 通过所述多个相机模块获取图像;以及 组合所获取的图像。
14.根据权利要求13所述的方法,其中,所述应用包括将不同的分辨率和帧率设置应用于所述多个相机模块中的至少一个。
15.根据权利要求14所述的方法,其中,所述组合包括基于在低分辨率、快拍设置下从相机模块获取的图像和在高分辨率、慢拍设置下从相机模块获取的图像生成高分辨率、高帧率图像。
【文档编号】H04N5/372GK103813108SQ201310160851
【公开日】2014年5月21日 申请日期:2013年5月3日 优先权日:2012年11月15日
【发明者】李智弘, 沈恩志, 许亨茂, 都昊奭 申请人:Lg电子株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1