移动终端的制作方法

文档序号:14216584阅读:180来源:国知局

本公开涉及一种移动终端,并且更加具体地,涉及一种能够指定全方位背景的拍摄区域并且拍摄被指定的拍摄区域的移动终端,和移动终端的操作方法。



背景技术:

根据它们的移动性,终端通常可以被分类成移动/便携式终端或者固定终端。根据是否用户能够直接地携带终端,移动终端也可以被分类成手持式终端或者车载终端。

移动终端已经变成日益增长更多的功能。这样的功能的示例包括数据和语音通信、经由相机捕获图像和视频、记录音频、经由扬声器系统播放音乐文件、以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加的功能性,而其它的终端被配置为多媒体播放器。最近,移动终端已经被配置成接收允许观看诸如视频和电视节目的内容的广播和多播信号。

随着这样的功能变成多样化,移动终端能够支持诸如捕获图像或者视频,再生音乐或者视频文件、玩游戏、接收广播信号等等的更加复杂的功能。通过全面地和集中地实现这样的功能,移动终端可以以多媒体播放器或者设备的形式被体现。

最近,在与捕获全方位图像的捕获设备交互时使用移动终端。一般的相机可以捕获二维(2d)图像,但是360度相机可以通过拍摄三维(3d)空间来拍摄具有球形的全方位球形图像。获取的全方位图像可以被发送到移动终端并且被显示在显示器上。

在现有的360度相机中,可以拍摄全方位背景而不移动设备,但是不存在指定要被拍摄的区域的方式。即,因为不存在设置现有的360度相机的视角的方式,所以存在对于用户来说不能够仅拍摄所期待的区域的不便。



技术实现要素:

因此,本公开的目的是为了解决上述和其它的问题。

实施例提供一种能够设置全方位捕获设备的拍摄区域并且仅存储要被拍摄的部分的移动终端及其操作方法。

实施例也提供能够设置全方位捕获设备的至少一个拍摄区域的移动终端。

在一个实施例中,移动终端包括:相机;显示单元,该显示单元被配置成显示通过相机获取的预览图像;短程通信模块,该短程通信模块被配置成执行与拍摄全方位背景的全方位捕获设备的短程通信;以及控制器,该控制器被配置成接收用于基于预览图像设置全方位捕获设备的拍摄区域的请求并且响应于接收到的请求设置全方位捕获设备的拍摄区域。

根据本公开的各种实施例,用户可以通过与全方位捕获设备交互作用的移动终端容易地和直观地设置全方位捕获设备的视角或者拍摄区域。

根据本公开的各种实施例,用户可以改变全方位捕获设备的拍摄区域或者可以容易地添加拍摄区域。

根据本公开的各种实施例,移动终端可以仅存储被指定的拍摄区域而不存储从全方位捕获设备接收到的整个全方位图像。因此,可以节省存储器的存储空间。

根据在下文中给出的详细描述,本公开的应用的进一步范围将变得更加显然。然而,应理解的是,仅通过说明给出指示本发明的优选实施例的特定示例和详细描述,因为对本领域的技术人员来说本发明的精神和范围内的各种变化和修改将变得显然。

附图说明

图1a是根据本公开的移动终端的框图。

图1b和图1c是用于从不同的方向看到的移动终端的一个示例的概念视图。

图2是图示根据本公开的实施例的移动终端和全方位拍摄设备的配置的图。

图3是图示在全方位拍摄设备周围的全方位背景是可拍摄的图。

图4是图示根据本公开的实施例的移动终端和全方位拍摄设备的操作方法的梯形图。

图5a和图5b是图示根据本公开的实施例的设置全方位背景的拍摄区域并且在所设置的拍摄区域上显示信息的示例的图。

图6a至图7b是图示在全方位背景中设置拍摄区域的情况与在全方位背景中没有设置拍摄区域的情况之间的比较的图。

图8a和图8b是图示根据本公开的实施例的设置多个拍摄区域并且在多个设置的拍摄区域上显示信息的示例的图。

图9a和图9b是图示根据本公开的另一实施例的设置多个拍摄区域并且在多个拍摄区域上显示信息的示例的图。

图10a和图10b是图示根据本公开的实施例的如果预设的拍摄区域和要被另外设置的拍摄区域彼此重叠则组合拍摄区域的过程的图。

图11是图示根据本公开的实施例的指定与移动终端的位置有关的拍摄区域的示例的图。

图12a和图12b是图示根据本公开的实施例的设置在全方位背景中不被拍摄的区域的过程的图。

图13a和图13b是图示根据本公开的实施例的基于移动终端的移动速度全方位捕获设备的拍摄速度是可调节的图。

图14a至图14c是图示基于被显示在移动终端上的全方位图像改变全方位捕获设备的拍摄区域的示例的图。

图15a和图15b是图示当全方位捕获设备通过多个拍摄区域拍摄全方位背景时通过移动终端控制与拍摄区域相对应的图像或者删除拍摄区域的一部分的示例的图。

图16和图17是根据本公开的实施例的在设置拍摄区域的过程中通知拍摄区域偏离于可拍摄的区域的示例的图。

图18a和图18b是图示根据本公开的另一实施例的改变全方位捕获设备的拍摄区域的过程的图。

具体实施方式

参考附图,现在将根据在此公开的示例性实施例详细地给出描述。为了参考附图简要描述,相同的或者等效的组件可以被设有相同或者相似的附图标记,并且其描述将不会被重复。通常,诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此旨在仅有助于说明书的描述,并且后缀本身旨在没有给予任何特定的意义或者功能。在本公开中,为了简要,通常已经省略了在相关领域中对于普通技术人员来说公知的那些。附图被用于帮助容易地理解各种技术特征并且应理解附图没有限制在此提出的实施例。正因如此,本公开应被解释为延伸到除了在附图中特别陈述的之外的任何改变、等同物以及替代。

将要理解的是,尽管在此可以使用术语第一、第二等等以描述各种元件,但是这些元件不应被这些术语限制。这些术语通常仅被用于区分一个元件与另一个元件。

将要理解的是,如果元件被称为“连接”另一元件,则元件能够与另一元件连接或者也可以存在中间元件。相反地,如果元件被称为“直接地连接”另一元件,则不存在中间元件。

单数表示可以包括复数表示,除非根据上下文其表示明确不同的意义。在此使用诸如“包括”或者“具有”的术语并且应理解它们旨在指示在本说明书中公开的数个组件、功能或者步骤的存在,并且也理解可以同样地利用更多或者更少的组件、功能或者步骤。

可以使用各种不同类型的终端实现在此提出的移动终端。这样的终端的示例包括蜂窝电话、智能电话、用户装置、膝上型计算机、数字广播终端、个人数字助手(pda)、便携式多媒体播放器(pmp)、导航仪、便携式计算机(pc)、板式pc、平板pc、超级本、可佩戴装置(例如,智能手表、智能眼镜、头戴式显示器(hmd))等等。

仅通过非限制性示例,将会参考特定类型的移动终端进行进一步的描述。然而,这样的教导同等地应用于其它类型的终端,诸如在上面注明的那些类型。另外,这样的教导也可以被应用于诸如数字tv、桌上型计算机等等的固定终端。

现在参考图1a-1c,其中图1a是根据本公开的移动终端的框图,并且图1b和图1c是从不同的方向看到的移动终端的一个示例的概念视图。

示出移动终端100,其具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、以及电源单元190的各种组件。理解的是,不要求实现所有图示的组件,并且可以替换地实现更多或者更少的组件。

现在参考图1a,示出移动终端100,该移动终端100具有被配置有数个被共同实现的组件的无线通信单元110。例如,无线通信单元110通常包括允许在移动终端100与无线通信系统或者移动终端位于的网络之间的无线通信的一个或多个组件。

无线通信单元110通常包括一个或者多个模块,其允许诸如在移动终端100和无线通信系统之间的无线通信的通信、在移动终端100和另一移动终端之间的通信、在移动终端100与外部服务器之间通信。此外,无线通信单元110通常包括将移动终端100连接到一个或者多个网络的一个或者多个模块。为了有助于这样的通信,无线通信单元110包括一个或者多个广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、以及位置信息模块115中的一个或者多个。

输入单元120包括:用于获得图像或者视频的相机121;麦克风122,该麦克风122是一种用于输入音频信号的音频输入装置;以及用于允许用户输入信息的用户输入单元123(例如,触摸键、推动键、机械键、软键等等)。数据(例如,音频、视频、图像等等)通过输入单元120被获得并且可以根据装置参数、用户命令、以及其组合通过控制器180分析和处理。

通常使用被配置成感测移动终端的内部信息、移动终端的周围环境、用户信息等等的一个或者多个传感器实现感测单元140。例如,在图1a中,示出具有接近传感器141和照度传感器142的感测单元140。

必要时,感测单元140可以可替选地或者附加地包括其它类型的传感器或者装置,诸如触摸传感器、加速度传感器、磁传感器、g传感器、陀螺仪传感器、运动传感器、rgb传感器、红外(ir)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射监测传感器、热传感器、以及气体传感器等)、以及化学传感器(例如,电子鼻、医疗传感器、生物传感器等等),举了一些例子。移动终端100可以被配置成利用从感测单元140获得的信息,并且特别地,从感测单元140的一个或者多个传感器及其组合获得的信息。

输出单元150通常被配置成输出诸如音频、视频、触觉输出等等的各种类型的信息。示出具有显示单元151、音频输出模块152、触觉模块153、以及光学输出模块154的输出单元150。

显示单元151可以具有与触摸传感器的层间结构或者集成结构以便于促成触摸屏幕。触摸屏幕可以在移动终端100和用户之间提供输出接口,并且用作在移动终端100和用户之间提供输入接口的用户输入单元123。

接口单元160用作对接能够被耦合到移动终端100的各种类型的外部装置。例如,接口单元160可以包括任何有线或者无线端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(i/o)端口、视频i/o端口、耳机端口等等。在一些情况下,响应于被连接到接口单元160的外部装置,移动终端100可以执行与被连接的外部装置相关联的各种控制功能。

存储器170通常被实现为存储数据以支持移动终端100的各种功能或者特征。例如,存储器170可以被配置成存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或者指令等等。经由无线通信可以从外部服务器下载这些应用程序中的一些。在制造或者装运时其它的应用程序可以被安装在移动终端100内,其通常是用于移动终端100的基本功能(例如,接收呼叫、拨打电话、接收消息、发送消息等等)的情况。通常,应用程序被存储在存储器170中、安装在移动终端100中,并且通过控制器180执行以执行用于移动终端100的操作(或者功能)。

除了与应用程序相关联的操作之外,控制器180通常用作控制移动终端100的整体操作。控制器180能够通过处理通过在图1a中描述的各种组件输入或者输出的信号、数据、信息等等,或者激活被存储在存储器170中的应用程序来提供或者处理适合于用户的信息或者功能。作为一个示例,控制器180根据已经被存储在存储器170中的应用程序的执行控制在图1a-1c中图示的一些组件或者所有组件。

电源单元190能够被配置成接收外部电力或者提供内部电力以便于供应对于操作被包括在移动终端100中的元件和组件所要求的适当的电力。电源单元190可以包括电池,并且电池可以被配置成被嵌入在终端主体中,或者被配置成从终端主体可拆卸。

在下文中,在描述通过移动终端100实现的各种实施例之前,将会更加详细地给出参考图1的前述组件的描述。关于无线通信单元110,广播接收模块111通常被配置成经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道、或者两者。在一些实施例中,可以利用两个或者更多个广播接收模块111以有助于同时接收两个或者更多个广播信道,或者支持广播信道当中的切换。

系统能够产生和发送广播信号和/或广播相关信息,或者服务器能够接收事先产生的广播信号和/或者广播相关联信息,并且将这样的项目发送到移动终端。广播信号可以使用任何tv广播信号、无线电广播信号、数据广播信号、以及其组合等等来实现。在一些情况下广播信号可以进一步包括与tv或者无线电广播信号相结合的数据广播信号。

可以根据各种技术标准或者广播方法(例如,国际标准化组织(iso)、国际电工委员会(iec)、数字视频广播(dvb)、高级电视系统委员会(atsc)等等)中的任意一个编码广播信号,用于数字广播信号的发送和接收。广播接收模块111能够使用适合于所采用的发送方法的方法接收数字广播信号。

广播相关信息的示例可以包括与广播频道、广播节目、广播事件、广播服务提供商等等相关联的信息。也可以经由移动通信网络提供广播相关信息,并且在这样的情况下,通过移动通信模块112接收。

可以以各种格式实现广播相关信息。例如,广播相关信息可以包括数字多媒体广播(dmb)的电子节目指南(epg)、数字视频广播手持(dvb-h)的电子服务指南(esg)等等。经由广播接收模块111接收到的广播信号和/或广播相关信息可以被存储在合适的设备,诸如存储器170中。

移动通信模块112能够将无线信号发送到一个或者多个网络实体并且/或者从一个或者多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等等。这样的网络实体形成移动通信网络的一部分,其根据用于移动通信(例如,全球移动通信系统(gsm)、码分多址(cdma)、cdma2000(码分多址2000)、ev-do(增强的语音数据优化或者仅增强的语音数据)、宽带cdma

(wcdma)、高速下行链路分组接入(hsdpa)、高速上行链路分组接入(hsupa)、长期演进(lte)、高级长期演进(lte-a)等等)的技术标准或者通信方法构造。经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号、或者各种格式的数据以支持文本和多媒体消息的通信。

无线互联网模块113被配置成有助于无线互联网接入。此模块可以被内部地或者外部地耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。

这样的无线互联网接入的示例包括无线lan(wlan)、无线保真(wi-fi)、wi-fi直连、数字生活网络联盟(dlna)、无线宽带(wibro)、全球微波接入互操作(wimax)、高速下行链路分组接入(hsdpa)、高速上行链路分组接入(hsupa)、长期演进(lte)、高级lte(lte-a)等等。无线互联网模块113可以根据一个或者多个这样的无线互联网技术,或者其它的互联网技术发送/接收数据。

在一些实施例中,如果根据作为移动通信网络的一部分的例如wibro、hsdpa、hsupa、gsm、cdma、wcdma、lte、lte-a等等实现无线互联网接入,则无线互联网模块113执行这样的无线互联网接入。这样,无线互联网模块113可以与移动通信模块112协作,或者用作移动通信模块112。

短程通信模块114被配置成有助于短程通信。适合于实现这样的短程通信的技术包括:蓝牙(bluetoothtm)、射频识别(rfid)、红外数据协会(irda)、超宽带(uwb)、紫蜂(zigbee)、近场通信(nfc)、无线保真(wi-fi)、wi-fi直连、无线usb(无线通用串行总线)等等。经由无线局域网,短程通信模块114通常支持在移动终端100和无线通信系统之间的无线通信,在移动终端100和另一移动终端100之间的通信、或者在移动终端和另一移动终端100(或者外部服务器)位于的网络之间的通信。无线局域网的一个示例是无线个人域网。

在一些实施例中,另一移动终端(可以类似于移动终端100配置)可以是可佩戴设备,例如,智能手表、智能眼镜或者头戴式显示器(hmd),其能够与移动终端100交换数据(或者以其它方式与移动终端100协作)。短程通信模块114可以感测或者识别可佩戴设备,并且允许在可佩戴设备和移动终端100之间的通信。另外,当感测到的可佩戴设备是被授权与移动终端100通信的设备时,例如,控制器180可以使在移动终端100中处理的数据的至少一部分经由短程通信模块114传输到可佩戴设备。因此,可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如,如果在移动终端100中接收到呼叫,则用户可以使用可佩戴设备应答呼叫。而且,当在移动终端100中接收到消息时,用户能够使用可佩戴设备检查接收到的消息。

位置信息模块115通常被配置成检测、计算、导出或者以其它方式识别移动终端的位置。作为示例,位置信息模块115包括全球定位系统(gps)模块、wi-fi模块、或者两者。如有必要,位置信息模块115可以替换地或附加地与无线通信单元110的任何其它模块起作用以获得与移动终端的位置有关的数据。

作为一个示例,如果移动终端使用gps模块,则可以使用从gps卫星发送的信号获取移动终端的位置。作为另一示例,当移动终端使用wi-fi模块时,能够基于将无线信号发送到wi-fi模块或者从wi-fi模块接收无线信号的无线接入点(ap)有关的信息获取移动终端的位置。

输入单元120可以被配置成允许对移动终端100的各种类型的输入。这样的输入的示例包括音频、图像、视频、数据、以及用户输入。使用一个或者多个相机121经常获得图像和视频输入。这样的相机121可以处理在视频或者图像捕获模式下通过图像传感器获得的静止图片或者视频的图像帧。被处理的图像帧能够被显示在显示单元151上或者被存储在存储器170中。同时,相机121可以以矩阵配置排列以允许具有多个角度或者焦点的多个图像被输入到移动终端100。而且,相机121可以位于立体排列以获取用于实现立体图像的左图像和右图像。

麦克风122一般被实现为准许将音频输入到移动终端100。根据在移动终端100中执行的功能能够以各种方式能够处理音频输入。如有必要,麦克风122可以包括各种噪声去除算法以去除在接收外部音频信号的过程中产生的不想要的噪声。

用户输入单元123是允许用户输入的组件。这样的用户输入可以使控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件中的一个或者多个(例如,机械键、位于移动终端100的前和/或后表面或者侧表面上的按钮、薄膜开关、滚动轮、滚动开关等等)、或者触摸灵敏的输入元件等等。作为一个示例,触摸灵敏的输入元件可以是通过软件处理被显示在触摸屏上的虚拟键或者软键或者视觉键、或者位于在除了触摸屏之外的位置处的移动终端上的触摸键。另一方面,虚拟键或者视觉键可以以例如,图形、文本、图标、视频、或者其组合的各种形状显示在触摸屏上。

感测单元140通常被配置成感测移动终端的内部信息、移动终端的周围环境信息、用户信息等等中的一个或者多个。控制器180通常与感测单元140协作以基于感测信号控制移动终端100的操作或执行与被安装在移动终端中的应用程序相关联的数据处理、功能或者操作。使用任何种类的传感器可以实现感测单元140,现在将会更加详细地描述其中的一些。

接近传感器141指的是在没有机械接触的情况下通过使用磁场、红外线等等感测接近表面的对象、或者位于表面附近的对象的存在或者不存在的传感器。接近传感器141可以被布置在通过触摸屏覆盖的移动终端的内部区域处,或者触摸屏附近。

例如,接近传感器141可以包括任何透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。当触摸屏被实现为电容型时,接近传感器141能够通过电磁场响应于具有导电性的对象的接近的变化来感测指示器相对于触摸屏的接近。在这样的情况下,触摸屏(触摸传感器)也可以被归类成接近传感器。

术语“接近触摸”将会在此被经常引用以表示其中指示器被定位为接近触摸屏而没有接触触摸屏的场景。术语“接触触摸”将会在此被经常引用以表示其中指示器物理接触触摸屏的场景。对于与指示器相对于触摸屏的接近触摸相对应的位置,这样的位置将会对应于其中指示器垂直于触摸屏的位置。接近传感器141可以感测接近触摸,和接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等等)。

通常,控制器180处理与通过接近传感器141感测到的接近触摸和接近触摸模式相对应的数据,并且使在触摸屏上能够输出视觉信息。另外,根据是否相对于触摸屏上的点的触摸是接近触摸或者接触触摸,控制器180能够控制移动终端100执行不同的操作或者处理不同的数据。

使用任何各种触摸方法,触摸传感器能够感测被施加到诸如显示单元151的触摸屏的触摸。这样的触摸方法的示例包括电阻型、电容型、红外型、以及磁场型等等。

作为一个示例,触摸传感器可以被配置成将被施加到显示单元151的特定部分的压力的变化转换成电输入信号,或者将在显示单元151的特定部分处出现的电容转换成电输入信号。触摸传感器也可以被配置成不仅感测被触摸的位置和被触摸的区域,而且感测触摸压力和/或触摸电容。触摸对象通常被用于将触摸输入施加到触摸传感器。典型的触摸对象的示例包括手指、触摸笔、触笔、指示器等等。

如果通过触摸传感器感测触摸输入,则相应的信号可以被传送到触摸控制器。触摸控制器可以处理接收到的信号,并且然后将相应的数据传送到控制器180。因此,控制器180可以感测已经触摸显示单元151的哪一个区域。在此,触摸控制器可以是与控制器180分离的组件、控制器180、或者其组合。

在一些实施例中,控制器180可以根据触摸了触摸屏或者除了触摸屏之外被设置的触摸键的触摸对象的类型执行相同或者不同的控制。例如,基于移动终端100的当前操作状态或者当前执行的应用程序,可以决定根据提供触摸输入的对象是否执行相同或者不同的控制。

触摸传感器和接近传感器可以被单独地或者组合实现,以感测各种类型的触摸。这样的触摸包括短(或者轻敲)触摸、长触摸、多点触摸、拖动触摸、轻击触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。

如有必要,超声传感器可以被实现以使用超声波识别与触摸对象有关的位置信息。例如,控制器180可以基于通过照度传感器和多个超声传感器感测到的信息计算波生成源的位置。因为光比超声波快得多,所以光到达光学传感器的时间远远比超声波到达超声传感器的时间短。使用此事实可以计算波生成源的位置。例如,可以基于光作为参考信号使用与超声波到达传感器的时间的时间差计算波生成源的位置。

相机121通常包括至少一个相机传感器(ccd、cmos等等)、光传感器(或者图像传感器)、以及激光传感器。

实现具有激光传感器的相机121可以允许相对于3d立体图像的物理对象的触摸的检测。光传感器可以被层压在显示设备上,或者与显示设备重叠。光传感器可以被配置成扫描接近触摸屏的物理对象的移动。更加详细地,光传感器可以包括在行和列处的光电二极管和晶体管以使用根据被施加的光的量改变的电信号扫描在光传感器处接收到的内容。即,光传感器可以根据光的变化计算物理对象的坐标从而获得物理对象的位置信息。

显示单元151通常被配置成输出在移动终端100中处理的信息。例如,显示单元151可以显示在移动终端100处执行的应用程序的执行屏幕信息或者响应于执行屏幕信息的用户界面(ui)和图形用户界面(gui)信息。

在一些实施例中,显示单元151可以被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等等的立体显示方案。

通常,3d立体图像可以包括左图像(例如,左眼图像)和右图像(例如,右眼图像)。根据如何将左和右图像组合成3d立体图像,3d立体成像方法能够被划分为其中左和右图像位于帧中的上和下的上下方法、其中左和右图像位于帧中的左右的左到右(左到右或者并排)方法、其中左和右图像以贴片的形式定位的棋盘方法、其中左和右图像通过列和行可替选地放置的隔行扫交错方法、以及其中基于时间左和右图像被可替选地显示的时间序列(或者逐帧)的方法。

而且,至于3d缩略图图像,从原始的图像帧的左图像和右图像能够分别产生左图像缩略图和右图像缩略图,并且然后被组合以产生单个3d缩略图图像。通常,术语“缩略图”可以被用于指代被缩小的图像或者被缩小的静止图像。通过与屏幕上的左图像和右图像之间的视差相对应的深度,利用其间的水平距离差可以显示被产生的左图像缩略图和右图像缩略图,从而提供立体空间感。

使用立体处理单元可以在立体显示单元上显示用于实现3d立体图像所需的左图像和右图像。立体处理单元能够接收3d图像并且提取左和右图像,或者能够接收2d图像并且将其变成左图像和右图像。

音频输出模块152通常被配置成输出音频数据。可以从任何数量的不同的来源获得这样的音频数据,使得可以从无线通信单元110接收音频数据或者可以已经将其存储在存储器170中。可以在诸如信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等的模式期间输出音频数据。音频输出模块152能够提供与由移动终端100执行的特定功能(例如,呼叫信号接收声音、消息接收声音等等)有关的音频输出。音频输出模块152也可以被实现为接收器、扬声器、蜂鸣器等等。

触觉模块153能够被配置成产生用户能够感觉、感知、或者以其它方式体验的各种触觉效果。通过触觉模块153产生的触觉效果的典型示例是振动。能够通过用户选择或者通过控制器进行设置来控制通过触觉模块155产生的振动的强度、模式等等。例如,触觉模块153可以以组合的方式或者顺序的方式输出不同的振动。

除了振动之外,触觉模块153还能够生成各种其它的触觉效果,包括通过诸如垂直移动以接触皮肤的针排列的刺激的效果、通过喷孔或者吸入口的空气的喷射力或者吸力、对皮肤的触摸、电极的接触、静电力、通过使用能够吸收或者产生热的元件再现冷和暖的感觉的效果等等。

触觉模块153也能够被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感觉触觉效果,以及通过直接接触传递触觉效果。根据移动终端100的特定配置也可以设置两个或者更多个触觉模块153。

光学输出模块154能够使用光源的光输出用于指示事件产生的信号。在移动终端100中产生的事件的示例可以包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等等。

通过光学输出模块154输出的信号可以以移动终端发射单色光或者具有多种颜色的光的方式实施。例如,当移动终端感测用户已经检查了产生的事件时信号输出可以被结束。

接口单元160用作用于要连接到移动终端100的外部设备的接口。例如,接口单元160能够接收从外部设备发送的数据,接收电力以传送到移动终端100内的元件和组件,或者将移动终端100的内部数据发送到这样的外部设备。接口单元160可以包括有线或者无线头戴式受话器端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(i/o)端口、视频i/o端口、耳机端口等等。

识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可以包括用户识别模块(uim)、订户识别模块(sim)、通用订户识别模块(usim)等等。另外,具有识别模块的设备(在此也被称为“识别设备”)可以采用智能卡的形式。因此,识别设备经由接口单元160能够与终端100相连接。

如果移动终端100与外部托架相连接,则接口单元160能够用作允许电力从托架供应到移动终端100的通道或者可以用作允许用户从托架输入的各种命令信号传递到移动终端的通道。从托架输入的各种命令信号或者电力可以作为用于识别移动终端被正确地安装在托架上的信号操作。

存储器170能够存储程序以支持控制器180的操作并且存储输入/输出数据(例如,电话簿、消息、静止图像、视频等等)。存储器170可以存储与响应于触摸屏上的触摸输入输出的各种模式的振动和音频有关的数据。

存储器170可以包括一种或者多种类型的存储介质,包括闪存型、硬盘型、固态盘(ssd)型、硅盘型、多媒体卡式、卡型存储器(例如,sd或dx存储器等)、随机存取存储器(ram)、静态随机存取存储器(sram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、可编程只读存储器(prom)、磁存储器、磁盘、光盘等等。也可以关于在诸如互联网的网络上执行存储器170的存储功能的网络存储设备操作移动终端100。

控制器180可以典型地控制移动终端100的一般操作。例如,如果移动终端的状态满足预设条件,则控制器180可以设置或者释放用于限制用户输入与应用有关的控制命令的锁定状态。

控制器180也能够执行与语音呼叫、数据通信、视频呼叫等等相关联的控制和处理,或者执行模式识别处理以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。另外,控制器180能够控制这些组件中的一个或者组合以便于实现在此公开的各种示例性实施例。

电源单元190接收外部电力或者提供内部电力并且供应对于操作被包括在移动终端100中的各自的元件和组件所需的适当的电力。电源单元190可以包括电池,该电池通常是可充电的或者可拆卸地耦合到终端主体,用于充电。

电源单元190可以包括连接端口。连接端口可以被配置为接口单元160的一个示例,用于供应电力以对电池再充电的外部充电器被电气地连接到该接口单元160。

作为另一示例,电源单元190可以被配置成在没有使用连接端口的情况下以无线的方式对电池再充电。在本示例中,使用以磁感应为基础的感应耦合方法或者以电磁谐振为基础的电磁谐振耦合方法,电源单元190能够接收从外部无线电力发射器传递的电力。

可以使用例如软件、硬件、或者其任何组合,以计算机可读介质、机器可读介质、或者类似介质实现在此描述的各种实施例。

参考图1b和图1c,参考直板式终端主体,描述移动终端100。然而,移动终端100可以替选地已各种不同的配置中的任意一种来实现。这样的配置的示例包括手表式、夹式、眼镜型、或者折叠式、翻盖式、滑盖式、摇摆式、旋转式等的各种结构,其中两个或者更多个主体以相对可移动的方式被相互组合。在此的讨论将常常涉及特定型的移动终端(例如,直板式、手表式、眼镜型等等)。然而关于特定型移动终端的这种教导也将通常应用到其它型移动终端。

移动终端100将通常包括形成终端的外观的壳体(例如,外壳、外罩、盖等)。在本实施例中,壳体可以被划分成前壳体101和后壳体102。各种电子组件可以被合并在前壳体101和后壳体102之间形成的空间中。至少一个中间壳体可以被附加地布置在前壳体和后壳体101和102之间。

显示单元151能够被布置在终端主体的前表面上以输出信息。如所图示的,显示单元151的窗口151a能够被安装到前壳体101使得与前壳体101一起形成终端主体的前表面。

在一些实施例中,电子组件也可以被安装到后壳体102。这样的电子组件的示例可以包括可拆卸的电池、标识模块、存储卡等。用于覆盖电子组件的后盖103可以被可拆卸地耦合到后壳体102。因此,当从后壳体102拆卸后盖103时,被安装到后壳体102的电子组件可以被外部地暴露。

如所图示的,如果后盖103被耦合到后壳体102,则后壳体102的侧表面可以被部分地暴露。在一些情况下,在耦合时,后壳体102也可以被后盖103完全地遮盖。在一些实施例中,后盖103可以包括用于外部地暴露相机121b或者音频输出模块152b的开口。

壳体101、102、103可以通过注入成型合成树脂形成或者可以由例如不锈钢(sts)、铝(al)、钛(ti)等的金属形成。作为多个壳体形成用于容纳组件的内部空间的示例的替选,移动终端100可以被配置使得一个壳体形成内部空间。在本实例中,具有连体的移动终端100以合成树脂或者金属从侧表面延伸到后表面的方式被形成。

如有必要,移动终端100可以包括防水单元(未示出),用于防止水引入到终端主体。例如,防水单元可以包括防水构件,其位于窗口151a和前壳体101之间、在壳体101和后壳体102之间、或者后壳体102和后盖103之间,如果这些壳体被耦合则密闭地密封内部空间。

移动终端可以包括显示单元151、第一和第二音频输出模块152a/152b、接近传感器141、照度传感器142、光学输出模块154、第一和第二相机121a/121b,、第一和第二操纵单元123a/123b、麦克风122、接口单元160等。

将会针对图1b和图1c示出的的移动终端100进行描述。显示单元151、第一音频输出模块152a、接近传感器141、照度传感器142、光学输出模块154、第一相机121a以及第一操纵单元123a被布置在终端主体的前表面上,第二操纵单元123b、麦克风122以及接口单元160被布置在终端主体的侧表面上,并且第二音频输出模块151b和第二相机121b被布置在终端主体的后表面上。

然而,将理解可替选的布置是可能的,并且在本公开的教导内。一些组件可以省略或者重新布置。例如,第一操纵单元123a可以不被布置在终端主体的另一表面上,并且第二音频输出模块152b可以被布置在终端主体的侧表面上。

显示单元151输出在移动终端100中处理的信息。显示单元151能够使用一个或多个合适的显示装置。例如,这样合适的显示装置的示例包括液晶显示器(lcd)、薄膜晶体管-液晶显示器(tft-lcd)、有机发光二极管(oled)、柔性显示器、3维(3d)显示器、以及电子墨显示器,以及其组合。

可以使用能够实现相同或者不同显示技术的两个显示装置来实现显示单元151。例如,多个显示单元151可以被布置在一个侧面上以相互分开,或者这些装置可以被集成,或者这些装置可以被布置在不同的表面上。

显示单元151也能够包括触摸传感器,该触摸传感器感测在显示单元处接收到的触摸输入。如果触摸被输入到显示单元151,则触摸传感器可以被配置成感测此触摸,并且控制器180(例如)能够生成与触摸相对应的控制命令或者其它信号。以触摸方式输入的内容可以是文本或者数值,或者能够以各种模式指示或者指定的菜单项目。

触摸传感器可以以被布置在窗口151a和窗口151a的后表面上的显示器之间的具有触摸图案的膜的形式,或者被直接地构图在窗口151a的后表面上的金属线来配置。或者,触摸传感器可以与显示器集成地形成。例如,触摸传感器可以被布置在显示器的基板上或者显示器内。

显示单元151也能够与触摸传感器一起形成触摸屏。在此,触摸屏可以用作用户输入单元123(参见图1a)。因此,触摸屏可以替换第一操纵单元123a的功能中的至少一些。

可以以用于输出语音音频、报警声音或者多媒体音频再现的扬声器的形式实现第一音频输出模块152a。

显示单元151的窗口151a将典型地包括用于允许从第一音频输出模块152a产生的音频穿过的孔径。一个备选是允许音频沿着结构主体之间的组装间隙(例如,在窗口151a和前壳体101之间的间隙)释放。在本实例中,被独立地形成以输出音频声音的孔可以不被看到或者在外观上以其它方式被隐藏,从而进一步简化移动终端100的外观的制造。

光学输出模块154可以输出用于指示事件产生的光。在移动终端100中产生的事件的示例包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等。如果感测到用户的事件查看,则控制器可以控制光学输出单元154以停止光的输出。

第一相机121可以处理在视频呼叫模式或者捕获模式下通过图像传感器获得的静止或者运动图像的图像帧。因此,处理的图像帧可以被显示在显示单元151上或者被存储在存储器170中。

第一和第二操纵单元123a和123b是用户输入单元123的示例,通过用户可以对其进行操纵以将输入提供给移动终端100。通常,第一和第二操纵单元123a和123b也可以被称为操纵部分,并且可以采用允许用户执行诸如触摸、推动、滚动等等的操纵的任何触觉方法。第一和第二操纵单元123a和123b也可以采用允许用户执行诸如接近触摸、悬停等等的操纵的任何非触觉的方法。

图1b图示作为触摸键的第一操纵单元123a,但是可能的替选包括机械键、推动键、触摸键以及其组合。

可以以各种方式使用在第一和第二操纵单元123a和123b处接收到的输入。例如,第一操纵单元123a可以由用户使用以将输入提供给菜单、主屏键、取消、搜索等等,并且第二操纵单元123b可以由用户使用以提供输入以控制从第一或者第二音频输出模块152a或者152b输出的音量级,切换到显示单元151的触摸识别模式等等。

作为用户输入单元123的另一示例,后输入单元(未示出)可以位于终端主体的后表面上。后输入单元能够由用户操纵以将输入提供给移动终端100。可以以各种不同的方式使用输入。例如,用户可以使用后输入单元以提供用于从第一或者第二音频输出模块152a或者152b输出的电源开/关、开始、结束、滚动、控制音量级的输入,切换到显示单元151的触摸识别模式等等。后输入单元可以被配置成允许触摸输入、推动输入或者其组合。

后输入单元可以被设置成在终端主体的厚度方向中重叠前表面的显示单元151。作为一个示例,后输入单元可以被设置在终端主体的后表面的上端部分上,使得如果用户使用一只手抓住终端主体则用户能够使用食指容易地操纵它。可替选地,后输入单元能够被定位在终端主体的后侧的至多任何位置处。

包括后输入单元的实施例可以实现后输入单元中的第一操纵单元123a的功能的一些或者全部。这样,在其中从前侧省略第一操纵单元123a的情形下,显示单元151能够具有更大的屏幕。

作为又一个替选,移动终端100可以包括手指扫描传感器,该手指扫描传感器扫描用户的指纹。因此,控制器180可以使用通过手指扫描传感器感测的指纹信息作为认证过程的一部分。手指扫描传感器可以被安装在显示单元151或者用户输入单元123中。

麦克风122被示出为位于移动终端100的末端处,但是其他位置是可能的。如有必要,多个麦克风可以被实现,利用这样的布置允许接收立体声音。

接口单元160可以用作允许移动终端100与外部设备对接的路径。例如,接口单元160可以包括用于连接到另一设备(例如,耳机、外部扬声器等)的连接终端、用于近场通信的端口(例如,红外数据协会(irda)端口、蓝牙端口、无线lan端口等)、或者用于将电力供应到移动终端100的电源终端中的一个或多个。接口单元160可以以用于容纳诸如订户标识模块(sim)、用户标识模块(uim)、或者用于信息存储的存储器卡的外部卡的插槽的形式来实现。

第二相机121b被示出为位于终端主体的后侧处,并且包括与第一相机单元121a的图像捕获方向大体上相反的图像捕获方向。如有必要,第二相机121b可以可替选地位于其他位置,或者使其可移动,以便于具有与被示出的图像捕获方向不同的图像捕获方向。

第二相机121b可以包括沿着至少一条线布置的多个透镜。多个透镜也可以以矩阵配置来布置。相机可以被称为“阵列相机”。如果第二相机121b被实现为阵列相机,则可以使用多个透镜以各种方式捕获图像以及图像具有更好的质量。

如在图1c中所示,闪光灯124被示出为与第二相机121b相邻。如果通过第二相机121b捕获主题的图像,则闪光灯124可以照明主题。

如在图1c中所示,第二音频输出模块152b能够位于终端主体上。第二音频输出模块152b可以结合第一音频输出模块152a来实现立体声功能,并且也可以被用于实现用于呼叫通信的扬声器电话模式。

用于无线通信的至少一个天线可以位于终端主体上。天线可以被安装在终端主体中或者通过壳体形成。例如,配置广播接收模块111的一部分的天线可以缩回到终端主体中。可替选地,使用被附接到后盖103的内表面的膜、或者包括导电材料的壳体,可以形成天线。

用于将电力供应到移动终端100的电源单元190可以包括电池191,该电池191被安装在终端主体中或者可拆卸地耦合到终端主体的外部。电池191可以经由连接到接口单元160的电源线缆来接收电力。此外,使用无线充电器以无线方式能够对电池191充电。通过电磁感应或者电磁谐振可以实现无线充电。

后盖103被示出为耦合到用于屏蔽电池191的后壳体102,以防止电池191的分离,并且保护电池191免受外部冲击或者外来物质的影响。如果从终端主体可拆卸电池191,则后壳体103可以被可拆卸地耦合到后壳体102。

用于保护外观或者协助或者扩展移动终端100的功能的附件也可以被提供在移动终端100上。作为附件的一个示例,可以提供用于覆盖或者容纳移动终端100的至少一个表面的盖或者袋。盖或者袋可以与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于协助或者扩展对触摸屏的触摸输入的触摸笔。

图2是图示根据本公开的实施例的移动终端100和全方位捕获设备200的配置的图。

仅在图2中图示在图1中示出的移动终端100中的元件的一部分。在图2中示出的移动终端100的配置的描述被替换成图1的描述。

全方位捕获设备200可以包括图像获取单元210、短程通信模块230、传感器250、以及控制器290。

图像获取单元210可以通过拍摄全方位捕获设备200周围的全方位背景获取全方位图像。全方位图像可以具有稍后描述的图3的球形。全方位图像可以被称为360度图像。

图像获取单元210可以包括多个相机。在图2的示例中图示前相机211和后相机213,但是本公开不限于此。三个或者更多个相机可以被设置在全方位捕获设备200中。

前相机211和后相机213均可以包括具有180°或者更多的视角的透镜。前相机211和后相机213可以均通过鱼眼镜头拍摄全方位背景。

控制器290可以通过混合通过球形的鱼眼镜头获取的两个全方位部分图像产生全方位图像。

短程通信模块230可以将通过控制器290产生的全方位图像无线地发送到移动终端100,全方位图像具有球形。短程通信模块230可以通过使用wi-fi直连、蓝牙、以及wi-fi的任意一个通信规范将全方位图像发送到移动终端100,但是通信规范仅是示例。

除了短程通信模块230,全方位捕获设备200还可以包括诸如usb接口的有线通信接口,并且通过有线通信接口执行与移动终端100的通信。

传感器250可以包括陀螺仪传感器和加速度传感器中的至少一个。

控制器290可以控制全方位捕获设备200的整体操作。

另外,全方位捕获设备200可以包括至少一个麦克风。

图3是图示在全方位捕获设备200周围的全方位背景是可拍摄的图。

全方位捕获设备200可以拍摄全方位背景。全方位捕获设备200可以拍摄相对于全方位捕获设备200被放置的水平面的垂直下区域和垂直上区域。即,全方位设备200可以获取具有球形并且对应于与全方位捕获设备200有关的全方位背景的全方位图像300。获取的全方位图像300可以被发送到移动终端100。

移动终端100的显示单元151可以显示与全方位图像300的特定区域相对应的部分图像。例如,移动终端100的显示单元151可以显示与全方位图像300的第一区域相对应的第一部分图像310和与其第二区域相对应的第二部分图像330。

根据用户的设置可以改变通过显示单元151显示的部分图像并且将其设置为默认值。

图4是图示根据本公开的实施例的移动终端100和全方位捕获设备200的操作方法的梯形图。

首先,移动终端100和全方位捕获设备200可以通过短程无线通信被相互连接(s401)。

全方位捕获设备200通过图像获取单元210拍摄全方位背景(s403)并且将通过拍摄全方位背景获取的全方位图像发送到移动终端100(s405)。

在实施例中,全方位捕获设备200的控制器290可以通过短程通信模块230将全方位图像发送到移动终端100的短程通信模块114。

在实施例中,全方位捕获设备200的控制器290可以将实时获取的全方位图像发送到移动终端100。

同时,移动终端100的控制器180通过显示单元151显示通过被设置在移动终端100中的相机121获取的图像(s407)。

即,移动终端100的控制器180可以显示通过被设置在移动终端100本身中的相机121获取的预览图像替代从全方位捕获设备200接收到的全方位图像。

移动终端100的控制器180可以显示在从全方位捕获设备200接收全方位图像之前或者之后的预览图像。

当在显示单元151上显示预览图像时移动终端100的控制器180接收拍摄区域指定请求(s409)。

在实施例中,拍摄区域指定请求可以是用于指定全方位背景的拍摄区域的请求,通过全方位捕获设备200相对于全方位捕获设备200的位置要拍摄该全方位背景的拍摄区域。具体地,拍摄区域指定请求可以是用于拍摄与全方位背景的特定区域相对应的全方位图像的部分图像有关的全方位背景的请求。

在本公开中,短语“全方位拍摄设备200的拍摄区域被设置”可以被解释为全方位拍摄设备200的视角被设置的含义。

具体地,“全方位拍摄设备200的拍摄区域被设置”可以被解释为在全方位捕获设备200中的前相机221或者后相机213的视角被设置的含义。

用户可以通过全方位拍摄设备200拍摄与全方位视图相对应的背景。然而,如果用户稍后通过移动终端100观看全方位图像,则对于用户来说难以仅找到所期待的部分。

这时,如果用户指定全方位背景的拍摄区域,则尽管全方位捕获设备200被旋转或者移动,用户也可以直接地观看与拍摄区域相对应的全方位图像的部分图像。

在实施例中,根据拍摄区域指定请求,移动终端100的控制器180可以不存储与除了从全方位捕获设备200接收到的全方位图像的指定的拍摄区域之外的剩余区域相对应的图像。

在另一实施例中,移动终端100的控制器180可以仅显示与从全方位捕获设备200设置的拍摄区域相对应的捕获到的图像。为此,全方位捕获设备200可以仅发送与设置的全方位图像的捕获区域相对应的部分图像。

在实施例中,如果在某个时间内触摸显示单元151的触摸输入被感测,在一个方向中的移动终端100的移动被感测,并且然后,触摸输入没有被感测,则控制器180可以确定拍摄区域指定请求被接收,显示单元151显示预览图像。

移动终端100的控制器180响应于拍摄区域指定请求设置全方位捕获设备200的拍摄区域(s411)。

在实施例中,控制器180可以根据拍摄区域指定请求基于从全方位捕获设备200接收到的全方位图像和通过移动终端100显示的预览图像设置全方位捕获设备200的拍摄区域。

控制器180可以获取预览图像的位置信息使得检查预览图像位于全方位图像中。为此,移动终端100和全方位捕获设备200可以均包括9轴传感器。9轴传感器可以包括加速度传感器、陀螺仪传感器以及地磁传感器。

首先,移动终端100的控制器180可以通过图像识别方法获取匹配被放置在全方位图像中的预览图像的图像。其后,控制器180可以基于通过加速度传感器测量的值、通过陀螺仪传感器测量的值、以及通过地磁传感器测量的值获取匹配具有球形的全方位图像中的预览图像的图像的坐标值。

控制器180可以通过使用图像的坐标值获取全方位区域中的拍摄区域。

如果通过移动终端100显示的预览图像被改变,如稍后描述的图5b中所示,则控制器180可以搜寻在全方位图像中匹配于改变的预览图像的图像并且获取找到的图像的坐标值。

控制器180可以通过使用与最初获取的预览图像相对应的图像的坐标值和与最终获取的预览图像相对应的图像的坐标值获取全方位区域的拍摄区域。

如稍后描述的图5b中所示,如果触摸输入被接收并且经过某个时间,则最初获取的预览图像可以是通过显示单元151显示的预览图像,并且如果触摸输入没有被接收则最终获取的预览图像可以是通过显示单元151显示的预览图像。

全方位背景的拍摄区域可以被设置为多个拍摄区域。稍后将会对此描述。

控制器180在设置的拍摄区域上显示信息(s413)。

在实施例中,移动终端100的控制器180可以通过使用从全方位捕获设备200接收到的全方位图像显示关于设置的拍摄区域的信息。

在示例中,关于设置的拍摄区域的信息可以包括识别对应于设置的拍摄区域的多个网格区域中的网格区域的信息,多个网格区域组成扩展全方位图像。扩展全方位图像可以是其中具有球形的全方位图像以2d形状被扩展的图像。

与设置的拍摄区域相对应的多个网格区域中的网格区域可以被显示使得被区分于其它的网格区域。

用户可以通过与设置的拍摄区域相对应的网格区域执行与对应于被指定的拍摄区域相对应的部分图像有关的拍摄。

移动终端100的控制器180将关于设置的拍摄区域的信息发送到全方位捕获设备200(s415)。

关于拍摄区域的信息可以包括指示是否拍摄具有球形的全方位背景的任何区域的信息。

关于拍摄区域的信息可以包括在全方位背景内部的设置的拍摄区域的位置信息。

在示例中,在操作s411之后可以执行操作s415或者可以与操作s411同时执行。

全方位拍摄设备200的控制器290基于关于拍摄区域的接收到的信息拍摄设置的拍摄区域(s417)。

全方位拍摄设备200可以包括快门按钮(未示出)。如果快门按钮被选择,则全方位捕获设备200可以通过拍摄全方位背景获取全方位图像或者全方位视频。

全方位捕获设备200的控制器290将捕获的图像发送到移动终端100(s419),并且移动终端100的控制器180通过显示单元151显示接收到的捕获的图像(s421)。

在实施例中,全方位捕获设备200可以将与全方位背景相对应的全方位图像发送到移动终端100。在这样的情况下,与全方位图像中的拍摄区域相对应的部分图像可以被识别。移动终端100可以在显示单元151显示接收到的全方位图像的被识别的部分图像。

移动终端100可以在存储器170中仅存储接收到的全方位图像的被识别的部分图像。移动终端100可以在存储器170中仅存储接收到的全方位图像的被识别的部分图像并且可以删除剩余的图像。因此,存储器的存储空间可以被节省。

移动终端100可以通过显示单元151仅显示与全方位捕获设备200的拍摄区域相对应的图像。用户可以仅查看与全方位捕获设备200的设置的视角相对应的图像。

在下文中,将会详细地描述图4的实施例。

图5a和图5b是图示根据本公开的实施例的设置全方位背景的拍摄区域和在设置的拍摄区域上显示信息的示例的图。

假定移动终端100和全方位捕获设备200通过图5a和图5b中的短程无线通信被相互连接。

另外,假定全方位捕获设备200拍摄在全方位捕获设备200周围的全方位背景。

参考图5a,移动终端100根据被安装在其上的相机应用的执行显示预览屏幕。即,移动终端100通过被安装在其后表面上的相机(未示出)拍摄背景。移动终端100的显示单元151显示与拍摄的背景相对应的预览图像510。

在图5a中,移动终端100可以从全方位捕获设备200接收与全方位背景500相对应的全方位图像,但是可以不在显示单元151上显示接收到的全方位图像。

图5b是图示接收用于指定全方位背景500的拍摄区域的拍摄区域指定请求的过程的图。

参考图5b,移动终端100可以在某个时间内接收触摸显示预览图像的显示单元151的触摸输入。某个时间可以是三秒钟,但是三秒钟仅是示例。

如果移动终端100在某个时间内接收触摸显示单元151的触摸输入,则移动终端100可以通过显示单元151显示指南图像501,指南图像501指示全方位背景500的拍摄区域是可设置的。指南图像501仅是示例,并且文本可以被显示替代指南图像501,指示全方位背景500的拍摄区域的文本是可设置的。

当触摸输入被接收时,移动终端100可以被移动了某个距离,即,第一位置a到第二位置b。当移动终端100从第一位置a移动到第二位置b时,通过移动终端100显示的预览图像510也可以被改变。

在移动终端100从第一位置移动到第二位置b的同时,移动终端100的控制器180可以显示其中全方位背景500被减少的指南球形视图530。另外,当移动终端100从第一位置移动到第二位置b时,移动终端100可以在指南球形视图530上显示指南拍摄区域531,指南拍摄区域531指示在全方位背景500中指定拍摄区域。

在实施例中,当移动终端100被移动时,移动终端100的控制器180可以实时比较从全方位捕获设备200接收到的全方位设备与通过显示单元151显示的预览图像。控制器180可以基于比较结果在指南球形视图530上显示指南拍摄区域531,指南拍摄区域531对应于被包括在全方位图像中的预览图像。

用户可以通过指南拍摄区域531直观地掌握拍摄区域的设置。即,用户可以快速地掌握全方位背景500的任何区域被设置为要被拍摄的拍摄区域。

如果在移动终端100被移动到第二位置b之后没有感测到触摸输入,则移动终端100可以设置拍摄区域。设置的拍摄区域可以是相对于全方位捕获设备的位置用户要拍摄的全方位背景500的区域。

即,无论全方位捕获设备200如何被放置,移动终端100可以仅捕获与设置的拍摄区域相对应的部分图像并且在预览屏幕上显示捕获的部分图像。

如果拍摄区域被设置,如在图5b中所示,则移动终端100的控制器180可以将通过被设置在移动终端100中的相机捕获的预览图像510变成从全方位捕获设备200接收到的全方位图像550。

全方位图像550可以是与通过全方位捕获设备200拍摄的全方位背景相对应的图像。全方位图像550可以是具有2d扩展形状的图像,而不是球形图像。

移动终端100可以从全方位捕获设备200接收具有球形的全方位图像并且将具有球形的全方位图像变成2d形状的图像。

移动终端100可以将具有2d形状的全方位图像550划分成多个网格区域。与设置的拍摄区域相对应的多个网格区域的网格区域551可以被显示使得被区分于其它的网格区域。例如,与设置的拍摄区域相对应的网格区域551可以被亮化。

另外,移动终端100可以在指南球形视图530上显示与被区分的网格区域551相对应的指南拍摄区域531。

因此,用户可以容易地确认全方位背景中的要被拍摄的拍摄区域。

图6a至图7b是图示在全方位背景中设置拍摄区域的情况与在全方位背景中没有设置拍摄区域的情况之间的比较的图。

首先,图6a和图6b是图示其中在全方位背景中没有设置拍摄区域的情况下根据全方位捕获设备200的移动改变拍摄区域的示例的图。

参考图6a,全方位捕获设备200通过前相机(未示出)和后相机(未示出)拍摄具有球形的全方位背景600。特别地,全方位捕获设备200拍摄与全方位背景600的第一区域610有关的全方位背景600。

与拍摄的全方位背景600相对应的全方位图像可以被发送到移动终端100。移动终端100可以在显示单元151上显示接收到的全方位图像的第一部分图像611,第一部分图像611对应于第一区域610。

如果如在图6b中所示全方位捕获设备200被旋转了某个角度,则全方位捕获设备200拍摄与全方位背景600的第二区域630有关的全方位背景600。

这时,移动终端100可以在显示单元151显示接收到的全方位图像的第二部分图像631,第二部分图像631对应于第二区域630。即,当全方位捕获设备200被旋转时,通过移动终端100显示的图像可以被改变。更加具体地,这是因为随着全方位捕获设备200被旋转拍摄区域被改变。

接下来,将会描述图7a和图7b。图7a和图7b是图示其中在全方位背景中设置拍摄区域的情况下根据全方位捕获设备200的移动固定(或者保持)拍摄区域的示例的图。

与图6a和图6b相比较,图7a和图7b是图示拍摄区域被设置的情况的图。

拍摄区域的设置与参考图5a和图5b描述的相同。

如果拍摄区域被设置为全方位背景600的第一区域610,则尽管全方位捕获设备200被旋转,如在图7a和图7b中所示,全方位捕获设备200可以将拍摄区域固定为第一区域610。即,尽管全方位捕获设备200被旋转,但是通过移动终端100显示的图像可以不被改变成第一部分图像611。

因此,用户可以相对于通过用户聚焦和拍摄的区域拍摄全方位背景。

图8a和图8b是图示根据本公开的实施例的设置多个拍摄区域并且在多个设置的拍摄区域上显示信息的示例的图。

假定在图8a和图8b中移动终端100和全方位捕获设备200通过短程无线通信被相互连接。

另外,假定全方位捕获设备200拍摄全方位捕获设备200周围的全方位背景801。

为了描述的方便起见,以2d形状,而不是球形,图示全方位背景801。

移动终端100显示通过被安装在其中的相机(未示出)捕获的预览图像810。在此状态下,移动终端100可以接收第一拍摄区域指定请求。

如果在某个时间内在显示预览图像810的显示单元151上接收到触摸输入,移动终端100在一个方向中从位置c移动到位置d,并且然后,没有接收到触摸输入,则移动终端100的控制器180可以确定第一拍摄区域目的地请求被接收。

控制器180可以根据第一拍摄区域指定请求设置全方位背景801的第一拍摄区域。

然后,移动终端100可以接收第二拍摄区域指定请求。

如果在某个时间内在显示预览图像810的显示单元151上接收到触摸输入,移动终端100在(与一个方向相反的)方向中从位置d到位置c被移动,并且然后,没有接收到触摸输入,则移动终端100的控制器180可以确定第二拍摄区域指定请求被接收。

控制器180可以根据第二拍摄区域指定请求设置全方位背景801的第二拍摄区域。

第一拍摄区域和第二拍摄区域可以是相对于全方位背景801相互对称的区域。

在实施例中,第一拍摄区域可以是全方位捕获设备200中的前相机211的设置的拍摄区域,并且第二拍摄区域可以是在全方位捕获设备200中的后相机213的设置的拍摄区域。

如果拍摄区域被设置,则控制器180可以在显示单元151上的设置的拍摄区域上显示信息。如在图8b中所示,控制器180可以将与全方位背景801相对应的全方位图像803划分成多个网格区域。在多个网格区域当中,与第一拍摄区域相对应的第一网格区域851和与第二拍摄区域相对应的第二网格区域853可以被显示使得被区分于其它的网格区域。

另外,控制器180可以进一步显示指示拍摄区域被设置为彼此对称的弹出窗口870。

图9a和图9b是图示根据本公开的另一实施例的设置多个拍摄区域并且在多个设置的拍摄区域上显示信息的示例的图。

在图9a和图9b的描述中,将会省略参考图8a和图8b提供的描述。

移动终端100显示通过被设置在其中的相机(未示出)捕获的预览图像901。在此状态下,移动终端100可以接收第一拍摄区域指定请求。

如果在某个时间内在显示预览图像901的显示单元151上接收到触摸输入,移动终端100被移动了某个距离,并且然后,没有接收到触摸输入,则移动终端100的控制器180可以确定第一拍摄区域指定请求被接收。

控制器180可以根据第一拍摄区域指定请求设置全方位背景801的第一拍摄区域910。

然后,移动终端100可以接收第二拍摄区域指定请求。

如果某个时间内在显示预览图像901的显示单元151上接收到触摸输入,移动终端100从位置d移动到位置c,并且然后,没有接收到触摸输入,则移动终端100的控制器180可以确定第二拍摄区域指定请求被接收。

控制器180可以根据第二拍摄区域指定请求设置全方位背景801的第二拍摄区域930。

如果拍摄区域被设置,则控制器180可以通过显示单元151在被设置的拍摄区域上显示信息。如在图9b中所示,控制器180将与全方位背景801相对应的全方位图像803划分成多个网格区域。在多个网格区域当中,与第一拍摄区域910相对应的第一网格区域871和与第二拍摄区域930相对应的第二网格区域873可以被显示以被区分于其它的网格区域。

另外,控制器180可以在指南球形视图530上显示与第一网格区域871相对应的第一指南拍摄区域872和与第二网格区域873相对应的第二指南拍摄区域874。

如果全方位捕获设备200捕获视频,则全方位捕获设备200可以捕获与第一拍摄区域910相对应的视频和与第二拍摄区域930相对应的视频。

移动终端100可以从全方位捕获设备200接收与第一拍摄区域910相对应的视频和与第二拍摄区域930相对应的视频。移动终端100可以在一个屏幕上播放与第一拍摄区域910相对应的接收到的视频和与第二拍摄区域930相对应的接收到的视频。

如上所述,用户可以设置多个拍摄区域并且仅拍摄所期待的部分。

图10a和图10b是图示根据本公开的实施例的如果要另外设置的预设拍摄区域和预设拍摄区域相互重叠则组合拍摄区域的过程的图。

参考图10a,移动终端100在显示单元151上显示通过被设置在其中的相机捕获的预览图像1010。用户要指定新的拍摄区域。

预设拍摄区域可以存在。移动终端100可以在指南球形视图530中的预设拍摄区域中显示信息。即,与预设拍摄区域相对应的指南拍摄区域1001被显示在指南球形视图530上。

移动终端100可以接收用于指定新拍摄区域的拍摄区域指定请求。在实施例中,如果某个时间内在显示单元151上接收到触摸输入并且感测到移动终端100的移动,则控制器180可以确定拍摄区域指定请求被接收。

在另一实施例中,如果某个时间内在显示单元151上接收触摸输入,移动终端100被移动了某个距离,并且然后,没有接收到触摸输入,则控制器180可以确定拍摄区域指定请求被接收。

当在某个时间内在显示预览图像1010的显示单元151上接收到触摸输入并且移动终端100被移动时,预览图像1010可以被改变。

在改变预览图像1010的过程中,如果当前要设置的新的拍摄区域和预设拍摄区域相互重叠,则移动终端100可以显示指示预设拍摄区域和新的拍摄区域相互部分地重叠的弹出窗口1070。

弹出窗口1070可以包括请求用于组合拍摄区域的特定行为的文本。特定行为可以是用于滑过显示单元151的屏幕的命令。

如果用于滑过显示单元151的屏幕的命令被接收,则控制器180可以组合预设拍摄区域和新拍摄区域。

如在图10b中所示,控制器180可以在指南球形视图530上显示指示被组合的拍摄区域的指南拍摄区域1095。

用户可以容易地组合预设拍摄区域和要被重新设置的拍摄区域。

图11是图示根据本公开的实施例的指定与移动终端100的位置有关的拍摄区域的示例的图。

参考图11,假定移动终端100和全方位捕获设备200位于具有球形的全方位背景1100中。具有球形的全方位背景1100可以包括左半球1110和右半球1130。

移动终端100显示指示全方位背景1100的一部分的预览图像1101。另外,移动终端100位于通过左半球1110形成的区域中。

如果在某个时间或者更长时间内触摸显示单元151的屏幕的触摸输入被接收并且移动终端100的图像从通过全方位捕获设备200获取的全方位图像消失,则全方位捕获设备200可以将通过左半球1110形成的区域设置为拍摄区域。

如果被设置在全方位捕获设备200中的快门按钮201被选择,则全方位捕获设备200可以仅拍摄与左半球1110相对应的区域。

图12a和图12b是图示根据本公开的实施例的设置要在全方位背景中没有被拍摄的区域的过程的图。

假定在图12a和图12b中移动终端100和全方位捕获设备200通过短程无线通信被相互连接。

另外,假定全方位捕获设备200拍摄在全方位捕获设备200周围的全方位背景1200。

为了描述的方便起见,以2d形状,而不是球形,图示全方位背景1200。

移动终端100显示通过被安装在其中的相机(未示出)捕获的预览图像1201。在此状态下,移动终端100可以接收拍摄区域指定请求。

当拍摄区域指定请求被接收时,拍摄捕获设备200的拍摄区域可以被指定。同时,移动终端100可以接收用于不指定拍摄区域的拍摄区域非指定请求。如果移动终端100的布局从纵向模式变成横向模式,则移动终端100可以确定拍摄区域非指定请求被接收。

例如,如在图12a中所示,如果在设置拍摄区域时没有要被拍摄的区域1210存在,则移动终端100的布局可以从纵向模式变成横向模式。关于移动终端100中的布局模式的变化的信息可以被发送到全方位捕获设备200。全方位捕获设备200可以根据在移动终端100中的布局模式的变化设置全方位背景1200的不要被拍摄的区域1210。

即,移动终端100可以不在横向模式下将与显示的预览图像1201相对应的区域设置为全方位捕获设备200的拍摄区域。

另一方面,移动终端100可以显示指示被显示在预览图像1201上的部分图像不被设置为全方位捕获设备200的拍摄区域的指南图像1203。

如果移动终端100的布局从横向模式变成纵向模式,则全方位捕获设备200可以感测布局地变化并且继续设置拍摄区域。

如果如在图12a的过程中设置拍摄区域和非拍摄区域,则移动终端100的控制器180可以通过显示单元151显示指示非拍摄区域的非拍摄指南图像1230。即,控制器180可以在对应于全方位图像1205上的不要被拍摄的非拍摄区域的位置处显示非拍摄指南图像1230。

图13a和图13b是图示根据本公开的实施例的基于移动终端100的移动速度全方位捕获设备200的拍摄速度是可调节的图。

在下文中,全方位捕获设备200的拍摄速度可以指示每秒钟捕获的图像帧的数目。

如果全方位捕获设备200设置拍摄区域,则在图13a中的描述假定移动终端100的移动速度是第一速度并且在图13b中的描述假定移动终端100的移动速度是第二速度。第一速度可以小于第二速度。

如果以第二速度移动移动终端100并且拍摄区域被设置,则如在图13a中所示,移动终端100可以显示被划分成多个网格区域的全方位图像1310。

另外,被设置为拍摄区域的多个网格区域中的网格区域1311可以被识别。

此外,移动终端100可以进一步显示指示在慢速运动模式下与被识别的网格区域1311相对应的拍摄区域是可拍摄的文本。慢速运动模式可以是以每秒钟120个帧(fps)的速度拍摄设置的拍摄区域的模式,但是模式仅是示例。

如果以第二速度移动移动终端100并且设置拍摄区域,如在图13b中所示,则移动终端100可以显示被划分成多个网格区域的全方位图像1330。

另外,被设置为拍摄区域的多个网格区域中的网格区域1331可以被识别。

此外,移动终端100可以进一步显示指示在时间流逝模式下与被识别的网格区域1331相对应的拍摄区域是可拍摄的文本。时间流逝模式可以是以60fps的速度拍摄被设置的拍摄区域的模式,但是该模式仅是示例。

当移动移动终端100时,用户可以同时设置拍摄区域和全方位捕获设备200的拍摄速度。

图14a至图14c是图示基于被显示在移动终端100上的全方位图像改变全方位捕获设备200的拍摄区域的示例的图。

参考图14a,移动终端100可以显示从全方位捕获设备200接收到的全方位图像1400。全方位图像1400可以具有2d扩展形状。

全方位图像1400可以被划分成多个网格区域。多个网格区域中的第一拍摄区域可以被设置为全方位捕获设备200的拍摄区域。拖动包围第一拍摄区域的指南框1410的拖动输入可以被接收。根据拖动输入的拍摄输出可以产生与在拖动输入方向中缓慢移动全方位捕获设备200相同的效果。

移动终端100可以根据接收到的拖动输入将第二区域设置为全方位捕获设备200的拍摄区域,指南框1410位于第二区域中。

如果第二拍摄区域1430被选择,则移动终端100可以通过显示单元151显示与第二拍摄区域1430相对应的图像1450。

用户可以仅通过拖动输入容易地改变全方位捕获设备200的拍摄区域。

参考图14b,移动终端100可以接收拖动指南框1410的顶点的拖动输入。移动终端100可以根据接收到的拖动输入扩大指南框1410。

移动终端100可以将拍摄区域的大小改变成与被扩大的指南框1410相对应的大小。因此,能够产生与缩小与全方位捕获设备200的拍摄区域相对应的捕获到的图像相同的效果。

参考图14c,图示两个拍摄区域被设置的情况。

通过第一指南框1410和第二指南框1415分别划分两个拍摄区域。

如果与第一拍摄区域相对应的第一指南框1410被扩大使得第一拍摄区域重叠第二拍摄区域,并且在某个时间内触摸第一指南框1410的输入被接收,则移动终端100可以将包括第一拍摄区域和第二拍摄区域的第三拍摄区域变成全方位捕获设备200的拍摄区域。因此,与第三拍摄区域相对应的第三指南框1470可以被显示。

全方位捕获设备200可以拍摄与第二拍摄区域和第三拍摄区域中的每一个有关的全方位背景。

图15a和图15b是图示当全方位捕获设备200通过多个拍摄区域拍摄全方位背景时通过移动终端100控制与拍摄区域相对应的图像或者删除拍摄区域的一部分的示例的图。

参考图15a,移动终端100可以通过显示区域151显示包括多个网格区域的全方位图像1500。

假定多个网格区域中的第一网格区域1510和第二网格区域1530可以被设置为全方位捕获设备200的拍摄区域。

如果被设置为拍摄区域的第一网格区域1510和第二网格区域1530被选择,则移动终端100可以在显示单元151的屏幕上显示与第一网格区域1510相对应的第一捕获图像1511和与第二网格区域1530相对应的第二捕获图像1531。第一捕获图像1511和第二捕获图像1531可以分别被显示在被划分的屏幕上。

第一捕获图像1511和第二捕获图像1531可以是从全方位捕获设备200实时接收到的图像。

如果第一捕获图像1511被选择,则移动终端100可以显示用于结束第一捕获图像1511的回放的结束按钮和用于停止第一捕获图像1511的回放的停止按钮。

用户可以通过结束按钮和停止按钮控制第一捕获图像1511的回放。

另一方面,如在图15b中所示,如果向上或者向下轻弹第一捕获图像1511的输入被接收,则移动终端100可以停止拍摄与第一网格区域1510相对应的拍摄区域。即,移动终端100可以删除与第一网格区域1510相对应的拍摄区域。

因此,移动终端100可以在显示单元151的整个屏幕上显示第二捕获图像1531。

另外,移动终端100可以显示从拍摄区域删除多个网格区域的第一网格区域1510。即,第一网格区域1510可以不被识别,并且仅第二网格区域1530可以在被划分成多个网格区域的全方位图像1500中被识别。

现在,仅第二网格区域1530保持在全方位捕获设备200的拍摄区域。

如上所述,如果多个区域被设置为拍摄区域,则用户可以控制与设置的拍摄区域相对应的图像或者仅通过简单的动作删除拍摄区域。

图16和图17是根据本公开的实施例的通知在设置拍摄区域的过程中拍摄区域偏离可拍摄的范围的示例的图。

首先,参考图16,移动终端100根据图5a和图5b的实施例设置拍摄。即,移动终端100根据移动终端100的移动基于预览图像设置全方位捕获设备200的拍摄区域。

如果拍摄区域偏离于可拍摄的范围,则移动终端100可以显示指示拍摄区域偏离于可拍摄的范围的弹出窗口1610。

另外,移动终端100可以进一步显示用于指示拍摄区域偏离于可拍摄范围的指南图像1630。

此外,移动终端100可以输出指示拍摄区域偏离于可拍摄范围的振动。

图17是图示通知当在2d图像中观看与拍摄区域相对应的图像时如果产生失真则拍摄区域偏离于可拍摄范围的示例的图。

参考图17,移动终端100显示2d全方位图像1700。用户可以通过拖动输入放大拍摄区域1710。这与参考图14a描述的相同。

如果扩大的拍摄区域1710偏离于可拍摄范围,则移动终端100可以显示指示被扩大的拍摄区域偏离于可拍摄范围的弹出窗口1730。

图18a和图18b是图示根据本公开的另一实施例的改变全方位捕获设备200的拍摄区域的过程的图。

参考图18a,全方位背景1800的第一区域1801被设置为全方位捕获设备200的拍摄区域。移动终端100可以显示与被设置为拍摄区域的第一区域1801相对应的第一拍摄区域指南图像1820。

在第一拍摄区域指南图像1820被选择的状态下,如果拍摄区域变化请求被接收,则移动终端100可以将全方位捕获设备200的拍摄区域从第一区域1801变成第二区域1803。

移动终端100可以显示与第二区域1803相对应的第二拍摄区域指南图像1830。

移动终端100可以通过拍摄区域被改变的全方位图像1850进行显示。

参考图18b,与全方位背景1800相对应的全方位图像1850被图示。全方位图像1850可以被划分成多个网格区域。

第一网格区域1850可以是在变化之前与拍摄区域相对应的区域,并且第二网格区域1853可以是在变化之后与拍摄区域相对应的区域。

另外,移动终端100可以通过拍摄区域被改变的指南球形视图530进行显示。即,在指南球形视图530上的第一指南拍摄区域1861可以变成第二指南拍摄区域1863。

第一指南拍摄区域1861可以是与在变化之前的拍摄区域的第一区域1801相对应的区域。第二指南拍摄区域1863可以是与在变化之后的拍摄区域的第二区域相对应的区域。

用户可以直观地改变全方位捕获设备200的拍摄区域。

在前面的描述中提及的本发明可以使用其上存储有用于由执行在此陈述的各种方法的处理器执行的指令的机器可读介质实现。可能的机器可读介质的示例包括hdd(硬盘驱动)、ssd(固态盘)、sdd(硅盘驱动)、rom、ram、cd-rom、磁带、软盘、光数据存储设备等等。根据需要,计算机可读介质也可以被实现为载波的形式(例如,经由互联网的传送)。处理器可以包括终端的控制器180。

前述实施例仅是示例性的并且不被视为对本公开的限制。此描述旨在是说明性的,并且没有限制权利要求的范围。许多替代、修改以及变形对于本领域的技术人员来说将会是显然的。可以以各种方式组合在此描述的示例性实施例的特征、结构、方法以及其它特性以获得附加的和/或替代的示例性实施例。

由于在没有脱离其特性的情况下可以以多种形式实现本特征,所以也应理解的是,上述实施例不受前面描述的任何细节的限制,除非另有规定,否则应在所附的权利要求中限定的范围内被广泛地解释,并且因此旨在由所附的权利要求涵盖落入权利要求的范围和界限或者该范围和界限的等同物内的所有变化和修改。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1