电子设备及其控制方法与流程

1.本公开涉及向显示设备提供图像内容，更具体地，涉及基于接收触摸输入来执行操作，同时基于来自另一设备的镜像向显示设备提供图像内容。


背景技术：

2.为了根据某些过程来计算和处理信息，电子设备包括中央处理单元(cpu)、芯片组、存储器等用于计算的电子部件。例如，电子设备可以是用于处理信息的诸如个人计算机(pc)、服务器等的信息处理设备，用于处理图像数据的图像处理设备，用于音频处理的音频设备，用于各种家务劳动的家用电器等。图像处理设备可以由显示设备来实现，显示设备基于经处理图像数据在其显示面板上显示图像。
3.显示设备可以是安装在一个地方的固定设备，如电视(tv)，以及由用户携带的便携式设备，如移动设备。具体而言，随着无线通信环境以及智能电话、平板计算机等能够利用无线通信环境的移动设备的发展，许多用户使用个性化的移动设备。关于这一点，在多个显示设备之间，例如在移动设备和tv之间，存在对链接操作的不断增长的需求。这种链接操作基于设备之间的无线通信，并且作为链接操作的一个示例进行镜像。
4.镜像是指正在显示设备上显示的图像被相同地显示在另一显示设备上的功能。例如，当在移动设备的屏幕上显示内容图像时，移动设备实时地向显示设备发送内容数据以显示内容图像。显示设备基于从移动设备接收的内容数据，显示与正在移动设备上显示的内容图像相同的图像。
5.当在移动设备上显示的图像包括用于用户输入的屏幕上显示(osd)菜单时，用户可以在移动设备的屏幕上触摸osd菜单以执行与所触摸的osd菜单相对应的操作。然而，在相关技术中，显示设备仅显示在镜像期间从移动设备接收的图像。因此，尽管显示设备的屏幕被提供为触摸屏，并且用户触摸显示设备的屏幕上的osd菜单，但是不允许用户执行相应的操作。换句话说，在镜像期间，通过在移动设备的屏幕上触摸osd菜单可以控制内容图像的播放状态，但是不能通过显示设备的屏幕控制。
6.此外，就将移动设备中的经解码图像镜像到tv而言，移动设备和tv之间的网络环境可能影响在tv上显示的镜像图像。例如，当用户想要在tv上以高分辨率显示镜像图像时，可用于在移动设备和tv之间进行镜像的网络带宽可能不足以发送这种高分辨率的图像数据。
7.因此，当在镜像期间通过显示在tv的屏幕上的osd菜单进行用于以全屏模式观看图像的用户输入时，可能存在操作不被适当地执行的问题。


技术实现要素：

8.[技术方案]
[0009]
根据本公开的一个方面，提供了一种电子设备，包括：显示器；通信电路，被配置为与第一外部设备通信；以及处理器，被配置为：在显示器上将内容显示为包括播放区域的第
一图像，通过通信电路向第一外部设备发送第一图像的数据，响应于在第一外部设备中生成的第一用户输入，识别第一用户输入是否指示第二图像的播放区域的改变，其中在第一外部设备中基于接收到的数据，将内容显示为包括与第一图像的播放区域相同的播放区域的第二图像，以及基于被识别为指示第二图像的播放区域的改变的第一用户输入，在显示器上保持第一图像的播放区域，并且通过通信电路发送请求第一外部设备将内容显示为包括与第一图像的播放区域不同的播放区域的第三图像的请求。
[0010]
第三图像的播放区域可以大于第二图像的播放区域。
[0011]
用于显示第三图像的请求可以包括内容的文件或内容可从其获得的地址信息中的至少一者。
[0012]
第二图像可以包括用于选择第二图像的播放区域的改变的菜单项，并且处理器可以被配置为基于从第一用户输入获得的第一外部设备的屏幕上的坐标信息是否对应于菜单项的位置来识别第一用户输入指示第二图像的播放区域的改变。
[0013]
处理器可被配置为：基于第一传输协议，通过通信电路将第一图像的捕获数据发送到第一外部设备，以及基于不同于第一传输协议的第二传输协议，通过通信电路将用于显示第三图像的请求发送到第一外部设备。
[0014]
电子设备还可以包括用户输入接收器，其中处理器可以被配置为：识别通过用户输入接收器生成的第二用户输入是否请求改变第一图像的播放区域；基于被识别为请求改变第一图像的播放区域的第二用户输入，将内容显示为包括与显示器上的第一图像的播放区域不同的播放区域的第四图像；以及通过通信电路将第四图像的捕获数据发送至第一外部设备。
[0015]
处理器可被配置为：识别在显示第三图像的第一外部设备中产生的第三用户输入是否请求恢复第二图像的播放区域；以及基于被识别为请求恢复第二图像的播放区域的第三用户输入，通过通信电路将第一图像的捕获数据再次发送到第一外部设备。
[0016]
电子设备还可以包括用户输入接收器，其中处理器可以被配置为：基于通过用户输入接收器生成并被识别为请求向外播送内容的第四用户输入，在显示器上显示可连接的第二外部设备的列表并向第二外部设备执行用于内容的向外播送操作，以及基于在外部设备中生成并被识别为请求向外播送内容的第一用户输入，通过通信电路将用于显示第三图像的请求发送到第一外部设备而不显示列表。
[0017]
根据本公开的一个方面，提供了一种控制电子设备的方法，包括：将内容显示为包括播放区域的第一图像；将第一图像的数据发送至第一外部设备；响应于在第一外部设备中生成的第一用户输入，识别第一用户输入是否指示第二图像的播放区域的改变，其中在第一外部设备中基于所接收的数据，将内容显示为包括与第一图像的播放区域相同的播放区域的第二图像；以及基于被识别为指示第二图像的播放区域的改变的第一用户输入，保持第一图像的播放区域，并且向第一外部设备发送请求第一外部设备将内容显示为包括不同于第一图像的播放区域的播放区域的第三图像的请求。
[0018]
根据本公开的一个方面，提供了一种电子设备，包括：显示器；通信电路，被配置为与外部设备通信；以及处理器，被配置为：基于用于请求待显示的显示运动图像内容的用户输入，在屏幕的部分区域中将运动图像内容显示为第一形式的图像，在显示器上显示第一形式的图像的同时，通过通信单元将对应于第一形式的图像的图像数据发送到外部设备，
基于在图像数据被发送到外部设备的同时在外部设备中生成的用户输入，识别用户输入是否指示运动图像内容的显示形式的改变，并且基于被识别为指示运动图像内容的显示形式的改变的用户输入，保持要在电子设备的显示器上显示的第一形式的图像，并且通过通信单元将用于允许外部设备以第二形式显示正在电子设备的显示器上显示的运动图像内容的信息发送到外部设备。
[0019]
显示形式的改变可以包括在屏幕上显示的运动图像内容的图像尺寸的改变，并且以第二形式显示的运动图像内容的图像尺寸可以大于以第一形式显示的运动图像内容的图像尺寸。
[0020]
关于以第二形式显示的信息可以包括与存储在电子设备的存储单元中的运动图像内容相对应的文件或从其可获得运动图像内容的地址信息中的至少一者。
[0021]
第一形式的图像可以包括用户界面(ui)项，其被提供为可选择地改变运动图像内容的显示形式，并且处理器可以被配置为执行用于基于从外部设备获得的用户输入的坐标信息是否对应于ui项的位置，通过用户输入来改变运动图像内容的显示形式的操作。
[0022]
处理器可以被配置为基于第一传输协议通过通信电路将图像数据发送到外部设备，并且基于不同于第一传输协议的第二传输协议通过通信电路将用于以第二形式显示运动图像内容的信息发送到外部设备。
[0023]
电子设备还可以包括用户输入接收器，其中处理器被配置为识别通过用户输入接收器接收的第二用户输入是否请求改变运动图像内容的显示形式；基于被识别为请求改变运动图像内容的显示形式的第二用户输入，通过将显示形式改变为不同于第一形式的第二形式来显示运动图像内容；以及通过通信电路将与以第二形式显示的运动图像内容相对应的图像数据发送到外部设备。
[0024]
处理器可被配置为识别在以第二形式显示运动图像内容的外部装置中所产生的第三用户输入是否请求恢复运动图像内容的第一形式；以及基于被识别为请求恢复第一形式的运动图像内容的第三用户输入，通过通信电路将与当前显示在电子设备上的图像相对应的图像数据发送到外部设备。
附图说明
[0025]
图1示出了根据实施例的移动设备和显示设备；
[0026]
图2是根据实施例的显示设备和移动设备的框图；
[0027]
图3是示出根据实施例的移动设备的控制方法的流程图；
[0028]
图4是示出根据实施例的基于移动设备和显示设备之间的传输协议的信号流的框图；
[0029]
图5示出了根据实施例的在镜像期间分别显示在移动设备和显示设备上的图像；
[0030]
图6示出了根据实施例的一种方法，通过该方法，移动设备识别与镜像期间在显示设备中发生的触摸输入相对应的事件；
[0031]
图7示出了根据实施例的当用户在图5的状态下触摸第一屏幕的全屏选项时显示的图像；
[0032]
图8示出了根据实施例的当用户在图5的状态下触摸第二屏幕的全屏选项时显示的图像；
[0033]
图9是示出根据实施例的在镜像期间移动设备接收用于扩展图像的播放区域的用户输入的过程的流程图；
[0034]
图10示出了根据实施例的当在图5的状态下触摸移动设备的第一屏幕上的向外播送选项时，在第一屏幕上显示的设备列表；
[0035]
图11示出了根据实施例的当在图5的状态下触摸移动设备的第二屏幕上的向外播送选项时所显示的图像；
[0036]
图12是示出根据实施例的在镜像期间移动设备接收用于请求向外播送的用户输入的过程的流程图；以及
[0037]
图13是示出根据实施例的移动设备的控制方法的流程图。
具体实施方式
[0038]
下面，将参考附图详细描述某些实施例。此外，除非另有说明，参考附图描述的实施例不是彼此排斥的，并且多个实施例可以选择性地组合在一个装置内。这些多个实施例的组合可以由本领域普通技术人员任意选择和应用以实现本发明的概念。
[0039]
如本文所使用的，术语诸如“第一”或“第一”、“第二”或“第二”等可以修饰相应的元件，而不管重要性或顺序，并且用于将一个元件与另一个元件区分开而不限制元件。
[0040]
此外，术语多个元素中的“至少一个”不仅表示所有元素，而且还表示元素中的每一个，其排除其它元素或元素的所有组合。
[0041]
图1示出了根据实施例的移动设备和显示设备。
[0042]
如图1所示，提供电子设备和外部设备以相互通信。在一个实施例中，电子设备用作用于提供图像内容的源设备，并且外部设备用作用于从电子设备接收图像内容的宿设备。例如，电子设备是移动设备110，外部设备是显示设备120。然而，这些术语仅仅是为了方便区分两个装置，并且这些术语不限制装置的功能。
[0043]
移动设备110可以包括具有用于显示图像的屏幕的各种设备，例如智能电话、平板计算机、多媒体播放器、可佩戴设备等。电子设备可以由各种设备来实现，例如安装在某个固定位置的tv、数字标牌、电子框架、具有监视器的计算机等，以及便携式移动设备110。
[0044]
显示设备120包括安装在安装表面上的支架130，并且可旋转地支撑在支架130的一侧。支架130包括连接到显示设备120的背部的电动机131，并且由电动机131驱动以旋转显示设备120。电动机131的操作可以由接收的控制信号控制。传送到电动机131的控制信号可以由设置在支架130中的控制器产生，或者可以从显示设备120接收。此外，可以从支架130或显示设备120中提供的遥控器接收用于产生这种控制信号的指令。
[0045]
此外，它可以被设计成仅旋转形成显示设备的屏幕的显示面板。换句话说，除了显示面板之外的诸如处理器的配置可以形成主体，并且显示面板可以相对于该主体旋转。
[0046]
提供显示设备120以相对于用于显示图像的屏幕的中心区域枢转。显示设备120可以至少在p位置和l位置之间枢转。当显示设备120处于p位置时，显示设备120进入垂直或肖像模式，在垂直或肖像模式中，垂直长度比水平长度长，并且当显示设备120处于l位置时，显示设备120进入水平或景观模式，在水平或景观模式中，水平长度比垂直长度长。
[0047]
显示在显示设备120上的图像或ui可以对应于肖像模式和景观模式之一。当然，显示设备120可以在肖像模式下显示景观图像，并且还可以在景观模式下显示肖像图像。然
而，在这种情况下，根据水平长度和垂直长度之间的比率，屏幕和图像不匹配。换句话说，在这种情况下，在显示设备120的屏幕上不显示图像的区域，即边缘相对较大。此外，ui或图像可以被设计成适应于景观模式或肖像模式。
[0048]
因此，显示设备120在肖像模式下显示肖像图像并且在景观模式下显示景观图像。例如，显示设备120在景观模式下操作以显示广播图像。此外，显示设备120在肖像模式下操作以显示移动设备110的镜像图像。
[0049]
移动设备110可以与显示设备120进行无线通信。移动设备110可以通过广域网(wan)或局域网(lan)访问显示设备120。例如，移动设备110可以基于通过接入点(ap)的wi-fi通信来执行与显示设备120的通信，或者可以基于蓝牙低能量(ble)来执行与显示设备120的直接通信。
[0050]
通过这种通信路由，移动设备110可以向显示设备120提供图像内容。显示设备120可以处理从移动设备110接收的图像内容，从而显示图像。有许多传输协议用于允许移动设备110向显示设备120提供图像内容。例如，存在镜像传输协议和播送传输协议，这将在后面描述。
[0051]
图2是根据实施例的显示设备和移动设备的框图。
[0052]
如图2所示，移动设备110包括通信器211、显示器213、用户输入接收器214、存储单元215和处理器216。显示设备120包括第二通信器221、信号输入/输出单元222、第二显示器223、第二用户输入接收器224、第二存储单元225和第二处理器226。
[0053]
通信器211指的是交互式通信电路，其包括对应于各种有线和无线通信协议的至少一个元件，例如通信模块、通信芯片等。通信器211支持一个或多个无线通信标准，并且包括通信电路、通信芯片或通信模块，以基于无线通信标准执行通信。例如，通信器211包括用于一对一局域通信的通信电路，例如符合电气和电子工程师协会(ieee)802.15标准的蓝牙、ble等。通信器211包括用于诸如wi-fi等的基于wan的通信或符合ieee 802.11的无线lan通信的通信电路。因此，通信器211可以通过ap 230与显示设备120和服务器240通信。
[0054]
显示器213包括能够在屏幕上显示图像的显示面板。提供显示面板以具有诸如液晶的光接收结构，或诸如有机发光二极管(oled)的自发射结构。显示器213可以包括根据显示面板的结构的附加元件。例如，当显示面板是液晶时，显示器213包括液晶显示面板、被配置成发光的背光单元、以及被配置成驱动液晶显示面板的液晶的面板驱动基板。
[0055]
用户输入接收器214包括与各种输入接口相关的电路，这些输入接口被提供来由用户控制，从而接收用户的输入。用户输入接收器214可以根据移动设备110的类型进行各种配置，并且可以例如包括移动设备110的机械或电子按钮，安装在显示器213中的触摸板、触摸屏等。
[0056]
存储单元215被配置为存储各种数据段。根据所存储的数据是否被保留，存储单元215包括非易失性存储装置和易失性内存。存储装置是指即使没有供电也保留记录的数据的介质，并且包括闪存、硬盘驱动器(hdd)、固态驱动器(ssd)、只读存储器(rom)等。内存是指在不供电时记录的数据不被保留在其中的介质，并且包括缓冲器、随机存取存储器(ram)等。
[0057]
处理器216包括由安装在印刷电路板(pcb)上的cpu、芯片组、缓冲器、电路等实现的一个或多个硬件处理器。作为示例，处理器216可以被设计为片上系统(soc)。处理器216
可以执行移动设备110的操作系统和对应于各种功能的应用。处理器216可以播放存储在存储单元215中的图像内容，以便作为图像在显示器213上显示，或者将图像内容提供给显示设备120。
[0058]
第二通信器221涉及交互式通信电路，其包括对应于各种有线和无线通信协议的至少一个元件，例如通信模块、通信芯片等。第二通信器221支持例如基于wi-fi的无线通信，从而通过ap 230与移动设备110或服务器240通信。
[0059]
信号输入/输出单元222通过一对一或一对多有线连接而连接到诸如机顶盒或光学媒体播放器的外部设备，从而从外部设备输出接收数据或向外部设备输出数据。信号输入/输出单元222可以例如包括基于预置传输协议的连接器、端口等，例如高清晰度多媒体接口(hdmi)端口、显示器端口、通用串行总线(usb)端口等。
[0060]
第二显示器223基于由第二处理器226处理的图像信号来显示图像。
[0061]
第二用户输入接收器224包括与各种输入接口相关的电路，所述输入接口被提供来由用户控制以接收用户输入。例如，第二用户输入接收器224包括设置在显示设备120中的物理或电子按钮、与显示设备120分离的遥控器、设置在第二显示器223中的触摸屏结构等。
[0062]
第二存储单元225被配置为存储数据。第二存储单元225包括各种存储器和内存，例如闪存、hdd、ssd、缓冲器、ram等。
[0063]
第二处理器226包括由安装在pcb上的cpu、芯片组、缓冲器、电路等实现的一个或多个硬件处理器。作为一个例子，第二处理器226可以被设计为soc。第二处理器226包括对应于各种处理的模块，例如多路分解器、解码器、定标器、音频数字信号处理器(dsp)、放大器等，以处理图像。在这样的模块中，一些或全部模块可以通过soc来实现。例如，与图像处理相关的多路分解器、解码器、定标器等模块可以作为图像处理soc来实现，并且音频dsp可以作为与soc分离的芯片组来实现。此外，作为设计方法的一个示例，当提供显示设备120以通过支架的电动机旋转时，第二处理器226可以电子地连接到电动机，从而可以将用于驱动电动机的控制信号发送到电动机。
[0064]
图3是示出根据实施例的由移动设备的处理器执行的移动设备的控制方法的流程图。
[0065]
在操作310，移动设备将内容显示为具有播放区域的第一图像。内容的播放区域是指在被提供来显示图像的屏幕的整个区域内显示相应内容的区域。
[0066]
在操作320，移动设备在显示第一图像的同时将通过捕获第一图像获得的捕获数据发送到显示设备。捕获数据是指通过对图像内容进行解码并缓冲以便在移动设备中显示第一图像而获得的数据。
[0067]
显示设备接收捕获数据，并将内容显示为具有与在移动设备中显示的第一图像的播放区域相同的播放区域的第二图像。第二图像对应于第一图像的镜像图像，因为第二图像是基于在移动设备中针对第一图像解码的数据来显示的。
[0068]
在操作330，移动设备检测在显示设备中显示第二图像的同时是否在显示设备中接收到用于改变第二图像的播放区域的用户输入。
[0069]
在操作340，响应于用户输入，移动设备保持正在移动设备中显示的第一图像的播放区域。换句话说，移动设备保持第一图像的当前显示状态。
[0070]
此外，在操作350，移动设备响应于用户输入，将请求显示设备将内容显示为具有与第一图像的播放区域不同的播放区域的第三图像的请求发送到显示设备。
[0071]
显示设备基于从移动设备接收的请求显示从第二图像改变的第三图像。第三图像基于图像内容，其与第二图像的图像内容相同，但是基于通过传输协议传送的图像内容的数据来显示，所述传输协议不同于第二图像的传输协议。基于图像内容的镜像来显示第二图像，但是基于图像内容的播送来显示第三图像。
[0072]
这样，当在移动设备提供图像内容的同时在显示设备中接收到用于改变图像的播放区域的用户输入，从而显示设备可以显示基于镜像的图像，移动设备控制显示设备被切换以显示基于播送的图像。因此，移动设备可以允许显示设备响应于用户的请求而自适应地显示高分辨率和高质量的图像。
[0073]
移动设备的处理器可以执行基于机器学习、神经网络、作为基于规则的深度学习算法或人工智能(ai)算法中的至少一者的数据分析、数据处理和结果信息生成的至少一部分，以便响应于如上所述的用于改变第二图像的播放区域的用户输入，执行用于保持第一图像的播放区域并发送请求显示设备显示第三图像的请求的操作。
[0074]
例如，移动设备的处理器可以用作学习器和识别器。学习器可以执行生成所学习的神经网络的功能，并且识别器可以执行基于所学习的神经网络来识别(或推断、预测、估计和识别)数据的功能。学习器可以生成或更新神经网络。学习器可以获得学习数据以生成神经网络。例如，学习器可以从移动设备的存储单元或从外部获得学习数据。学习数据可以是用于学习神经网络的数据，并且经上述操作的数据可以用作学习数据以教导神经网络。
[0075]
在基于学习数据教导神经网络之前，学习器可以执行关于所获得的学习数据的预处理操作，或者从多个学习数据中选择要在学习中使用的数据。例如，学习器可以处理学习数据以具有预设格式，对学习数据应用过滤，或者通过向学习数据添加噪声和/或从学习数据去除噪声来处理学习数据以适于学习。学习器可以使用预处理的学习数据来生成神经网络集合，以执行操作。
[0076]
所学习的神经网络可以包括多个神经网络(或层)。多个神经网络的节点具有权重，并且多个神经网络可以彼此连接，使得特定神经网络的输出值可以用作另一个神经网络的输入值。作为神经网络的例子，存在卷积神经网络(cnn)、深度神经网络(dnn)、递归神经网络(rnn)、受限boltzmann机(rbm)、深度信念网络(dbn)、双向递归dnn(brdnn)和深度q网络。
[0077]
识别器可以获得目标数据以执行上述操作。目标数据可以从移动设备的存储单元或从外部获得。目标数据可以是目标由神经网络识别的数据。在将目标数据应用到所学习的神经网络之前，识别器可以对所获得的目标数据执行预处理操作，或者在多个目标数据中选择要在识别中使用的数据。例如，识别器可以处理目标数据以具有预置格式，对目标数据应用过滤，或者通过添加/去除噪声将目标数据处理成适于识别的数据。识别器可以通过将经预处理的目标数据应用到神经网络来获得从神经网络输出的输出值。此外，识别器可以获得随机值或可靠性值以及输出值。
[0078]
图4是示出根据实施例的基于移动设备和显示设备之间的传输协议的信号流的框图。
[0079]
如图4所示，移动设备110获得预定的图像内容数据。移动设备110可以从外部或内
部获得图像内容数据。例如，移动设备110可以加载存储在存储单元中的图像内容数据或者从服务器430接收图像内容数据。
[0080]
移动设备110包括通信器411、显示器412、解码器413和缓冲器414。解码器413可与移动装置110的处理器一起实现为单个芯片或实现为与处理器分离的芯片。解码器413对所获得的图像内容数据进行解码，并将解码后的数据缓冲到缓冲器414。缓冲到缓冲器414的数据在图像的显示定时上从缓冲器414输出到显示器412，从而图像可以显示在显示器412上。换句话说，缓冲到缓冲器414的数据被解码器413解码。为了便于描述，在移动设备110的显示器412上显示的图像被称为第一图像。
[0081]
显示设备120包括第二通信器421、第二显示器422和第二解码器423。显示设备120可以基于与正在移动设备110上显示的第一图像的图像内容相同的图像内容，通过镜像方法或播送方法来显示图像。
[0082]
根据镜像方法，移动设备110通过通信器411将缓冲到缓冲器414的图像内容数据发送到显示设备120。换句话说，缓冲到缓冲器414的数据被发送到显示器412和通信器411。当在第二通信器421中接收到来自移动设备110的数据时，显示设备120将接收到的数据发送到第二显示器422，而不通过第二解码器423对接收到的数据进行解码。为了便于描述，通过该过程在第二显示器422上显示的图像被称为第二图像。
[0083]
在镜像方法中，第一图像和第二图像都是移动设备110的解码器413的解码输出。换句话说，第二图像不是显示设备120的第二解码器423的产物，而是移动设备110的解码器413的产物。
[0084]
根据播送方法，移动设备110不会通过通信器411将缓冲到缓冲器414的图像内容数据发送到显示设备120，而是将未被解码器413解码的原始图像内容数据发送到显示设备120。作为另一示例，移动设备110不直接向显示设备120发送内容的内容，而是可以提供关于显示设备120可以获得内容的数据的地址的信息。当在显示设备120的第二通信器421中接收到来自移动设备110的数据时，显示设备120通过第二解码器423对接收到的数据进行解码，并将解码后的数据发送到第二显示器422。为了便于描述，通过该过程在第二显示器422上显示的图像被称为第三图像。
[0085]
在播送方法中，第一图像是移动设备110的解码器413的解码输出，而第三图像是显示设备120的第二解码器423的解码输出。换句话说，第三图像是由与第二图像不同的解码引起的输出，即使它基于与第二图像相同的图像内容。例如，可以经由数字生活网络联盟(dlna)来执行播送方法。
[0086]
该播送方法可以包括前述示例的第一播送方法和如下的第二播送方法。在第二播送方法的情况下，移动设备110不向显示设备120发送未解码的原始图像内容数据，而是通过通信器411向显示设备120发送从中可获得数据的服务器430的地址信息。显示设备120基于接收到的地址信息访问服务器430，并接收存储在相应地址信息中的图像内容数据。显示设备120通过第二解码器423对这样接收的数据进行解码，并在第二显示器422上显示解码的数据。
[0087]
用于显示第三图像的图像内容数据可以由移动设备110直接发送到显示设备120，或者可以由显示设备120基于移动设备110提供的地址信息来获得。在这两种情况下，由显示设备120获得的数据由第二解码器423解码。
[0088]
如下面详细描述的，移动设备110和显示设备120根据传输协议显示图像，并且根据传输协议的切换来改变图像。
[0089]
图5示出了根据实施例的在镜像期间分别显示在移动设备和显示设备上的图像。
[0090]
如图5所示，移动设备具有用于显示图像的第一屏幕，并且显示设备具有用于显示图像的第二屏幕520。当在移动设备在第一屏幕510上显示图像的同时执行图像的镜像时，显示设备在第二屏幕520上显示图像的镜像图像。当显示设备被枢转地提供以在肖像模式和风景模式之间切换时，显示设备可以响应于镜像来控制具有第二屏幕520的显示器进入肖像模式。
[0091]
移动设备可以在能够显示图像的第一屏幕510的整个播放区域内一起显示多个图像。移动设备基于在能够显示图像的第一屏幕510的整个播放区域内的部分播放区域中的预定内容来显示a图像511。移动设备可以基于不同的内容来显示图像，即，在第一屏幕510的整个播放区域内的另一播放区域中的b图像512。
[0092]
例如，当移动设备正在访问通过因特网提供的运动图像内容服务时，a图像511可以是基于运动图像内容的播放图像，而b图像512可以是由服务提供的内容列表。此外，a图像511可以显示与正在播放的内容相关的各种选项，或者用于调整内容的播放状态的选项。例如，a图像511可以显示向外播送选项513(即，图5中的ui tv)，以用于在显示设备等外部设备上显示a图像511，全屏选项514(即，图5中的ui full)，以用于将a图像511显示为全屏等。
[0093]
向外播送选项513指用于将待播送的图像511的内容指示到从诸如显示设备的许多外部设备中选择的设备，以便所选择的设备可以显示基于播送的图像。
[0094]
全屏选项514是指用于指示a图像511的播放区域被改变为全屏的选项。一个实施例描述了全屏选项514，但是用于将a图像511的播放区域扩展到非全屏但是相对大的区域或者减小a图像511的播放区域的其他选项也是可能的。
[0095]
移动设备可以通过执行支持镜像功能的应用来执行镜像。移动设备将通过捕获包括a图像511和b图像512的第一屏幕510的整个图像而获得的捕获数据发送到显示设备。捕获数据可以是由解码器解码的、被缓冲以在第一屏幕510上显示包括a图像511和b图像512的整个图像的数据。显示设备基于从移动设备接收的捕获数据在第二屏幕520上显示镜像图像。
[0096]
显示在第二屏幕520上的图像基于镜像，因此具有与显示在第一屏幕510上的图像相同的形式。在这种状态下，当用户触摸显示在第一屏幕510上的向外播送选项513或全屏选项514时，移动设备和显示设备的操作可以不同于当用户触摸显示在第二屏幕520上的向外播送选项523或全屏选项524(即分别是ui tv或ui full)时的操作，如图5所示。
[0097]
在一个实施例中，如下四种触摸输入场景是可能的：用户可以触摸第一屏幕510的全屏选项514；第一屏幕510的向外播送选项513；第二屏幕520的全屏选项524；或者第二屏幕520的向外播送选项523。特别地，当用户触摸第一屏幕510的全屏选项514时在移动设备中执行的操作不同于当用户触摸第二屏幕520的全屏选项524时在移动设备中执行的操作。
[0098]
显示在第一屏幕510上的向外播送选项513和全屏选项514是由移动设备生成的菜单。因此，当用户触摸向外播送选项513或全屏选项514时，移动设备可以容易地识别出向外播送选项513或全屏选项514被触摸。然而，显示在第二屏幕520上的镜像图像不是由显示设
备解码，而是由移动设备解码，并且显示设备仅显示镜像图像。换句话说，在第二屏幕520上显示的向外播送选项523和全屏选项524不是由显示设备生成的菜单。
[0099]
因此，当用户触摸显示在第二屏幕520上的向外播送选项523或全屏选项524时，移动设备或显示设备使用下面描述的方法来识别这种触摸输入。
[0100]
图6示出了根据实施例的一种方法，通过该方法，移动设备识别与镜像期间在显示设备中发生的触摸输入相对应的事件。
[0101]
如图6所示，移动设备110和显示设备120执行通信以相互交换信息。
[0102]
首先，显示设备120检测第二屏幕上的触摸输入。可以将各种技术应用于检测触摸输入的结构。例如，显示设备120可以具有这样的结构，其中压敏或电容式触摸传感膜堆叠在具有第二屏幕的显示器上。作为另一个例子，显示设备120可以具有包括围绕第二屏幕布置的多个红外传感器的结构，并且检测当用户触摸时发生的红外干扰。
[0103]
在操作610，移动设备110显示内容的播放图像和包括osd菜单的图像。移动设备110在播放内容的同时在内容的播放图像上显示具有osd菜单的选项。
[0104]
在操作620，移动设备110向显示设备120提供所显示图像的捕获数据。
[0105]
在操作630，显示设备120基于所提供的捕获数据来显示在移动设备110上显示的图像的镜像图像。
[0106]
在操作640，显示设备120检测第二屏幕上的触摸输入。
[0107]
在操作650，显示设备120向移动设备110发送关于在其中检测到触摸输入的第二屏幕上的位置的坐标信息。坐标信息例如可以包括第二屏幕上的触摸位置的x和y坐标，或者与第二屏幕的所有像素中的触摸位置相对应的像素区域的坐标。
[0108]
在操作660，移动设备110识别对应于从显示设备120接收的坐标信息的第一屏幕上的位置。当第二屏幕和第一屏幕在尺寸上彼此不同时，移动设备110可以基于第二屏幕的尺寸和第一屏幕的尺寸之间的比率，通过将第二屏幕上的坐标信息与第一屏幕相匹配来识别触摸位置。
[0109]
在操作670，移动设备110识别在第一屏幕上的经识别位置处显示的osd菜单。因此，移动设备110识别出在镜像期间用户触摸显示设备120的第二屏幕上所显示的osd菜单。
[0110]
图7示出了根据实施例的当用户在图5所示的镜像操作期间触摸第一屏幕的全屏选项时所显示的图像。
[0111]
参照图5和图7所示，当用户触摸第一屏幕510的全屏选项514时，移动设备显示c图像711。c图像711是播放与a图像511相同的图像内容的图像，并且具有从a图像的播放区域放大的播放区域。换句话说，c图像711是通过放大a图像获得的全屏图像。当显示设备被枢转地提供以在肖像模式和风景模式之间切换时，显示设备可以响应于该触摸输入来控制具有第二屏幕520的显示器进入风景模式。
[0112]
c图像711是其播放区域被扩展到全屏的图像，并且可以另外显示尺寸恢复选项714，即ui small，用于接收请求恢复到播放区域的原始大小(例如，镜像操作期间的大小)的输入。作为另一个例子，c图像711可以显示用于接收请求与原始尺寸相比播放区域的尺寸减小的输入的ui。当尺寸恢复选项714被触摸时，c图像711的播放区域被缩小为a图像的播放区域。
[0113]
这样，当对第一屏幕510上的全屏选项进行触摸输入时，移动设备继续将传输协议
保持在镜像状态，并基于全屏选项改变第一屏幕510上的图像的状态。当保持镜像状态时，显示设备继续从移动设备接收并显示c图像711的捕获数据。因此，显示在第一屏幕510上的图像的状态被巧妙地反映在显示在第二屏幕520上的图像中，并且因此第二屏幕520的镜像图像如之前示出第一屏幕510的c图像711的形式。
[0114]
如下面详细描述的，在镜像操作期间触摸第二屏幕520的全屏选项524时的操作不同于用户触摸第一屏幕的全屏选项514时的操作。
[0115]
图8示出了根据实施例的当用户在图5所示的镜像操作期间触摸第二屏幕的全屏选项时所显示的图像。
[0116]
参照图5和图8所示，当用户触摸第二屏幕520的全屏选项524时，移动设备控制显示在第一屏幕510上的图像与显示在第二屏幕520上的图像不同。
[0117]
当显示设备检测到触摸输入时，关于在其中检测到触摸输入的第二屏幕上的位置的坐标信息被发送到移动设备。移动设备基于接收到的坐标信息识别出触摸了用于第二屏幕的全屏选项。这种识别方法等同于上面参考图6描述的方法。
[0118]
移动设备继续显示a图像511和b图像512，它们被显示在第一屏幕510上，甚至在检测到触摸输入之后。换句话说，第一屏幕510的图像状态不被该触摸输入改变。因此，用于第一屏幕510的全屏选项514如前保持显示。
[0119]
然而，移动设备响应于该触摸输入改变第二屏幕520的图像状态。移动设备终止将第一屏幕510上的图像的捕获数据提供给显示设备的镜像功能，并且将传输协议改变为播送方法。当传输协议从镜像改变为播送时，移动设备向显示设备发送请求，通过该请求，显示设备被请求基于播送方法显示d图像821。
[0120]
如上所述，在前述实施例中，播送方法包括移动设备向显示设备提供未解码的图像内容数据的方法，以及向显示设备提供用于获得图像内容数据的地址信息的方法。在前一种方法中，移动设备将图像内容数据发送到背景中的显示设备，同时在第一屏幕510上显示图像。
[0121]
当显示设备接收到来自移动设备的请求并且通过播送方法获得图像内容数据时，显示设备对获得的数据进行解码并且在第二屏幕520上以全屏模式显示d图像821。响应于全屏选项的触摸输入，d图像821具有全屏的播放区域，其比显示在第二屏幕520上的图5的a图像的播放区域更扩展。
[0122]
d图像821的图像内容的数据与a图像511的图像内容的数据相同。然而，d图像821的数据由显示设备解码，但是a图像511的数据由移动设备解码。
[0123]
d图像821可另外显示尺寸恢复选项822，即ui small，用于接收请求恢复到播放区域的原始大小(例如，镜像操作期间的大小)的输入。作为另一个例子，d图像821可以显示用于接收请求与原始尺寸相比播放区域的尺寸减小的输入的ui。当在d图像821中触摸尺寸恢复选项822时，移动设备将第二屏幕520恢复到图5的状态。换句话说，移动设备将传输协议从播送改变为镜像，使得显示在第一屏幕510上的图像的状态可以如之前显示在第二屏幕520上。
[0124]
例如，当移动设备是智能电话并且显示设备是tv时，智能电话具有比tv更小的屏幕尺寸并且经常同时执行许多处理。虽然适于一只手的移动设备具有大约10英寸的屏幕尺寸，但是电视已经开发出具有超过40英寸的大于50英寸的大屏幕尺寸。因此，在一些情况
下，移动设备的解码性能可能不足以覆盖tv的屏幕。
[0125]
在镜像中，显示在显示设备的第二屏幕上的图像是移动设备的解码器的输出。这意味着在第二屏幕上显示的图像的放大可能导致图像的质量显著降低。当在第二屏幕上显示的图像的播放区域被扩展时，图像质量的问题可能变得相当大。
[0126]
在这点上，当在镜像期间从显示设备检测到用于放大镜像图像的播放区域的用户输入时，移动设备巧妙地保持第一屏幕的图像状态，但是将镜像切换到播送，从而扩展第二屏幕上的图像的播放区域。因此，可以在第二屏幕上确保播放区域被扩展的图像的质量。
[0127]
此外，根据一个实施例，针对对移动设备的第一屏幕的触摸输入和对显示设备的第二屏幕的触摸输入中的每一者来执行由用户直观地期望的操作，从而提供在用户控制的方便性方面得到改进的移动设备和显示设备。
[0128]
在实施例中，通过在移动设备的第一屏幕或显示设备的第二屏幕上进行的触摸输入来执行用户输入。然而，除了针对屏幕上的osd菜单的触摸输入之外，用户输入可以由在移动设备或显示设备中提供的各种用户输入接口来执行。例如，用于指示图像的全屏模式的用户输入可以通过在移动设备或显示设备中提供的按钮、遥控器、触摸板、屏幕键盘、触笔等来实现。
[0129]
图9是示出根据实施例的当移动设备接收用于在镜像期间扩展图像的播放区域的用户输入时由移动设备的处理器执行的方法的流程图。
[0130]
在操作910，移动设备基于图像内容数据显示第一图像。
[0131]
在操作920，移动设备将第一图像的捕获数据提供给显示设备，使得显示设备可以基于捕获数据将第二图像显示为第一图像的镜像图像。
[0132]
在操作930，移动设备检测用于指示要扩展的第一或第二图像的播放区域的用户输入。图像的播放区域的扩展例如可以意味着当前正在显示的图像的播放区域的大小增加，以及作为全屏模式显示。
[0133]
在操作940，移动设备识别是否在移动设备中进行了所检测到的用户输入。
[0134]
当识别出在移动设备中进行了用户输入时，在操作950，移动设备扩展并显示第一图像的播放区域。
[0135]
在操作960，移动设备连续地向显示设备提供与经扩展的播放区域一起显示的第一图像的捕获数据，从而显示设备的第二图像也可以与经扩展的播放区域一起显示。
[0136]
当识别出用户输入不是在移动设备中进行而是在显示设备中进行时，移动设备保持第一图像的当前播放状态，而不扩展第一图像的播放区域(操作970)。
[0137]
在操作980，移动设备执行基于播送的操作，以便扩展显示设备中的第二图像的播放区域。基于播送的操作包括在移动设备正在显示第一图像时在背景中将图像内容数据发送到显示设备的方法，或者将存储图像内容数据的地址信息发送到显示设备并请求显示设备基于地址信息获得图像内容数据的方法。
[0138]
下面，在图5的状态下，将描述当向外播送选项513在第一屏幕510上被触摸时的操作以及当向外播送选项523在第二屏幕520上被触摸时的操作。
[0139]
图10示出了根据一个实施例，当在图5所示的镜像操作期间触摸移动设备的第一屏幕上的向外播送选项时，在第一屏幕上显示的设备列表。
[0140]
参照图5和图10所示，当在镜像期间在第一屏幕510上触摸向外播送选项513时，移
动设备另外在第一屏幕510上显示移动设备可以与之通信的许多外部设备的列表1012。列表1012提供外部设备的选项，该外部设备能够显示图像并且支持移动设备可以与之通信的外部设备之间的播送方法的传输协议。
[0141]
当用户在列表1012中选择当前正处于镜像或是另一外部设备的显示设备时，移动设备停止镜像并开始对所选择的显示设备的向外播放操作。换句话说，移动设备可以向显示设备发送未解码的图像内容数据，或者向显示设备提供关于其中存储了图像内容数据的服务器的地址信息，从而显示设备可以基于该地址信息获得图像内容数据。
[0142]
例如，当移动设备显示从因特网的运动图像内容服务接收的a图像511时，移动设备执行如下的向外播送操作。响应于对列表1012上的显示设备的选择，移动设备停止向显示设备发送a图像511的捕获数据。移动设备将涉及用于执行提供a图像511的图像内容的服务的指示、用于获得图像内容的地址信息、关于在a图像511的总运行时间内的当前播放时间点的播放时间信息等的请求发送到显示设备。
[0143]
显示设备响应于来自移动设备的请求而执行为访问运动图像内容服务而准备的应用，从而访问相应的服务。显示设备基于所访问的服务的地址信息接收图像内容，并从相应的时间点播放所接收的图像内容，从而在第二屏幕520上显示d图像821。
[0144]
结果，a图像511被显示在第一屏幕510上，但是在解码源中与a图像511不同的d图像821被显示在第二屏幕520上。此外，可以在移动设备的第一屏幕510上显示用于控制显示在第二屏幕520上的d图像821的播放状态的控制菜单。换句话说，移动设备可以用作用于控制显示设备上显示的d图像821的遥控器。
[0145]
图11示出了根据实施例的当在如图5所示的镜像期间触摸显示设备的第二屏幕上的向外播送选项时所显示的图像。
[0146]
参照图5和11所示，当在镜像期间触摸第二屏幕520的向外播送选项523时，移动设备执行如下的向外播送操作。移动设备不显示用于选择对其应用播送操作的外部设备的列表1012(参见图10)。取而代之的是，移动设备基于在显示设备中进行用户输入来识别显示设备被选择作为要经历播送操作的目标。
[0147]
移动设备停止向显示设备发送a图像511的捕获数据，从而终止已经执行的镜像。移动设备将涉及用于执行提供a图像511的图像内容的服务的指示、用于获得图像内容的地址信息、关于在a图像511的总运行时间内的当前播放时间点的播放时间信息等的请求发送到显示设备。
[0148]
显示设备响应于来自移动设备的请求而执行为访问运动图像内容服务而准备的应用，从而访问相应的服务。显示设备基于所访问的服务的地址信息接收图像内容，并从相应的时间点播放所接收的图像内容，从而在第二屏幕520上显示d图像821。
[0149]
用于控制显示在第二屏幕520上的d图像821的播放状态的控制菜单1112可以显示在移动设备的第一屏幕510上。控制菜单1112甚至在图10的前述实施例中也可以被相同地显示。控制菜单1112例如可以包括各种选项，诸如用于指示d图像821的播放的播放按钮、用于停止d图像821的播放的停止按钮、用于播放由服务提供的内容块中的先前内容或下一内容的其它内容播放按钮、用于控制d图像821的音量的音量控制器等。因此，移动设备可以响应于用户对控制菜单1112的输入，向显示设备发送用于控制d图像821的播放状态的控制信号。
[0150]
当识别出在移动设备中做出用于向外播送请求的用户输入时，移动设备在第一屏幕510上显示该列表。另一方面，当识别出在移动设备中没有做出而是在显示设备中做出用于向外播送请求的用户输入时，移动设备不在第一屏幕510上显示该列表。
[0151]
图12是示出根据实施例的当移动设备接收用于在镜像期间请求向外播送的用户输入时由移动设备的处理器执行的方法的流程图。
[0152]
在操作1210，移动设备基于图像内容数据显示第一图像。
[0153]
在操作1220，移动设备向显示设备提供第一图像的捕获数据，从而显示设备可以显示第二图像，即基于捕获数据的第一图像的镜像图像。
[0154]
在操作1230，移动设备检测用于请求向外播送的用户输入。
[0155]
在操作1240，移动设备识别检测到的用户输入是否在移动设备中进行。
[0156]
当识别出在移动设备中进行用户输入时，移动设备显示可能与之通信的外部设备的列表(操作1250)。
[0157]
在操作1260，移动设备接收对列表中的外部设备中的显示设备的选择。
[0158]
在操作1270，移动设备停止关于相应的显示设备的镜像，并开始对相应的显示设备的向外播放操作。移动设备的向外播送操作等同于前述操作。
[0159]
当识别出在移动设备中没有进行用户输入，而在显示设备中进行用户输入时，移动设备进行到操作1270。
[0160]
下面，将在移动设备和显示设备被连接用于通信的条件下描述移动设备的操作。移动设备是电子设备的类型之一，并且为了便于描述，显示设备可以被称为要与电子设备(例如，移动设备)区分开的外部设备。
[0161]
图13是示出根据实施例的移动设备的控制方法的流程图。
[0162]
如图13所示，以下操作由移动设备的处理器执行。
[0163]
在操作1310，移动设备接收用于请求显示预定运动图像内容的第一用户输入。
[0164]
在操作1320，移动设备显示第一形式的图像，其中响应于接收到的第一用户输入，在屏幕的部分区域中显示运动图像内容。第一形式对应于移动设备可以在其上显示图像的整个屏幕内的部分区域中显示运动图像内容的图像的状态。
[0165]
在操作1330，移动设备在显示第一形式的图像的同时将对应于第一形式的图像的图像数据发送到显示设备。因此，显示设备可以显示与移动设备上显示的图像相同的第一形式的图像，即显示镜像图像。移动设备基于第一传输协议将对应于第一形式的图像的图像数据发送到显示设备。由移动设备显示的第一形式的图像可以包括ui项，该ui项被提供为可由用户选择以改变运动图像内容的显示形式。
[0166]
在操作1340，移动设备接收在显示设备中做出的第二用户输入，同时向显示设备发送图像数据和/或同时在显示设备上显示图像。
[0167]
在操作1350，移动设备识别第二用户输入是否指示运动图像内容的显示形式的改变，例如，当用户触摸被提供来改变在显示设备上显示的镜像图像上的运动图像内容的显示形式的ui项时。显示设备将涉及被触摸的坐标信息的第二用户输入发送到移动设备。当识别出与第二用户输入相关联的坐标信息对应于ui项的显示位置时，移动设备可以识别出相应的ui项被触摸。
[0168]
当识别出第二用户输入不指示运动图像内容的显示形式的改变时，移动设备保持
当前镜像操作。
[0169]
另一方面，当识别出第二用户输入指示运动图像内容的显示形式的改变时，移动设备巧妙地保持具有第一形式的图像的显示状态(操作1360)。此外，在操作1370，移动设备向显示设备发送用于以不同于第一形式的第二形式显示运动图像内容的信息。移动设备基于不同于第一传输协议的第二传输协议来发送信息。在这种情况下，显示设备基于所接收的信息来显示运动图像内容的图像，其中该图像不是正在移动设备中显示的图像的镜像图像。
[0170]
这里，用于显示具有第二形式的运动图像内容的信息例如可以是存储在移动设备的存储单元中的运动图像内容的文件，或者可以从其中获得运动图像内容的地址信息。当该信息作为运动图像内容的文件给出时，第二传输协议例如可以包括播送传输方法。
[0171]
当显示设备基于所接收的信息显示运动图像内容的图像时，移动设备可以接收在显示设备中例如在图8中所示的ui small上做出的第三用户输入。当识别出第三用户输入指示要恢复到第一形式的运动图像内容时，移动设备将与当前正在移动设备中显示的图像相对应的图像数据发送到显示设备。因此，显示设备显示在移动设备中显示的图像的镜像图像。
[0172]
当移动设备正在显示第一形式的图像，并将对应于第一形式的图像的图像数据发送到显示设备时，第二用户输入可以在移动设备中进行。当识别出在移动设备中进行的第二用户单元指示运动图像内容的显示形式的改变时，例如，ui full被激活，移动设备通过将运动图像内容的显示形式改变为第二形式来显示图像，并将与以第二形式显示的运动图像内容相对应的图像数据发送到显示设备。换句话说，在这种情况下，显示设备巧妙地显示在移动设备中显示的图像的镜像图像。
[0173]
上述设备的操作可以通过在相应设备中提供的人工智能来执行。人工智能可以通过使用机器学习算法应用于各种相关技术系统。人工智能系统是指具有人的智能或仅次于人的智能的计算机系统。在这样的系统中，机器、设备或系统自主地执行学习和识别，并且基于累积的经验提高辨别和识别的准确性。人工智能通过利用机器学习(深度运行)技术以及基于输入数据的自主分类和学习特征的算法的算法，仿制人脑感知、识别等功能而基于基础技术。
[0174]
例如，基本技术可以包括用于识别人类的语言和文本的语言理解技术、用于识别像人类视觉的事物的视觉理解技术、用于识别信息和逻辑地进行推理和预测的推理和预测技术、用于将人类的体验信息处理成知识数据的知识表示技术、以及用于控制车辆的自动驾驶或机器人的运动的运动控制技术中的至少一者。
[0175]
语言理解是指人类语言或文本的识别、应用和处理技术，包括自然语言处理、机器翻译、对话系统、问答、语音识别和合成等。
[0176]
推理和预测是指识别信息和进行逻辑预测的技术，包括基于知识和概率的推理、优化预测、基于偏好的计划、推荐等。
[0177]
知识表示是指将人类的经验信息自动化为知识数据的技术，包括诸如数据创建和分类的知识构建、诸如数据利用的知识管理等。
[0178]
实施例可以被实现为包含存储在机器可读(例如，计算机可读)存储介质(例如，内部存储器或外部存储器)中的一个或多个指令的软件。处理器可以从存储介质调用指令，并
且可以根据被调用的指令来操作，且处理器包括电子设备。当指令由处理器执行时，处理器可使用其它组件直接地或在处理器的控制下执行对应于指令的功能。指令可包含由编译器产生的代码或可由解释器执行的代码。机器可读存储介质可以以非暂时性存储介质的形式提供。计算机可读介质可以包括程序指令、数据文件、数据结构等或其组合。例如，计算机可读介质可以存储在诸如通用串行总线(usb)存储器的非易失性存储单元中，而不管它是可删除的还是可重写的，例如，ram、rom、闪存、存储器芯片、集成电路(ic)等存储器，或者光可记录或磁可记录的或机器(例如，计算机)可读的存储单元介质。例如，光盘(cd)、数字多功能盘(dvd)、磁盘、磁带等。应当理解，可以包括在移动终端中的存储器是适于存储具有用于实现实施例的指令的程序的机器可读存储单元介质的示例。记录在该存储单元介质中的程序指令可以根据实施例具体设计和配置，或者可以为本领域技术人员所用。计算机程序指令可以由计算机程序产品来实现。
[0179]
虽然已经参考附图具体示出和描述了某些实施例，但提供实施例是为了说明的目的，并且本领域的普通技术人员将理解，可以根据本公开做出各种修改和其它等同实施例。因此，本公开的真实技术范围由所附权利要求的技术精神来限定。