专利名称：显示装置及其控制方法
技术领域：
本公开的示例性实施例涉及显示装置及其控制方法，该显示装置被配置成在屏幕上显示指针(pointer)并根据用户的动作移动该指针。
背景技术：
一般而言，显示装置是被配置成通过处理图像信号来显示图像的装置，电视机(TV)是典型的显示装置的例子。近年来，随着智能电视的发展，除了广播之外，还通过智能电视向用户提供诸如视频点播(Video On Demand, V0D)、游戏、视频呼叫等计算机功能及其他应用。遥控器作为一种被配置成方便用户的遥控装置正得到使用，通过使用以无线方式连接到电视的遥控器，用户可以改变电视的频道或调整电视的音量。此外，用户将能够通过诸如以无线方式连接到电视的智能电话和个人计算机(PC)的电子设备、代替使用遥控器来控制电视。此外，随着遥控技术的发展，电视中实现了能够识别用户的话音的功能、或者能够根据用户的动作识别用户的姿态(gesture)的功能。同时，智能电视被配置成支持图形用户界面(Graphic User Interface,⑶I),以便用户对电视进行控制，当用户操纵遥控装置时，正在电视屏幕上显示的指针会被移动。因此，通过将指针移动到在电视屏幕上显示的频道按钮或音量按钮的位置、并且通过选择频道按钮或音量按钮，用户可以调整电视的频道或音量。
发明内容
因此，此处公开的示例性实施例的一个方面提供一种显示装置及其控制方法，该显示装置被配置成响应于用户的动作移动指针，并且在至少一个移动域(moving domain)中移动该指针。此外，此处公开的示例性实施例的另一个方面提供一种显示装置及其控制方法，该显示装置被配置成根据指针的位置以及指针的移动方向执行滚轮功能。示例性实施例的其他方面将在随后的描述中部分地阐明，并将从该描述中部分地变得明显，或者可以通过实践示例性实施例而习得。根据示例性实施例，一种显示装置包括图像获取单元、图像处理单元和控制单元。图像获取单元可以被配置成获取用户图像。图像处理单元可以被配置成从用户图像感测用户的动作。控制单元可以被配置成响应于感测的用户的动作控制在显示装置的屏幕上显示的指针被移动到目标位置，并且可以根据目标位置控制屏幕进行滚动(scroll)。控制单元还可以被配置成:当指针在超过参考时间的时间段内位于屏幕的参考域时，根据目标位置控制屏幕进行滚动。控制单元还可以被配置成固定指针的位置并且根据目标位置控制屏幕进行滚动。根据另一个示例性实施例，显示装置可以包括图像获取单元、图像处理单元和控制单元。图像获取单元可以被配置成获取用户图像。图像处理单元可以被配置成从用户图像感测用户的动作。控制单元可以被配置成响应于感测的用户的动作控制在显示装置的屏幕上显示的指针被移动到目标位置。当目标位置偏离指针位于其中的至少一个移动域时，控制单元还可以被配置成控制指针移动到至少一个其他移动域。当目标位置位于多个参考域当中的参考域中时，控制单元根据目标位置位于其中的至少一个参考域的位置，可以确定指针的移动方向，其中所述多个参考域位于所述至少一个移动域的外部。当目标位置位于参考域的边缘时，控制单元可以根据该参考域的边缘的位置确定指针的移动方向，其中所述参考域位于至少一个移动域的内部。根据另一个示例性实施例，显示装置包括图像获取单元、图像处理单元和控制单元。图像获取单元可以被配置成获取用户图像。图像处理单元可以被配置成从用户图像感测用户的动作。控制单元可以被配置成响应于感测的用户的动作，控制在显示装置的屏幕上显示的指针移动到位于屏幕边缘的目标位置，并且还被配置成当指针位于屏幕边缘时控制屏幕的页进行移动。控制单元还可以被配置成:当指针在超过参考时间的时间段内位于屏幕边缘时，根据指针的位置控制屏幕的页进行移动。当指针位于屏幕的左侧边缘或上侧边缘时，控制单元还可以被配置成控制屏幕的页移动到前一页，并且当指针位于屏幕的右侧边缘或下侧边缘时，控制单元还可以被配置成将屏幕的页移动到下一页。根据另一个示例性实施例，显示装置包括图像获取单元、图像处理单元和控制单元。图像获取单元可以被配置成获取用户图像。图像处理单元可以被配置成从用户图像感测用户的动作。控制单元可以被配置成响应于感测的用户的动作，控制在显示装置的屏幕上显示的指针移动到第一参考域中的目标位置，并且当指针位于屏幕的第一参考域中时，控制至少一个按钮显示在该第一参考域中。当在至少一个按钮被选择之后指针位于屏幕的第二参考域中时，控制单元还可以被配置成根据目标位置控制屏幕进行缩放。当指针在超过参考时间的时间段内位于屏幕的第二参考域中时，控制单元还可以被配置成根据目标位置控制屏幕进行缩放。控制单元还可以被配置成固定指针的位置并且根据目标位置控制屏幕进行缩放。根据另一个示例性实施例，一种控制显示装置的方法如下所述。可以从用户图像感测用户的动作。可以响应于感测的用户的动作将在屏幕上显示的指针移动到目标位置。当目标位置偏离至少一个移动域时，可以将指针移动到至少一个其他移动域。指针向至少一个其他移动域的移动可以包括:当目标位置位于多个参考域当中的至少一个参考域时，根据该至少一个参考域的位置确定指针的移动方向，其中，所述多个参考域位于所述至少一个移动域的外部。指针向至少一个其他移动域的移动可以包括:当目标位置位于参考域的边缘时，根据参考域的边缘的位置确定指针的移动方向，其中，该参考域位于所述至少一个移动域的内部。根据另一个示例性实施例，一种控制显示装置的方法如下所述。可以从用户图像感测用户的动作。可以响应于感测的用户的动作，控制在屏幕上显示的指针移动到位于屏幕边缘的目标位置。当指针位于屏幕边缘时，可以移动屏幕的页。屏幕的页的移动可以包括:当指针在超过参考时间的时间段内位于屏幕边缘时，根据指针的位置移动屏幕的页。根据另一个示例性实施例，一种控制显示装置的方法如下所述。可以从用户图像感测用户的动作。可以响应于感测的用户的动作将在屏幕上显示的指针移动到目标位置。屏幕可以根据目标位置进行滚动。屏幕的滚动可以包括固定指针的位置。根据另一个示例性实施例，一种控制显示装置的方法如下所述。可以从用户图像感测用户的动作。可以响应于感测的用户的动作，将在屏幕上显示的指针移动到第一参考域中的目标位置。当指针位于屏幕的第一参考域中时，可以在第一参考域中显示至少一个按钮。在至少一个按钮被选择之后，当指针在超过参考时间的时间段内位于屏幕的第二参考域时，可以根据另一个目标位置控制屏幕进行缩放。屏幕的缩放可以包括固定指针的位置。如上所述，当目标位置偏离至少一个移动域时，在至少一个移动域中移动的指针立即移动到至少一个其他移动域，从而用户将能减少用于操纵显示装置而移动指针所花费的努力和时间。此外，根据指针的位置和移动方向执行滚轮功能，因而，即使当诸如鼠标的外围设备未连接到显示装置时，也将能通过用户的简单动作来执行页滚动、滚轮滚动和缩放功能。
从以下结合附图对示例性实施例的描述，示例性实施例的这些和/或其他方面将变得清楚和更加容易理解。附图中:图1是图示根据示例性实施例的显示装置的外观的前视图；图2是图示图1的显示装置的框图；图3是图示根据示例性实施例的感测图1的显示装置的用户动作的方法的流程图；图4是图示根据示例性实施例的移动图1的显示装置的指针的例子的示图；图5是图示根据示例性实施例的移动图1的显示装置的指针的方法的流程图；图6是图示根据示例性实施例的在图1的显示装置的移动域中移动指针的例子的示图；图7是图示根据示例性实施例的确定图1的显示装置的指针的跳跃移动(jump-moving)方向的例子的示图；图8是图示根据示例性实施例的确定图1的显示装置的指针的跳跃移动方向的另一个例子的示图；图9到图10是图示根据示例性实施例的、在图1的显示装置的指针被跳跃移动的情况下的图形效果的示图；图11是图示根据示例性实施例的移动图1的显示装置的屏幕的页的方法的流程图12是图示根据示例性实施例的、图1的显示装置的指针位于该显示装置的屏幕边缘的例子的示图；图13到图14是图示根据示例性实施例的、在图1的显示装置的屏幕的页正被移动的情况下的图形效果的示图；图15是图示根据示例性实施例的滚动图1的显示装置的屏幕的方法的流程图；图16是图示根据示例性实施例的、图1的显示装置的指针位于参考域(referencedomain)的例子的示图；图17到图18是图示根据示例性实施例的、在图1的显示装置的屏幕的页正被滚动的情况下的图形效果的示图；图19是图示根据示例性实施例的、在图1的显示装置的按钮正被选择的状态下执行滚轮滚动功能的方法的流程图；图20是图示根据示例性实施例的第一参考域的示图，图1的显示装置的指针不会频繁地位于该第一参考域；图21是图示根据示例性实施例的在图1的显示装置的屏幕上显示的按钮的示图；以及图22到图23是根据示例性实施例的、正在执行图1的显示装置的指针的缩放功能的例子的示图。
具体实施例方式现在将对示例性实施例进行详细描述，在附图中图示了示例性实施例的例子，附图中相似的附图标记始终指代相似的元件。图1是图示根据示例性实施例的显示装置的外观的前视图。参照图1，在显示装置I的前表面提供屏幕51，在屏幕51上显示图像。图像传感器61被安装在显示装置I的顶端，并且图像传感器61获取关于显示装置I前方的图像。根据示例性实施例，图像传感器61可以由互补金属氧化物半导体(complementary metaloxi de-semi conductor, CMOS)传感器或电荷稱合器件(charge coupled device, CCD)传感器组成，以获取数字图像数据。此外，图像传感器61可以包括照相机以获取模拟图像数据，并且包括模数转换器以将模拟图像数据转换成数字图像数据。图像传感器61可以以嵌入式方式安装在显示装置I的顶端，或者可以作为外部组件安装在显示装置I的顶端。图2是图示图1的显示装置的框图。参照图2,显示装置I包括广播接收单元101、信号处理单元102、显示单元103、内容生成单元104、图像获取单元105、图像处理单元106、存储器单元107和控制单元108。广播接收单元101被配置成接收广播信号。根据示例性实施例，广播信号包括图像信号、语音信号和数据信号中的至少一个，并且可以是作为无线电波传送的地波广播信号、通过线缆传送的有线广播信号、或者通过卫星传送的卫星广播信号。信号处理单元102处理接收的信号，并且将接收的信号重构成图像数据和语音数据。例如，信号处理单元102对接收的广播信号执行诸如解码操作或缩放(scaling)操作的处理操作。信号处理单元102处理图像数据，从而可以在显示装置I的屏幕51上显示指针。此外，信号处理单元102还生成用户界面(User Interface, UI),从而可以与指针一起在显示装置I的屏幕51上显示Π。显示单元103基于接收的图像数据在显示装置I的屏幕51上显示图像、指针和UL.根据示例性实施例，在屏幕51上与用户的手的位置相对应的位置处显示指针11 (图4)。显示单元103可以被实现为多种类型，例如，阴极射线管(Cathode Ray Tube，CRT)、液晶显不器(Liquid Crystal Display, LCD)和等离子体显不面板(Plasma Display Panel,PDP )。内容生成单元104基于存储在显示装置I处的数据、或者基于存储在通过网络连接的服务器处的数据，生成内容信号。根据示例性实施例，所述内容可以包括电影、电视演出、其他类型的视频、游戏、动画片、文档或图像。内容信号由信号处理单元102重构成图像数据和语音数据，并且重构的图像数据可以通过显示单元103显示在显示装置I的屏幕51上。图像获取单元105 (也称为“图像获取器”)通过驱动图像传感器61获取位于显示装置I前方的用户图像。在图像获取单元105获取的用户图像被作为以帧为单位的图像数据发送到图像处理单元106。图像处理单元106通过分析用户图像感测用户的动作。为了分析用户图像，根据示例性实施例，图像处理单元106检测其中在用户图像上呈现动作的域的运动矢量。对于检测运动矢量的方法，可以使用本领域技术人员已知的技术来实现不同的方法，作为一个示例，图像处理单元106可以能够通过对两个连续图像巾贞的差运算(differenceoperation)来检测运动矢量。根据示例性实施例，用户可以使用他或她的手来做出动作，从而可以表达大的且自然的动作。下文中，在示例性实施例中，将描述感测用户手的动作的情况。然而，应当理解，根据其他的示例性实施例，取代手的动作、或者除了手的动作，也可以使用其他类型的动作。为了将身体其他部分的动作与手的动作区分开来，图像处理单元106可以将被配置以检测运动矢量的域的大小限制为手的大小，并且在检测到的具有运动矢量的域多于两个的情况下，可以将不是手的大小的其他的域看作是身体的其他部分。此外，图像处理单元106将检测的运动矢量的大小与预定阈值进行比较，并且在比较结果指示检测的运动矢量的大小大于预定阈值的情况下，将检测的运动矢量确定为是有效的。从而，图像处理单元106可以仅仅在用户的手的移动所跨过的范围大于预定范围的情况下，才将用户的手的动作感测为是有效的。图像处理单元106通过分析有效的运动矢量，确定用户的手的动作的大小和方向。为此，图像处理单元106可以将运动矢量划分为垂直分量和水平分量。这里，垂直分量对应于坐标系上的Y轴分量，并且水平分量对应于坐标系上的X轴分量。通过计算垂直分量的大小和水平分量的大小，图像处理单元106将能确定用户的手的动作的大小。此外，图像处理单元106将能通过垂直分量和水平分量的和确定用户的手的方向。在存储器单元107，存储被配置成驱动显示装置I的控制程序和根据控制程序的执行而生成的数据。根据示例性实施例，存储器单元107可以被实现为诸如电可擦除可编程只读存储器(Electrically Erasable ProgrammabIeROM, EEPR0M)、可擦除可编程序只读存储器(Erasable Programmable ReadOnly Memory,EPR0M)和快闪存储器的非易失性存储器装置中的一个。控制单元108 (也称为“控制器”)根据控制程序控制显示装置I的总体操作。控制单元108分析用户图像，并且被以这样的方式配置:指针11被显示在与用户的手21的位置相对应的位置处。控制单元108被以这样的方式配置:在屏幕51上显示的指针11被移动到与用户的手21的动作相对应的目标位置。通过分析指针11的位置，控制单元108将能确定指针11是否位于屏幕51的边缘，或者在将指针11的当前位置作为参考的情况下指针11是否位于特定范围内的参考域。下文中，将详细描述根据示例性实施例的显示装置I的控制方法。图3是图示根据示例性实施例的感测图1的显示装置的用户的动作的方法的流程图。参照图3，在操作201，图像获取单元105获取位于显示装置I前方的用户的图像。接下来，在操作202，图像处理单元106检测用户图像上呈现动作的域的运动矢量。此时，如上所述，用户的动作可以是用户的手的动作。接下来，在操作203，图像处理单元106通过将检测的运动矢量的大小与预定阈值进行比较，确定运动矢量的大小是否大于预定阈值。然后，在操作204，如果感测的运动矢量的大小大于预定阈值，则图像处理单元106分析运动矢量以确定用户的手21的动作的大小和方向。图4是图示根据示例性实施例的移动图1的显示装置的指针的例子的示图。参照图4，在用户的手21移动的情况下，图像传感器61获取移动的用户的手21的图像，并且图像处理单元106从获取的用户图像中感测用户的手21的动作。作为一个例子，图像处理单元106可以能够感测用户的手21的水平方向的动作的大小(mX)和垂直方向的动作的大小(mY)。控制单元108响应于用户的手21的动作计算指针11的目标位置。作为一个例子，控制单元108可以能够计算指针11从当前位置移动到目标位置的水平方向的动作的大小(nX)和垂直方向的动作的大小(nY)。此时，在水平方向上向右侧移动的大小或者在垂直方向上向上侧移动的大小被定义为动作的正值，并且在水平方向上向左侧的移动的大小或者在垂直方向上向下侧的移动的大小被定义为动作的负值。控制单元108响应于用户的手21的动作，控制当前显示在屏幕51上的指针11，使其移动到目标位置。这里，用户的手21的位置一般与用户手掌的中心22相关，并且指针11的位置一般与指针11左侧顶端边缘的位置12相关。在图4中，指针11的形状被图示为箭头，但是指针11的形状不局限于箭头的形状，而可以被表示成各种其他形状，如笔、人类的手、沙漏等等。图5是图示根据示例性实施例的移动图1的显示装置的指针的方法的流程图。通过参照图5，在操作301，图像处理单元106感测用户的动作。接下来，在操作302，控制单元108根据感测的用户的动作，控制屏幕51上的指针11移动到目标位置。控制单元108可以控制指针11仅仅在预定的至少一个移动域中移动。这里，指针11仅仅在至少一个移动域中移动的情况可以被定义为跳跃模式，并且指针11在屏幕51上的所有位置移动的情况可以被定义为自由模式。在跳跃模式中指针11的形状以及在自由模式中指针11的形状可以不同地显示。
在以跳跃模式移动指针11之前，当在显示装置I接通后经过了参考时间时，控制单元108以自由模式移动指针11，并且从指针11在被自由移动之后位于预定的至少一个移动域的时间点起，控制单元108控制指针11以跳跃模式移动。在指针11的跳跃模式中，控制单元108可以控制指针11的移动速度，以便比标准速度缓慢地移动。此外，控制单元108可以减少与用户动作的动作大小相对应的指针11的移动大小。因此，即使在指针11以跳跃模式移动的情况下，也可以调整相对于用户动作的灵敏度，从而指针11可以能够平滑地移动。将参照图6更详细地描述根据示例性实施例在移动域中移动指针11的方法。参照图6，在屏幕51上显示的指针11如上所述仅仅在至少一个预定的移动域中移动。作为一个例子，移动域是在显示装置I的屏幕51上显示的至少一个图形图像，并且移动域可以是用于音量按钮31和32的域或者用于频道按钮33和34的域。在指针11被从至少一个移动域移动到至少一个其他移动域的情况下，控制单元108可以控制指针11通过跳跃进行移动。如图6中所示，在指针11当前位于音量增加按钮31处的情况下，控制单元108根据用户的手21在水平方向上的动作(a)、控制指针11通过跳跃移动(a’)到频道增加按钮32，或者，控制单元108可以根据用户的手21在垂直方向上的动作(b)、控制指针11通过跳跃移动(b’)到音量降低按钮32，同时，控制单元108还可以根据用户的手21在对角线方向上的动作(C)、控制指针11通过跳跃移动(c’ )到频道降低按钮34。根据示例性实施例，通过跳跃移动指针11区别于一般地移动指针11。更具体地说，当指针11正在至少一个移动域中移动时，控制单元108通过跟踪用户的手21的动作，控制指针11移动到与用户的手21的位置相对应的目标位置。然而，当指针11通过跳跃移动时，控制单元108控制指针11随机地移动到至少一个其他移动域中的随机位置，而不跟踪用户的手21的动作。接下来，在操作303，控制单元108确定指针11的目标位置是否偏离至少一个移动域，并且如果控制单元108确定指针11的目标位置偏离了至少一个移动域，则在操作304，控制单元108确定指针11的移动方向。通过在操作304确定指针11的移动方向，控制单元108确定期望指针11移动到的移动域。将参照图7到图8描述根据示例性实施例的、确定指针11的目标位置从移动域的偏离以及确定指针11的移动方向的方法。参照图7，至少一个参考域位于至少一个移动域的外部，用以确定指针11的跳跃移动方向。作为一个例子，具有矩形形状的参考域位于指针11当前位于的音量增加按钮31的外部。更具体地说，第一参考域(AA)位于音量增加按钮31的域的水平方向上，第二参考域(AB)位于音量增加按钮31的域的垂直方向上，并且第三参考域(AC)位于音量增加按钮31的域的对角线方向上。在根据用户的手21在水平方向上的动作(a)期望指针11移动(a’ )到的目标位置12是第一参考域(AA)的情况下，控制单元108确定指针11的跳跃移动方向为朝向右侧的水平方向，并且控制指针11跳跃移动到频道增加按钮33的域。以同样的方式，在根据用户的手21在垂直方向上的动作(b)期望指针11移动(b’ )到的目标位置12是第二参考域(AB)的情况下，控制单元108确定指针11的跳跃移动方向为朝向下侧的垂直方向，并且控制指针11跳跃移动到音量降低按钮32的域。在根据用户的手21在对角线方向上的动作(c)期望指针11移动(c’)到的目标位置12是第三参考域(AC)的情况下，控制单元108确定指针11的跳跃移动方向为朝向右下侧的对角线方向，并且控制指针11跳跃移动到频道降低按钮34的域。参照图8，指针11以跳跃模式在其中移动的参考域位于至少一个移动域的内部。控制单兀I 108控制指针11在参考域中以及在移动域中移动。作为一个例子，具有矩形形状的参考域(Al)位于指针11当前位于的音量增加按钮31的域的内部。从而，指针11不仅在移动域中移动，而且在位于该移动域内部的参考域(Al)中移动。当通过根据用户的手21在水平方向上的动作(a)移动(a’)指针11、使指针11的位置12位于参考域(Al)的右侧边缘时，控制单元108确定指针11的跳跃移动方向为朝向右侧的水平方向，并且可以控制指针11跳跃移动到频道增加按钮33的域。以同样的方式，对于用户的手21在垂直方向上的动作(b)，控制单元108可以确定指针11的跳跃移动方向为朝向下方的垂直方向。当通过根据用户的手21在对角线方向上的动作(c)移动(c’)指针11、使指针11的位置位于参考域(Al)的右下侧方向的顶点时，控制单元108可以确定指针11的跳跃移动方向为朝向右下侧的对角线方向。此外，即使在指针11的位置位于参考域(Al)的右侧边缘下端的预定范围处、即位于参考域(Al)下侧边缘右端的预定范围处的情况下，控制单元108也可以确定指针11的跳跃移动方向为朝向右下侧的对角线方向。此外，控制单元108可以将指针11在水平方向上跳跃移动的移动速度调整为不同于指针11在垂直方向上跳跃移动的移动速度。例如，在指针11从音量增加按钮31的域跳跃移动到频道增加按钮33的域的情况下，由于移动距离相对较远，移动速度可以被调节为相对较快，并且在指针11从音量增加按钮31的域跳跃移动到音量降低按钮32的域的情况下，由于移动距离相对较短，移动速度可以被调节得相对较慢。接下来，在操作305，控制单元108根据确定的移动方向，控制指针11移动到至少一个其他移动域的随机位置。作为一个例子，至少一个其他移动域的位置可以是移动域的中央部分。当指针11正被移动到至少一个其他移动域时，可以使用至少一个图形效果。作为一个例子，参照图9到图10，当指针11正从音量增加按钮31的域跳跃移动到频道增加按钮33的域时，可以使用如下的图形效果。也就是说，当指针11正在水平方向上移动(a’)时,可以如图9所示通过显示指针11的踪迹15来移动指针11,或者如图10所示通过显示指针11的阴影16来移动指针11。此外，根据其他示例性实施例，当指针11正在移动时使用的图形效果可以被实现为可以使用本领域技术人员已知的技术生成的许多其他不同类型的图形效果。图11是图示根据示例性实施例的移动图1的显示装置的屏幕的页的方法的流程图。对于与图5的处理重叠的处理，将省略对其的详细描述。参照图11，在操作403，控制单元108确定指针11是否位于屏幕51的边缘。此时，指针11可以位于屏幕51的左侧边缘、屏幕51的右侧边缘、屏幕51的上侧边缘或者屏幕51的下侧边缘。参照图12，根据用户的手21的动作，指针11可以位于屏幕51的至少一个边缘上。作为一个例子，在用户的手21从当前位置移动(e)到屏幕51的左侧的情况下，指针11可以根据用户的手21的动作的大小在水平方向上移动(e’)，从而位于屏幕51的左侧边缘43。以同样的方式，在用户的手21从当前位置移动(d)到屏幕51的右侧的情况下，指针11可以根据用户的手21的动作的大小在水平方向上移动(d’)，从而位于屏幕51的右侧边缘44。在用户的手21从当前位置移动(f)到屏幕51的上侧的情况下，指针11可以根据用户的手21的动作的大小在垂直方向上移动(f)，以便位于屏幕51的上侧边缘41，并且在用户的手21从当前位置移动(g)到屏幕51的下侧的情况下，指针11可以根据用户的手21的动作的大小在垂直方向上移动(g’)，以便位于屏幕51的下侧边缘42。根据示例性实施例，如上所述，指针11的位置与指针11左侧顶端的位置相关，因而，在指针11位于屏幕51的右侧边缘44或屏幕51的下侧边缘42处的情况下，指针11可以不在屏幕51上显示。此外，应当理解，指针11的位置不局限于与指针11左侧顶端的位置相关，而是可以替代为与指针11其他部分的位置相关。接下来，在操作404，如果控制单元108确定指针11位于屏幕51的边缘，则控制单元108确定指针11保持在屏幕51边缘的时间是否超过参考时间。在操作405，如果超过了参考时间，则控制单元108在超过参考时间之后，根据指针11的位置，控制屏幕51的页进行移动。也就是说，指针11执行页滚动操作(进入页滚动模式)。作为一个例子，当指针11位于屏幕51左侧边缘处或者屏幕51上侧边缘处时，控制单元108将屏幕51的当前页移动到前一页，并且在指针位于屏幕51的右侧边缘处或者屏幕51的下侧边缘处的情况下，将屏幕51的当前页移动到下一页。这里，将参照图13到图14详细描述根据示例性实施例的移动屏幕51的页的方法。参照图13到图14，在显示装置I的屏幕51上，可以显示各种内容。根据示例性实施例，所述内容可以包括绘图、文档或者图像，并且所述内容可以被配置成包括可以被移动的页。例如，在内容是文档的情况下，根据文档标准来定义页；在内容是绘图或一组图像的情况下，以这样的方式定义页:相对于当前绘图或当前图像的前一绘图或前一图像可以被定义为前一页，而相对于当前绘图或当前图像的下一绘图或下一图像可以被定义为下一页。当在屏幕51上显示的内容的页正移动到前一页或下一页时，可以使用至少一个图形效果。作为一个例子，当在参考时间期间指针11位于屏幕51的左侧边缘43处时，内容的页被移动并且可以使用如下图形效果。当内容的页正被移动到前一页时，如图13中所示，内容的当前页52以滑动的方式向屏幕51的右侧消失，并且前一页53可以被显示为以滑动的方式从屏幕51的左侧出现。此时，可以在屏幕51上显示位于当前页52与前一页53之间的、被配置成区分所述页的域54。如图14中所示，内容的当前页52从屏幕51消失，而内容的前一页53可以独自(by itself)显示在屏幕51上。可以理解，根据其他示例性实施例，当内容的页正被移动时可以使用许多其他类型的图形效果，并且这些其他类型的图形效果可以使用本领域技术人员已知的技术来实现。图15是图示根据示例性实施例的滚动图1的显示装置的屏幕的方法的流程图。对于与结合图5到图11描述的处理重叠的处理，将省略对其的详细描述。参照图15，在操作503，控制单元108确定指针11是否位于参考域。如果控制单元108确定指针11位于参考域,则控制单元108还在操作504确定指针11保持在参考域的时间是否超过参考时间。参照图16，当用户的手21不移动或者在特定范围23内移动时，在屏幕51显示的指针11不移动或者在特定范围13内移动。如果指针11在参考时间期间位于与指针11当前位置的特定范围相对应的参考域13处，则在经过了参考时间之后，屏幕51可以根据指针11的目标位置滚动。此时，在屏幕51的右侧和屏幕51的下侧，可以显示被配置成滚动屏幕51的滚动条55和56。接下来，在操作505，在经过了参考时间之后，图像处理单元106感测用户的动作，并且在操作506，控制单元108根据指针11的目标位置控制屏幕51进行滚动。作为一个例子，在指针11的目标位置是从指针11当前位置的左侧方向的情况下，控制单元108向右侧滚动屏幕51，并且在指针11的目标位置是从指针11当前位置的右侧方向的情况下，控制单元108向左侧滚动屏幕51。以同样的方式，控制单元108可以向屏幕51的上侧以及向屏幕51的下侧滚动屏幕51。当屏幕51根据指针11的目标位置被滚动时，可以使用至少一个图形效果。作为一个例子，参照图17到图18，在指针11的目标位置是从指针11当前位置的左侧方向(h’)、并且指针11根据用户的手21的动作(h)向左侧方向移动的情况下，可以使用如下的图形效果。当屏幕51向右侧滚动时，如图17中所示，先前未在屏幕51上显示的左侧图像57出现，并且先前已经在屏幕51上显示的内容的右侧图像消失。此外，为了向用户显示指针11当前处于执行滚轮滚动模式的过程，可以以对应于滚轮滚动模式的不同的形状17来显示指针11。具有不同形状17的指针可以根据用户的手21的动作被移动(h’)到目标位置。此外，如图18中所示，当当前指针11的形状被保持时，屏幕51可以根据用户的手21向右侧方向的动作(h)而向右侧滚动。此时，在屏幕51下侧显示的滚动条56向屏幕51滚动方向的相反方向移动，也就是说，向用户的手21的动作(h)的相反方向移动。此外，根据其他示例性实施例，可以根据本领域技术人员已知的技术使用各种其他类型的图形效果来滚动屏幕51。图19是图示根据示例性实施例的、在图1的显示装置的按钮正被选择的状态下执行滚轮滚动功能的方法的流程图。对于与结合图5以及图11到图15描述的处理重叠的处理，将省略对其的详细描述。参照图19，在操作603，控制单元108确定指针11是否位于第一参考域。如果控制单元108确定指针11位于第一参考域,则控制单元108还在操作604确定指针11保持在第一参考域的时间是否超过参考时间。根据示例性实施例，如图20中所示，第一参考域可以是指针11不会频繁位于的、位于屏幕51外部的域。接下来，如果在参考时间期间指针11位于第一参考域，则在操作605，控制单元108可以在屏幕51的至少一个域上显示作为至少一个图形图像的预定按钮。如图21中所示，控制单元108可以允许在指针11所位于的第一参考域14中显示图形图像58。这里，作为一个例子，预定按钮可以是用作快捷键功能的换挡(Shift)按钮、控制(Ctrl)按钮或备用(Alt)按钮。以下，在下述示例性实施例中，将结合预定按钮是Ctrl按钮来进行描述。接下来，在操作606，根据用户的手21的动作选择(点击)至少一个按钮。根据示例性实施例，在用户的手21做出与预先存储的选择动作相同的动作时，按钮可以被选择。可替换地，根据其他示例性实施例，也可以使用本领域技术人员已知的技术，利用除上述方法之外的其他方法来选择按钮。接下来，在操作607，图像处理单元106感测用户的动作，并且在操作608，控制单元108根据感测的动作将指针11移动到目标位置。在操作609,控制单元108确定指针11是否位于第二参考域。此时，如图16中所示，第二参考域可以与被配置成确定显示装置I的屏幕51是否将被滚动的参考域13相同。如果控制单元108确定指针11位于第二参考域，则在操作610，控制单元108确定指针11保持在参考域13的时间是否超过参考时间。接下来，如果控制单元108确定指针11保持在参考域13的时间超过参考时间，则在操作611，在经过了参考时间之后，图像处理单元106感测用户的动作，然后，在操作612，控制单元108在按钮被选择的状态下根据指针11的目标位置执行指针11的滚轮滚动功能。作为一个例子，在Ctrl按钮被选择的情况下，可以根据指针11的滚轮屏幕动作来执行缩放功能。根据以上描述，如图22中所示，当用户的手21在上侧方向上移动(i)时，可以在屏幕51上显示内容的放大图像58。此时，为了通知用户正在执行放大模式，指针11可以以对应于放大模式的形状18来显示。此外，如图23中所示，当用户的手21在下侧方向上移动(j)时，可以在屏幕51上显示内容的缩小图像59。此时，为了通知用户正在执行缩小模式，指针11可以以对应于缩小模式的形状19来显示。尽管已经示出和描述了若干示例性实施例，但本领域技术人员将会理解，可以改变这些示例性实施例而不偏离本公开的原理和精神，本公开的范围在权利要求及其等效物中限定。
权利要求
1.一种显示装置，包括: 图像获取单元，被配置成获取用户图像； 图像处理单元，被配置成从用户图像感测用户的动作；以及 控制单元，被配置成响应于感测的用户的动作，控制在屏幕上显示的指针移动到目标位置。
2.如权利要求1所述的显示装置，其中: 当所述目标位置偏离至少一个移动域时，所述控制单元被配置成控制所述指针移动到至少一个其他移动域。
3.如权利要求2所述的显示装置，其中: 当所述目标位置位于至少一个参考域上时，所述控制单元根据所述至少一个参考域的位置确定所述指针的移动方向，其中所述至少一个参考域位于所述至少一个移动域的外部；以及 当所述目标位置位于参考域的边缘时，所述控制单元根据所述参考域的边缘的位置确定所述指针的移动方向，其中所述参考域位于所述至少一个移动域的内部。
4.如权利要求1所述的显示装置，其中，当所述指针位于所述屏幕的边缘时，所述控制单元控制所述屏幕的页进行移动。
5.如权利要求4所述的显示装置，其中: 当在参考时间期间所 述指针位于所述屏幕的边缘时，所述控制单元被配置成根据所述指针的位置控制所述屏幕的页进行移动。
6.如权利要求5所述的显示装置，其中: 当所述指针位于所述屏幕的左侧边缘或上侧边缘时，所述控制单元被配置成控制所述屏幕的页移动到前一页，并且当所述指针位于所述屏幕的右侧边缘或下侧边缘时，所述控制单元被配置成控制所述屏幕的页移动到下一页。
7.如权利要求1所述的显示装置，其中，当所述指针位于所述屏幕的参考域时，所述控制单元根据所述目标位置控制所述屏幕进行滚动。
8.如权利要求7所述的显示装置，其中，当所述指针在参考时间期间位于所述屏幕的参考域时，所述控制单元根据所述目标位置控制所述屏幕进行滚动。
9.如权利要求8所述的显示装置，其中: 所述控制单元固定所述指针的位置，并且根据所述目标位置控制所述屏幕进行滚动。
10.如权利要求1所述的显示装置，其中，在所述指针位于所述屏幕的第一参考域时，所述控制单元控制至少一个按钮被显示在所述第一参考域上。
11.如权利要求10所述的显示装置，其中，当在所述至少一个按钮被选择之后、所述指针位于所述屏幕的第二参考域时，所述控制单元根据所述目标位置控制所述屏幕进行缩放。
12.如权利要求11所述的显示装置，其中，当所述指针在参考时间期间位于所述屏幕的第二参考域时，所述控制单元根据所述目标位置控制所述屏幕进行缩放。
13.如权利要求12所述的显示装置，其中，所述控制单元固定所述指针的位置，并且根据所述目标位置控制所述屏幕进行缩放。
14.一种控制显示装置的方法，该方法包括:从用户图像感测用户的动作； 响应于感测的用户的动作，将在屏幕上正显示的指针移动到目标位置；以及 当所述目标位置偏离至少一个移动域时，将所述指针移动到至少一个其他移动域。
15.如权利要求14所述的方法，其中: 在所述指针向至少一个其他移动域的移动中，当所述目标位置位于至少一个参考域时，根据所述至少一个参考域的位置确定所述指针的移动方向，其中，所述至少一个参考域位于所述至少一个移动域的外部；以及 在所述指针向所述至少一个其他移动域的移动中，当所述目标位置位于参考域的边缘时，根据所述参考域的边缘的位置确定所述指针的移动方向，其中，所述参考域位于所述至少一个移动域的内 部。
全文摘要
一种显示装置包括图像获取单元，被配置成获取用户图像；图像处理单元，被配置成从用户图像感测用户的动作；以及控制单元，被配置成响应于感测的用户的动作控制在显示装置的屏幕上显示的指针移动到目标位置，以及控制屏幕根据该目标位置进行滚动。
文档编号G06F3/01GK103200439SQ20131000800
公开日2013年7月10日 申请日期2013年1月9日 优先权日2012年1月9日
发明者裵大奎, 柳浩晶 申请人:三星电子株式会社