参考姿势数据的注册方法、移动终端的驱动方法及其移动终端的制作方法

文档序号:6594027阅读:125来源:国知局
专利名称:参考姿势数据的注册方法、移动终端的驱动方法及其移动终端的制作方法
技术领域
本发明涉及一种参考姿势数据的注册方法、移动终端的驱动方法及其移动终端。本发明由知识经济部(MKE)和信息技术进步研究所(IITA) (2008-P1-22-08J30, 下一代web标准的发展)支持。
背景技术
目前,用户使用各种类型的移动终端。移动终端的示例包括便携式电话、个人数 字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组音频层-3播放器(MP3P)、数码 相机等。通常,移动终端通过指定方向键功能的按钮或键区来提供用户接口。近年来,由于 在移动终端中通常使用触摸屏,所以移动终端提供可以以各种形式改变的用户接口。同时,由于这种类型的移动终端应该提供有用于信息传输的显示装置和用于在 小空间中输入信息的输入单元,所以与个人计算机不同,所述移动终端难以使用用户接口 (如鼠标)。因此,当用户通过移动终端来使用需要复杂的屏幕运动(如移动浏览)的移动 应用时,对于用户是不方便的。例如,当用户通过使用键区来使用移动浏览时,用户需要按 下多个按钮以移动屏幕,这对用户是不方便的。当用户通过使用触摸板来使用移动应用时, 用户应该使用两只手来操作移动终端。因此,这不可能符合用户期望只使用一只手来操作 移动终端的要求。因此,一种在移动终端中向用户提供有效接口的方法对促进包括移动浏览的移动 应用的使用变得非常重要。因此,需要开发新的接口技术。在本背景部分中披露的以上信息只是为了提高对本发明的背景的理解,因此,它 可包含不构成在这个国家中对于本领域的普通技术人员已知的现有技术的信息。

发明内容
技术问题本发明已在努力提供一种具有对用户更便利的优点的参考姿势数据注册方法、移 动终端驱动方法及其移动终端。技术方案本发明的示例性实施例提供了一种驱动移动终端的移动终端驱动方法,所述移动 终端附有摄像头并识别用户的姿势。所述移动终端驱动方法包括通过摄像头收集姿势图 像;产生包括运动信息的姿势数据,所述运动信息记录收集的姿势图像中的标识符的位置 的变化;当姿势数据可被识别时,搜索映射到姿势数据的应用功能并且执行搜索的应用功 能。本发明的另一实施例提供了一种附有摄像头的移动终端注册参考姿势数据的参 考姿势注册方法,所述参考姿势数据被用作当识别用户的姿势时的参考。所述参考姿势注
5册方法包括在识别间隔期间通过摄像头收集姿势图像;分析收集的姿势图像以提取至少 一个特征点;记录基于至少一个特征点识别的标识符的位置的变化并且产生运动信息;产 生包括运动信息的姿势数据;将由用户选择的应用功能映射到姿势数据并且存储映射信 肩、ο本发明的另一实施例提供了一种移动终端。所述移动终端包括图像处理器,使用 在通过附于移动终端的摄像头输入的用户的姿势图像中的标识符的位置的变化来提取姿 势数据;姿势分析器,当在先前存储在移动终端中的至少一个参考姿势数据中存在与姿势 数据匹配的参考姿势数据时,输出控制指令以驱动映射到与姿势数据匹配的参考姿势数据 的应用功能;驱动器,基于控制指令来执行应用功能。有益效果根据本发明的示例性实施例,移动终端识别通过内置的摄像头输入的用户的姿 势,根据识别的姿势来驱动各种功能(如移动浏览器和屏幕放大/缩小的屏幕运动),以及 多种其它应用功能。结果,当用户使用移动终端时,给用户带来更多的便利。


图1是示出根据本发明的示例性实施例的移动终端的配置图;图2是示出根据本发明的示例性实施例的姿势处理单元的配置图;图3是示出根据本发明的示例性实施例的图像处理器的配置图;图4是示出根据本发明的示例性实施例的标识符的示例的示图;图5是示出根据本发明的示例性实施例的基于标识符的位置的变化而产生的运 动信息的示例的示图;图6是示出根据本发明的示例性实施例的姿势数据的示例的示图;图7是示出根据本发明的示例性实施例的姿势分析器的配置图;图8到图11是示出根据本发明的示例性实施例的移动终端的示例的示图;图12是示出当根据本发明的示例性实施例的移动终端识别用户的姿势时的示例 的示图;图13是示出根据本发明的示例性实施例的在姿势识别模式中驱动移动终端的方 法的流程图;图14是示出根据本发明的示例性实施例的移动终端在姿势注册模式中注册用户 的姿势的方法的流程图;图15是示出根据本发明的示例性实施例的移动终端产生姿势数据的方法的流程 图。
具体实施例方式在以下的详细说明中,仅以说明的方式简单示出并且描述了本发明的特定示例性 实施例。如本领域技术人员所应该理解的,在不脱离本发明的精神或范围的情况下,可以以 各种不同的方式对描述的实施例进行修改。因此,附图和说明应该被视为示例性的并非限 制性的。在整个说明书中,相同的标号表示相同的部件。另外,除非明确有相反的描述,否则词语“包括”应该被理解为表示包括一定的部件但并不排除任何其它部件。另外,在说明书中描述的术语"...器”和"...者”表示用于 处理至少一个功能或操作的单元并且可由硬件组件、软件组件或其结合来实现。以下,将参照附图详细地描述根据本发明的示例性实施例的参考姿势数据注册方 法、移动终端驱动方法及其移动终端。图1是示出根据本发明的示例性实施例的移动终端100的配置图。参照图1,移动终端100包括输入单元110、摄像头单元120、显示单元130和姿 势处理单元140。输入单元110包括键区或触摸屏,并且识别来自用户的按钮输入。摄像头单元120包括至少一个摄像头,并且通过摄像头接收用户的姿势图像。这 里,摄像头以这样的方式附于移动终端100,所述方式是将摄像头内置于移动终端中或可容 易地插入移动终端并与从移动终端容易地分离。这时,摄像头被附在移动终端的能够识别 用户的姿势的位置上。通过使用触摸屏、液晶显示器(IXD)或有机发光二极管(OLED)来实现显示单元 130,并且当在移动终端100中执行应用(如移动浏览)时,显示单元130将应用执行内容 输出到屏幕。姿势处理单元140识别用户的姿势并且执行与所述姿势相应的应用功能。也就是 说,基于由输入单元110识别的按钮输入,姿势处理单元140从用户姿势图像中提取姿势数 据,所述用户姿势图像从摄像头单元120输入,并且当提取的姿势数据可被识别时,姿势处 理单元140执行与提取的姿势数据相应的应用功能。在这种情况下,用户的姿势可包括用 户的手部运动、面部运动和手掌运动。同时,姿势处理单元140识别用户的姿势的方法可包括一次识别方法和连续识别 方法。一次识别方法是在识别间隔期间识别并且处理一个姿势,连续识别方法是在识别间 隔期间识别并且处理一个或多个连续姿势。识别间隔表示移动终端100收集通过摄像头单 元120输入的用户姿势图像并且处理姿势数据的间隔。另外,各种方法可被用作移动终端 100识别所述识别间隔的方法。首先,姿势处理单元140可将识别间隔识别为用户在输入单元110的键区或触摸 屏上连续按下或触摸特定按钮并且连续输入特定按钮输入操作的间隔。例如,在包括键区的移动终端100的情况下,当用户按下与识别间隔的开始相应 的特定按钮时,姿势处理单元140识别出识别间隔开始。当用户停止按下相应的按钮时,姿 势处理单元140识别出识别间隔结束。在包括触摸屏的移动终端100的情况下,当用户触 摸与触摸屏上的特定按钮相应的特定区域时(所述特定按钮与识别间隔的开始相应),姿 势处理单元140识别出识别间隔开始。当用户停止触摸相应的区域时,姿势处理单元140 识别出识别间隔结束。其次,当用户按下或触摸输入单元110的键区或触摸屏上的与识别间隔的开始相 应的特定按钮并且特定按钮输入操作被识别时,姿势处理单元140识别出识别间隔开始。 随后,当在识别间隔开始之后经过预定时间或在识别间隔开始之后用户再次按下或触摸相 应的按钮时,姿势处理单元140识别出识别间隔结束。在包括键区的移动终端100的情况下,当用户按下与识别间隔的开始相应的特定 按钮时,姿势处理单元140识别出识别间隔开始。当在识别间隔开始之后用户再次按下相应的按键时,姿势处理单元140识别出识别间隔结束。在包括触摸屏的移动终端100的情 况下,当用户触摸与触摸屏上的特定按钮相应的特定区域时(所述特定按钮与识别间隔的 开始相应),姿势处理单元140识别出识别间隔开始。当在识别间隔开始之后用户再次触摸 相应的区域时,姿势处理单元140识别出识别间隔结束。同时,在本发明的上述示例性实施 例中,指示识别间隔的开始和结束的按钮输入是相同的。然而,本发明并不局限于此,指示 识别间隔的开始和结束的按钮输入可以是互相不同的。为了处理连续输入姿势中的每个,姿势处理单元140需要基于在识别间隔期间输 入的用户姿势图像来识别每个姿势的开始时间点和结束时间点。可使用检测用于识别姿势 图像中的姿势的标识符的运动的方法和使用特定姿势的方法作为识别姿势中的每个的开 始时间点和结束时间点的方法。通过检测标识符的运动来识别每个姿势的开始时间点和结 束时间点的方法可将当标识符开始显示运动时的时间点识别为每个姿势的开始时间点,并 且可将当标识符在预定时间里不显示运动或从姿势图像上消失时的时间点识别为每个姿 势的结束时间点。使用特定姿势来识别每个姿势的开始时间点和结束时间点的方法将当用 户执行通知姿势的开始的特定姿势时的时间点识别为每个姿势的开始时间点,并且将当用 户执行通知姿势的结束的特定姿势时的时间点识别为每个姿势的结束时间点。同时,为了确定提取的姿势数据是否可被识别,姿势处理单元140将提取的姿势 数据与存储在移动终端100中的至少一个参考姿势数据进行比较。随后,当存在与提取的 姿势数据匹配的参考姿势数据时,姿势处理单元140确定提取的姿势数据可被识别并且执 行与所述参考姿势数据相应的应用功能。在这种情况下,参考姿势数据指的是标准姿势数据或用户姿势数据。标准姿势数 据指的是在移动终端100中的预定的参考姿势数据,用户姿势数据指的是由用户注册的参 考姿势数据。同时,为了注册用户姿势数据,姿势处理单元140使用上述一次识别方法从用户 姿势图像中提取姿势数据并且注册用户姿势数据。也就是说,姿势处理单元140在识别间 隔期间收集用户姿势图像,并且将从收集的用户姿势图像中提取的姿势数据存储为用户姿 势数据。姿势处理单元140将特定应用功能映射到相应的用户姿势数据并且注册该用户姿 势数据。同样,预定用户姿势数据被用作参考姿势数据以确定以后用户姿势是否可被识别。 将由用户设置的用户姿势数据作为参考姿势数据来使用的方法可使用每个用户可容易地 使用的姿势来执行移动终端的应用功能,这对用户变得便利。以下,移动终端100识别用户姿势的姿势并且执行与识别的姿势相应的应用功能 的模式被称为“姿势识别模式”,用户姿势数据被设置的模式被称为“姿势注册模式”。同时, 为了区别姿势识别模式和姿势注册模式,需要将在姿势识别模式中指示从用户输入的姿势 的按钮输入设置得与在姿势注册模式中指示从用户输入的姿势的按钮输入不同。图2是示出根据本发明的示例性实施例的姿势处理单元140的配置图。参照图2,姿势处理单元140包括图像处理器141、姿势分析器142和驱动器143。图像处理器141在识别间隔期间收集通过摄像头单元120输入的用户姿势图像, 执行图像处理(如对收集的姿势图像进行噪声消除和预处理),从图像处理的姿势图像中 提取姿势数据,并且输出所述姿势数据。在姿势识别模式中,姿势分析器142将提取的姿势数据与至少一个参考姿势数据进行比较,并且输出控制指令以执行与在至少一个参考姿势数据中的与提取的姿势数据匹 配的参考姿势数据相应的应用功能。在姿势注册模式中,姿势分析器142将提取的姿势数 据注册为用户姿势数据,将特定应用功能映射到相应的用户姿势数据,并且存储映射信息。驱动器143根据从姿势分析器142输出的控制指令来执行相应的应用功能。在这 种情况下,所述应用功能指的是作为在移动终端100中合并的功能的移动浏览器功能和移 动应用功能。图3是示出根据本发明的示例性实施例的图像处理器141的配置图,图4是示出 根据本发明的示例性实施例的标识符的示例的示图,图5是示出根据本发明的示例性实施 例的基于标识符的位置的变化而产生的运动信息的示例的示图。图6是示出根据本发明的 示例性实施例的姿势数据的示例的示图。参考图3,图像处理器141包括预处理器1411、标识符识别器1412、姿势标识符 1413和后处理器1414。预处理器1411将通过摄像头单元120输入的姿势图像规格化,从姿势图像中消除 噪声,并且输出姿势图像。标识符识别器1412从由预处理器1411预处理的姿势图像中提取与用于姿势的特 定身体部分(如手指、手腕、手掌和脸)相应的特定点,并且基于提取的特征点识别姿势图 像中的标识符。标识符识别器1412连续记录姿势图像中的相应的标识符的位置的变化并 且产生运动信息。例如,如图4中所示,如果用户在识别间隔期间使用一个或两个手指的运 动制造轨迹来做出姿势,则标识符识别器1412从通过摄像头单元120输入的姿势图像中提 取特征点,并且将用户的指尖201和202识别为标识符。如图5所示,标识符识别器1412 记录标识符的位置的变化(即,连续记录与指尖的运动不同的轨迹),从而产生运动信息。姿势标识符1413产生包括由标识符识别器1412产生的标识符的运动信息的姿势 数据。图6示出由用户输入的姿势的示例,所述示例示出根据由用户执行的姿势的标识符 的位置的变化。参照图6,使用从每个姿势的开始点到其结束点的三维方向、各种弯曲和旋 转方向来执行各种姿势是可能的。除了在图6中示出的姿势,用户还可将他或她的各种姿 势注册在移动终端100中并且使用注册的姿势。后处理器1414对由姿势标识符1413产生的姿势数据执行校正处理以消除不必要 的信息和错误并且输出最终识别的姿势数据。图7是示出根据本发明的示例性实施例的姿势分析器142的配置图。参照图7,姿势分析器142包括第一姿势数据库(DB) 1421、第二姿势数据库DB 1422、映射信息DB 1423、姿势识别器1424、应用功能链接器1425、姿势学习器1似6和姿势 注册单元1427。第一姿势DB 1421将预定标准姿势数据存储在移动终端100中。第二姿势DB 1422存储由用户设置的用户姿势数据。映射信息DB 1423存储用于应用功能的映射信息,所述应用功能被映射到分别存 储在第一姿势DB 1421和第二姿势DB 1422中的标准姿势数据和用户姿势数据中的每个。在姿势识别模式中,姿势识别器14M在存储在第一姿势DB 1421和第二姿势DB 1422中的参考姿势数据中搜索与从图像处理器141输出的姿势数据匹配的参考姿势数据。在姿势识别模式中,当在参考姿势数据中存在与从图像处理器141输出的姿势数据匹配的参考姿势数据时,应用功能链接器1425从映射信息DB1423中读取关于映射到相 应的参考姿势数据的应用功能的信息。应用功能链接器1425将执行相应的应用功能的控 制指令输出到驱动器143。在姿势注册模式中,姿势学习器1似6学习从图像处理器141输出的姿势数据并且 将相应的姿势数据作为用户姿势数据存储在第二姿势DB 1422中。也就是说,在姿势注册 模式中,姿势学习器14 确认在存储在第一姿势DB1421和第二姿势DB 1422中的参考姿 势数据中是否存在与从图像处理器141输出的姿势数据匹配的参考姿势数据。当不存在与 姿势数据匹配的参考姿势数据时,姿势学习器14 将相应的姿势数据识别为用户姿势数 据并且将相应的姿势数据存储在第二姿势DB 1422中。在姿势注册模式中,姿势注册单元1427将特定应用功能映射到由姿势学习器 1似6存储在第二姿势DB 1422中的用户姿势数据,并且将映射信息存储在映射信息DB 1423 中。接下来,参照图8到图12,将描述根据本发明的示例性实施例的移动终端100的示例。图8示出根据本发明的示例性实施例的移动终端100的第一示例,所述示例示出 包括键区并具有内置摄像头301的直板型(bar-type)移动终端300。参照图8,在姿势识别模式中,移动终端300在识别间隔期间识别通过摄像头301 输入的用户的姿势。同时,在姿势注册模式中,移动终端300在识别间隔期间识别通过摄像 头301输入的用户的姿势并且注册用户姿势数据。这时,移动终端300设置用于识别姿势 识别模式的识别间隔和姿势注册模式的识别间隔的不同的按钮以区别姿势识别模式和姿 势注册模式。例如,在姿势识别模式中,移动终端300根据第一按钮302是否被按下来识别所述 识别间隔。在姿势注册模式中,移动终端300根据第二按钮303是否被按下来识别所述识 别间隔。图9示出根据本发明的示例性实施例的移动终端100的第二示例,所述示例示出 包括触摸屏和具有内置摄像头401的直板型移动终端400。与图8中示出的移动终端300相似,图9中示出的移动终端400识别用户姿势,设 置用户姿势数据,并且接收通过触摸屏而不是通过键区输入的按钮。在这种情况下,移动终 端400将触摸屏的特定区域识别为虚拟按钮并且基于通过触摸相应的特定区域而产生的 按钮输入来识别所述识别间隔。例如,移动终端400可基于通过触摸第一区域402而产生的按钮输入通过一次识 别方法或连续识别方法来识别用户的姿势,并且可基于通过触摸第二区域403而产生的按 钮输入来设置用户姿势数据。图10示出根据本发明的示例性实施例的移动终端100的第三示例,所述示例示出 包括键区和具有内置摄像头501的折叠型移动终端500。在与图8中示出的移动终端300相同的方法中,图10中示出的移动终端500可识 别用户的姿势并且设置用户姿势数据。图11示出根据本发明的示例性实施例的移动终端100的第四示例,所述示例示出 包括触摸屏和具有自由插入移动终端或与移动终端分离的摄像头601的直板型移动终端600。在与图9中示出的移动终端400相同的方法中,图11中示出的移动终端600可识 别用户的姿势并且设置用户姿势数据。图12示出当根据本发明的示例性实施例的移动终端100识别用户的姿势时的示 例。参照图12,如果用户按下键区上的特定按钮或触摸触摸屏上的特定区域时,移动 终端100将模式切换到姿势识别模式或姿势注册模式。因此,如图12中所示,用户可移动 他/她的手指并且输入姿势。图8到图11中示出的移动终端300、400、500和600仅是根据本发明的示例性实 施例的移动终端的示例,并且本发明并不局限于此。本发明除了以根据上述示例性实施例 的类型还可以以各种类型来实现移动终端。在上述的图8到图11中,摄像头301、401、501 和601分别附于移动终端300、400、500和600的下端。然而,本发明并不局限于此,并且摄 像头301、401、501和601可被附于移动终端的不同位置以有效地识别用户的姿势。在图 8到图11中,摄像头301,401,501和601分别被附于移动终端300、400、500和600以识别 用户姿势。然而,本发明并不局限于此,并且多个摄像头可被附于移动终端300、400、500和 600中的每个以有效地识别用户的姿势。在图8到图11中,移动终端包括键区或触摸屏。 然而,本发明并不局限于此,并且本发明可被应用于包括键区和触摸屏两者的移动终端。图13是示出根据本发明的示例性实施例的在姿势识别模式中驱动移动终端100 的方法的流程图。参照图13,如果用户请求识别姿势(S卩,识别姿势的识别间隔开始)(SlOl),则移 动终端100使用摄像头单元120收集用户姿势图像并且对收集的姿势图像执行图像处理 (S102)。在这种情况下,用户按下移动终端100中的键区上的特定按钮或触摸移动终端100 中的触摸屏上的特定区域以将移动终端100的模式切换到姿势识别模式。当所述模式被切 换到姿势识别模式时,移动终端100识别出识别姿势的识别间隔开始。随后,移动终端100基于已执行图像处理的姿势图像来产生记录标识符的位置的 变化的运动信息,并且使用所述运动信息来产生姿势数据(S10;3)。随后,移动终端确认在存 储在第一姿势DB 1421和第二姿势DB 1422中的参考姿势数据中是否存在与产生的姿势数 据匹配的参考姿势数据,并且确定相应的姿势数据是否可被识别(S104)。当确定不可能搜索到与产生的姿势数据匹配的参考姿势数据并且相应的姿势数 据不可被识别时,移动终端100确认用户是否期望结束姿势识别(S105)。当用户请求结 束姿势识别时,移动终端100结束识别间隔并且释放姿势识别模式。同时,当用户请求继 续执行姿势识别时,移动终端100再次收集姿势图像并且对收集的姿势图像执行图像处理 (S102)以产生姿势数据(S103)。同时,当确定可能搜索到与产生的姿势数据匹配的参考姿势数据并且相应的姿势 数据可被识别时,移动终端100从映射信息DB 1423中搜索用于与产生的姿势匹配的参考 姿势数据的应用映射信息(S106)。当不存在映射到相应的参考姿势数据的应用功能(作为 搜索结果)时,移动终端100确认用户期望将新的应用功能映射到相应的参考姿势数据并 且注册新的应用功能(S107)。当用户请求注册新的应用功能时,移动终端100将由用户选 择的应用功能映射到相应的参考姿势数据并且将映射信息存储在映射信息DB 1423 (S108)中。同时,当存在映射到与产生的姿势数据匹配的参考姿势数据的应用功能时,移动终端 100执行相应的应用功能(S109)。随后,移动终端100确认识别间隔是否结束(SllO)。当 识别间隔没有结束时,移动终端100重复上述姿势识别处理(S102到S109)。图14是示出根据本发明的示例性实施例的在姿势注册模式中移动终端100注册 用户的姿势的方法的流程图。参照图14,当用户请求注册姿势(即,注册姿势的识别间隔开始)(S201)时,移 动终端100使用摄像头单元120收集用户姿势图像并且对收集的姿势图像执行图像处理 620 。连续执行姿势图像收集处理和图像处理,直到识别间隔结束(S20;3)。在这种情况 下,用户按下移动终端100中的键区上的特定按钮或触摸移动终端100中的触摸屏上的特 定区域以将移动终端100的模式切换到姿势注册模式。当所述模式被切换到姿势注册模式 时,移动终端100识别出注册姿势的识别间隔开始。随后,移动终端100分析在识别间隔期间收集并执行了图像处理的姿势图像以 产生记录了标识符的位置的变化的运动信息,并且使用所述运动信息来产生姿势数据 (S204)。移动终端100确认在存储在第一姿势DB 1421和第二姿势BD 1422中的参考姿势 数据中是否存在与产生的姿势数据匹配的参考姿势数据(S205)。作为确认的结果,当不可能搜索到与产生的姿势数据匹配的参考姿势数据时,移 动终端100确认用户是否期望注册相应的姿势(S206)。随后,当用户期望注册相应的姿 势数据时,移动终端100将相应的姿势数据作为用户姿势数据存储在第二姿势DB 1422中 (S207)。当用户姿势数据被注册时,移动终端100确认用户是否期望将新的应用功能映射 到相应的用户姿势数据(S209)。当用户期望映射新的应用功能时,移动终端100将由用户 选择的应用功能映射到相应的用户姿势数据并且将映射信息存储在映射信息DB 1423中 (S210)。同时,当可能搜索到与产生的姿势数据匹配的参考姿势数据时,移动终端100确 认用户是否期望将映射到相应的参考姿势数据的应用功能改变为新的应用功能(S209)。随 后,当用户期望映射新的应用功能时,移动终端100将由用户选择的应用功能映射到相应 的参考姿势数据并将映射信息存储在映射信息DB 1423中(S210)。同时,在本发明的示例性实施例中,当与先前存储的参考姿势数据不同的新的姿 势数据被输入时,移动终端100确认用户是否期望注册新的姿势数据(S206)。当用户期望 注册新的姿势数据时,移动终端100注册用户数据(S207)。然而,本发明并不局限于此。在 本发明中,当与先前存储的参考姿势数据不同的新的姿势数据被输入时,移动终端确认用 户是否期望将应用功能映射到相应的姿势数据。当用户期望映射应用功能时,移动终端可 存储相应的姿势数据并且将由用户选择的应用功能映射到相应的姿势数据。图15是示出根据本发明的示例性实施例的移动终端100产生姿势数据的方法的 流程图。参照图15,当移动终端100在模式被切换到姿势识别模式或姿势注册模式之后在 识别间隔期间通过摄像头单元120接收用户姿势图像(S301)时,移动终端100将输入姿势 图像规格化并且对姿势图像执行预处理以消除不必要的噪声(S302)。随后,移动终端100分析预处理的姿势图像以提取识别标识符所需要的特征点 (S3(X3)。移动终端100基于提取的特征点识别标识符(S304),基于绝对坐标计算姿势图像中的标识符的位置的变化,并且基于所述位置的变化产生运动信息630 。移动终端100 使用产生的运动信息以产生姿势数据(S306)并且执行后处理以从产生的姿势数据中消除 不必要的信息(S307),从而产生最终识别的姿势数据。不但可通过能够实现与根据本发明的示例性实施例的结构相应的功能的设备和 方法而且可通过能够实现与根据本发明的示例性实施例的结构相应的功能的程序和其中 记录有所述程序的记录介质来实现上述的本发明的示例性实施例。本领域技术人员应该理 解,可容易地实现本发明的上述示例性实施例。虽然已经针对目前被认为是实用的示例性实施例描述了本发明,但是应该理解本 发明并不局限于所披露的实施例,但是,相反,本发明被意图覆盖包括在权利要求的精神和 范围内的各种修改和等同排列。
权利要求
1.一种驱动移动终端的移动终端驱动方法,所述移动终端附有摄像头并且识别用户的 姿势,所述移动终端驱动方法包括通过摄像头收集姿势图像;产生包括运动信息的姿势数据,所述运动信息记录收集的姿势图像中的标识符的位置 的变化;当姿势数据可被识别时,搜索映射到姿势数据的应用功能并且执行搜索到的应用功能。
2.如权利要求1所述的移动终端驱动方法,还包括基于按钮输入确定识别间隔何时 开始,其中,收集姿势图像的步骤为当识别间隔开始时收集姿势图像。
3.如权利要求2所述的移动终端驱动方法,还包括基于按钮输入确定识别间隔何时 结束,其中,重复进行姿势数据的产生、对映射到姿势数据的应用功能的搜索和对搜索到的 应用功能的执行,直到识别间隔结束。
4.如权利要求3所述的移动终端驱动方法,其中,当第一按钮输入开始时的时间点被 识别为当识别间隔开始时的时间点,当第一按钮输入结束时的时间点被识别为当识别间隔 结束时的时间点。
5.如权利要求3所述的移动终端驱动方法,其中,当第一按钮输入操作被输入时识别 出识别间隔开始,当在识别间隔开始之后经过预定时间时识别出识别间隔结束。
6.如权利要求3所述的移动终端驱动方法,其中,当第一按钮输入操作被输入时识别 出识别间隔开始,当识别间隔开始并且第二按钮输入操作被输入时识别出识别间隔结束。
7.如权利要求1所述的移动终端驱动方法,其中,产生姿势数据的步骤包括基于收集的姿势图像中的至少一个特征点识别标识符;记录标识符的位置的变化以产生运动信息;产生包括运动信息的姿势数据。
8.如权利要求7所述的移动终端驱动方法,其中,识别标识符的步骤包括对收集的姿势图像执行噪声消除处理和调节处理;分析已经执行噪声消除处理和调节处理的姿势图像并且提取与身体的特定部分相应 的至少一个特征点。
9.如权利要求1所述的移动终端驱动方法,还包括在预先存储的至少一个参考姿势数据中搜索与姿势数据匹配的数据并且确定姿势数 据是否可被识别。
10.如权利要求1所述的移动终端驱动方法,还包括当映射到姿势数据的应用功能没被搜索到时,确认用户是否期望将应用功能映射到姿 势数据;当用户请求映射应用功能时,将由用户选择的应用功能映射到姿势数据并且存储映射 fn息ο
11.一种附有摄像头的移动终端注册参考姿势数据的参考姿势注册方法,所述参考姿 势数据被用作当识别用户的姿势时的参考,所述参考姿势注册方法包括在识别间隔期间通过摄像头收集姿势图像; 分析收集的姿势图像以提取至少一个特征点;记录基于所述至少一个特征点识别的标识符的位置的变化并且产生运动信息; 产生包括运动信息的姿势数据;将由用户选择的应用功能映射到姿势数据并且存储映射信息。
12.如权利要求11所述的参考姿势注册方法,还包括在预先存储的至少一个参考姿势数据中搜索与姿势数据匹配的参考姿势数据; 当搜索到与姿势数据匹配的参考姿势数据时,确认用户是否期望改变映射到姿势数据 的应用功能;当用户请求改变映射的应用功能时,将由用户选择的应用功能映射到姿势数据并且存 储映射信息。
13.如权利要求11所述的参考姿势注册方法,其中,基于移动终端上的按钮输入来确 定识别间隔。
14.一种移动终端,包括图像处理器,使用通过附于移动终端的摄像头输入的用户的姿势图像中的标识符的位 置的变化来提取姿势数据;姿势分析器,当在选择预先存储在移动终端中的至少一个参考姿势数据中存在与姿势 数据匹配的参考姿势数据时,输出控制指令以驱动映射到与姿势数据匹配的参考姿势数据 的应用功能;驱动器,基于所述控制指令来执行应用功能。
15.如权利要求14所述的移动终端,还包括 输入单元,识别来自用户的按钮输入;其中,图像处理器基于由输入单元识别的按钮输入来识别所述识别间隔并且在识别间 隔期间从姿势图像中提取姿势数据。
16.如权利要求15所述的移动终端,其中,图像处理器包括标识符识别器,在识别间隔期间基于从姿势图像中提取的至少一个特征点来识别标识 符,并且记录标识符的位置的变化以产生运动信息; 姿势识别器,产生包括运动信息的姿势数据。
17.如权利要求16所述的移动终端,其中,图像处理器还包括预处理器,执行与噪声消除和将姿势图像规格化相应的预处理并且将结果输出到标识 符识别器,标识符识别器使用预处理的姿势图像来产生运动信息。
18.如权利要求14所述的移动终端,其中,姿势分析器包括 姿势数据库,存储至少一个参考姿势数据;映射信息数据库,存储映射到所述至少一个参考姿势数据的应用功能的映射信息; 姿势识别器,在存储在姿势数据库中的至少一个参考姿势数据中搜索与姿势数据匹配 的参考姿势数据;应用功能链接器,基于映射到与姿势数据匹配的参考姿势数据的应用功能的映射信息 来产生控制指令,所述映射信息从映射信息数据库中读取。
19.如权利要求18所述的移动终端,其中,姿势数据库包括第一姿势数据库,存储移动终端中的预定标准姿势数据;第二姿势数据库,存储由用户设置的用户姿势数据,并且所述至少一个参考姿势数据 是标准姿势数据或用户姿势数据。
20.如权利要求19所述的移动终端,其中,姿势分析器还包括 姿势学习器,当在存储在姿势数据库中的至少一个参考姿势数据中不存在与姿势数据 匹配的参考姿势数据时,将姿势数据存储在第二姿势数据库中;姿势注册单元,将应用功能映射到姿势数据,并且将映射到姿势数据的应用功能的映 射信息注册在映射信息数据库中。
全文摘要
本发明涉及一种参考姿势注册方法、移动终端(100)驱动方法及其移动终端(100)。在本发明中,当用户使用键区或触摸屏来请求识别用户的姿势或注册用户的姿势时,移动终端(100)分析通过附于移动终端(100)的摄像头(120)输入的用户姿势图像以提取姿势数据,并且执行映射到提取的姿势数据的应用功能或将提取的姿势数据注册为参考姿势数据,所述参考姿势数据用作姿势识别参考。
文档编号G06F3/01GK102067067SQ200980123961
公开日2011年5月18日 申请日期2009年1月23日 优先权日2008年6月24日
发明者印敏教, 李康赞, 李承润, 李沅锡, 田钟弘, 金成汉 申请人:韩国电子通信研究院
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1