移动终端及其控制方法_5

文档序号:8487454阅读:来源:国知局
了解决这样的问题,根据本公开的实施例的移动终 端100,如在图9E和图9F中所图示,包括在主体301的一个区域中,例如,在其横向表面上 使用光投射图像信息的投射单元911。因此,当佩戴者在预定的方向中(例如,在手腕的方 向(图9E)中)执行在显示单元151上的拖动触摸输入时,移动终端100将与正确的饮食、 如何进行锻炼等等相关联的附加信息提供给如在图9F中图示的手的背面的一部分。
[0152] 另一方面,图10A和图10D图示根据本公开的实施例的使用与关于佩戴者的运动 信息和佩戴者的生物信号的变化相对应的位置信息控制外部设备的方法。
[0153] 为了这样做,根据本公开的实施例的手表式移动终端100包括无线通信单元110, 该无线通信单元110用于接收关于主体301的位置信息。然后,当控制模式被激活时,控制 器180接收与在特定的情形下关于佩戴者的运动信息和佩戴者的生物信号中的变化相对 应的位置信息并且将接收到的位置信息提供给被连接的外部设备。例如,移动终端100感 测对应于第一手势的佩戴者的关于佩戴者的运动信息和生物信号并且从而识别开始接收 位置信息。另外,移动终端100可以接收根据佩戴者的运动改变的位置信息并且同时,可以 驱动被设置在主体301中的相机122以便于掌握精确的位置信息。另外,移动终端100感 测对应于第二手势的关于佩戴者的运动信息和佩戴者的生物信号并且从而识别位置信息 的接收被完成。当与关于佩戴者的运动信息和佩戴者的生物信号相对应的位置信息被提供 给外部设备时,外部设备在执行其操作中利用接收到的位置信息。
[0154] 例如,当手表式移动终端100和外部设备,例如,机器人清洁器200,如在图10A中 所图示被相互无线地连接时,佩戴者能够使用移动终端1〇〇设置机器人清洁器200不得不 清除的特定区域。即,如在图10B中所图示,当佩戴者执行与机器人清洁器200不得不清理 的清洁目标区域上的被指定的起始点相对应的手势(其中手指朝着手腕被卷缩或者被展 开的手势)时,然后沿着清洁目标区域的边界1001移动,并且然后执行与清洁目标区域上 的被指定的结束点相对应的手势(其中手指被展开并且朝着手掌被卷缩的手势),通过佩 戴者移动沿着的边界定义要清理的区域1010。然后,清洁器200通过如在图10C中所图示 的移动终端100执行对要清理的区域1010执行清洁操作,清洁器200的缩略图图像1020a 和指示清洁操作被执行的图像200b被显示在如在图10D中所图示的移动终端100的显示 单元151上。
[0155] 在这一点上,与佩戴者的运动相对应的位置信息连同时间信息一起被传输到清洁 器200,并且从而移动终端能够将被关联的信息传输到清洁器200,以便于让清洁器200在 超过参考时间内更加明净地清理佩戴者保持的地方。
[0156] 图11A至图11D是用于描述根据本公开的实施例的向移动终端显示与通过被连接 的外部设备提供的反馈信号相关联的屏幕信息的方法的图。
[0157] 当主体301的佩戴被感测并且然后用于激活控制模式的佩戴者的手势被识别时, 控制器180将与被识别的手势相关联的控制命令传输到被连接到外部设备。在这一点上, 因为佩戴者的手势对应于在特定情形下出现的佩戴者的习惯性手势,通常,当佩戴者错误 地执行习惯性动作时在外部设备中可能出现故障。为了解决这样的问题,当佩戴者的习惯 性手势出现时,根据本公开的实施例的移动终端100可以附加地执行将反馈信号发送到被 关联的外部设备并且从被关联的外部设备接收反馈信号的处理。
[0158] 具体地,当接收到响应从被连接到外部设备接收对应于运动模式的控制命令的第 一信号时,控制器180将与第一信号相对应的第一屏幕信息输出到显不单兀151。
[0159] 然后,当根据用于检查第一信息的信号的输入从被连接的外部设备接收与执行控 制命令的结果相对应的第二信号时,控制器180将与第二信号相对应的第二屏幕信息输出 到显示单元151。在这一点上,用于检查第一屏幕信息的信号的输入是在预定的语音命令、 手势、或者被施加到显示单元151或者特定键的触摸输入当中的一个。
[0160] 例如,参考图11A,当移动终端100执彳丁特定手势,例如,连接捣指和中指并且在相 对的方向中将力量投放到它们中的手势1101时,移动终端100感测关于佩戴者的运动信息 和佩戴者的生物信号并且在没有驱动相机122的情况下识别手势1101。例如,当相对应的 手势1101是与"报警功能"相对应的习惯性手势时,移动终端生成用于以"报警功能"被接 通的方式执行控制的控制命令,并且将控制命令传输到被连接的外部设备200。在执行"报 警功能"之前,接收被生成的控制命令的外部设备200,如在图11B中所图示,输出询问是否 设置报警功能的消息ll〇2_A,并且在移动终端100中接收到与相对应的消息1102_A相对 应的信号(在上面描述的"第一信号")。然后,指示是否"报警功能"被设置的图像1102_B 被显示在移动终端100的显示单元151上。当佩戴者执行在如图lie中所图示的被显示的 图像1102_B上的触摸输入时,移动终端100将其视为输入检查被显示的图像1102_B的信 号并且将该信号提供给被连接的外部设备200 (1103_B)。然后,在如在图11D中所图示的被 连接的外部设备200中"报警功能"被设置,并且消息1104A "报警被设置"被输出到屏幕。 然后,在被连接的外部设备200中的"报警功能"的设置被完成,指示"报警功能被设置"的 图像1104_B被显示在移动终端100的显示单元151上。
[0161] 根据上述实施例,移动终端的佩戴者仅通过习惯性手势控制移动终端或者被连接 的外部设备的特定功能。下面描述当佩戴者甚至不能够执行习惯性手势时执行外部设备的 特定功能的方法。
[0162] 与此相关联,图12A至图12C是图示根据本公开的实施例的基于关于佩戴者的状 态信息以不同的方式控制外部设备的方法的图。
[0163] 当根据本公开的实施例的移动终端100和外部设备被相互连接时,控制器180将 对应于佩戴者的生物信号的关于佩戴者的状态信息提供给被连接的外部设备。佩戴者的状 态可以通过移动终端100来确定并且可以通过如原样接收佩戴者的生物信号的外部设备 来确定。
[0164] 当确定佩戴者的状态是其中不能够输入用于执行特定功能的运动信息的状态时, 控制器180以外部设备根据以不同的输入方式输入的控制命令操作的方式执行控制。在这 一点上,其中控制命令被输入的不同输入方式包括通过相机133能够识别的不同手势(例 如,脚姿态)和语音命令。在另一示例中,仅通过对外部设备的前进接近来生成用于执行特 定功能的控制命令。
[0165] 例如,如在图12A中所图示,假定移动终端100的佩戴者想要打开被无线地连接到 移动终端100的车辆的后备箱,但是不能够执行习惯性手势,因为他/她用他的/她的手携 带东西50。然后,如在图12B中所图示,移动终端100感测佩戴者的生物信号并且从而识别 其中佩戴者携带东西的情形。然后,移动终端1〇〇将消息"佩戴者不能够执行手势"输出到 显示单元151或者音频输出单元152。在这一点上,佩戴者的此状态也能够识别为在被无线 地连接到移动终端100并且接收佩戴者的生物信号的车辆200中。然后,如在图12C中所 图示,在没有执行习惯性手势(200")的情况下移动终端100能够仅通过朝着车辆200的后 备箱移动的佩戴者打开车辆200的后备箱。另一方面,警告用户控制操作的"车辆的后备箱 被打开"的消息被输出到移动终端100的显示单元或者音频输出模块152。
[0166] 另一方面,尽管在附图中未图示或者在上面没有具体地描述,但是根据本公开的 实施例的移动终端识别环境亮度强度、环境温度、以及环境湿度,试着建立到被关联的家用 电器的连接并且执行被记录的习惯性手势。因此,被连接的家用电器的操作是能够控制的。
[0167] 另外,移动终端100感测佩戴者的生物信号并且从而确定佩戴者的状态(例如,兴 奋状态和睡眠状态)并且因此以更加具体的方式控制与习惯性手势相对应的被连接的家 用电器的操作。例如,如果执行用于打开空调的习惯性手势,则移动终端100确定佩戴者的 状态并且不仅传输用于打开空调的控制命令,而且传输用于控制空调中的设置温度、风向 等等的控制信号。
[0168] 如上所述,根据本公开的实施例,在特定的情形下感测并且记录关于主体的佩戴 者的运动信息和佩戴者的生物信号。其后,当基于被记录的信息和运动的感测和佩戴者的 生物信号识别相同情形的发生时,执行相对应的特定功能。因此,移动终端的佩戴者不需要 执行复杂的输入,以便于执行特定功能,并且能够以自然的方式仅通过习惯性手势执行特 定功能。另外,在特定情形下记录的佩戴者的运动和佩戴者的生物信号的模式被存储,并且 当其后感测到与被存储的模式相同的运动和生物信号时,与特定的情形相关联的外部设备 能够进行控制。因此,即使在佩戴者在直接地控制外部设备中或者在执行在被佩戴的移动 终端上的输入中具有困难的情形下,仅通过被记录的习惯性手势能够控制外部设备。
[0169] 根据本说明书的用途,如在此具体化和广泛地描述的,提供一种移动终端,包括: 主体;感测单元,该感测单元感测主体的佩戴、关于佩戴者的运动信息、以及佩戴者的生物 信号;用户输入单元,当感测到主体的佩戴时将用于激活记录模式或者控制模式的控制命 令被输入到该用户输入单元;以及控制器,在记录模式下,记录特定情形下关于佩戴者的运 动信息和佩戴者的生物信号并且存储在特定情形下出现的运动模式并且,在控制模式下, 感测关于佩戴者的运动信息和佩戴者的生物信号并且当检测到对应于被感测的运动信息 和生物信号的特定情形下的已经存储的运动模式时,将与检测到的运动模式相对应的控制 命令提供给被连接的外部设备。
[0170] 在移动终端中,当第一输入信号被输入并且然后运动信息和生物信号被感测时, 控制器可以生成与第一输入信号相对应的用于在特定情形下激活记录模式的控制命令并 且可以将被生成的控制命令提供给用户输入单元,并且当第一输入信号被输入并且然后超 过参考值的关于佩戴者的运动信息和佩戴者的生物信号被感测时,控制器可以生成用于激 活控制模式的控制命令并且可以将该控制命令提供给用户输入单元。
[0171] 在移动终端中,第一输入信号可以是对应于在主体的佩戴者和外部设备之间的连 接的感测信号。
[0172] 在移动终端中,可以基于在第一输入信号、通过主体中的相机获得的环境图像信 息、以及通过无线通信单元接收到的关于主体的位置信息当中的至少一个识别特定的情 形。
[0173] 在移动终端中,当在主体和外部设备之间的连接被感测时,控制器可以将用于激 活与被连接的外部设备相关联的记录模式或者控制模式的控制命令提供给用户输入单元。
[0174] 在移动终端中,如果多个外部设备被连接到主体,则基于关于被连接的外部设备 的时间信息和关于被连接的外部设备的环境声音信息选择用于激活控制模式的特定的外 部设备。
[0175] 移动终端可以进一步包括显示单元,在记录模式下屏幕信息与特定情形相对应, 其中屏幕信息可以包括指示记录模式的激活的第一图形对象和指示关于佩戴者的运动信 息和佩戴者的生物信号被改变的程度的第二图形对象。
[0176] 在移动终端中,屏幕信息可以进一步包括指示与记录模式的激活相对应的时间信 息的第三图形对象和指示佩戴者的运动信息和佩戴者的生物信号与已经存储的运动模式 相匹配的程度的第四图形对象。
[0177] 在移动终端中,在记录模式下,控制器可以识别在特定情形下出现的运动模式的 重复并且可以进一步存储关于被重复的运动模式的累积信息或者关于被重复的运动模式 的平均息。
[0178] 在移动终端中,在记录模式或者控制模式下,控制器可以以与关于被重复的运动 模式的累积信息和关于被重复的运动模式的平均信息相关联的附加信息被进一步显示的 方式控制显示单元。
[0179] 在移动终端中,当在特定情形下感测第二输入信号时,控制器可以将与在记录模
当前第5页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1