移动终端及其控制方法_3

文档序号:8487454阅读:来源:国知局
开的实施例的移动终端100以其能够被佩戴在特定身体部位上的 这样的方式被配置,并且例如,被实现为在图2中图示的手表式移动终端100。在下面通过 手表式移动终端作为其示例描述根据本公开的示例性实施例的移动终端100。
[0086] 首先,移动终端100的感测单元140执行感测主体的佩戴的步骤(S310)。
[0087] 具体地,感测单元140感测移动终端100的主体310的倾斜和运动并且从而感测 是否主体被佩戴。当主体301的倾斜中的变化和主体301被移动的加速与当主体301佩戴 在身体上被移动时产生的模式相同或者相似时,控制器180确定主体301被佩戴在用户的 身体的一部分上。为了这样做,感测单元140可以进一步包括能够感测相对于X轴、Y轴、 以及Z轴的空间移动的陀螺仪传感器(未被图示)。
[0088] 另外,基于通过相机121捕获到的图像信息,感测单元140识别用户的位置和移动 终端100的主体301的佩戴状态。因此,能够确定是否主体被佩戴在用户的身体的一部分 上或者被拆卸或者移动远离用户。
[0089] 另外,根据被包括在主体301的带302中的紧固件302a如何被连接到带302,感测 单元140感测是否移动终端100被佩戴在身体上。即,当确定紧固件302被连接到带302 的一端时,主体301被视为正在被佩戴在身体上。
[0090] 另外,当在佩戴主体之后,用户在特定的键上推动或者输入预定的语音命令时,感 测单元140感测主体的佩戴。
[0091] 另一方面,感测单元140感测主体的佩戴并且同时或者其后,感测主体301的佩戴 者的生物信号,例如,用户自己的心率。然后,感测单元140将感测到的生物信号传输到执 行用户认证的控制器180。即,根据主体301的佩戴,以自然的方式执行用户认证。另一方 面,当由于用户认证,主体301的佩戴者与已经存储的用户信息不相匹配时,移动终端100 保持其中到移动终端100的控制命令的输入被限制的锁定状态,并且输出与用户认证的失 败相对应的信息。
[0092] 当以这样的方式感测主体301的佩戴时,控制器180执行记录模式或者记录模式。
[0093] 为了这样做,当感测到主体301的佩戴时,移动终端100执行感测通过用户输入单 元123的用于激活记录模式或者控制模式的控制命令的输入的步骤(S320)。
[0094] 当通过用户输入单元123输入特定的第一输入信号并且然后感测到关于主体的 佩戴者的运动信息和佩戴者的生物信号时,控制器180识别用于在与第一输入信号相对应 的特定情形下激活记录模式的控制命令。
[0095] 在这一点上,第一输入信号是在特定情形下进入记录模式的语音命令、特定键操 作、以及特定手势当中的一个。另外,第一输入信号意指根据在主体301的佩戴者和特定外 部设备之间的接触的感测信号。例如,参考图4B,移动终端100感测当佩戴者的手接触门把 手时出现的生物信号,并且基于这时感测到的生物信号,识别用于在"打开门的情形"下激 活记录模式的第一输入信号被输入。
[0096] 另外,关于佩戴者的运动信息意指使用佩戴者的手指、手腕、肩部、头部、腿部、以 及腰部执行的手势。通过分析通过被包括在感测单元140中的运动传感器、地磁传感器、加 速度传感器以及陀螺仪传感器,并且通过相机121捕获到的图像信息获得关于佩戴者的运 动信息。
[0097]另外,在这一点上,佩戴者的生物信号意指在佩戴者的身体中产生的电信号。例 如,生物信号包括心电图(ECG)信号、光电容积脉搏波(PPG)信号、皮电反应(GSR)信号以 及肌电图(EMG)信号。
[0098] 另外,控制器180基于在上面描述的第一输入信号、通过被布置在主体301中的相 机121获得的一条环境图像信息、以及关于通过无线通信单元110接收到的关于主体301 的一条位置信息当中的至少一条信息识别特定情形。例如,当接收到与通过麦克风122输 入的语音"跑步"的第一输入信号时,控制器180识别特定情形是"跑步"。
[0099] 另一方面,当感测单元140通过用户输入单元123直接地感测关于主体301的佩 戴者的运动信息和佩戴者的生物信号时,控制器180将此视为用于激活控制模式的控制命 令的输入。另外,当感测单元140感测超过参考值(正常运动的值)的关于佩戴者的运动 信息和佩戴者的生物信号时,控制器180生成用于激活控制模式的控制命令并且将被生成 的控制命令提供给用户输入单元123。
[0100] 随后,记录模式被激活,控制器180记录在特定的情形下关于主体301的佩戴者的 运动信息和佩戴者的生物信号,并且存储在特定情形下出现的佩戴者的运动模式(S330)。
[0101] 当以这样的方式激活记录模式时,感测单元140感测关于佩戴者的运动信息和佩 戴者的生物信号。
[0102] 例如,感测单元140通过肌电图(EMG)感测根据佩戴者的手指的移动、腱的形状、 握力的变化、以及手指的移动速度改变的肌肉。肌电图(EMG)传感器感测肌肉的电活动,更 具体地,感测肌肉内的电变化,从而掌握对神经刺激的响应。因为肌肉在神经系统的控制下 并且极小数量的电流始终在肌肉中流动,所以如果通过针或者电极检查电流的数量并且通 过肌电图进行记录,则包括末梢神经的肌肉的活动能够被掌握。
[0103] 另外,感测单元140将感测被改变的肌肉、腱的形状、握力的变化、以及手指的移 动速度的结果传输到控制器180。控制器180掌握运动特性。
[0104] 运动特性是关于手指(或者手势)的形状、手指的移动速度、手腕移动的方向、手 腕的移动速度、以及握力的变化当中的至少一个。另外,运动特性随着手指运动或者手腕运 动而不同地改变。例如,当五个手指被展开时产生的运动特性不同于当五个手指被合拢时 产生的运动特性。这是因为腱的运动和形状不同于手指的运动。
[0105] 与此相关联,图5是均图示通过佩戴者的五个手指执行并且将不同的生物信号提 供给移动终端100的手势的示例的图。如在图5中所图示,除了当佩戴者的手指被展开并 且手指被合拢时,当特定的手指被展开并且特定的手指被合拢时、当多个手指相互接触时、 或者当特定的手指指向特定方向时不同的电信号出现。而且,通过肌电图(EMG)传感器感 测当主体301的佩戴者将他的/她的力量扔进他的/他的手指时产生的电波形,并且从而 在图5中图示的五个手指被视为相互不同。
[0106] 另外,例如,通过心电图(ECG)传感器和/或肌电图(EEG)传感器,感测单元140 掌握是否佩戴者是处于睡眠状态下、唤醒状态下、在NRdEM(xoNon-REM)状态下、或者在适 合唤醒的REM睡眠状态下。然后,如果作为感测的结果,唤醒的状态变成睡眠状态或者睡眠 状态变成唤醒状态,则第一输入信号被确定为被输入并且从而在上面描述的记录模式被激 活。
[0107] 另一方面,当控制模式被激活时,控制器180感测关于佩戴者的运动信息和佩戴 者的生物信号,并且当检测到对应于感测到的运动信息和生物信号的特定情形下的已经 存储的运动模式时,执行将与检测到的运动模式相对应的控制命令提供给外部设备的步骤 (S340)。
[0108] 另外,在控制模式下,当检测到对应于感测到的运动信息和生物信号的特定情形 下的已经存储的运动模式时,控制器180根据对应于检测到的运动模式的控制命令远程地 控制被连接的外部设备的操作。在移动终端100中接收回遥控的结果。
[0109] 为了这样做,移动终端100的无线通信单元110被连接到外部设备并且使用诸如 无线LAN(WLAN)、蓝牙、超宽带(UWB)、红外数据协会(IrDA)、家用电话线网络联盟(HPNA)、 共享无线接入协议(SWAP)、以及IEEE 1394的无线通信技术发送与检测到的运动模式相对 应的控制命令。
[0110] 另一方面,在控制模式下,当没有检测到对应于感测到的运动信息和生物信号的 特定情形下的已经存储的运动模式时,控制器180通过记录模式的进入输出指导用户的消 肩、。
[0111] 不存在对能够被连接到移动终端100的外部设备的类型的限制。即,无论什么装 置根据通过外部设备的无线通信单元110接收到的控制命令执行特定功能可以是这样的 外部设备。例如,外部设备不仅包括诸如冰箱、智能TV、PC、洗衣机、照明设备、以及微波炉的 家用电器,而且包括被配置成从诸如车辆、前门、和入口门、以及主入口的移动终端100接 收控制信号的装置。
[0112] 另外,在记录模式或者控制模式下,移动终端100将与特定情形相对应的屏幕信 息输出到显示单元151。例如,如果在记录模式下记录与"高尔夫运动"相对应的运动信息 和生物信号,则控制器180将与"高尔夫运动"相关联的图像输出到显示单元151同时执行 记录。
[0113] 图4A至图4E是图示在上面描述的图3中的步骤中的特定示例的图。
[0114] 首先,当如在图4A中所图示感测到手表式移动终端100被佩戴在用户的手腕上 时,移动终端100记录关于佩戴者的运动信息和佩戴者的生物信号同时如在图4B中所图示 的主体301的佩戴者执行旋转门把手200以打开门的手势(记录模式)。然后,移动终端100 存储在"旋转门把手200以打开门的情况"下的与关于佩戴者的运动信息和佩戴者的生物 信号相对应的佩戴者的运动模式。当以这样的方式存储与特定情形相对应的运动模式时, 即使第三方佩戴移动终端1〇〇并且然后在相同的运动模式下执行运动,不存在对于安全性 的单独认证的需求,因为感测到的生物信号的值是不同的。另一方面,当以这样的方式激活 记录模式时,如在图4C中所图示,指示关于佩戴者的运动信息和佩戴者的生物信号的记录 的图形对象在进行中,例如,文本"记录在进行中"、和指示记录在进行中的点图像"被 输出到显示单元151。
[0115] 以这样的方式存储与"旋转门把手以打开门的情形"相对应的佩戴者的运动模式, 当如在图4D中所示执行对应于特定情形的旋转门把手200以打开门的已经存储的手势403 时,移动终端100执行比较以确定是否手势403与已经存储的运动模式相匹配。当作为比 较的结果,手势403与对应于在图4B中存储的"旋转门把手以打开门的情形"的运动模式 相匹配时,无线连接的门把手200被旋转以打开门,如在图4E中所示,并且指示外部设备的 控制在进行中的图形对象,例如,文本"控制在进行中"和指示控制在进行中的点图像" 被输出到移动终端1〇〇的显示单元151。
[0116] 另一方面,尽管未被图示,当移动终端100的佩戴者执行实际旋转门把手200以 打开门的手势时,继图4E中图示的运动之后,执行对最新记录的运动信息和生物信号的更 新。因此,即使当佩戴者的习惯性手势被改变时,在不需要存储新的运动模式的情况下通过 被改变的习惯性手势控制外部设备。
[0117] 如上所述,根据本公开的实施例,在特定情形下记录的佩戴者的生物信号的模式 和佩戴者的运动被存储,并且当其后感测到与被存储的模式相同的运动和生物信号时,与 特定情形相关联的外部设备能够进行控制。因此,即使在佩戴者在直接地控制外部设备或 者在执行在被佩戴的移动终端上的输入中具有困难的情况下,仅通过被记录的习惯性手势 能够控制外部设备。
[0118] 下面参考图6A至图6F和图8A至图8E描述在记录模式或者控制模式下显示与佩 戴者的手势相关联的屏幕信息的方法。
[0119] 首先,移动终端100的感测单元140感测主体的佩戴。当感测到主体的佩戴时,移 动终端100输出与主体的佩戴相对应的信号或者信息。另外,基于根据主体301的佩戴感 测到的佩戴者的生物信号,以自然的方式对佩戴者执行用户认证。
[0120] 在以这样的方式感测主体301的佩戴之后,控制器180激活记录模式和控制模式 中的任意一个。为了这样做,当通过用户输入单元123在特定情形下输入第一输入信号并 且然后感测到关于主体的佩戴者的运动信息和佩戴者的生物信号时,控制器180识别用于 激活记录模式的控制命令被输入。另外,当通过用户输入
当前第3页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1