基于人机交互设备的手势识别的控制系统及其控制方法

文档序号:10686603阅读:668来源:国知局
基于人机交互设备的手势识别的控制系统及其控制方法
【专利摘要】本发明实施例提供的一种基于人机交互设备的手势识别的控制系统及其控制方法,包括超带宽模块、主控模块、天线模块和通信电平转换模块,所述主控模块控制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号,天线模块接收到所述回波信号后,将所述回波信号发送给所述主控模块进行处理,使得根据所述回波信号判断出手势特征,接着通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信号,从而达到人机交互的效果。其中,所述控制系统通过超带宽模块发送脉冲雷达信号可以穿透障碍物避免其受干扰,这样使得对手势识别更精确,同时解决了现有技术中存在无法精确地通过对人体手势进行检测以及识别,从而达到人机交互的效果的问题。
【专利说明】
基于人机交互设备的手势识别的控制系统及其控制方法
技术领域
[0001] 本发明涉及自动控制智能家居领域,尤其涉及一种基于人机交互设备的手势识别 的控制系统及其控制方法。
【背景技术】
[0002] 伴随着人机交互需求的发展,关于人体姿势识别的研究越来越多,人体姿势控制 包括手势控制,能给用户带来绝佳的人机交互体验。使用计算机视觉技术进行的手势识别 技术是手势识别技术的主要研究方向,然而视觉技术对环境条件的要求:包括对光线的要 求和对遮挡物的要求比较苛刻,往往会使得对手势识别的结果有影响甚至是在人机交互过 程中效率低下、产生偏差。
[0003] 然而,现有技术中存在无法精确地通过对人体手势进行检测以及识别,从而达到 人机交互的效果的问题。

【发明内容】

[0004] 本发明目的在于提供一种基于人机交互设备的手势识别的控制系统及其控制方 法,旨在解决技术中存在无法精确地通过对人体手势进行检测以及识别,从而达到人机交 互的效果的问题。
[0005] 本发明提供了一种基于人机交互设备的手势识别的控制系统,所述控制系统包 括:
[0006] 发送穿透障碍物的脉冲雷达信号的超带宽模块;
[0007] 与所述超带宽模块相连接,控制所述超带宽模块发送脉冲雷达信号到达人体手部 并产生回波信号的主控模块;
[0008] 与所述主控模块相连接,接收所述回波信号、并将所述回波信号发送给所述主控 模块进行处理,使得根据所述回波信号判断出手势特征的天线模块;
[0009] 与所述主控模块相连接,根据所述手势特征,转化为对人机交互设备的控制信号 的通信电平转换模块。
[0010] 本发明还提供了一种基于人机交互设备的手势识别的控制方法,所述控制方法包 括:
[0011] 超带宽模块发送穿透障碍物的脉冲雷达信号;
[0012] 主控模块控制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号;
[0013] 天线模块接收所述回波信号、并将所述回波信号发送给所述主控模块进行处理, 使得根据所述回波信号判断出手势特征;
[0014] 通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信号。
[0015] 综上所述,本发明实施例提供的一种基于人机交互设备的手势识别的控制系统及 其控制方法,包括超带宽模块、主控模块、天线模块和通信电平转换模块,所述主控模块控 制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号,天线模块接收到所述 回波信号后,将所述回波信号发送给所述主控模块进行处理,使得根据所述回波信号判断 出手势特征,接着通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信 号,从而达到人机交互的效果。其中,由于超宽带技术具有较高的数据传输速率、多径分辨 能力强、穿透能力强、低功耗、非接触式和隐蔽性好的特点,所述控制系统通过超带宽模块 发送脉冲雷达信号可以穿透障碍物避免其受干扰,这样会使得对手势识别更为精确,同时 解决了现有技术中存在无法精确地通过对人体手势进行检测以及识别,从而达到人机交互 的效果的问题。
【附图说明】
[0016] 图1为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的模 块结构示意图。
[0017] 图2为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的 电路结构示意图。
[0018] 图3为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的实 物操作示意图。
[0019] 图4为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的结 构示意图。
[0020] 图5为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的模 块作用不意图。
[0021] 图6为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的手 势匹配示意图。
[0022] 图7为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的手 势识别曲线图。
[0023] 图8为本发明一实施例提供的一种基于人机交互设备的手势识别的控制系统的工 作原理流程图。
[0024]图9为本发明另一实施例提供的一种基于人机交互设备的手势识别的控制方法的 步骤流程图。
【具体实施方式】
[0025]为了使本发明要解决的技术问题、技术方案及有益效果更加清楚明白,以下结合 附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用 以解释本发明,并不用于限定本发明。
[0026]本发明实施例提供的一种基于人机交互设备的手势识别的控制系统,主要用于通 过手势控制人机交互设备。
[0027]图1示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的模块结构,为了方便说明,仅示出了与本发明实施例相关的部分。
[0028] 一种基于人机交互设备的手势识别的控制系统10,所述控制系统10包括:
[0029] 发送穿透障碍物的脉冲雷达信号的超带宽模块102;
[0030] 与所述超带宽模块102相连接,控制所述超带宽模块102发送脉冲雷达信号到达 人体手部并产生回波信号的主控模块101;
[0031] 与所述主控模块101相连接,接收所述回波信号、并将所述回波信号发送给所述主 控模块进行处理,使得根据所述回波信号判断出手势特征的天线模块103;
[0032] 与所述主控模块101相连接,根据所述手势特征,转化为对人机交互设备的控制信 号的通信电平转换模块105。
[0033] 作为本发明一实施例,所述手势特征包括拳形向前、拳形向后和拳向右侧的滑动 姿势。
[0034] 作为本发明一实施例,在通信电平转换模块105中,当所述手势特征为拳形向前, 则转化为人机交互设备的音量调大;当所述手势特征为拳形向后,则转化为人机交互设备 的音量调小;当所述手势特征为拳向右侧的滑动姿势,则转化为人机交互设备的删除操作。
[0035] 作为本发明一实施例,所述控制系统还包括:
[0036] 同时与所述主控模块101和天线模块103连接,将所述天线模块103接收的回波信 号进行滤波,并发送给所述主控模块101的高通滤波模块104。
[0037] 作为本发明一实施例,所述控制系统还包括:
[0038] 与所述主控模块101连接,对所述回波信号进行保存的存储模块106。
[0039] 作为本发明一实施例,所述控制系统还包括:
[0040] 与所述主控模块101连接,对所述控制系统10进行供电的电源模块107。
[0041] 图2示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的电路结构,为了方便说明,仅示出了与本发明实施例相关的部分。
[0042] 作为本发明一实施例,所述主控模块101包括一主控芯片U1,所述主控芯片U1包 括:
[0043] 主控端CTRL、接收端RXD、电源端Bat-VCC、存储端MEM和传输端FTP;
[0044]所述主控端CTRL接所述超带宽模块102,所述接收端RXD接所述高通滤波模块104, 所述电源端Bat-VCC接所述电源模块107,所述存储端MEM接所述存储模块106,所述传输端 FTP接所述通信电平转换模块105。在本实施例中,主控芯片U1采用了型号为ATSAM4E16E的 微处理器芯片,当然,微处理器芯片的型号不做限定,只要能达到与本实施例主控芯片U1所 述的功能作用亦可。
[0045]作为本发明一实施例,所述超带宽模块102包括一超带宽收发芯片U2,所述超带宽 收发芯片U2包括:
[0046]控制端Ctrl;
[0047] 所述控制端Ctrl接所述主控芯片U1的主控端CTRL。在本实施例中,超带宽收发芯 片U2采用了型号为CC2400的超带宽收发芯片,当然,超带宽收发芯片的型号不做限定,只要 能达到与本实施例超带宽收发芯片U2所述的功能作用亦可。
[0048]作为本发明一实施例,所述高通滤波模块104包括一滤波芯片U4,所述滤波芯片U4 包括:
[0049]发射端Send和滤波端Filt;
[0050]所述发射端Send接所述主控芯片U1的接收端RXD,所述滤波端Fi It接所述天线模 块。在本实施例中,滤波芯片U4采用了型号为HF3800的滤波芯片,当然,滤波芯片的型号不 做限定,只要能达到与本实施例滤波芯片U4所述的功能作用亦可。
[0051 ]作为本发明一实施例,所述天线模块103包括一天线芯片U3,所述天线芯片U3包 括:
[0052]发送端 TXD;
[0053]所述发送端T)(D接所述滤波芯片U4的滤波端Filt。在本实施例中,天线芯片U3采用 了型号为PT2272的天线芯片,当然,天线芯片的型号不做限定,只要能达到与本实施例天线 芯片U3所述的功能作用亦可。
[0054]作为本发明一实施例,所述通信电平转换模块105包括一通信芯片U5,所述通信芯 片U5包括:
[0055] 传送端RTP和通讯端PLC;
[0056] 所述传送端RTP接所述主控芯片U1的传输端FTP,所述通讯端PLC接所述人机交互 设备。在本实施例中,通信芯片U5采用了型号为TMS320C6203的通信芯片,当然,通信芯片的 型号不做限定,只要能达到与本实施例通信芯片U5所述的功能作用亦可。
[0057]作为本发明一实施例,所述存储模块106包括一存储芯片U6,所述存储芯片U6包 括:
[0058]储存端 mem;
[0059]所述储存端mem接所述主控芯片U1的存储端MEM。在本实施例中,存储芯片U6采用 了型号为PC5300的存储芯片,当然,存储芯片的型号不做限定,只要能达到与本实施例存储 芯片U6所述的功能作用亦可。
[0060]作为本发明一实施例,所述电源模块107包括:
[0061 ] 交流电源VCC;
[0062] 所述交流电源VCC接所述主控芯片U1的电源端Bat-vcc。
[0063] 图3示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的实物操作示意图,为了方便说明,仅示出了与本发明实施例相关的部分。
[0064] 本发明一实施例提供一种基于人机交互设备的手势识别的控制系统,所述控制系 统1〇(可以扩展到机器人、智能手机、电脑、智能家电等方面)上有雷达收发单元12,包括超 带宽模块和天线模块,通过发射和接收超带宽(UWB)脉冲雷达信号可以检测身体部位的姿 势和运动,包括手势和手势动作14。所述控制系统的超带宽模块可以发射一连串的脉冲雷 达,脉冲雷达可以穿透一些障碍物16,例如手套、衣服、口袋、包包等等生活中可能存在的一 些干扰。同时也不需要光线等条件,所以可以在黑暗的环境中正常工作,脉冲雷达在手部14 发生反射后被雷达收发模块12接收,与一些已定的相对于检测设备的手势(比如相对于所 述控制系统的拳和掌上下左右前后等手势)作比较,来确定用户是否做出了设定的手势。比 如,相对于所述控制系统10的拳型向前或向后的手势动作被检测到,进而转化为人机交互 设备的音量调大(或调小)、游戏中的出拳或发射子弹等操作;相对于所述控制系统10的掌 向右侧的滑动姿势被检测到,进而转化为人机交互设备的向右滑动或是删除等操作。
[0065] 图4示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的结构,为了方便说明,仅示出了与本发明实施例相关的部分。
[0066] 所述控制系统10侧面有一个多元化的超带宽模块可以检测到一个角度区域内的 手势。所述的雷达收发单元12的收发装置安装在所述的手势检测设备的两个边缘以保证检 测手势的有效角度范围大于180°。以一个摄像头模块22为对比,摄像头安装在控制系统10 上只能检测到一个较小范围内的信息,就算是使用一对摄像头也较难保证检测到和脉冲雷 达相当的范围。而且对于脉冲雷达检测方案同样可以划定如图所示的"R"的范围来减小非 意图手势的干扰。
[0067]图5示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的模块作用示意图,为了方便说明,仅示出了与本发明实施例相关的部分。
[0068]微控制器24编写命令对超带宽收发控制芯片26进行配置和控制。微处理器模块优 选Altera公司的ARM-Smart结构的芯片,型号为ATSAM4E16E,该模块具有运算速度高,实时 性控制性强的优点。配置控制命令的通信方式采用SPI通信。芯片具有128KB片内SRAM,16KB R0M,1024KB内部Flash,l路USB 2.0 FS Device,4路 16位PWM,2路UART(1 路和SPI片选复 用),2路USART,2路TWI (1 路和JTAG复用),1路SD/SDI0/IMMC,1 路SPI,1 路NAND控制器,1路 EMAC控制器,支持16位AFEC,1路2通道12位DAC,最高可在120M的频率下运行,可实现快速的 处理数据,以及支持多种通讯协议。微控制器芯片U1的代码编写采用多种语言,包括C++,C, 汇编等编程语言。超带宽收发控制芯片26优选XETHUR公司的X2脉冲雷达收发一体控制芯 片,根据微控制芯片24的配置和控制命令进行工作,产生连续或分段的超带宽脉冲并驱动 发射天线28发射出脉冲雷达信号。发射天线优选材质为铜,也可以是其他的材质例如铝和 塑料等。所述的接收天线30接收到脉冲雷达信号,脉冲雷达信号可能是经过身体部位像手 部的反射并且穿过了一些障碍物如手套、包包等。所述接收天线30的材质与所述的发射天 线优选用相同的材质。
[0069] 所述接收天线30接收到的脉冲雷达信号传递给所述的超带宽收发控制芯片26,所 述的超带宽收发控制芯片26对接收到的脉冲雷达信号进行采样后发送给微控制芯片24进 行时频变换,特征提取等处理,得到多条时频信息。短时间傅里叶变换(STFT)是移动窗口的 傅里叶变换,通过移动时间窗口来分析信号的频率分量,得到一个包含了信号在不同时间 的频率信息的二维时频分布图。给定窗函数w⑴,则信号s(t)的STFT定义如下:
[0070] STFT(t, co)=/s(t/)co*(t/ -t)exp{-j ? \! jdt7
[0071] STFT即为对原始信号分段进行傅里叶变换,正是由于窗函数w(t)的存在使STFT具 有了局域特性,既是时间的函数也是频率的函数。或说STFT是函数s(t')在一组由coU'-t) exp{-j co V }所组成的基函数上的投影。由于时间域不再是无限长,它可用于监控信号频谱 作为时间的函数如何变化。以时间t为函数移动窗口得到原始时间信号的二维联合时频表 示为STFT(t,co )。丨STFT(t,co )丨称为信号的谱图,得到频谱如何随水平时间轴的函数而变 化的信息。
[0072]经验模态分解(EMD)是一种针对非线性、非平稳时间序列信号的分析控制方法, EMD的基本原理是根据局部时间特征,逐级分解信号中不同尺度的趋势分量或波动,产生一 系列内在模态函数(Intrinsic Mode Function, IMF),各IMF具有完备性且正交,这一过程 实质上是对非平稳信号进行平稳化处理。各頂F分量分别表示信号中一个振动特征的形式, 它的生成需要满足以下条件:所分析的数据存在极大值和极小值点,极值点与过零点的个 数相差一个以内,若信号中仅有拐点而无极值点,需通过一阶或高阶微分获取极值;数据中 局部极大值和极小值点构成的上下包络线,其均值线是一条趋近于零的直线。EMD分解得到 各MF分量的过程称为蹄选,计算过程中,需要不断将己经获取的頂F分量从原信号中消去, 直至无法再分解出新的IMF蹄选过程具体为:首先,检测出原信号X中的所有极大、极小值 点,拟合做出信号的上下包络曲线,求出它们的均值线信号Ml,X中减去此均值线得到一个 新的序列H1,即H1=X-M1,判断H1是否符合IMF分量的条件,若不符合则继续用H1代替原来 的X做同样的处理得HI 1,即HI 1 =H1-M11,该过程迭代n次直至符合MF分量的条件,获得頂F 分量C1,即
[0073] Hln = Hl(n-l)_Mln
[0074] Ci = Hin
[0075] 然后,从原始信号X中去除第一个IMF分量,剩下数据序列R1=X_C1,将R1当作原X 并重复之前的处理过程,即R2 = Ri-C2, . . .,Rk = RK-i-CK最终获得k个頂F分量。EMD控制方法筛 选的停止条件是数据序列Rk不能再分解得到合适的頂F分量,即以单调的趋势变化,或仅有 一个极值点,或为一个恒定值。此时EMD处理过程结束。目前,EMD控制方法因处理非线性、非 平稳信号的优点而得以快速发展,在生物医学信号处理领域同样受到了不少重视,生物雷 达信号自身就是一种非平稳信号,符合EMD控制方法所需的三个前提条件,因而可以利用 EMD控制方法来处理,对信号特征进行提取,得到多条时频信息。
[0076] 图6示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的手势匹配示意图,为了方便说明,仅示出了与本发明实施例相关的部分。
[0077]为实现手势检测功能的高效运行,需要先对手势特征进行采集建立手势模型库。 手势识别的控制系统10通过雷达收发单元12发射并接收脉冲雷达信号,脉冲雷达信号经过 特定的手势36-1(手部相对于所述控制系统10为正掌)、36-2(手部相对于所述控制系统10 为正拳)、36-3(手部相对于所述控制系统10为平掌(指尖正对所述控制系统10))反射后被 所述控制系统10接收采样,所述控制系统10对采样信号进行滤波、幅频分析、特征提取后得 到分类的模型信号,建立特定手势的分类模型库并存储,存储设备采用SRAM或FLASH,为手 势检测创建数据基础。
[0078]图7示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的手势识别曲线,为了方便说明,仅示出了与本发明实施例相关的部分。
[0079]微处理器采样得到的信号如图所示,它包含了手势特征,手部运动速度,回波能量 等信息;ATSAM4E16E芯片通过四线全双工SPI通信接口发送命令给超带宽传感器,超带宽传 感器发送超带宽信号,当超带宽信号触碰人体时,在发送的同时,开始进行时钟计数,当超 带宽信号在空气介质中传播后,反馈给超带宽信号接收天线,然后通过下面的公式算出其 距离:
[0081]其中d表示超带宽天线与手部的距离,由于超带宽信号为光速传播,C表示光速,T 表示渡越时间,通过该公式可以算出实际的距离。当射频信号到达一个目标发生反射,由于 目标运动会产生频率调制。如果目标以v(t)m/s的速度运动,反射信号的频率根据多普勒频 移会发生一个偏移:
其中fd是多普勒频移,单位Hz,f是发射频率,单位Hz, C是信号传播速度,单位m/s,t是经过的时间,单位S,A是发射信号的波长,单位m。假设手部
运动表示为x(t),反射信号的多普勒频移可以描述为一个相位调制 当 , 手部姿势运动对雷达信号进行反射时,手部的运动就会对雷达载波相位产生比例调制。在 理想情况下通过相位解调将得到与手部运动事变位移成比例的时变相位信息,从而得到手 部运动的速度信息;忽略发射信号的幅度变化,一个单频的CW雷达发射信号可表达为T(t) = C〇S(23ift+(i)(t)),f是振荡频率,是振荡器的相位噪声,在这里把它看作信号相位 的随机波动。假设目标在距离do上,具有时变的位移x(t),则收发机和物体之间的距离为d (t)=do+X(t)。收发机和目标之间的距离将产生不可忽略的传播时间延迟,等于d(t)除以 信号的传播速度C。由于手部运动的同时信号在传输,天线到胸壁的距离在反射的时刻是d (t-(d(t))/c)。所以,往返一次的延迟时间td可表达为:
[0083]接收机得到的信号R(t)是发射机信号的延迟信号,幅度衰减为Ar,则
[0084] R(t) =Arcos[23if(t-td)+4) (t-td)+90)
[0085] 其中0Q为常数相位偏移,它受若干因素的影响,例如目标的反射表面形成的相位 偏移(接近180° ),以及从发射机到天线以及从天线到混频器之间的延时等。代入td的表达 式,得到接收信号
[0087]其中波长是人= c/f。假设在x(t-(d(t))/c)中的(d(t))/c项由于手部运动的周期 T》do/C而可以忽略,又由于相同的原因,所以2X(t-d(t)/c)/c项可变形简化,因此接收信 号可以近似写为:
[0089]由上式可知,接收信号与发射信号相比幅度变为Ar,多了一个受目标距离d。影响 的时间延迟项,且相位受到了手部运动的位移函数X(t)的调制。
[0090] 在直接转换结构中,如果信号是和一个与发射信号同源的L0信号相乘得来的,这 个周期运动的目标信息可以很容易被解调出来。由于接收信号的相位噪声与L0相关,忽略 幅度的变换,L0信号可以表达为:
[0091] L(t) = cos(23ift+ <i> (t))
[0092] 当接收信号和L0信号混频并且输出经过低通滤波器,输出的基带信号为:
[0094]
是基带信号的幅度,Gr是接收机的增益,以是混频器的转换 增益,是剩余相位噪声,
[0096]
是常数相位偏移,它与接收机本身参数有关,并随着目 标与雷达之间的距离do而变。43iX(t)/A是与信号x(t)成正比的时变相位偏移,通过对它的 解调提取可得目标运动信息。对于单路结构接收机,消除了常数相移的影响,并保证时变相 移量满足小角近似条件,则解调信号可直接由基带信号近似而来:
[0098]对于正交结构接收机,使用相位解调算法后,在理论上可恢复出基带信号的全部 相位信息:
[0100] 最终得到的有用相位都会受到剩余噪声的影响。通过理论分析我们已知当剩余相 位噪声起主导地位时,信噪比与距离的平方近似成反比,而当距离较近时剩余相位噪声在 总噪声中起主导地位,所以在距离较近时进行工作,并通过硬件滤波和小波变换等算法滤 波后我们可以成功地提取出目标的运动信息。
[0101] 接收信号的功率Pr(mw)是发射功率Pt(mW),收发天线增益为Gt和Gr,目标的雷达 目标散射截面〇(m2),在空气中衰减常数a,射频信号的波长Mm),和目标距离R(m)的函数
[0103] 对于雷达检测体征信号的应用场合,在此雷达方程中目标散射截面〇(m2)是唯一 不确定的参数。然而雷达目标散射截面〇(m 2)受多方面因素影响,包括目标材料的电性能, 目标的几何外形,目标被雷达波照射的方位,入射波的波长,入射场极化形式和接收天线的 极化形式等。当探测目标为人体时,照射有效目标截面积的计算需要整个人体和人体所处 背景的信息。然而,静止的身体本身产生了较强的杂波,而人体生理运动所涉及的有效面积 因人而异,不同用户之间的个体差异也很大且随着天线辐射角度,人体的体位等因素变化 很大,因而难以估算。因此需要结合用户特征库建立的手势,通过采集用户的不同手势信 息,对不同的回波信号使用小波包特征提取算法等算法提取信号特征,然后使用SVM等算法 进行模型训练得到不同的手势运动模型来共同实现手势的识别。
[0104] 图8示出了本发明一实施例提出的一种基于人机交互设备的手势识别的控制系统 的工作原理流程,为了方便说明,仅示出了与本发明实施例相关的部分。
[0105] 当控制系统上电时,供电电压为+3.3V,ATSAM4E16E芯片开始进行自检程序,并且 对外设进行相应的复位以及初始化操作,ATSAM4E16E芯片通过四线全双工SPI通信接口发 送命令给超带收发控制芯片,超带宽传感器发送超带宽信号,接收到回波信号后进行信号 处理,判断回波信号是否是目标区域内的手势回波信号,如果不是则忽略,避免了目标检测 区外回波信号的干扰,提高检测的准确性和高效性;如果是目标区域内的手势回波信号则 继续进行下一步的手势识别,通过信号的特征分析及与手势模型库的对比来进行手势识 另IJ,识别成功则保存使用,如果未识别成功则直接进行下一个流程的手势识别。
[0106] 图9示出了本发明另一实施例提出的一种基于人机交互设备的手势识别的控制 方法的步骤流程,为了方便说明,仅示出了与本发明实施例相关的部分。
[0107] -种基于上述控制系统的基于人机交互设备的手势识别的控制方法,所述控制方 法包括:
[0108] S11,超带宽模块发送穿透障碍物的脉冲雷达信号;
[0109] S12,主控模块控制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波 信号;
[0110] S13,天线模块接收所述回波信号、并将所述回波信号发送给所述主控模块进行处 理,使得根据所述回波信号判断出手势特征;
[0111] S14,通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信号。
[0112] 作为本发明另一实施例,所述手势特征包括拳形向前、拳形向后和拳向右侧的滑 动姿势。
[0113] 作为本发明另一实施例,当所述手势特征为拳形向前,则转化为人机交互设备的 音量调大;当所述手势特征为拳形向后,则转化为人机交互设备的音量调小;当所述手势特 征为拳向右侧的滑动姿势,则转化为人机交互设备的删除操作。
[0114] 本发明实施例提供的基于人机交互设备的手势识别的控制系统及其控制方法的 工作原理为:
[0115] 首先,启动电源模块,使得交流电源VCC为所述控制系统供电,其次,主控模块控制 超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号,接着天线模块接收到所述回 波信号后,经过高通滤波模块对所述回波信号进行滤波,然后将滤波后的回波信号发送给 所述主控模块进行处理并且识别,根据所述回波信号判断出手势特征,识别成功则保存使 用,最后通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信号,例如当 所述手势特征为拳形向前,则转化为人机交互设备的音量调大;当所述手势特征为拳形向 后,则转化为人机交互设备的音量调小;当所述手势特征为拳向右侧的滑动姿势,则转化为 人机交互设备的删除操作,从而达到人机交互的效果。
[0116] 综上所述,本发明实施例提供的一种基于人机交互设备的手势识别的控制系统及 其控制方法,包括超带宽模块、主控模块、天线模块和通信电平转换模块,所述主控模块控 制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号,天线模块接收到所述 回波信号后,将所述回波信号发送给所述主控模块进行处理,使得根据所述回波信号判断 出手势特征,接着通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信 号,从而达到人机交互的效果。其中,由于超宽带技术具有较高的数据传输速率、多径分辨 能力强、穿透能力强、低功耗、非接触式和隐蔽性好的特点,所述控制系统通过超带宽模块 发送脉冲雷达信号可以穿透障碍物避免其受干扰,这样会使得对手势识别更为精确,同时 解决了现有技术中存在无法精确地通过对人体手势进行检测以及识别,从而达到人机交互 的效果的问题。本发明实施例实现简单,不需要增加额外的硬件,可有效降低成本,具有较 强的易用性和实用性。
[0117] 本领域普通技术人员可以理解:实现上述方法实施例的步骤或部分步骤可以通过 程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在 执行时,执行包括上述方法实施例的步骤,而前述的存储介质包括:R〇M、RAM、磁碟或者光盘 等各种可以存储程序代码的介质。
[0118] 以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实 施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各 实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改 或者替换,并不使相应技术方案的本质脱离本发明实施例各实施例技术方案的精神和范 围。
[0119]以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精 神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
【主权项】
1. 一种基于人机交互设备的手势识别的控制系统,其特征在于,所述控制系统包括: 发送穿透障碍物的脉冲雷达信号的超带宽模块; 与所述超带宽模块相连接,控制所述超带宽模块发送脉冲雷达信号到达人体手部并产 生回波信号的主控模块; 与所述主控模块相连接,接收所述回波信号、并将所述回波信号发送给所述主控模块 进行处理,使得根据所述回波信号判断出手势特征的天线模块; 与所述主控模块相连接,根据所述手势特征,转化为对人机交互设备的控制信号的通 信电平转换模块。2. 如权利要求1所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述手 势特征包括拳形向前、拳形向后和拳向右侧的滑动姿势。3. 如权利要求2所述的基于人机交互设备的手势识别的控制系统,其特征在于,在通信 电平转换模块中,当所述手势特征为拳形向前,则转化为人机交互设备的音量调大;当所述 手势特征为拳形向后,则转化为人机交互设备的音量调小;当所述手势特征为拳向右侧的 滑动姿势,则转化为人机交互设备的删除操作。4. 如权利要求3所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述控 制系统还包括: 同时与所述主控模块和天线模块连接,将所述天线模块接收的回波信号进行滤波,并 发送给所述主控模块的高通滤波模块。5. 如权利要求4所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述控 制系统还包括: 与所述主控模块连接,对所述回波信号进行保存的存储模块。6. 如权利要求5所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述主 控模块包括一主控芯片U1,所述主控芯片U1包括: 主控端CTRL、接收端RXD、存储端MEM和传输端FTP; 所述主控端CTRL接所述超带宽模块,所述接收端RXD接所述高通滤波模块,所述存储端 MEM接所述存储模块,所述传输端FTP接所述通信电平转换模块。7. 如权利要求6所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述超 带宽模块包括一超带宽收发芯片U2,所述超带宽收发芯片U2包括: 控制端Ctrl; 所述控制端ctr 1接所述主控芯片U1的主控端CTRL。8. 如权利要求7所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述高 通滤波模块包括一滤波芯片U4,所述滤波芯片U4包括: 发射端Send和滤波端Fi It; 所述发射端Send接所述主控芯片U1的接收端RXD,所述滤波端Fi It接所述天线模块。9. 如权利要求8所述的基于人机交互设备的手势识别的控制系统,其特征在于,所述通 信电平转换模块包括一通信芯片U5,所述通信芯片U5包括: 传送端RTP和通讯端PLC; 所述传送端RTP接所述主控芯片U1的传输端FTP,所述通讯端PLC接所述人机交互设备。10. -种基于如权利要求1所述的控制系统的控制方法,其特征在于,所述控制方法包 括: 超带宽模块发送穿透障碍物的脉冲雷达信号; 主控模块控制所述超带宽模块发送脉冲雷达信号到达人体手部并产生回波信号; 天线模块接收所述回波信号、并将所述回波信号发送给所述主控模块进行处理,使得 根据所述回波信号判断出手势特征; 通信电平转换模块根据所述手势特征,转化为对人机交互设备的控制信号。
【文档编号】G01S13/88GK106055089SQ201610270278
【公开日】2016年10月26日
【申请日】2016年4月27日
【发明人】向学科, 李栋, 张建国
【申请人】深圳市前海万象智慧科技有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1