专利名称：一种辅助聋人感知环境声音的装置的制作方法
技术领域：
一种辅助聋人感知环境声音的装置技术领域[0001]本实用新型涉及嵌入式信号处理技术领域，特别涉及一种辅助聋人感知环境声音的装置。
背景技术：
[0002]第二次全国残疾人抽样调查结果显示，我国残疾人口总量在不断增加，残疾人占全国总人口的6. 34%，其中听力残疾约2004万人，占残疾人总数的24. 16%。由于失去了听觉，聋人在身体机能和社会生活等多个方面产生严重的困扰。近年来，随着科技的发展和社会的进步，聋人受到关注程度也不断提高，人们提出一些技术和方法来改善聋人对声音的感知能力，如数字助听器、电子耳蜗恢复正常听力、利用振动传感器感知脚步、听力狗感知大多数声音、闪灯感知提示音等等。它们按照对声音信息的反馈通路可分两类一是修复原有的听觉通路，如电子耳蜗、数字助听器等；二是利用其他正常的感知通路代替听觉通路，如视觉、触觉、痛觉等将声音信号转化为其他形式的信息，通过神经传递给大脑，从而实现声音的感知，如振动感受器、闪灯等。其中数字助听器、电子耳蜗属于侵入式听力补偿方法，虽然为一部分耳聋患者重建听力，但是仍然存在诸多需要改善的地方，如受试者对植入后听到的声音需要有一段适应的过程，需要定期到医院来进行微处理器的调试，有可能会引起一系列的颅内外并发症，佩戴费用昂贵等。而振动感受器、闪灯等利用其他通路感知声音的方法是一种非侵入式的补偿，通过视觉可以分辨颜色、形状、位置以及运动形式，通过触觉可以区分振动形式或者位置，而这些技术往往受到实施环境及声音质量等多方面因素制约。目前，非侵入式听觉补偿出现了很多优良的设计方案，但大多限于语音信号方面，针对非语音声音的较少。发明内容[0003]针对现有技术的不足，本实用新型提供一种辅助聋人感知环境声音的装置，聋人使用时随身携带该装置，当其所处周围环境中有某种声音产生时，通过声音采集模块收集环境提示音，通过无线通信的方式传递给嵌入式的环境声音处理及显示模块，对收集的环境声音完成预处理、特征提取、类别判定和定位显示，从而使聋人能够通过无损的视觉补偿方式实时感知周围环境的声音变化。[0004]本实用新型的技术方案一种辅助聋人感知环境声音的装置，包括声音采集模块和声音处理及显不模块，声音米集模块安放在聋人所处环境中的若干固定节点，包括麦克风、信号调理电路、微处理器、复位电路、JTAG接口、时钟电路、电源电路和无线发射模块，主要完成环境声音的实时采集和发送，麦克风接至信号调理电路输入端，信号调理电路输出端接入微处理器端口，复位电路、JTAG接口、时钟电路和电源电路均外接于微处理器端口， 无线发射模块接至微处理器通信端口；[0005]声音处理及显示模块由聋人随身携带，包括处理器、存储器、无线接收模块、JTAG 接口、SD卡接口、时钟电路、复位电路、电源电路和LCD显示屏，主要是对接收到的声音信号进行数据处理、存储和显示，处理器外接有存储器、JTAG接口和SD卡接口，电源电路接至处理器的供电端口，同时电源电路的输出管脚分别连接LCD显示屏、复位电路、存储器，为它们提供电源，无线接收模块接至处理器的通信端口。该模块还可配置键盘、开关和LED指示灯，对装置进行设置和工作状态提示。通过软件编程完成引导程序Bootloader、嵌入式 Linux内核、根文件系统和必要的设备驱动程序，搭建嵌入式系统的基本运行环境；在嵌入式系统运行环境下，完成环境声音处理及图形显示。[0006]本实用新型装置的具体工作过程如下当聋人所处特定环境中某种声音产生，该位置的声音采集模块利用麦克风采集声音，经放大、滤波后，在低功耗的微处理器控制下通过无线通信发送给嵌入式声音处理及显示模块。嵌入式声音处理及显示模块通过无线接收模块收到声音数据，以处理器中ARM核控制存储、显示和通信从设备模块，由处理器中DSP 核对声音信号的预处理，声音特征提取、声源位置确定，并将声音与图形建立映射，送入LCD 实时显示声音的类别和位置信息。[0007]本实用新型装置的控制方法，具体按如下步骤进行[0008]步骤I :针对受试者所处的特定环境，建立环境声音数据库(如电话声、门铃声、电脑启动声音、人交谈声音、人走动时的声音)，建立这些环境声音发生位置的图像文件；[0009]步骤2 :对环境声音数据库中的声音进行处理和训练，建立这些环境声音与发生位置的对应关系，具体如下[0010]步骤2. I :根据公式I计算每帧中每个采样点的能量E(m，k)，根据公式2计算信号总能量E，根据公式3计算每帧中每个采样点的概率密度P (m, k)；[0011 ] E (m, k) = [X (m) co (n_m) ]2m = I, . . . , N, k = I, . . . , M 公式 I[0012]其中x(n)表不声音信号，m为声音信号米样序数，co (n)为汉明窗函数，k表不中贞序数，N为每帧数据采样点数，M采样帧数；[0013]根据公式2计算声音信号总能量M N12[0014]E = HE(m，k)公式 2k=\ W=I[0015]P (m，k) = E (m，k) /E，m = 1， ，N/2，k = 1， ，M 公式 3[0016]步骤2. 2 :计算每帧声音信号的谱熵值Hm ；[0017]根据公式4计算每帧谱熵值Hm，N/2[0018]Hm = -Yj P(m, k) log P(m,々)公式 4W=I[0019]步骤2. 3 :设定门限值，逐帧进行比较；[0020]当大于门限值Hl时，认定为进入声音段，否则继续比较判断，声音结束点的判断与此同理；[0021]步骤2. 4:当判断出非噪音频段的起始位置时，从起始帧开始，计算当前帧的功率谱值，一共计算15帧；[0022]步骤2. 5 :对计算出的15帧功率谱值进行二值化；[0023]选取基准值Base,大于Base的设为I,小于Base设为0,构成声音识别的网络输入特征向量；[0024]步骤2. 6 :采用神经网络算法进行声音类别识别训练，具体步骤如下[0025]步骤2. 6. I :初始化；[0026]根据公式5初始化前向连接权Wu (0)，根据公式6初始化反馈连接权(0)，初始化阈值参数为P。[0027]R (O) = ^7公式 5n + l[0028]tji (0) = I, i = I, 2, , n, j = I, 2, , m 公式 6[0029]步骤2. 6. 2 :选择环境声音数据库中某一类别声音信号，提取声音信号的前15中贞的能量，构15维输入特征向量R =[R,M5]，送入神经网络输入层；[0030]步骤2. 6. 3 :根据公式7计算输入层各个神经元激活函数Sj,神经元g的激活值Sg 最大，如公式8，初步确定为输入特征向量Ui所对应输出层的类别神经元；=1^;忙，)=1，2，...，所公式 7[0031][0032][0033]Sg =max[S ]公式 8步骤2. 6. 4 :根据公式9，计算输入特征向量Ui与输出层类别神经元g匹配度Cj,[0034]C1 =气-公式 9TAZ=I[0035]其中，Tj = Iitj1, tJ2, . . . , tjn]T, j = 1,2, . . . , m表示神经元j所对应的反馈连接权，存储的是以前的学习过程中记忆的输入特征向量。[0036]当CjS P时，确定输出层神经元g是输入特征向量仏的类别神经元，根据公式10 和11调整神经元连接权值，存储记忆结果。WM+ 1)_7] ] 0.5也巢公式10i=l[0038]tjiU+l) = tji (t) Ui 公式 11[0039]当Cj< P时，则输出层神经元不是类别神经元，将神经元g的输出置0，并在余下的输出层神经元中继续寻找，即转至步骤2. 6. 3。[0040]步骤2. 6. 5 :将神经元g排除出下次识别的范围，返回步骤2. 6. 3 ;若所有已记忆的神经元都不满足时，则选一个未使用的输出层神经元作为输入特征向量Ui的分类结果， 并令这个神经元为类别神经元g，根据公式10、11调整连接权。[0041]步骤2. 6. 6 :返回步骤2. 6. 2，对下一个输入特征向量进行识别。[0042]步骤2. 6. 7 :当建立的环境声音数据库中环境声音都在输出层确定了类别神经元 g后，则训练结束。[0043]步骤3 :聋人所处特定环境中某种声音产生时，该位置的声音采集模块的麦克风采集到的声音信号，经信号调理电路放大滤波后，通过无线发射模块发送至声音处理及显示模块；[0044]步骤4 :当有环境声音发送至嵌入式声音处理及显示模块时，提取声音信号特征， 送入步骤2. 6. I 2. 6. 7训练好的神经网络中，判定类别神经元g，确定声音类别。[0045]步骤5 :根据声音所属类别，调用聋人周围环境声音发生位置的图像文件；[0046]步骤6 :建立声音数据的图形表达将聋人所在周围环境发生的某种声音以不断闪烁的圆环表示，圆环的中心指示声源在房间内的位置，根据计算声音数据前15帧的能量确定圆环的大小，声音数据持续时间对于圆环显示的时间。[0047]确定圆环的大小首先对声音信号进行分巾贞，并对分巾贞后的声音信号求取能量密度谱函数P(n，k)，然后选取每帧中能量密度值最大的值。为了让显示的波纹图更加清晰可辨，对一些半径太小的同心圆不予显示，设置一个门限值Base，只显示大于门限值的声音。 这个门限不能很高，否则检测不到许多有用的声音；然后，将选取的值表示成dB值的形式， 使用201g(P (n，k))，并直接将dB (P)值作为同心圆的半径。[0048]有益效果[0049]本实用新型装置将嵌入式处理技术与生物医学工程实际应用有机结合，同时具备 ARM与DSP的优势，支持更高的计算处理能力，可以很好地实现信号的实时、快速、精确的采集，且开发成本低，具有较高的使用价值，有很好的应用前景。声音采集模块安放在产生声音的固定节点上，而嵌入式声音处理及显示模块，使用者随身携带，在不影响聋人正常生活状态情况下，可使在家庭，办公等环境下，长时间实时环境声音监测，使聋人能够通过无损的视觉补偿方式实时感知周围环境中的声音变化。该装置具有低功耗、体积小、便携式、个性化定制等嵌入式系统的诸多特点，对于推广嵌入式技术应用和补偿聋人听力具有积极意义。
[0050]图I是本实用新型实施例的声音采集模块结构框图；[0051]图2是本实用新型实施例的声音处理及显示模块结构框图；[0052]图3是本实用新型实施例的麦克风及信号调理电路连接原理图；[0053]图4是本实用新型实施例的声音采集模块的电源3V供电原理图；[0054]图5是本实用新型实施例的声首米集模块的复位电路原理图；[0055]图6是本实用新型实施例的声音采集模块的时钟电路原理图；[0056]图7是本实用新型实施例的声音采集模块的JTAG接口电路原理图；[0057]图8是本实用新型实施例的声音采集模块的无线发射模块电路原理图；[0058]图9是本实用新型实施例的声音处理及显示模块的时钟电路原理图；[0059]图10是本实用新型实施例的声音处理及显示模块的电源芯片TPS73701连接原理图；[0060]图11是本实用新型实施例的声音处理及显示模块的复位电路原理图；[0061]图12是本实用新型实施例的声音处理及显示模块的电源芯片TPS65930供电连接原理图；[0062]图13是本实用新型实施例的声音处理及显示模块的存储器连接原理图；[0063]图14是本实用新型实施例的声音处理及显示模块的IXD与处理器连接原理图；[0064]图15是本实用新型实施例的声音处理及显示模块的无线接收模块电路原理图；[0065]图16是本实用新型实施例的声音处理及显示模块的SD卡连接原理图；[0066]图17是本实用新型实施例的声音处理及显示模块的JTAG接口电路原理图；[0067]图18是本实用新型实施例装置工作流程图；[0068]图19是本实用新型实施例神经网络算法流程图；[0069]图20是本实用新型实施例房间的俯视图简化图；[0070]图21是本实用新型实施例四种声音的谱图形状图；[0071]图22是本实用新型实施例四种声音的结果显示图。
具体实施方式
[0072]
以下结合附图对本实用新型做进一步说明。[0073]本实用新型的辅助聋人感知环境声音的装置，包括声音采集模块和声音处理及模块，声音采集模块安放在聋人所处环境中的若干固定节点，包括麦克风、信号调理电路、微处理器MSP430F22X4、复位电路、JTAG接口、电源电路和无线发射模块，结构框图如图I所示。声音处理及显示模块安放在聋人所在环境中的固定位置，包括处理器、存储器、无线接收模块、JTAG接口、SD卡接口、时钟电路、复位电路、电源芯片和IXD显示屏，主要是对接收到的声音信号进行数据处理、存储和显示，处理器外接有FLASH存储器、SDRAM存储器、USB 接口、JTAG接口和SD卡接口，结构框图如图2所示。[0074]麦克风及信号调理电路连接如图3所示，麦克风采集到声音信号，接到运算放大器TLV2760的反向输入端2脚，经过放大滤波处理，由MicOut接入TI微处理器MSP430F22X4 的8引脚。由于微处理器工作电压为3V，该模块选用两组I. 5V干电池供电，连接到TI微处理器MSP430F22X4的14引脚，电路如图4所示。声音采集模块的复位电路如图5所示，当按键被按下时，把TRST复位端拉至低电平，使微处理器MSP430F22X4复位，复位电路输出与连接到微处理器MSP430F22X4的7引脚。声音采集模块采用8MHZ无源晶振作为主时钟源，连接到MSP430F22X4的XOUT和XIN。具体电路如图6所示。声音采集模块采用标准14针JTAG 接口电路，其中TDI (测试数据输入)、TDO (测试数据输出)、TMS (测试模式选择)、TCK (测试时钟输入)是标准的边界扫描测试所需的四根信号线，通过网络标号与MSP430F22X4的 35引脚、36引脚、34引脚、33引脚相连，具体电路如图7所示。无线发射模块采用CC2500 无线射频芯片，它四个信号引脚SCLK(时钟输入)、S0(数据输出)、CSN(芯片选择)、SI (数据输入)分别同MSP430F22X4的12引脚，11引脚，9引引脚，10引脚相连，在MSP430F22X4 控制下完成无线数据通信，无线发射模块电路如图8所示。[0075]麦克风采集节点所在位置环境声音，采集到的声音信号经信号调理电路放大、滤波后，由微处理器内部A/D接口完成模数转换，在微处理器控制下通过无线通信电路发送给嵌入式处理及显示模块。[0076]声音处理及显示模块中，基于嵌入式处理器芯片，采用免费开源的嵌入式Linux 系统，通过无线数据通信完成周围环境声音数据的处理及显示。处理器选用0MAP3530，其中的ARM核负责基本的外围接口和设备控制器，DSP核负责声音信号处理及显不；[0077]声音处理及显示模块的时钟电路如图9所示。具体地TPS65930通过HFCLKIN 引脚接收装置的主时钟信号进行同步和整个系统的初始化，在HFCLK0UT引脚上产生一个 26MHz的方波时钟到0MAP3530产生一个26Mhz的方波时钟，32. 768khz时钟由无源晶振和 TPS65930的PLL电路配合产生，为TPS65930的RTC电路提供参考时钟。McBSP_CLKS也是由TPS65930产生，通过ElO提供给0MAP3530。[0078]声音处理及显示模块的电源电路采用TPS65930器件供电，同时为0MAP3530提供时钟、系统按键；TPS65930所需要的工作电压3. 3V和4. 2V两种，通过TI电源芯片实现 TPS73701产生，如图10所示。[0079]NRESPWR0N是从TPS65930产生的信号，送入复位芯片TC7SH08FU，产生的复位信号 RESET送给0MAP3530完成复位，如图11所示。[0080]0MAP3530 芯片工作 I. 2V 核电源(VDDI, VDD2)、1. 8V 的 I/O 电压(VIO)，与外部接口的三个电源电压VDD_PLL11.8V，VDAC1.2V，VMMC3V，由TPS65930电源芯片产生，如图12所示。[0081]存储器选用芯片型号MT29C1G24MADLAJA-61T。它包含 128M 的 NAND FLASH 和 128M 的 LPDDR SDRAM0 其中 NAND FLASH 引脚 ALE, CE#, CLE, LOCK, RE#, WE#, WP#, I/0[15:0]与 0MAP3530 内部 GMPC 组件控制引脚相连；DDR SDRAM 引脚 A[13:0]，BAO, BAl, CAS#, CK, CK#, CKEO, CKEl, CSO#, CS1#, DM[3:0], RAS#, WE#, DQ[31:0], DQS[3:0]与 0MAP3530 的 SDRC 接口对应引脚相连，如图13所示。[0082]IXD显示屏由0MAP3530内部集成的IXD控制器进行控制，本实用新型采用的 LQ043T3DX02LCD有24象点数据输出脚DSS_D0 DSS_D23，将LCD屏的RO R7接至LCD 接口的DSS_D0 DSS_D7上，将LCD屏的GO G7接至LCD接口的DSS_D8 DSS_D15上， 将LCD屏的BO B7接至LCD接口的DSS_D16 DSS_D23上。DSS_HSYNC LCD水平同步信号，DSS_VSYNC是LCD垂直同步信号，DSS_PCLK是LCD像素时钟，LCD和0MAP3530的硬件连接方式如图14所示。LCD触摸屏控制，通过TI公司TSC2046触摸屏控制器来设计触摸点的坐标，通过SPI接口来控制。[0083]无线接收模块采用CC2500芯片，其中SCLK (时钟输入)、SO (数据输出)、CSN(芯片选择)、SI (数据输入)是标准的控制芯片所需的四根信号线，它们分别同0MAP3530的 SPI2接口引脚相连，如图15所示。SD卡连接原理如图16所示，JTAG接口电路如图17所/Jn o[0084]本装置通过软件编程完成引导程序Bootloader、嵌入式Linux内核、根文件系统和必要的设备驱动程序，搭建嵌入式系统的基本运行环境；在嵌入式系统运行环境下，完成环境声音处理及图形显示。[0085]具体步骤如下[0086]步骤I :针对受试者所处的特定环境，建立环境声音数据库(如电话声、门铃声、电脑启动声音、人交谈声音、人走动时的声音)，建立这些环境声音发生位置的图像文件；[0087]步骤2 :对环境声音数据库中的声音进行处理和训练，建立这些环境声音与发生位置的对应关系，具体如下[0088]步骤2. I :根据公式I计算每帧中每个采样点的能量E(m，k)，根据公式2计算信号总能量E，根据公式3计算每帧中每个采样点的概率密度P (m, k)；[0089]E(m, k) = [x(m) co (n_m)]2m = I, . . . , N, k = I, . . . , M 公式 I[0090]其中x(n)表不声音信号，m为声音信号米样序数，co (n)为汉明窗函数，k表不中贞序数，N为每帧数据采样点数，M采样帧数；[0091]根据公式2声音信号总能量[0092] E = HE(m，k)公式 2k=\ W=I[0093]P (m，k) = E (m，k) /E，m = 1， ，N/2, k = 1， ，M 公式 3[0094]步骤2. 2 :计算每帧声音信号的谱熵值Hm ；[0095]根据公式4计算出每帧谱熵值Hm，N12[0096]Hm = -Yj P(m, k) log P(m,々)公式 4W=I[0097]步骤2. 3 :设定门限值，逐帧进行比较；[0098]当大于门限值Hl时，认定为进入声音段，否则继续比较判断，声音结束点的判断与此同理；[0099]步骤2. 4 :当判断出非噪音频段的起始位置时，从起始帧开始，计算当前帧的功率谱值，一共计算15帧；[0100]步骤2. 5 :对计算出的15帧功率谱值进行二值化；[0101]选取基准值Base,大于Base的设为I,小于Base设为0,构成声音识别的网络输入特征向量；[0102]步骤2. 6 :采用ART神经网络算法进行声音类别识别训练，具体步骤如下[0103]步骤2. 6. I:初始化;[0104]根据公式5初始化前向连接权Wu (0)，根据公式6初始化反馈连接权^ (0)，初始化阈值参数为P。[0105]巧(0)= +公式 5n + l[0106]tji (0) = I, i = I, 2, , n, j = I, 2, , m 公式 6[0107]步骤2. 6. 2 :选择环境声音数据库中某一类别声音信号，提取声音信号的前15中贞的能量，构15维输入特征向量￠/, =[%%,...,%]，送入ART神经网络输入层；[0108]步骤2. 6. 3 :根据公式7计算输入层各个神经元激活函数Sj,神经元g的激活值Sg 最大，如公式8，初步确定为输入特征向量Ui所对应输出层的类别神经元；[0109]Sj =iwvU丨，j = \，2，…，m公式 7i=l[0110]S = maxP 讼式 85 ；=1 J[0111]步骤2. 6. 4 :根据公式9，计算输入特征向量Ui与输出层类别神经元g匹配度Cj,TAZ=I[0113]其中，Tj = Iitj1, tJ2, . . . , tjn]T, j = 1,2, . . . , m表示神经元j所对应的反馈连接权，存储的是以前的学习过程中记忆的输入特征向量。[0114]当CjS P时，确定输出层神经元g是输入特征向量仏的类别神经元，根据公式10 和11调整神经元连接权值，存储记忆结果。W(t + D = ~t]'m~，'+ = 1，2，...，《 「01151 WtU ，公式 10
L 」0.5 + ^β(θυ,么式10tjiU+l) = tjiWUi 公式 11当Cj< P时，则输出层神经元不是类别神经元，将神经元g的输出置0，并在余下的输出层神经元中继续寻找，即转至步骤2. 6. 3。步骤2. 6. 5 将神经元g排除出下次识别的范围，返回步骤2. 6. 3 ；若所有已记忆的神经元都不满足时，则选一个未使用的输出层神经元作为输入特征向量仏的分类结果， 并令这个神经元为类别神经元g，根据公式10、11调整连接权。步骤2. 6. 6 返回步骤2. 6. 2，对下一个输入特征向量进行识别。步骤2. 6. 7 当建立的环境声音数据库中环境声音都在输出层确定了类别神经元 g后，则训练结束。步骤3 聋人所处特定环境中某种声音产生时，该位置的声音采集模块的麦克风采集到的声音信号，经信号调理电路放大滤波后，通过无线发射模块发送至声音处理及显示模块；步骤4 当有环境声音发送至嵌入式声音处理及显示模块时，提取声音信号特征， 送入步骤2. 6. 1 2. 6. 7训练好的ART神经网络中，判定类别神经元g，确定声音类别。步骤5 根据声音所属类别，调用在聋人周围环境发生位置的图像文件；步骤6 建立声音数据的图形表达将聋人所在周围环境发生的某种声音以不断闪烁的圆环表示，圆环的中心指示声源在房间内的位置，根据计算声音数据前15帧的能量确定圆环的大小，声音数据持续时间对于圆环显示的时间。确定圆环的大小首先对音频信号进行分帧，并对分帧后的声音信号求取能量密度谱函数P(m，k)，然后选取每帧中能量密度值最大的值。为了让显示的波纹图更加清晰可辨，对一些半径太小的同心圆不予显示，设置一个门限值Base，只显示大于门限值的声音。 这个门限不能很高，否则检测不到许多有用的声音；然后，将选取的值表示成dB值的形式， 使用201g(P(m，k))，并直接将dB(P)值作为同心圆的半径。本装置聋人根据自己所处环境建立声音发生位置的图像文件，保存成.bmp文件格式；当所处环境发生变化时，可以通过软件操作随时建立当前的环境声音发生位置的图像文件；如果所处环境声音类别的数量及位置发生改变时，也可通过软件操作对声源点位置进行添加及修改。以聋人所处环境是单个房间为例，房间的俯视图简化如图20中左图所示，右图中的黑色块为固定声源点的位置。位置1是电话；位置2是闹钟；位置3是门铃；位置4是未知声音的显示位置。本实施例选用四种声源对ART神经网络的识别进行演示，分别是电话铃声、门铃声、闹钟声和未知声音(即除了电话铃声、门铃声和闹钟声这三种声音之外的其它声音，本例指两人交谈声)。将每种声音提取的谱特征如图21，图中(a)为电话铃声，(b)为闹钟声，(C)为门铃声，(d)为一段说话声。从图21中可以看出不同声音的谱图形状差别很大，提取谱图形状信息可以区分这些声音。训练中声音数据选择前15帧，每帧声音数据长度N= 128，神经网络的输入神经元个数(Ν/2+1) *15，输出神经元的个数50，警戒参数P =0.5，每个声音类别训练的样本数20个，持续时长约ls，完成训练后。选取四类声源中一种，通过软件测试结果，如图22所示。
权利要求1. 一种辅助聋人感知环境声音的装置，其特征在于包括声音米集模块和声音处理及显示模块；声音采集模块安放在聋人所处环境中的若干固定节点，包括麦克风、信号调理电路、微处理器、复位电路、JTAG接口、时钟电路、电源电路和无线发射模块；麦克风接至信号调理电路输入端，信号调理电路输出端接入微处理器端口，复位电路、JTAG接口、时钟电路和电源电路均外接于微处理器端口，无线发射模块接至微处理器通信端口 ；声音处理及显示模块由聋人随身携带，包括处理器、存储器、无线接收模块、JTAG接口、 SD卡接口、时钟电路、复位电路、电源电路和LCD显示屏，处理器外接有存储器、JTAG接口和 SD卡接口，电源电路接至处理器的供电端口，同时电源电路的输出管脚分别连接LCD显示屏、复位电路、存储器，无线接收模块接至处理器的通信端口。
专利摘要一种辅助聋人感知环境声音的装置，包括声音采集模块和声音处理及显示模块，声音采集模块安放在聋人所处环境中的若干固定节点，包括麦克风、信号调理电路、微处理器、复位电路、JTAG接口、时钟电路、电源电路和无线发射模块，声音处理及显示模块由聋人随身携带，包括处理器、存储器、无线接收模块、JTAG接口、SD卡接口、时钟电路、复位电路、电源电路和LCD显示屏。当聋人所处周围环境中有某种声音产生时，声音采集节点收集环境提示音，以无线通信的方式传给声音处理及显示模块，对收集的环境声音完成预处理、特征提取、类别判定和定位显示，使聋人能通过无损的视觉补偿方式实时感知周围环境的声音变化。
文档编号G10L15/06GK202307120SQ20112042031
公开日2012年7月4日 申请日期2011年10月28日 优先权日2011年10月28日
发明者张锡冰, 徐彬, 李扬, 杨丹 申请人:东北大学