一种智能抬头显示系统的制作方法_4

文档序号:9765325阅读:来源:国知局
所述触发动作信息或者唤醒语音信息进行匹配,若任意信息匹配成功,则进行唤醒。
[0055]所述传感器组件103还包括,语音识别模块10311,用以接收用户发送的语音信号;查询模块10312,用以根据所述语音信号得到用户输入的POI地址;显示输出模块10313,用以根据所述POI地址进行检索,得到检索结果;语音交互模块10314,用以将所述检索结果进行反馈,等待用户下一次语音信号;根据所述下一次语音信号,在所述反馈的结果中选择定位出目地,完成导航。所述传感器组件103,还包括,方向传感器10315、加速度传感器10316、GPS10319、温度传感器10317以及地磁传感器10318,所述温度传感器10317用以感应车内的温度并进行散热,所述地磁传感器10318用以检测方向,所述方向传感器10315用以判断车辆前进或倒退的方向以及测试汽车行驶距离,所述加速度传感器10316用以车辆的制动、启动检测,所述GPS10319用以定位车辆位置以及地图接入。
[0056]图5是图1中处理器组件的结构示意图。
[0057]在本实施例中的智能抬头显示系统中的处理器组件包括,处理装置1041,用于根据获取驾驶员行车状态信息,形成图像数据,如果所述图像数据不满足预定的手势图像标准,则不对所述的图像数据进行储存;若满足,则对所述图像数据进行储存后输出手势指令,以及用于根据所述光照值,判断是否开启补偿光照;若是,则开启补偿光照射并再次获取驾驶环境中的图像数据。所述处理装置1041可提供高速的处理能力,可采用ARM 4核处理器单元,同时支持micro SD储存卡最大支持32GBAUD 805,用以提供上述装置的载体。
[0058]在本实施例中,具体地,手势的静止状态基于二维手型进行识别;二维手型识别是基于二维层面的,在处理过程中需要将不含深度信息的二维信息作为输入即可。就像平时拍照所得的相片就包含了二维信息一样,只需要使用单个摄像头捕捉到的二维图像作为输入,然后通过计算机视觉技术对输入的二维图像进行分析,获取信息,从而实现手势识别。本领域技术人员能够明了,计算机视觉(Computer Vis1n,CV)中,视觉信息的处理技术主要依赖于图像处理方法,它包括图像增强、数据编码和传输、平滑、边缘锐化、分割、特征抽取、图像识别与理解等内容。经过这些处理后输出图像的质量得到相当程度的改善,既改善了图像的视觉效果,又便于计算机对图像进行分析、处理和识别。比如,通过图像采集得到二维手型图像,可对二维手型图像进行图像增强,例如可以通过直方图变换增强了图像对比度,实现单通道图像增强,将图像灰度阈值拉伸到0-255。然后再进行数据编码和传输,此步骤是为了对图像进行压缩,而图像平滑主要目的在于去噪,除去可能因为环境因素(车辆颠簸、转弯、光线较暗等因素)造成的图像失真。完成边缘锐化可以采用《基于边缘检测的图像锐化方法》.曾嘉亮.的方法。完成上述的操作后,可再进行特征抽取,可以采用卡亨南-勒维展开式为基础进行的线性变换。或者采用非线性映射方法,例如多维定标法和参数映射法。最后可完成图像的识别。更进一步,获取所述二维手型上的二维信息后输入得到第一图像;获得上述的二维手型后可以获取二维信息,得到的第一图像为经过图像处理后的图像,再与预设的手势进行匹配识别;预设的手势包括了所有的单、双手的手势图像,即左右手或者单支手。若找到与所述的第一图像匹配的第二图像则触发操作指令;所述的第二图像为预存的手势图像,若匹配识别成功则会触发相应的指令,比如静止的手势“I”,可对应指令播放音乐,则根据匹配的结果对抬头显示器进行控制,进行播放音乐。比如静止的手势“拳头”,可以对应开启导航功能,则根据匹配的结果对抬头显示器进行控制,在完成唤醒后,开始进行导航。具体地,当车内光照不足时,抬头显示器会自动开启补偿光照,并提示驾驶员再次进行手型操作,或者在驾驶员还未做出指令手型操作时,提前开启补偿光照,避免二次操作。上述调节的光路方式可采用《基于物理光照变化反应的智能调光算法研究》.陈中银.的调光算法。
[0059]所述处理器组件104还包括,唤醒指令处理模块1042、导航指令处理模块1043,电话指令处理模块1044,音乐指令处理模块1045,微信指令处理模块1046,处理器组件104的功能如下:用语音指令选择目的地指令、判断是否躲避拥堵路线指令、导航来源指令、行车路况指令、电子狗指令;唤醒指令处理模块1042,用以唤醒休眠的抬头显示器;电话指令,可发出电话指令进行语音控制接听、拨出电话,当被呼叫方存号多于一个的时候,可以语音选择;音乐指令,根据语音操作,可以播放SD卡的音乐,或者播放电台内容;微信指令,可提前通过扫码登陆微信,收到微信时会有语音提示是否播报,回复时通过语音输入、识别转换成文字。上述的指令都属于基于抬头显示器的操作指令:本领域技术人员能够明了,用语音指令选择目的地指定包括但不限于,目的地的直接导航,或者基于POI的地址查询方法。所述导航来源指令包括但不限于,选择地图的接入的地图供应商,比如可以选择高德,或者百度地图进行接入。导航指令处理模块1043用以处理所述行车路况指令包括但不限于,是否堵车的路况,是否有红灯、拍照的交通信号,是否可以路边停车、前方是否有行人等。所述电子狗指令,包括但不限于全频反测速雷达、GPS电子狗、GPS雷达电子狗。作用是提前提醒车主电子眼或测速雷达的存在,可防止因为超速或违规而被罚款和扣分,让驾驶者有防备的尽享驾驶乐趣。唤醒指令,用以唤醒休眠的抬头显示器;本领域技术人员能够明了,可以将手势与所述唤醒指令提前进行关联,这样在作出手势后,就可以实现对抬头显示器的唤醒。电话指令处理模块1044用以执行电话指令,可发出电话指令进行语音控制接听、拨出电话,当被呼叫方存号多于一个的时候,可以语音选择;比如当手机与抬头显示器蓝牙连接后,外接来电时,可以直接通过手势的静止状态,比如“手掌”,亦可用手势的运动状态,比如“握拳向右滑动”,来拒绝或者接受该通来电。音乐指令处理模块1045用以执行音乐指令,根据语音操作,可以播放SD卡的音乐,或者播放电台内容;比如使用播放电台内容时,可以直接通过手势的静止状态,比如“剪刀手”,亦可用手势的运动状态,比如“握拳向左滑动”,来切换音乐、增大声音等。微信指令处理模块1046用以处理微信指令,可提前通过扫码登陆微信,收到微信时会有语音提示是否播报,回复时通过语音输入、识别转换成问文字。可以直接通过手势的运动状态,比如“向右滑动食指”来发送微信信息。
[0060]图6是图1中自然语音交互组件的结构示意图。
[0061]本实施例中的智能抬头显示系统中的自然语音交互组件105包括,麦克风1051和语音处理模块1052,所述麦克风1051用以传递驾驶员的自然语音信息至所述语音处理模块1052,所述语音处理模块1052用以进行自然语音信息的识别、合成以及逻辑对话,以及自然语音信息的唤醒。
[0062]具体地,进行自然语音信息的识别、合成包括:语音交互模块,用以将所述检索结果进行反馈,等待用户下一次语音信号;根据所述下一次语音信号,在所述反馈的结果中选择定位出目地,完成导航。下一次语音信号,或者首次语音信号,可以按照可定制的个性化应答方法进行预设。在使用之前,设置自动应答的权限规则和内容,可能的规则包括:提供自动应答服务的联系人列表,为每个联系人提供自动应答服务的时间段,每个联系人所能接收的自动应答服务范围。然后验证呼叫者身份,如果确定其有权限通过自动应答系统获取信息,则进行后续步骤;呼叫者身份包括:个人信息,预先设置的数据等。数据存储的具体实现可以分为存储在本地数据库或服务器端数据库中。进一步接收呼叫者发出的语音数据,使用自动语音识别模块进行语音识别;管理和呼叫者的对话内容以及对话进程,根据呼叫者询问的问题以及机主设置的数据内容,自动分析出应答内容。该模块可以在云端实现,移动终端与云端交互;也可独立实现在移动终端上。进一步根据语音识别结果,使用语义分析方法分析呼叫者意图;进一步根据分析得出的呼叫者意图,使用预先设置的自动应答的规则和内容,或者访问第三方数据和程序,使用语义分析方法确定应答的文本内容,或者对移动终端数据执行相应的操作;最后,使用语音合成方法,将应答文本内容转换成语音数据发送给呼叫者。
[0063]具体地,在本实施例中的所述自然语音信息的逻辑对话,可按照如下步骤进行操作:
[0064]I)接收用户发送的语音信号,在接收用户的语音信号时,需要对装置进行预处理;
[0065]预处理的步骤主要包括:将处于休眠状态下的HUD进行唤醒,唤醒的方式包括但不限于,手动唤醒、语音控制唤醒以及采用遥控器进行唤醒。唤醒的原理包括但不限于,广播信号的唤醒、语音芯片的唤醒。HUD在唤醒后即可用以接收用户的语音信号,其中本领域技术人员能够明了,语音信号可以包括但不限于,双音节词汇,比如“启动、开始”或者带有用户自定义的多音节词汇,比如“萝卜,启动”。但是若采用单音节的词汇,比如“啊”、“呀”、“美”等,容易造成语音辨识的不准确,或者对处理单元造成运算量过大,从而导致HUD反应较慢。具体可使用《基于语音识别和文本分词算法的指令交互系统的设计和实现》张文杰.张洪刚,进行实现。
[0066]2)根据所述语音信号得到用户输入的POI地址;对语音信号进行解析,用以获得需要的POI地址;
[0067]POI是“Point Of Interest”的缩写,每个POI包含四方面信息,名称、类别、经度玮度、附近商业信息,可以统称为“导航地图信息”。所述附近商业信息包括:餐饮、酒店、娱乐、公交站、地铁站、加油站、停车场、景点、银行、药店信息。根据语音信号可以智能提取得到目标关键词,所述目标关键词包括但不限于,地点词、语气词、连接关系词等。在进行目标关键词提取时还需要设置“时间参数”、“人称(人名)参数” O “时间参数”等等。“时间参数”、“人称(人名)参数”、“天气参数”,“时间参数”可以是,“上午、中午、下午”,“人称(人名)参数”可以是王先生、王小姐、王二、王一,或者与驾驶者手机中的联系人以及联系方式进行关联,包括但不限于音素、音节、词
当前第4页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1