本发明涉及光电吊舱控制,尤其涉及一种基于语言识别实现的光电吊舱控制系统。
背景技术:
1、光电吊舱是集可见光摄像机、红外热像仪、激光测距机等高精度测量设备于一体,用于实现航空侦察、目标瞄准、跟踪、定位等功能的全天候电子侦察设备,广泛应用于无人机等航空平台,现有的光电吊舱的控制局限于使用按键操控。
2、但是现有按键操控需要经过专业培训才能熟练掌握,当出现目标中断或者需要快速切换目标时,难以迅速响应,导致反应时间延长,影响任务效率。
技术实现思路
1、本发明的目的在于提供一种基于语言识别实现的光电吊舱控制系统,旨在解决现有按键操控需要经过专业培训才能熟练掌握,当出现目标中断或者需要快速切换目标时,难以迅速响应,导致反应时间延长,影响任务效率的技术问题。
2、为实现上述目的,本发明采用的一种基于语言识别实现的光电吊舱控制系统,包括无人机、信号基站和地面控制中心,所述无人机与所述信号基站连接,所述地面控制中心与所述信号基站连接;
3、所述地面控制中心包括显示模块、视频流处理模块、语音模块和命令生成与传输模块,所述命令生成与传输模块与所述信号基站连接,所述显示模块、所述视频流处理模块和所述语音模块分别与命令生成与传输模块连接;
4、所述无人机用于执行侦察任务;
5、所述信号基站用于接收所述无人机传输的视频流,并将其实时传输至所述地面控制中心;
6、所述地面控制中心用于实时显示所述无人机捕获的图像,操作员通过图形界面观察当前环境,并进行目标的选择和跟踪;
7、所述显示模块用于实时显示捕获的图像,操作员通过图形界面观察当前环境;
8、所述视频流处理模块用于将视频流中的图像进行目标识别,判断目标的类型和属性;
9、所述语音模块用于使操作人员能够通过语音指令快速响应目标变化;
10、所述命令生成与传输模块用于生成控制吊舱的命令后传递给所述地面控制中心,所述地面控制中心将命令传递给所述信号基站,再由所述信号基站传递给携带吊舱的所述无人机。
11、其中,所述语音模块包括语音控制插件单元、语音处理单元、语言处理单元、语音输入处理单元、关键词单元、反馈优化单元和控制决策单元,所述语音处理单元、所述语言处理单元、所述语音输入处理单元、所述关键词单元、所述反馈优化单元和所述控制决策单元分别与所述命令生成与传输模块连接;
12、所述语音控制插件单元用于通过插件的方式加载语音插件,实现语音控制功能;
13、所述语音处理单元用于对采集的语音信号进行降噪、分帧、特征提取等预处理,生成特征向量;
14、所述语言处理单元用于通过插件加载command文件,生成数据结构;
15、所述语音输入处理单元用于处理语音数据,将语音数据和command文件建立联系;
16、所述关键词单元用于通过预定义的关键词库快速识别语音指令的核心意图,减少计算复杂度;
17、所述反馈优化单元用于收集执行结果和用户反馈,优化系统性能;
18、所述控制决策单元用于执行生成的控制指令,驱动吊舱硬件完成动作。
19、其中,所述语音处理模块包括语音降噪子单元和语音增强子单元,所述语音降噪子单元和所述语音增强子单元分别与所述命令生成与传输模块连接;
20、所述语音降噪子单元用于对采集的语音信号进行降噪处理;
21、所述语音增强子单元用于提升语音信号质量。
22、其中,所述关键词模块包括关键词库构建子单元和关键词匹配子单元,所述关键词库构建子单元和所述关键词匹配子单元分别与所述命令生成与传输模块连接;
23、所述关键词库构建子单元用于建立领域专属的关键词库;
24、所述关键词匹配子单元用于将语音特征向量映射为文本后,通过关键词匹配算法快速识别核心指令。
25、其中,所述信号基站包括视频流接收与传输模块和指令转发模块,所述视频流接收与传输模块分别与所述无线传输模块和所述命令生成与传输模块,所述指令转发模块分别与所述无线传输模块和所述命令生成与传输模块;
26、所述视频流接收与传输模块用于接收所述无人机传输的视频流,并将其实时传输至所述地面控制中心;
27、所述指令转发模块用于接收所述地面控制中心的指令,并将其转发至所述无人机,以指挥所述无人机执行相应的操作。
28、其中,所述无人机包括移动平台、光电吊舱模块、无线传输模块和飞行控制模块,所述无线传输模块与所述视频流接收与传输模块,所述飞行控制模块与所述指令转发模块连接,所述光电吊舱模块与所述无线传输模块连接,所述移动平台与所述光电吊舱模块连接;
29、所述移动平台用于作为系统的移动侦察平台,搭载所述光电吊舱模块和传感器,执行侦察任务;
30、所述光电吊舱模块用于捕获实时视频流,支持远程监控与决策;
31、所述无线传输模块用于将捕获的视频流传输至所述信号基站;
32、所述飞行控制模块用于控制所述无人机的姿态、高度、速度及路径规划。
33、其中,所述飞行控制模块包括导航单元和姿态调整单元,所述导航单元和所述姿态调整单元分别与所述移动平台连接;
34、所述导航单元用于为所述无人机提供精确的定位与导航服务,确保所述移动平台按照预定航线飞行;
35、所述姿态调整单元用于根据飞行状态和环境因素,实时调整移动平台的姿态,保持飞行稳定性。
36、本发明的一种基于语言识别实现的光电吊舱控制系统,利用所述无人机执行侦察任务,所述信号基站接收所述无人机传输的视频流,并将其实时传输至所述地面控制中心,所述地面控制中心实时显示所述无人机捕获的图像,操作员通过图形界面观察当前环境,并进行目标的选择和跟踪,所述显示模块显示实时捕获的图像,操作员通过图形界面观察当前环境,所述视频流处理模块将视频流中的图像进行目标识别,判断目标的类型和属性,通过所述语音模块使操作人员能够通过语音指令快速响应目标变化,利用所述命令生成与传输模块生成控制吊舱的命令后传递给所述地面控制中心,所述地面控制中心将命令传递给所述信号基站,再由所述信号基站传递给携带吊舱的所述无人机,通过引入语音控制技术,使操作人员能够通过语音指令快速响应目标变化,减少了操作人员对复杂按键操控的依赖,另外降低了操作员因紧张或疲劳导致的操作失误,提高任务的安全性和成功率,实现了能够大大降低操作人员的操作难度,使操作人员能够通过语音指令快速响应目标变化,减少反应时间,提高任务效率。
1.一种基于语言识别实现的光电吊舱控制系统,其特征在于,
2.如权利要求1所述的基于语言识别实现的光电吊舱控制系统,其特征在于,
3.如权利要求2所述的基于语言识别实现的光电吊舱控制系统,其特征在于,
4.如权利要求3所述的基于语言识别实现的光电吊舱控制系统,其特征在于,
5.如权利要求4所述的基于语言识别实现的光电吊舱控制系统,其特征在于,
6.如权利要求5所述的基于语言识别实现的光电吊舱控制系统,其特征在于,
7.如权利要求6所述的基于语言识别实现的光电吊舱控制系统,其特征在于,