延迟检测方法、电子设备和存储介质与流程

本申请实施例涉及语音识别，特别是涉及一种延迟检测方法、电子设备和存储介质。

背景技术：

1、世界各地关于语音技术的技术发展十分迅猛，大多数企业对于声音的延迟要求十分之高，因此对于声音的延迟和处理，大多数企业都会做出相对应的工具去计算延迟和处理延迟，让声音数据在全链路中的每个节点都做到最低延迟，有着最快的处理方法。我所做的专利可以计算音频发生振动前到录音机获取数据前的时间，属于对话技术中的基础应用。

2、现有技术中，利用示波器的延时触发功能，将指定延迟时间的指定边沿准确触发了出来，其中示波器当中有延时边沿的测量，此测量数据较为精准，当中信号可为多个，需要手动测量两信号之间的时间，如果为瞬间信号，还是需要手动测量，缺陷是在工作的过程当中进程会发现音频流在输入不同的节点都会出现不同程度的耗时，或者在各个环节都会带来不同程度延迟，端到端的延迟至关重要，1ms的延迟也会影响用户体验。因此在android层开始录音时就开始计算录音延迟，此延迟对后续研究和音频全链路都可以带来正向影响，能快速计算出哪个环节出现延迟，能针对每个环节进行有效的把握，从而改善语音助手对用户的体验。但目前利用示波器进行计算音频流的延迟会显得不靠谱，先从机器和设备开始就已经极其不兼容，需要多设备支撑，同时不同的设备也会带来精度上的差异，而且示波器只能应用在语音助手框架之外，测量的精度不够精准，并且不是集成在全链路工具，并且示波器在开始测量的时候需要手动计算，此操作也会降低精度。

技术实现思路

1、本发明实施例提供了一种延迟检测方法、装置和电子设备，用于至少解决上述技术问题之一。

2、第一方面，本发明实施例提供了一种延迟检测方法，用于车机端，包括：所述车机端播放带有预设特征信号的音频，同时经由录音机录制音频以及经由摄像机录制所述车机端的显示界面的音视频；经由检测模块检测录制的音频中的所述预设特征信号，当所述检测模块检测到所述预设特征信号时实时向所述车机端发送信号；所述车机端接收所述检测模块发送的信号，在所述显示界面上实时显示视觉特征信息；基于所述视觉特征信息和播放时所述预设特征信号的出现间隔，确定所述录音机的延迟时间。

3、第二方面，本发明实施例提供一种延迟检测方法，用于车机端，包括：所述车机端播放带有预设特征信号的音频，同时经由录音机录制音频以及经由摄像机录制所述车机端的显示界面的音视频；经由回声消除器检测录制的音频中的所述预设特征信号，当所述回声消除器检测到所述预设特征信号时实时向所述车机端发送信号；所述车机端接收所述回声消除器发送的信号，在所述显示界面上实时显示视觉特征信息；基于所述视觉特征信息和播放时所述预设特征信号的出现间隔，确定所述录音机的延迟时间。第三方面，本发明实施例提供一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明上述任一项延迟检测方法。

4、第四方面，本发明实施例提供一种存储介质，所述存储介质中存储有一个或多个包括执行指令的程序，所述执行指令能够被电子设备(包括但不限于计算机，服务器，或者网络设备等)读取并执行，以用于执行本发明上述任一项延迟检测方法。

5、第五方面，本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括存储在存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行上述任一项延迟检测方法。

6、本申请的方法通过同时经由录音机录制音频以及经由摄像机录制车机端的显示界面的视频，当检测模块检测到预设特征信号时实时向车机端发送信号，然后车机端接收检测模块发送的信号，在显示界面上实时显示视觉特征信息，最后基于视觉特征信息和播放时预设特征信号的出现间隔，确定录音机的延迟时间，从而可以实现简单快速的计算录音机的延迟时间，进一步地提升语音助手的响应时间、响应速度、tts播报、wakeup唤醒、前端信号优化等维度，从基本底层影响语音性能。

技术特征：

1.一种延迟检测方法，用于车机端，包括：

2.根据权利要求1所述的方法，其中，所述基于所述视觉特征信息和播放时所述预设特征信号的出现间隔，确定所述录音机的延迟时间包括：

3.根据权利要求2所述的方法，其中，所述基于所述视觉特征信息和播放时所述预设特征信号的出现间隔，确定所述录音机的延迟时间包括：

4.根据权利要求1所述的方法，其中，在所述同时经由录音机录制音频以及经由摄像机录制所述车机端的显示界面的视频之前，还包括：

5.根据权利要求4所述的方法，其中，所述音频流参数包括：录音参数、带有预设特征信号的音频、检测特征信号的配置、视觉特征信息标记工具和摄像机。

6.根据权利要求1所述的方法，其中，所述带有预设特征信号的音频支持用户自定义标记所述预设特征信号。

7.根据权利要求1-6中任一项所述的方法，其中，所述视觉特征信息为便于计算机识别的色块。

8.一种延迟检测方法，用于车机端，包括：

9.一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1至8任一项所述方法的步骤。

10.一种存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求1至8任一项所述方法的步骤。

技术总结
本发明公开延迟检测方法、电子设备和存储介质，其中，一种延迟检测方法，用于车机端，包括：所述车机端播放带有预设特征信号的音频，同时经由录音机录制音频以及经由摄像机录制所述车机端的显示界面的音视频；经由检测模块检测录制的音频中的所述预设特征信号，当所述检测模块检测到所述预设特征信号时实时向所述车机端发送信号；所述车机端接收所述检测模块发送的信号，在所述显示界面上实时显示视觉特征信息；基于所述视觉特征信息和播放时所述预设特征信号的出现间隔，确定所述录音机的延迟时间。

技术研发人员：邱上富,邹学勇,余立奇,陈小香
受保护的技术使用者：思必驰科技股份有限公司
技术研发日：
技术公布日：2024/1/13