语音交互装置的体验评价方法、装置、设备和存储介质与流程

本发明涉及体验评价，尤其涉及一种语音交互装置的体验评价方法、装置、设备和存储介质。

背景技术：

1、随着科技的迅速发展，语音交互类产品越来越多。为了提高产品性能，提升产品体验，需要对语音交互类产品进行体验评价。

2、目前，针对语音交互类产品的用户体验效果，通常是通过一些单点性指标进行体验评价，如仅仅针对语音交互类产品的语音识别准确性进行体验评价，或仅仅针对语音交互类产品的回答准确性进行体验评价。然而，通过单点性指标对语音交互类产品进行体验评价，并无法系统地对语音交互类产品进行体验评价，且无法整体性地对语音交互类产品进行体验评价，导致语音交互类产品的体验评价准确性降低。

技术实现思路

1、本发明提供一种语音交互装置的体验评价方法、装置、设备和存储介质，用以解决现有技术中语音交互类产品的体验评价准确性低的缺陷，实现系统且整体性的体验评价方法。

2、本发明提供一种语音交互装置的体验评价方法，包括：

3、确定待评价的目标语音交互装置，以及所述目标语音交互装置对应的交互数据；

4、基于所述交互数据，确定待评价交互任务的任务完成率评价结果；

5、基于所述任务完成率评价结果，确定所述目标语音交互装置的体验评价结果。

6、根据本发明提供的一种语音交互装置的体验评价方法，所述交互数据包括对话交互任务对应的对话数据；

7、所述基于所述交互数据，确定待评价交互任务的任务完成率评价结果，包括：

8、基于所述对话数据，确定所述对话交互任务的话题深度，所述话题深度用于表征所述目标语音交互装置与用户的对话轮数；

9、基于所述话题深度，确定所述对话交互任务的任务完成率评价结果。

10、根据本发明提供的一种语音交互装置的体验评价方法，所述基于所述话题深度，确定所述对话交互任务的任务完成率评价结果，包括：

11、基于所述话题深度与预设话题深度的对比结果，确定所述对话交互任务的任务完成率评价结果。

12、根据本发明提供的一种语音交互装置的体验评价方法，所述基于所述话题深度与预设话题深度的对比结果，确定所述对话交互任务的任务完成率评价结果，包括：

13、基于所述对话数据，确定所述对话交互任务的对话挑起对象，所述对话挑起对象包括目标语音交互装置或用户；

14、基于所述目标语音交互装置的装置类型，确定所述对话挑起对象对应的预设话题深度；

15、基于所述话题深度与所述预设话题深度的对比结果，确定所述对话交互任务的任务完成率评价结果。

16、根据本发明提供的一种语音交互装置的体验评价方法，所述交互数据包括游戏交互任务对应的游戏交互数据；

17、所述基于所述交互数据，确定待评价交互任务的任务完成率评价结果，包括：

18、在所述游戏交互任务为第一类游戏对应的任务的情况下，基于所述游戏交互数据确定所述游戏交互任务的任务退出原因，并基于所述任务退出原因确定所述游戏交互任务的任务完成率评价结果，所述第一类游戏为有交互次数上限的游戏；

19、在所述游戏交互任务为第二类游戏对应的任务的情况下，基于所述游戏交互数据确定所述游戏交互任务的交互轮数，并基于所述交互轮数确定所述游戏交互任务的任务完成率评价结果，所述第二类游戏为无交互次数上限的游戏。

20、根据本发明提供的一种语音交互装置的体验评价方法，所述交互数据包括资源播放任务对应的资源播放数据；

21、所述基于所述交互数据，确定待评价交互任务的任务完成率评价结果，包括：

22、基于所述资源播放数据，确定所述资源播放任务的资源播放情况，所述资源播放情况用于表征所述资源播放任务指示的资源是否播放完成；

23、基于所述资源播放情况，确定所述资源播放任务的任务完成率评价结果。

24、根据本发明提供的一种语音交互装置的体验评价方法，所述交互数据包括技能任务对应的技能任务交互数据；

25、所述基于所述交互数据，确定待评价交互任务的任务完成率评价结果，包括：

26、基于所述技能任务交互数据，确定所述技能任务的任务完成进度；

27、基于所述任务完成进度，确定所述技能任务的任务完成率评价结果；

28、其中，在所述目标语音交互装置针对所述技能任务输出预设语音数据的情况下，所述任务完成进度为任务已完成，所述预设语音数据用于表征所述目标语音交互装置不支持所述技能任务。

29、本发明还提供一种语音交互装置的体验评价装置，包括：

30、数据确定模块，用于确定待评价的目标语音交互装置，以及所述目标语音交互装置对应的交互数据；

31、第一评价模块，用于基于所述交互数据，确定待评价交互任务的任务完成率评价结果；

32、第二评价模块，用于基于所述任务完成率评价结果，确定所述目标语音交互装置的体验评价结果。

33、本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述语音交互装置的体验评价方法。

34、本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述语音交互装置的体验评价方法。

35、本发明提供的语音交互装置的体验评价方法、装置、设备和存储介质，基于目标语音交互装置对应的交互数据，确定待评价交互任务的任务完成率评价结果，从而基于待评价交互任务的任务完成率评价结果，从每个交互任务的任务完成率来进行考虑，更为系统且整体性地确定目标语音交互装置的体验评价结果，从而提高语音交互装置的体验评价准确性，进而提升语音交互装置的用户体验感。

技术特征：

1.一种语音交互装置的体验评价方法，其特征在于，包括：

2.根据权利要求1所述的语音交互装置的体验评价方法，其特征在于，所述交互数据包括对话交互任务对应的对话数据；

3.根据权利要求2所述的语音交互装置的体验评价方法，其特征在于，所述基于所述话题深度，确定所述对话交互任务的任务完成率评价结果，包括：

4.根据权利要求3所述的语音交互装置的体验评价方法，其特征在于，所述基于所述话题深度与预设话题深度的对比结果，确定所述对话交互任务的任务完成率评价结果，包括：

5.根据权利要求1所述的语音交互装置的体验评价方法，其特征在于，所述交互数据包括游戏交互任务对应的游戏交互数据；

6.根据权利要求1所述的语音交互装置的体验评价方法，其特征在于，所述交互数据包括资源播放任务对应的资源播放数据；

7.根据权利要求1所述的语音交互装置的体验评价方法，其特征在于，所述交互数据包括技能任务对应的技能任务交互数据；

8.一种语音交互装置的体验评价装置，其特征在于，包括：

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述语音交互装置的体验评价方法。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述语音交互装置的体验评价方法。

技术总结
本发明提供一种语音交互装置的体验评价方法、装置、设备和存储介质，涉及体验评价技术领域。其中方法包括：确定待评价的目标语音交互装置，以及所述目标语音交互装置对应的交互数据；基于所述交互数据，确定待评价交互任务的任务完成率评价结果；基于所述任务完成率评价结果，确定所述目标语音交互装置的体验评价结果。本发明基于待评价交互任务的任务完成率评价结果，从每个交互任务的任务完成率来进行考虑，更为系统且整体性地确定目标语音交互装置的体验评价结果，从而提高语音交互装置的体验评价准确性，进而提升语音交互装置的用户体验感。

技术研发人员：刘宝,胡静
受保护的技术使用者：安徽淘云科技股份有限公司
技术研发日：
技术公布日：2024/1/13