基于用户情感选择记录的车辆信息娱乐系统的制作方法

本公开涉及一种用于车辆的信息娱乐系统，其响应于接收到用户生成的查询，基于用户的当前情感来选择和播放记录。

背景技术：

1、许多车辆通常采用车载信息娱乐系统来提供音频和视频娱乐以及车辆上的其他信息。信息娱乐系统可能包括使用按钮、旋钮、触摸屏或通过免提语音控制来控制的音频和视觉系统。用户可以基于诸如，例如，艺术家的名字、歌曲的名称、流派或心情等类别来选择特定的歌曲或音频文件。音乐流派的一些示例包括但不限于蓝调、乡村和摇滚。

2、在一些情况下，用户可以基于他们目前正在经历的情感来手动选择歌曲。例如，如果用户心情不好，他或她可以选择蓝调或乡村风格的歌曲。替代地，用户可以根据歌曲的名称选择一首特别不愉快或悲伤的歌曲。因此，应理解，当前的信息娱乐系统为用户提供了原始的体验，其中他们只能基于简单的类别(如流派、心情或艺术家姓名)来选择和检索音乐和其他音频/视频记录。

3、因此，尽管当前的信息娱乐系统实现了它们的预期目的，但是在本领域中需要一种改善的信息娱乐系统，其基于用户当前的情感为用户提供更加个性化的音频和视觉体验。

技术实现思路

1、根据若干方面，公开了一种用于车辆的信息娱乐系统，其包括多个车辆内部传感器，该多个车辆内部传感器收集指示用户当前情感的传感器数据。该信息娱乐系统包括一个或多个控制器，该一个或多个控制器与一个或多个记录数据库电子通信，该记录数据库存储多个内容聚类，每个内容聚类描述特定记录。一个或多个控制器执行指令以监测多个车辆内部传感器。一个或多个控制器执行指令以接收用户生成的查询，该查询包括指示用户当前心理状态的一个或多个单词。响应于接收到用户生成的查询，一个或多个控制器执行指令来确定一个或多个单词向量，该一个或多个单词向量以数字的形式表示用户的当前心理状态。一个或多个控制器执行指令以基于一种或多种机器学习技术，基于由多个车辆内部传感器收集的传感器数据来确定一个或多个情感向量。一个或多个控制器执行指令以将一个或多个单词向量和一个或多个情感向量附加到组合的单词和情感向量中。一个或多个控制器执行指令以将组合的单词和情感向量与存储在一个或多个记录数据库中的多个内容聚类进行比较，从而确定与组合的单词和情感向量最类似的选择内容聚类。一个或多个控制器执行指令以选择由选择的内容聚类描述的记录，其中该记录反映了用户的当前情感。

2、在一个方面，一种或多种机器学习技术是高斯混合模型(gmm)。

3、在另一个方面，由高斯混合模型确定的情感向量是基于车辆上可用的不同传感器模态确定的组合情感向量。

4、在又一个方面，一种或多种机器学习技术是组合的高斯混合模型和深度神经网络(gmm-dnn)。

5、在一个方面，深度神经网络是卷积神经网络(cnn)。

6、在另一个方面，基于情感内容将记录分割成不同的部段。

7、在又一个方面，该记录是以下中的一者：音乐歌曲、电影剪辑、电视节目剪辑、播客、培训课程、教育课程和个人记录。

8、在一个方面，一个或多个控制器与一个或多个记录内容源进行电子通信。

9、在另一个方面，一个或多个控制器通过从一个或多个记录内容源接收特定记录，解析特定记录中的对话以确定对话的文本摘要，以及确定以数字的形式表示对话的文本摘要的一个或多个对话单词向量和表示特定记录的对话的文本摘要中表示情感的一个或多个对话情感向量，来确定所述多个内容聚类，其中每个内容聚类描述特定记录。

10、在又一个方面，一个或多个控制器通过将以数字的形式表示特定记录中对话的文本摘要的一个或多个对话单词向量和以数字的形式表示在对话的文本摘要中表示情感的一个或多个对话情感向量一起附加到组合的对话单词和情感向量中，来确定所述多个内容聚类，其中每个内容聚类都描述一个特定记录。

11、在一个方面，一个或多个控制器通过执行聚类算法来确定表示记录中对话的文本摘要的组合的单词和情感向量的质心，从而确定所述多个内容聚类，其中每个内容聚类都描述一个特定记录，其中质心是指描述特定记录的内容聚类。

12、在另一个方面，一个或多个控制器与扬声器和显示器电子通信。

13、在又一个方面，一个或多个控制器执行指令以确定车辆状态，其中车辆状态指示车辆的挡位。

14、在一个方面，响应于确定车辆状态为停车，一个或多个控制器确定通过扬声器播放音频内容并且在显示器上显示视频内容。

15、在另一个方面，响应于确定车辆状态是除停车挡以外的挡位，控制器仅通过扬声器播放音频内容。

16、在一个方面，一种基于用户的当前情感来通过信息娱乐系统选择和播放记录的方法。该方法包括通过一个或多个控制器监测多个车辆内部传感器。一个或多个控制器与一个或多个记录数据库进行电子通信，该一个或多个记录数据库存储多个内容聚类，每个内容聚类都描述特定记录。该方法包括接收用户生成的查询，该查询包括指示用户当前心理状态的一个或多个单词。响应于接收到用户生成的查询，该方法包括确定一个或多个单词向量，该一个或多个单词向量以数字的形式表示用户的当前心理状态。该方法包括基于一种或多种机器学习技术，基于由多个车辆内部传感器收集的传感器数据确定一个或多个情感向量。该方法包括将一个或多个单词向量和一个或多个情感向量附加到组合的单词和情感向量中。该方法包括将组合的单词和情感向量与存储在一个或多个记录数据库中的多个内容聚类进行比较，以确定与组合的单词和情感向量最类似的选择内容聚类。最后，该方法包括选择由该选择内容聚类所描述的记录，其中该记录反映了用户的当前情感。

17、在一个方面，用于车辆的信息娱乐系统包括多个车辆内部传感器，该多个车辆内部传感器收集指示用户当前情感的传感器数据，其中用户位于车辆的内部车厢内。信息娱乐系统还包括：一个或多个记录数据库，其存储多个内容聚类，每个内容聚类描述特定记录；以及一个或多个控制器，其与多个车辆内部传感器和一个或多个记录数据库电子通信。一个或多个控制器执行指令以监测多个车辆内部传感器。一个或多个控制器接收用户生成的查询，该查询包括指示用户当前心理状态的一个或多个单词。响应于接收到用户生成的查询，一个或多个控制器确定一个或多个单词向量，该一个或多个单词向量以数字的形式表示用户的当前心理状态。控制器基于一种或多种机器学习技术，基于由多个车辆内部传感器收集的传感器数据确定一个或多个情感向量。控制器将一个或多个单词向量和一个或多个情感向量组合成组合的单词和情感向量。控制器将组合的单词和情感向量与存储在一个或多个记录数据库中的多个内容聚类进行比较，以确定与组合的单词和情感向量最类似的选择内容聚类。最后，一个或多个控制器选择由该选择内容聚类所描述的记录，其中该记录反映了用户的当前情感。

18、在一个方面，车辆内部传感器包括以下一者或多者：作为驾驶员监测系统(dms)一部分的一个或多个舱内相机、生物传感器、压力传感器和方向盘扭矩传感器。

19、在另一个方面，一种或多种机器学习技术是gmm。

20、在又一个方面，一种或多种机器学习技术是组合的gmm-dnn。

21、从本文提供的描述中，其他的应用领域将变得显而易见。应理解，描述和具体示例仅意图用于说明的目的，而不意图限制本公开的范围。