本申请涉及ai,并且更为具体地,涉及一种基于多模态ai 感知的婴儿睡眠辅助系统和方法。
背景技术:
1、
2、婴儿的生长无疑需要充足的睡眠。但婴儿在睡觉中间可能存在惊跳,这时候他是还想睡的,但需要接收安抚以重新进入睡眠状态。另一方面,婴儿也不能够长时间睡眠,因为这会引发低血糖,继而引发黄疸等一系列风险,因此,一般超过3小时就需要被叫醒。
3、因此,如何及时、准确、按时地感知婴儿的睡眠状态,从而能够实现及时哄睡、及时唤醒并保证其充足的睡眠无疑是摆在很多人面前的重要课题。
技术实现思路
1、以下给出一个或多个方面的简要概述以提供对这些方面的基本理解。此概述不是所有构想到的方面的详尽综览,并且既非旨在标识出所有方面的关键性或决定性要素亦非试图界定任何或所有方面的范围。其唯一的目的是要以简化形式给出一个或多个方面的一些概念以作为稍后给出的更加详细的描述之序。
2、为了解决上述问题,本申请提供了一种基于多模态ai感知的方法和系统。本申请提出的基于多模态的ai感知的方法及系统利用视联网摄像头,解放了家长的双手,多模态ai感知婴儿平时的睡眠习惯及环境,自适应调节室温、光线,准确地自动完成哄睡、辅助接续入睡,温柔唤醒并安抚等功能。该系统和方法能够极大地节省父母的体力并且高效地实现婴儿睡眠质量的保证。
3、根据本申请的第一方面,公开了一种基于多模态ai感知的婴儿辅助睡眠系统。该系统包括:
4、多模态ai感知模块,其被配置成:
5、收集该婴儿的日常特征向量和环境的日常特征向量,
6、经由聚类分析推荐该婴儿需要入睡前的特征向量集α,需要接续入睡前的特征向量集β,以及需要温柔唤醒并安抚前的特征向量集γ;
7、存储器,用于存储该婴儿和该环境的当前特征向量以及所推荐的特征向量集α、β、γ;
8、处理器,用于确定该当前特征向量是否符合所推荐的特征向量集,并基于结果来执行相应操作;以及
9、智能家居系统,用于与该处理器进行通信以调整所述环境的当前特征向量。
10、根据本申请的优选实施例,该存储器包括:当前特征向量存储模块,用于存储该婴儿和该环境的当前特征向量;和特征推荐向量存储模块,用于存储该所推荐的特征向量集α、β、γ。
11、根据本申请的优选实施例,该存储器包括:ai判断模块,用于通过支持向量机判断该当前特征向量是否符合该所推荐的特征向量集;以及
12、无线通信模块,用于与该智能家居系统进行无线通信以基于该结果来调节该环境的当前特征向量。
13、根据本申请的优选实施例,该ai判断模块进一步:确定该婴儿的当前特征向量是否符合该所推荐的特征向量集中的婴儿特征向量部分;如果是,则确定该环境的当前向量是否符合所推荐的特征向量集中的环境特征向量部分;
14、如果是,则基于该所推荐的特征向量集来执行该婴儿的睡眠辅助;如果确定该环境的当前向量不符合所推荐的特征向量集中的环境特征向量部分,则联动智能家居系统以调整该环境的当前特征向量,并且其中基于结果来执行相应操作进一步包括:基于所推荐的特征向量机来执行哄睡、接续入睡或温柔唤醒并安抚功能。
15、根据本申请的优选实施例,该多模态ai感知模块包括:图像特征向量提取组件,用于提取该婴儿的图像特征向量;声纹特征向量提取组件,用于提取该婴儿的声音图像向量;环境特征向量提取组件,用于提取该环境的特征向量;以及聚类组件,用于进行该聚类分析。
16、根据本申请的另一方面,公开了一种基于多模态ai感知的婴儿睡眠辅助方法,该方法主要包括以下步骤:
17、收集该婴儿的日常特征向量和环境的特征向量。
18、经由聚类分析推荐该婴儿需要入睡前的特征向量集α,需要接续入睡前的特征向量集β,以及需要温柔唤醒并安抚前的特征向量集γ;
19、确定该婴儿和该环境的当前特征向量是否符合所推荐的特征向量集;以及
20、基于结果来执行相应操作。
21、为能达成前述及相关目的,这一个或多个方面包括在下文中充分描述并在所附权利要求中特别指出的特征。以下描述和附图详细阐述了这一个或多个方面的某些解说性特征。但是,这些特征仅仅是指示了可采用各种方面的原理的各种方式中的若干种,并且本描述旨在涵盖所有此类方面及其等效方案。
1.一种基于多模态ai感知的婴儿睡眠辅助系统,其特征在于,所述系统包括:
2.如权利要求1所述的系统,其特征在于,所述存储器包括:
3.如权利要求1所述的系统,其特征在于,所述存储器包括:
4.如权利要求3所述的系统,其特征在于,所述ai判断模块进一步:
5.如权利要求1所述的系统,其特征在于,所述多模态ai感知模块包括:
6.一种基于多模态ai感知的婴儿睡眠辅助方法,其特征在于,所述方法主要包括以下步骤:
7.如权利要求6所述的方法,其特征在于,确定所述婴儿和所述环境的当前特征向量是否符合所推荐的特征向量集进一步包括:
8.如权利要求7所述的方法,其特征在于,如果确定所述婴儿的当前特征向量不符合所述所推荐的特征向量集中的婴儿特征向量部分,则继续执行该步骤。
9.如权利要求7所述的方法,其特征在于,如果确定所述环境的当前向量不符合所推荐的特征向量集中的环境特征向量部分,则联动智能家居系统以调整所述环境的当前特征向量。
10.如权利要求6所述的方法,其特征在于,基于结果来执行相应操作进一步包括: