一种基于视频处理的智能镜控制方法及系统与流程

本发明涉及智能镜，具体涉及一种基于视频处理的智能镜控制方法及系统。

背景技术：

1、智能镜是一种集成了多种智能化功能的镜子，例如显示天气信息、时间信息、新闻资讯、应用等。这些功能使得智能镜成为现代生活中不可或缺的一部分。

2、当智能镜放置在商城时，用户可以通过智能镜来照镜子、看新闻、浏览服装等等。商城的往来用户数量巨大，每天都有大量的用户在商城中进行各种活动。其中，一部分用户可能对服装购买有兴趣，但并不是所有的用户都会进行购买，在传统的商城中，从往来的用户中挑选出需要进行服装购买的目标用户主要依靠销售人员的经验预测，然而，这种方式需要大量的人力，而且选出来的有购买意愿的用户的准确度较低。

3、因此，如何从众多的用户中选出需要进行服装购买的用户并推荐合适的穿着是当前亟待解决的问题。

技术实现思路

1、本发明主要解决的技术问题如何从众多的用户中选出需要进行服装购买的用户并推荐合适的穿着。

2、根据第一方面，本发明提供一种基于视频处理的智能镜控制方法，包括：获取多个用户在智能镜前的走动视频；基于所述多个用户在智能镜前的走动视频使用判断模型确定目标用户图像、目标用户信息、目标用户头部朝向、目标用户的头发信息、目标用户的衣着信息；基于所述目标用户信息、目标用户的头发信息、所述目标用户的衣着信息确定推荐穿着；基于所述推荐穿着和所述目标用户图像使用生成对抗网络确定目标用户虚拟穿着图像；基于所述目标用户头部朝向和智能镜的位置信息确定智能镜的转动角度；将所述目标用户虚拟穿着图像显示在智能镜上并播放提示语音，再基于所述智能镜的转动角度控制智能镜转动到目标位置，智能镜镶嵌在镜柜上，镜柜下方设置有转动装置，智能镜通过镜柜下方的转动装置进行转动；获取目标用户发出的回应语音；对所述目标用户发出的回应语音进行识别并确定智能镜的语音回应动作，所述智能镜的语音回应动作包括输出欢迎话术、更换推荐穿着、控制智能镜回到初始位置；基于所述智能镜的语音回应动作对智能镜进行控制。

3、更进一步地，所述推荐穿着包括推荐帽子、推荐外套、推荐裤子、推荐鞋子。

4、更进一步地，所述方法还包括：获取拍照用户的靠近视频；基于所述拍照用户的靠近视频使用位置信息确定模型确定拍照用户的欲看清部位的位置信息；基于所述拍照用户的欲看清部位的位置信息控制摄像头对所述拍照用户的欲看清部位的位置信息进行拍照得到欲看清部位的拍照图像；将所述欲看清部位的拍照图像显示在智能镜上。

5、更进一步地，所述生成对抗网络的输入为所述推荐穿着和所述目标用户图像，所述生成对抗网络的输出为目标用户虚拟穿着图像。

6、更进一步地，所述智能镜还包括温度传感器和湿度传感器，所述温度传感器用于检测环境温度，所述湿度传感器用于检测环境湿度，温度传感器的检测结果和湿度传感器的检测结果显示在智能镜上。

7、根据第二方面，本发明提供一种基于视频处理的智能镜控制系统，包括：第一获取模块，用于获取多个用户在智能镜前的走动视频；

8、判断模块，用于基于所述多个用户在智能镜前的走动视频使用判断模型确定目标用户图像、目标用户信息、目标用户头部朝向、目标用户的头发信息、目标用户的衣着信息；

9、推荐模块，用于基于所述目标用户信息、目标用户的头发信息、所述目标用户的衣着信息确定推荐穿着；

10、虚拟穿着图像生成模块，用于基于所述推荐穿着和所述目标用户图像使用生成对抗网络确定目标用户虚拟穿着图像；

11、角度确定模块，用于基于所述目标用户头部朝向和智能镜的位置信息确定智能镜的转动角度；

12、显示模块，用于将所述目标用户虚拟穿着图像显示在智能镜上并播放提示语音，再基于所述智能镜的转动角度控制智能镜转动到目标位置，智能镜镶嵌在镜柜上，镜柜下方设置有转动装置，智能镜通过镜柜下方的转动装置进行转动；

13、第二获取模块，用于获取目标用户发出的回应语音；

14、回应模块，用于对所述目标用户发出的回应语音进行识别并确定智能镜的语音回应动作，所述智能镜的语音回应动作包括输出欢迎话术、更换推荐穿着、控制智能镜回到初始位置；

15、控制模块，用于基于所述智能镜的语音回应动作对智能镜进行控制。

16、更进一步地，所述推荐穿着包括推荐帽子、推荐外套、推荐裤子、推荐鞋子。

17、更进一步地，所述系统还用于：

18、获取拍照用户的靠近视频；

19、基于所述拍照用户的靠近视频使用位置信息确定模型确定拍照用户的欲看清部位的位置信息；

20、基于所述拍照用户的欲看清部位的位置信息控制摄像头对所述拍照用户的欲看清部位的位置信息进行拍照得到欲看清部位的拍照图像；

21、将所述欲看清部位的拍照图像显示在智能镜上。

22、更进一步地，所述生成对抗网络的输入为所述推荐穿着和所述目标用户图像，所述生成对抗网络的输出为目标用户虚拟穿着图像。

23、更进一步地，所述智能镜还包括温度传感器和湿度传感器，所述温度传感器用于检测环境温度，所述湿度传感器用于检测环境湿度，温度传感器的检测结果和湿度传感器的检测结果显示在智能镜上。

24、本发明提供的一种基于视频处理的智能镜控制方法及系统，该方法包括获取多个用户在智能镜前的走动视频；基于所述多个用户在智能镜前的走动视频使用判断模型确定目标用户图像、目标用户信息、目标用户头部朝向、目标用户的头发信息、目标用户的衣着信息；基于所述目标用户信息、目标用户的头发信息、所述目标用户的衣着信息确定推荐穿着；基于所述推荐穿着和所述目标用户图像使用生成对抗网络确定目标用户虚拟穿着图像；基于所述目标用户头部朝向和智能镜的位置信息确定智能镜的转动角度；将所述目标用户虚拟穿着图像显示在智能镜上并播放提示语音，再基于所述智能镜的转动角度控制智能镜转动到目标位置，智能镜镶嵌在镜柜上，镜柜下方设置有转动装置，智能镜通过镜柜下方的转动装置进行转动；获取目标用户发出的回应语音；对所述目标用户发出的回应语音进行识别并确定智能镜的语音回应动作，所述智能镜的语音回应动作包括输出欢迎话术、更换推荐穿着、控制智能镜回到初始位置；基于所述智能镜的语音回应动作对智能镜进行控制，该方法能够从众多的用户中选出需要进行服装购买的用户并推荐合适的穿着。

技术特征：

1.一种基于视频处理的智能镜控制方法，其特征在于，包括：

2.如权利要求1所述的基于视频处理的智能镜控制方法，其特征在于，所述推荐穿着包括推荐帽子、推荐外套、推荐裤子、推荐鞋子。

3.如权利要求1所述的基于视频处理的智能镜控制方法，其特征在于，所述方法还包括：

4.如权利要求1所述的基于视频处理的智能镜控制方法，其特征在于，所述生成对抗网络的输入为所述推荐穿着和所述目标用户图像，所述生成对抗网络的输出为目标用户虚拟穿着图像。

5.如权利要求1所述的基于视频处理的智能镜控制方法，其特征在于，所述智能镜还包括温度传感器和湿度传感器，所述温度传感器用于检测环境温度，所述湿度传感器用于检测环境湿度，温度传感器的检测结果和湿度传感器的检测结果显示在智能镜上。

6.一种基于视频处理的智能镜控制系统，其特征在于，包括：

7.如权利要求6所述的基于视频处理的智能镜控制系统，其特征在于，所述推荐穿着包括推荐帽子、推荐外套、推荐裤子、推荐鞋子。

8.如权利要求6所述的基于视频处理的智能镜控制系统，其特征在于，所述系统还用于：

9.如权利要求6所述的基于视频处理的智能镜控制系统，其特征在于，所述生成对抗网络的输入为所述推荐穿着和所述目标用户图像，所述生成对抗网络的输出为目标用户虚拟穿着图像。

10.如权利要求6所述的基于视频处理的智能镜控制系统，其特征在于，所述智能镜还包括温度传感器和湿度传感器，所述温度传感器用于检测环境温度，所述湿度传感器用于检测环境湿度，温度传感器的检测结果和湿度传感器的检测结果显示在智能镜上。

技术总结
本发明提供的一种基于视频处理的智能镜控制方法及系统，该方法包括基于使用判断模型确定目标用户图像、目标用户信息、目标用户头部朝向、目标用户的头发信息、目标用户的衣着信息；基于目标用户信息、目标用户的头发信息、目标用户的衣着信息确定推荐穿着；基于推荐穿着和目标用户图像使用生成对抗网络确定目标用户虚拟穿着图像；基于目标用户头部朝向和智能镜的位置信息确定智能镜的转动角度；获取目标用户发出的回应语音；对目标用户发出的回应语音进行识别并确定智能镜的语音回应动作；基于智能镜的语音回应动作对智能镜进行控制，该方法能够从众多的用户中选出需要进行服装购买的用户并推荐合适的穿着。

技术研发人员：陈清源,凃岐旭,陈强,李欣伟,廖硕
受保护的技术使用者：东莞莱姆森科技建材有限公司
技术研发日：
技术公布日：2024/2/21