本发明涉及人工智能技术、电子信息技术和计算机技术领域,尤其涉及一种利用探度学习的新体感技术的方法和装置。
技术背景
随着电子技术的发展,以前只能用手柄、键盘控制游戏或虚拟世界的人物角色的虚拟身体,现在可以通过体感技术来控制了,如有些体感游戏、VR、AR的应用里通过摄像头获取用户人体图像信息来控制虚拟世界的虚拟身体。
目前体感游戏技术只能识别有限手指的一些简单动作,对于十个手指和身体各个部位的各种动作识别还不够精确。
技术实现要素:
有鉴于此,本发明提出一种利用深度学习的新体感技术的方法和装置,以解决上述问题。
为达到上述目的,本发明的实施例的技术方案是这样实现的:
一种利用深度学习的新体感技术的方法,其特征在于,利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置,和显示设备5显示的内容进行互动,摄像头4通过获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备4显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动,包括:
a1、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过多个摄像头4获取不同角度的人体图像信息传输给主机1,主机1根据不同角度的人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a2、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过一个摄像头4获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a3、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过眼镜或头盔上的摄像头4获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a4、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过摄像头4获取人体图像信息传输给主机1,主机1对人体图像的中间线建立人形线,如根据十指的每根手指的中间线,形成十条线段代表十根手指,以此类推人体其他部位的取线,以此避免不同体型或穿不同衣服对主机识别动作造成的影响,主机1利用人体图像信息形成的人形线和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头传输的人体图像信息形成的人形线就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a5、将经过训练后的深度学习软件复制到体感游戏机主机1上,通过摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户的身体动作和显示设备5显示的内容进行互动。
a6、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户的身体动作和显示设备5显示的内容进行互动。
a7、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过眼镜或头盔上的摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户人体动作控制显示设备5显示的虚拟世界里用户的虚拟身体。
a8、将经过训练后的深度学习软件到VR、VR眼镜或头盔的主机1上,通过眼镜或头盔上的摄像头4获取用户手指的图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别手指动作控制显示设备5显示的虚拟世界用户的虚拟身体手指,操作虚拟世界里的电脑和手机。
a9、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户人体动作控制显示设备5显示的虚拟世界里根据用户身体三维人体扫描生成的虚拟身体,利用网络和VR或AR技术和异地用户身体三维人体扫描生成的虚拟身体出现在同一个虚拟世界进行交流和互动。
本发明实施例还公开了一种利用深度学习的新体感技术装置,其特征在于,训练阶段,利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置,和显示设备5显示的内容进行互动,摄像头4通过获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备4显示的内容实时比对,利用深度学习软件进行学习;应用阶段,利用摄像头4来获取用户人体图像信息,将此人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户人体动作控制显示设备5显示的虚拟世界里用户的虚拟身体,即厂家训练阶段实验人员需要佩戴传感器,应用阶段用户不需要购买和佩戴传感器。
所述装置具有体感游戏、VR、AR等功能。
附图说明
下面结合附图对本发明做进一步详细的说明。
图1为本发明的结构示意图;
图中:1为主机,2为扬声器,3为传感器,4为摄像头,5为显示设备,6为麦克。
具体实施方案
如图1所示,所述装置包括:1为主机,2为扬声器,3为传感器,4为摄像头,5为显示设备,6为麦克。
一种利用深度学习的新体感技术的方法,其特征在于,利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置,和显示设备5显示的内容进行互动,摄像头4通过获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备4显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动,包括:
a1、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过多个摄像头4获取不同角度的人体图像信息传输给主机1,主机1根据不同角度的人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a2、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过一个摄像头4获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a3、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过眼镜或头盔上的摄像头4获取人体图像信息传输给主机1,主机1根据人体图像信息和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头4传输的人体图像信息就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a4、利用一人佩戴多个传感器3来定位此人重复做各种动作的十指和身体各个部位的位置和显示设备5显示的内容进行互动,通过摄像头4获取人体图像信息传输给主机1,主机1对人体图像的中间线建立人形线,如根据十指的每根手指的中间线,形成十条线段代表十根手指,以此类推人体其他部位的取线,以此避免不同体型或穿不同衣服对主机识别动作造成的影响,主机1利用人体图像信息形成的人形线和显示设备5显示的内容实时比对,利用深度学习软件进行学习,以此类推利用其他不同体型的人或穿不同衣服来重复上述实验,让主机1进行学习,以达到主机1只通过摄像头传输的人体图像信息形成的人形线就可以准确识别任何人做出的任何动作来和显示设备5显示的内容进行互动。
a5、将经过训练后的深度学习软件复制到体感游戏机主机1上,通过摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户的身体动作和显示设备5显示的内容进行互动。
a6、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过摄像头4获取用户人体图像信息传输给主机,主机1根据训练后的深度学习软件准确识别用户的身体动作和显示设备5显示的内容进行互动。
a7、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过眼镜或头盔上的摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户人体动作控制显示设备5显示的虚拟世界里用户的虚拟身体。
a8、将经过训练后的深度学习软件到VR、VR眼镜或头盔的主机1上,通过眼镜或头盔上的摄像头4获取用户手指的图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别手指动作控制显示设备5显示的虚拟世界用户的虚拟身体手指,操作虚拟世界里的电脑和手机。
a9、将经过训练后的深度学习软件复制到VR、VR眼镜或头盔的主机1上,通过摄像头4获取用户人体图像信息传输给主机1,主机1根据训练后的深度学习软件准确识别用户人体动作控制显示设备5显示的虚拟世界里根据用户身体三维人体扫描生成的虚拟身体,利用网络和VR或AR技术和异地用户身体三维人体扫描生成的虚拟身体出现在同一个虚拟世界进行交流和互动。