利用虚拟乐器学习和演奏的方法、装置以及使用其的眼镜或头盔与流程

本发明涉及移动设备技术、电子信息技术和计算机技术领域，尤其涉及一种利用虚拟乐器学习和演奏的方法、装置以及使用其的眼镜或头盔。

技术背景

随着移动技术、电子技术、计算机技术的发展，以前只用来佩戴的眼镜和头盔，现在功能越来越多，如通过智能手机或家庭网络与互联网相连，可实现搜索、短信、拍照、摄像、社交分享、虚拟现实等功能。

目前智能眼镜和头盔还不具备乐器的学习和演奏的功能，而传统的乐器如古筝、古琴、小提琴、钢琴等价格太昂贵，一般家庭购买不起，学习费用也过高，老师也无法随时随地教导。

技术实现要素：

有鉴于此，本发明提出一种利用虚拟乐器学习和演奏的方法、装置以及使用其的眼镜或头盔，以解决上述问题。

为达到上述目的，本发明的实施例的技术方案是这样实现的：

一种利用虚拟乐器学习和演奏的方法，其特征在于，根据一种乐器最理想的发音标准记录这种乐器各种发音按这种乐器最理想发音要求对这种乐器的虚拟乐器进行设置，以此类推对其他虚拟乐器进行记录和设置，利用激光3和摄像头4来获取用户人体图像信息，将此人体图像信息传输给主机1，通过AR、VR、体感游戏软件，实现现实身体控制投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体，此虚拟身体可以是对用户三维人体扫描生成的虚拟身体，操作投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体身边显示的乐器，或主机1根据用户佩戴的传感器确定现实身体手脚移动位置来控制虚拟身体操作虚拟身体身边显示的乐器，包括：

a1、在投影仪或显示屏5对眼显示的三维虚拟空间，点击生成一种虚拟乐器，此虚拟乐器可以随意移动位置并可以悬浮空中进行操作，三维虚拟空间可以自由选择不同环境的三维虚拟空间。

a2、利用激光3和摄像头4来获取用户人体图像信息，将此人体图像信息传输给主机1通过AR、VR、体感游戏软件或主机1根据用户佩戴的传感器来确定用户现实身体手脚移动位置控制投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体操作虚拟乐器，根据虚拟身体在这种虚拟乐器上运动的位置变化，主机1将这种虚拟乐器设置好的发音要求激发的对应音频信号传输给扬声器2。

a3、记录一种乐器老师通过现实身体控制投影仪或显示屏5对眼显示的虚拟世界虚拟身体操作这种虚拟乐器演奏一首曲谱虚拟身体运动的轨迹，用户学习这首曲谱时可以通过现实身体控制投影仪或显示屏5对眼显示的虚拟世界虚拟身体点击在此虚拟乐器上生成记录的老师演奏这首曲谱虚拟身体运动轨迹影像，此影像可以设置为虚影和快慢，用户通过现实身体控制自己的虚拟身体尽量和记录的虚拟身体影像重合跟着演奏，进行学习，以此类推其他乐器和曲谱的学习。

a4、利用互联网和社交软件可以使不同地区的用户通过现实身体控制的虚拟身体出现在同一个虚拟空间，各自生成对应的乐器一起演奏。

本发明实施例还公开了一种三维显示的操作装置，其特征在于，记录某种乐器最理想的各种发音按这种乐器最理想发音要求对虚拟的乐器进行设置，利用激光3和摄像头4来获取人体图像信息，将此人体图像信息传输给主机1，通过AR、VR、体感游戏软件，实现现实身体控制投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体，此虚拟身体可以是对用户三维人体扫描生成的虚拟身体，操作投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体身边显示的乐器，或通过佩戴传感器确定现实身体手脚移动位置来控制虚拟身体操作虚拟身体身边显示的乐器。

所述装置具有电话，搜索、短信、拍照、摄像、社交分享、虚拟现实、体感游戏、学习和演奏乐器等功能。

附图说明

下面结合附图对本发明做进一步详细的说明。

图1为本发明的结构示意图；

图中：1为主机(手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池等)，2为扬声器，3为激光，4为摄像头，5为投影仪或显示屏，6为麦克。

具体实施方案

如图1所示，所述装置包括：眼镜或头盔，1为主机(手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、传感器、电池等)，2为扬声器，3为激光，4为摄像头，5为投影仪或显示屏，6为麦克。

一种利用虚拟乐器学习和演奏的方法，其特征在于，根据一种乐器最理想的发音标准记录这种乐器各种发音按这种乐器最理想发音要求对这种乐器的虚拟乐器进行设置，以此类推对其他虚拟乐器进行记录和设置，利用激光3和摄像头4来获取用户人体图像信息，将此人体图像信息传输给主机1，通过AR、VR、体感游戏软件，实现现实身体控制投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体，此虚拟身体可以是对用户三维人体扫描生成的虚拟身体，操作投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体身边显示的乐器，或主机1根据用户佩戴的传感器确定现实身体手脚移动位置来控制虚拟身体操作虚拟身体身边显示的乐器，包括：

a1、在投影仪或显示屏5对眼显示的三维虚拟空间，点击生成一种虚拟乐器，此虚拟乐器可以随意移动位置并可以悬浮空中进行操作，三维虚拟空间可以自由选择不同环境的三维虚拟空间。

a1、利用激光3和摄像头4来获取用户人体图像信息，将此人体图像信息传输给主机1通过AR、VR、体感游戏软件或主机1根据用户佩戴的传感器来确定用户现实身体手脚移动位置控制投影仪或显示屏5对眼显示的虚拟世界里的虚拟身体操作虚拟乐器，根据虚拟身体在这种虚拟乐器上运动的位置变化，主机1将这种虚拟乐器设置好的发音要求激发的对应音频信号传输给扬声器2。

a2、记录一种乐器老师通过现实身体控制投影仪或显示屏5对眼显示的虚拟世界虚拟身体操作这种虚拟乐器演奏一首曲谱虚拟身体运动的轨迹，用户学习这首曲谱时可以通过现实身体控制投影仪或显示屏5对眼显示的虚拟世界虚拟身体点击在此虚拟乐器上生成记录的老师演奏这首曲谱虚拟身体运动轨迹影像，此影像可以设置为虚影和快慢，用户通过现实身体控制自己的虚拟身体尽量和记录的虚拟身体影像重合跟着演奏，进行学习，以此类推其他乐器和曲谱的学习。

a3、利用互联网和社交软件可以使不同地区的用户通过现实身体控制的虚拟身体出现在同一个虚拟空间，各自生成对应的乐器一起演奏。