专利名称：虚拟现实合成方法及终端的制作方法
技术领域：
本发明涉及到网络终端设备，特别是一种可以将网络视频音频进行合成的方法及装置，并且是一种三维图像合成装置。
背景技术：
随着宽带网络推进和应用，所提供的服务和应用越来越多，其中摄像头或基于此类的应用也越来越多，比如网络实时通讯类的服务和与此相关的应用，例如现在很多的网络节目中，对于音乐与视频的下载与翻唱已经应用很多，同时，基于网络视频交互的伴唱也越来越多，以及类似的KTV演唱，对大多数喜欢唱歌的人用户来说，都有一种自我欣赏以品味的特征，也会陶醉在自我洋溢的歌声之中，但目前没有较好的形式和方法，因此还十分需要提高与改善。随着三维获取与显示技术的提高与进步，有些用户更需要一些更真实的三维场景，例如是虚拟现实的场景和效果。在目前基于的网络的视频音频应用当中，还不能够实现上述的效果，特别是在基于宽带网络的服务和应用方面，所有还有很大的改进空间。
发明内容
本发明的目的就是为了解决以上问题，提供一种基于网络的虚拟现实合成方法及终端及装置。本发明是通过这样的方法和装置来实现的本发明所涉及的虚拟现实合成方法及终端，应当具有至少一个音频、两个视频、图片至少其中之一的第一信号源，将此第一信号可以分离成构成该信号的至少一个要素，通过网络进行传送，并与其它信号叠加合成；具有至少一个自外部输入音频、视频、图片至少其中之一的第二信号的设备，以及可以将此第二信号可以分离成构成该信号的至少一个要素；具有将上述视频、音频、图片第一信号、第二信号的要素或直接进行合成之后加以输出的合成输出装置；将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出；由第一信号输出的视频信号为三维信号，可以通过三维装置获取三维图像信息。进一步的，将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出，合成输出的结果可以通过网络发送。进一步的，所述的具有音频、视频、图片的第一信号源，是存储在网络存储器内，可以通过用户调用。进一步的，所述的用户为注册用户。进一步的，所述的具有音频、视频、图片的第一信号源，为其它网络用户的实时输入信号。
进一步的，所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指音频信号中所包含的演唱者声音、背景音乐声音、伴奏声音、歌词信息、乐谱中信息中的至少一种。进一步的，所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指视频信号中所包含的演唱者图像、背景画面、屏幕显示歌词、演唱者声音、背景音乐声音、 伴奏声音、歌词信息、乐谱中信息中的至少一种。进一步的，所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指图片信号中所包含的图片信息的全部或局部的至少一种，以及包括图片的颜色特征、纹理特征、形状特征信息等特征信息。进一步的，所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，可能根据用户需要反复调整。同时，基于上述方法的一种终端，具有能够产生一个音频、两个视频、图片至少其中之一的第一信号源设备；具有能够至少一个自外部输入音频、视频、图片至少其中之一的第二信号的设备；以及具有将第一信号、第二信号设备所输出的信号或要求可以直接进行合成之后加以输出的合成输出装置；将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出；所述的两个视频信号源为并列对称设置的图像传感器。进一步的，所述的视频输入终端为手机或摄像头，并列设置在手机或电脑的面板同一侧表面。这样，本发明具有以下的优点和效果这种虚拟现实合成方法及终端及装置，可以利用网络上数据库的视频音频内容， 或是其它用户的视频音频内容，可以对自己或对方进行装饰或叠加特效，使得在通讯、演唱以及相关操作时，气氛更浓烈、交流更容易，这种方案操作简单，容易实现及操作，并且不需要增加设备，成本低，效果好，并且上述的方法可以使普通消费者轻松获得并观看到逼真的三维立体图像。
图1是本发明所提出的虚拟现实合成方法及终端的原理框图。图2是本发明所提出的虚拟现实合成终端的示意图。
具体实施例方式下面结合附图对本发明的系统和方法进行进一步的说明。为实现本发明的目的，本发明采用是这样的方法来实现的我们知道，这里简单的说明一下立体成像的基本原理，人的眼睛在对物体注视时， 由于左眼和右眼瞳孔之间的距离，大约为5cm，左眼和右眼对一个物体(或者说是同一视点)就会产生不同视角相同视点的图像，这两个不同的视觉图像信号，经过大脑的接受和处理就形成了一个三维的立体视觉效果，也就是我们所实际看到的物体的图像，所以，要形成一个立体的图像的效果，就要让两只眼睛同时接受到物体的不同视角相同视点的图像， 所以，要想获得这样的效果，首先要产生满足这样条件的视频信息，由两个视频信息采集器来采集信息，在本实例中，就是具有两个摄像头的触控电脑，如附图2所示，或是具有两个摄像头的手机，来作为用户的终端。本发明所涉及的虚拟现实合成方法及终端，应当具有至少一个音频、视频、图片至少其中之一的第一信号源，这个信号源可以是一个网络数据库，存储了大量的音频、视频及图片资料。也可以为其它网络用户的实时输入信号源。用户如果想要使用这个第一信号源，特别是数据库第一信号源，正常情况下应当注册为有效用户，可以通过注册用户来调用。如果是其它网络用户的实时输入的第一信号源，也可以不必注册。当然，上述两种情况也都可以注册或不注册。上述的信号源并可以将此第一信号可以分离成构成该信号的至少一个要素。这个要素对于音频信号来说是指音频信号中所包含的演唱者声音、背景音乐声音、伴奏声音、歌词信息、乐谱中信息中的至少一种；对于视频信号来说是指视频信号中所包含的演唱者图像、背景画面、屏幕显示歌词、演唱者声音、背景音乐声音、伴奏声音、歌词信息、乐谱中信息中的至少一种；对于图片信号中所包含的图片信息的全部或局部的至少一种，以及包括图片的颜色特征、纹理特征、形状特征信息等特征信息。上述的这些信息通过网络进行传送，并与其它信号叠加合成；当然，对于用户来说还必须具有至少一个自外部输入音频、视频、图片至少其中之一第二信号的设备，以及可以将此第二信号可以分离成构成该信号的至少一个要素，这个要素的组成与特点与第一信号的相同。以及需要一个可以将上述视频、音频、图片第一信号、第二信号的要素或直接进行合成之后加以输出的合成输出装置，这样，就可以将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出，合成输出的结果可以通过网络发送。例如，第一信号源为一海洋背景，用户在家里电脑或手机上进行叠加并演唱，并将结果发送到另一个网络用户。为了达到用户满意的效果，所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，可能根据用户需要反复调整，这样可以随心而变。由第一信号输出的视频信号为三维信号，可以通过三维装置获取三维图像信息。 这样，用户就可以看到三维信号了。同时，本发涉及到了一种虚拟现实合成方法的输出终端，至少包括一个视频音频输出设备，这个设备为两个摄像头，特别是具有两个摄像头的手机更加适用。通过上述的方法和步骤，就可以利用网络上数据库的视频音频内容，或是其它用户的视频音频内容，可以对自己或对方进行装饰或叠加特效，使得在通讯、演唱以及相关操作时，气氛更浓烈、交流更容易，这种方案操作简单，容易实现及操作，并且不需要增加设备，成本低，效果好，实现了网络视频音频图片内容的无缝衔接，并具有强烈的三维效果，达到虚拟现实的意境。同时，上述的一种虚拟现实合成终端具有能够产生一个音频、两个视频、图片至少其中之一的第一信号源设备；具有能够至少一个自外部输入音频、视频、图片至少其中之一的第二信号的设备；以及具有将第一信号、第二信号设备所输出的信号或要求可以直接进行合成之后加以输出的合成输出装置；将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出；所述的两个视频信号源为并列对称设置的图像传感器，如附图2所示。即这个视频输入终端为手机或摄像头，并列设置在手机或电脑的面板同一侧表 虽然这里只说明了本发明的一个优选实施例，但其意并非限制本发明的范围、适用性和配置。相反，对实施例的详细说明可使本领域技术人员得以实施。应能理解，在不偏离所附权利要求书确定的本发明精神和范围情况下，可对一些细节做适当变更和修改。
权利要求
1.一种虚拟现实合成方法，其特征在于具有至少一个音频、两个视频、或图片至少其中之一的第一信号源，将此第一信号可以分离成构成该信号的至少一个要素，通过网络进行传送，并与其它信号叠加合成；具有至少一个自外部输入音频、视频、图片至少其中之一的第二信号的设备，以及可以将此第二信号可以分离成构成该信号的至少一个要素；具有将上述视频、音频、图片第一信号、第二信号的要素或直接进行合成之后加以输出的合成输出装置；将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出； 由第一信号输出的视频信号为三维信号，可以通过三维装置获取三维图像信息。
2.根据权利要求1所述的虚拟现实合成方法，其特征在于将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出，合成输出的结果可以通过网络发送。
3.根据权利要求1所述的虚拟现实合成方法，其特征在于所述的具有音频、视频、图片的第一信号源，是存储在网络存储器内，可以通过用户调用，所述的用户为注册用户。
4.根据权利要求1所述的虚拟现实合成方法，其特征在于所述的具有音频、视频、图片的第一信号源，为网络用户的实时输入信号。
5.根据权利要求1所述的虚拟现实合成方法，其特征在于所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指音频信号中所包含的演唱者声音、背景音乐声音、伴奏声音、歌词信息、乐谱中信息中的至少一种。
6.根据权利要求1所述的基于虚拟现实合成方法，其特征在于所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指视频信号中所包含的演唱者图像、背景画面、屏幕显示歌词、演唱者声音、背景音乐声音、伴奏声音、歌词信息、乐谱中信息中的至少一种。
7.根据权利要求1所述的基于虚拟现实合成方法，其特征在于所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，是指图片信号中所包含的图片信息的全部或局部的至少一种，以及包括图片的颜色特征、纹理特征、形状特征信息等特征信息。
8.根据权利要求1所述的基于虚拟现实合成方法，其特征在于其特征在于所述的第一信号、第二信号可以分离成构成该信号的至少一个要素，可能根据用户需要反复调整。
9.一种虚拟现实合成终端，其特征在于具有能够产生一个音频、两个视频、图片至少其中之一的第一信号源设备；具有能够至少一个自外部输入音频、视频、图片至少其中之一的第二信号的设备； 以及具有将第一信号、第二信号设备所输出的信号或要求可以直接进行合成之后加以输出的合成输出装置；将上述第一信号、第二信号的要素或全部信息进行叠加合成并输出； 所述的两个视频信号源为并列对称设置的图像传感器。
10.根据权利要求9所述的虚拟现实合成终端，其特征在于所述的视频输入终端为手机、摄像头或触控电脑，并列设置在手机或电脑的面板同一侧表面。
全文摘要
本发明是一种虚拟现实合成方法及终端，具有至少一个音频、两个视频、图片至少其中之一的第一信号源，以及具有至少一个自外部输入音频、视频、图片至少其中之一第二信号的设备，以及可以将此第二信号可以分离成构成该信号的至少一个要素；将上述第一信号、第二信号的要素或全部信息进行叠加合成并通过三维终端输出，合成输出的结果可以通过网络发送，其优点和效果是可以利用网络上数据库的视频音频内容，或是其它用户的视频音频内容，可以对自己或对方进行装饰或叠加特效，并可以实现三维虚拟现实效果，这种方案操作简单，容易实现及操作，并且不需要增加设备，成本低，效果好。
文档编号H04L29/06GK102231726SQ20111002661
公开日2011年11月2日 申请日期2011年1月25日 优先权日2011年1月25日
发明者辜进荣 申请人:北京捷讯华泰科技有限公司