视频会议会场创建方法及系统的制作方法
【专利摘要】本发明涉及一种视频会议会场创建方法，所述方法包括：采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像，所述用户为视频会议参与者；将所述用户图像和所述背景图像分离，获取独立的用户图像；创建虚拟会议桌；将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；通过显示屏显示所述叠加图像。通过本发明实施例可以实现在大量与会者参与时，保证观察者有效的观察到所有与会者真实透视视频图像，同时营造所有会场同在一个大会议室的感觉，并且可以让观察者或发言人实时能够看到有用的视频图像状态。
【专利说明】视频会议会场创建方法及系统
【技术领域】
[0001]本发明涉及计算机领域，具体涉及一种视频会议会场创建方法及系统。
【背景技术】
[0002]视频会议是一种以传送视觉信息为主的会议方式的多方通信。在两个或多个地点的用户之间举行会议，实时传送声音、图像的通信方式。它同时还可以附加静止图像、文件、传真等信号的传送。参加视频会议的人，可以通过视频发表意见，同时观察对方的形象、动作、表情等，并能出示实物、图纸、文件等实拍的电视图像或者显示在黑板、白板上写的字和画的图，使在不同地点参加会议的人感到如同和对方进行“面对面”的交谈，在效果上可以代替现场举行的会议。“缩短”了与会代表的距离，增强了会议的气氛，使大家就像在同一处参加会议，显著提高工作效率。
[0003]当有大量参与与会者时，理想情况下，参与者希望看到其他与会会场的所有参与者。然而，由于显示空间的限制以及多点会议时存在大量与会者的可能性比较大，目前难以有效解决实现对观察者而言有用的图像大小来显示所有与会者的视频图像。
【发明内容】
[0004]本发明的目的是提供一种视频会议会场创建方法，以实现在多点视频会议有大量与会者参与时，保证观察者有效的观察到所有与会者真实透视视频图像的系统或方法。
[0005]第一方面，本发明实施例提供了一种视频会议会场创建方法，所述方法包括:
[0006]采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像；
[0007]将所述用户图像和所述背景图像分离，获取独立的用户图像；
[0008]创建至少一个虚拟会议桌；
[0009]将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；
[0010]通过显示屏显示所述叠加图像。
[0011]基于第一方面，在第一种可能的实施方式中，所述采集至少分处于不同地点的两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像;其中，
[0012]影像信息通过深度摄像机获取，所述影像信息中的所述用户图像和背景图像具有不同的深度。
[0013]所述将所述用户图像和所述背景图像分离，获取独立的用户图像，具体包括:
[0014]根据所述用户图像和所述背景图像的不同深度，将所述用户图像和所述背景图像分离。
[0015]基于第一方面或第一方面的第一种可能的实施方式，在第二种可能的实施方式中，所述在创建多个虚拟会议桌，之后，还包括:
[0016]将所述多个虚拟会议桌排成至少两排。
[0017]基于第一方面的第二种可能的实施方式，在第三种可能的实施方式中，，所述将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像时，进一步包括:
[0018]按照设定比例调整所述用户图像的大小，并按照所述至少两排虚拟会议桌的前后顺序将不同比例大小的用户图像与所述虚拟会议桌叠加。
[0019]基于第一方面，在第四种可能的实施方式中，所述至少一个虚拟会议桌中，包含一个虚拟发言桌，当一个用户需要发言时，通过声音控制，将正在发言的用户的图像，从其所处的虚拟会议桌位置，移动到所述虚拟发言桌的位置。
[0020]第二方面，本发明实施例提供了一种视频会议会场创建系统，所述系统包括:硬件层的摄像设备，显示设备以及数据处理子系统，所述数据处理子系统进一步包括中央处理器和存储器；软件层包括运行在所述数据处理子系统的图像处理模块
[0021]所述摄像设备，用于采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像；
[0022]所述图像处理模块将所述用户图像和所述背景图像分离，获取独立的用户图像，创建至少一个虚拟会议桌，将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；
[0023]所述显示设备显示所述叠加图像。
[0024]基于第二方面，在第一种可能的实施方式中，所述摄像设备获取的所述影像信息中的所述用户图像和背景图像具有不同的深度。
[0025]所述图像处理模块根据所述用户图像和所述背景图像的不同深度，将所述用户图像和所述背景图像分离。
[0026]基于第二方面，在第二种可能的实施方式中，所述图像处理模块将所述多个虚拟会议桌排成至少两排，按照设定比例调整所述用户图像的大小，并按照所述至少两排虚拟会议桌的前后顺序将不同比例大小的用户图像与所述虚拟会议桌叠加
[0027]基于第二方面，在第三种可能的实施方式中，所述硬件层还包括录音设备，用于采集用户的语音信息。
[0028]基于第二方面，在第四种可能的实施方式中，所述至少一个虚拟会议桌中，包含一个虚拟发言桌，当一个用户需要发言时，所述图像处理模块通过声音控制，将正在发言的用户的图像，从其所处的虚拟会议桌位置，移动到所述虚拟发言桌的位置。
[0029]采用本发明实施例提供的方法，通过采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，并且将将所述用户图像和所述背景图像分离，获取独立的用户图像；创建虚拟会议桌；将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；通过显示屏显示所述叠加图像。通过本发明实施例可以实现在大量与会者参与时，保证观察者有效的观察到所有与会者真实透视视频图像，同时营造所有会场同在一个大会议室的感觉，并且可以让观察者或发言人实时能够看到有用的视频图像状态。
【专利附图】
【附图说明】
[0030]为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0031]图1是本发明实施例提供的视频会议会场创建系统的架构图；
[0032]图2是本发明实施例提供的视频会议会场创建方法的一种实施例的流程图；
[0033]图3是本发明实施例的一种应用场景状态示意图；
[0034]图4是本发明实施例的背景分离状态示意图；
[0035]图5是本发明实施例的会议桌状态拼合示意图；
[0036]图6是本发明实施例的一种应用场景状态示意图；
[0037]图7是本发明实施例的另一种场景状态示意图。
【具体实施方式】
[0038]下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
[0039]如图1所示，本发明实施例提供了一种视频会议会场创建系统，所述系统包括:数据处理子系统10和外围设备20，其中外围设备包括摄像设备，显示设备以及录音设备。所述数据处理子系统10进一步包括中央处理器和存储器，存储器可进一步包括ROM和RAM，其中ROM可用于存储系统文件等不能够随意更改的数据，RAM可供用于写入或读取数据；软件层包括运行在所述数据处理子系统中的图像处理模块以及音频处理模块等常规软件。
[0040]所述摄像设备，可以采集至少分处于不同地点的两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像；
[0041]所述图像处理模块将所述用户图像和所述背景图像分离，获取独立的用户图像，创建至少一个虚拟会议桌，将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；
[0042]所述显示设备显示所述叠加图像。
[0043]在本发明实施例中，所述的摄像设备可以是一种深度摄像机，该种摄像机具有主动获取场景深度图的能力，例如通过发射红外线，通过检测物理所反射的红外线的强度判断物体的距离，从而判断出场景中不同的物体的深度。
[0044]所述的图像处理模块，即可根据影响信息中用户和背景的不同深度，将背景和用户分离，获取独立的用户图像。
[0045]通过CPU中的图像处理模块可以进一步创建至少一个虚拟会议桌，例如会议桌、发言桌等。可选的，图像处理模块可以创建的虚拟会议桌可以是一个完整的会议桌，也可以是多个体积较小的会议桌拼接而成的体积较大的会议桌。
[0046]所述的虚拟会议桌可以按照所需的效果排列为几排，并且呈现由近及远、由低到高的效果，因此图像处理模块可以按照设定比例调整所述虚拟会议桌显示的大小，相应的图像处理模块也可以调整用户图像的大小，并按照所述至少两排虚拟会议桌的前后顺序将不同比例大小的用户图像与所述虚拟会议桌叠加
[0047]基于上述的系统，本发明实施例提供了一种视频会议会场创建方法，所述方法包括:
[0048]201，采集至少分处于不同地点的两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像，所述用户为视频会议参与者；
[0049]具体而言，当处于不同地点的用户需要进行视频会议时，通常需要布置一个显示屏，用于显示远端的其他视频会议参与者。
[0050]如图3所示，在本地可以设置一个本地会议桌，和一个显示屏，在显示屏前方可以设置多个摄像机，摄像机可以捕捉本地视频会议参与者的动态影像信息。
[0051]类似的，远端另一地点的视频参与者也可以设置本地会议桌和摄像机，不多赘述。
[0052]202，将所述用户图像和所述背景图像分离，获取独立的用户图像；
[0053]具体的，摄像机采集到视频会议参与者的影像信息之后，将其发送给数据处理子系统，数据处理子系统中运行的图像处理程序，将影像数据中的影响参与者的影像和背景影像分离，例如图4所示。
[0054]203，创建至少一个虚拟会议桌；
[0055]具体的，数据处理子系统中运行的图像处理软件可以通过3D效果图，创建多个虚拟会议桌，例如图5所示，所述虚拟的会议桌可以是一个完整的会议桌，也可以是多个体积较小的会议桌拼接而成的体积较大的会议桌，其中还可以包含一个或多个发言桌。例如图5中左上角的第一排虚拟会议桌的两侧为发言桌。
[0056]204，将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；
[0057]具体的，数据处理子系统中运行的图像处理软件可以将创建的虚拟会议桌排列为所需的排数，并且按照远近、高低等顺序调节虚拟会议桌的显示大小。
[0058]类似的，数据处理子系统中运行的图像处理软件也可以按照设定的顺序，将视频会议参与者的独立图像与创建的虚拟会议桌合成，因此也需要按照远近、高低等顺序调节视频会议参与者的图像大小，效果如图6的所示。
[0059]205,通过显示屏显示所述叠加图像。
[0060]具体而言，当视频数据的合成效果完成后，如图6所示，可以显示在显示屏上，使得本地发言者能够感觉与远端的视频会议参与者同处于共同的空间，达到面对面开会的体验。
[0061]可选的，所述的显示屏可以是一个完整的显示屏，也可以如图6所示，由若干块面积较小的显示屏组合而成，如图7所示，不多赘述。
[0062]优选的，当一个视频会议参与者需要发言时，可以通过声控等方式，将该视频会议参与者的图像从原有的虚拟会议桌位置移开，移动到发言桌的位置，可参考图6，以增强用户体验。
[0063]采用本发明实施例提供的方法，通过采集至少分处于不同地点的两个处于视频会议状态下的用户的影像信息，并且将将所述用户图像和所述背景图像分离，获取独立的用户图像；创建多个虚拟会议桌；将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像；通过显示屏显示所述叠加图像。通过本发明实施例可以实现在大量与会者参与时，保证观察者有效的观察到所有与会者真实透视视频图像，同时营造所有会场同在一个大会议室的感觉，并且可以让观察者或发言人实时能够看到有用的视频图像状态。
[0064]专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
[0065]结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或【技术领域】内所公知的任意其它形式的存储介质中。
[0066]以上所述的【具体实施方式】，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的【具体实施方式】而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
【权利要求】
1.一种视频会议会场创建方法，其特征在于，所述方法包括: 采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像，所述用户为视频会议参与者； 将所述用户图像和所述背景图像分离，获取独立的用户图像； 创建至少一个虚拟会议桌； 将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像； 通过显示屏显示所述叠加图像。
2.如权利要求1所述的方法，其特征在于，所述采集至少分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像;其中， 影像信息通过深度摄像机获取，所述影像信息中的所述用户图像和背景图像具有不同的深度； 所述将所述用户图像和所述背景图像分离，获取独立的用户图像，具体包括: 根据所述用户图像和所述背景图像的不同深度，将所述用户图像和所述背景图像分离。
3.如权利要求1或2所述的方法，其特征在于，在所述创建至少一个虚拟会议桌，之后，还包括: 将所述虚拟会议桌排成至少两排。
4.如权利要求3所述的方法，其特征在于，所述将所述独立的用户图像与所述虚拟会议桌置加，获取置加图像时，进一步包括: 按照设定比例调整所述用户图像的大小，并按照所述至少两排虚拟会议桌的前后顺序将不同比例大小的用户图像与所述虚拟会议桌叠加。
5.如权利要求1或2所述的方法，其特征在于，所述至少一个虚拟会议桌中，包含一个虚拟发言桌，当一个用户需要发言时，通过声音控制，将正在发言的用户的图像，从其所处的虚拟会议桌位置，移动到所述虚拟发言桌的位置。
6.一种视频会议会场创建系统，其特征在于，包括:硬件层的摄像设备，显示设备以及数据处理子系统，所述数据处理子系统进一步包括中央处理器和存储器；软件层包括运行在所述数据处理子系统的图像处理模块 所述摄像设备，用于采集分处于不同地点的至少两个处于视频会议状态下的用户的影像信息，所述影像信息中包含所述用户的图像和背景图像； 所述图像处理模块将所述用户图像和所述背景图像分离，获取独立的用户图像，创建至少一个虚拟会议桌，将所述独立的用户图像与所述虚拟会议桌叠加，获取叠加图像； 所述显示设备显示所述叠加图像。
7.如权利要求6所述的视频会议会场创建系统，其特征在于，所述摄像设备获取的所述影像信息中的所述用户图像和背景图像具有不同的深度。 所述图像处理模块根据所述用户图像和所述背景图像的不同深度，将所述用户图像和所述背景图像分离。
8.如权利要求6所述的视频会议会场创建系统，其特征在于，所述图像处理模块将所述多个虚拟会议桌排成至少两排，按照设定比例调整所述用户图像的大小，并按照所述至少两排虚拟会议桌的前后顺序将不同比例大小的用户图像与所述虚拟会议桌叠加。
9.如权利要求6所述的视频会议会场创建系统，其特征在于，硬件层还包括录音设备，用于采集用户的语音信息。
10.如权利要求6所述的视频会议会场创建系统，其特征在于，所述至少一个虚拟会议桌中，包含一个虚拟发言桌，当一个用户需要发言时，所述图像处理模块通过声音控制，将正在发言的用户的图像，从其所处的虚拟会议桌位置，移动到所述虚拟发言桌的位置。
【文档编号】H04N7/15GK104349111SQ201310313831
【公开日】2015年2月11日 申请日期:2013年7月24日 优先权日:2013年7月24日
【发明者】简旭颖 申请人:华为技术有限公司