用于视频会议呈现的方法、装置和系统的制作方法
【技术领域】
[0001] 本发明涉及通信领域，并且更具体地，涉及一种用于视频会议呈现的方法、装置和 系统。
【背景技术】
[0002] 在目前的各类多点视频通讯中，视频会议中视频图像的组成都基本是以摄像头拍 摄区域为基本单位，进行视频图像的拼接处理或者直接传输发送给会场屏幕，所以在各个 会场屏幕上看到的内容，通常都是要么看到1个摄像头拍摄的画面，要么就是多个摄像头 拍摄组合的画面效果。这样带来的问题是，会议中信息的冗余呈现，以及会议焦点人物信息 和非焦点人物信息会分散在屏幕的不同区域，没有在屏幕上进行信息焦点的布局区分，每 个屏幕区域都可能会出现会议当前的焦点人物信息，这样带来的沟通的焦点不断变化，非 焦点信息甚至占据了屏幕的中间区域等，这样会影响沟通效果。
[0003] 观看内容的控制方式上，通常有以下的常见的方式：声控切换和非声控切换（手 动切换）机制。在声控切换的机制下，让屏幕图像的频繁无序切换，屏幕区域没有焦点区 分；在非声控的机制下，每个会场都需要有专人来随时切换屏幕内容实时满足观看的需要， 所以观看画面的效率不是很高，特别是在偏讨论和协作的会议，会议的焦点变化比较快，所 以有时候甚至出现一些极端的观看效果情况，例如发言人和材料并没有合理的出现，"只闻 其声不见其人"的效果。
【发明内容】
[0004] 本发明实施例提供了一种用于视频会议呈现的方法、装置和系统，能够使得显示 区域的信息显示更为合理，避免用户手动去选择调整，让会议更加高效。
[0005] 第一方面，提供了一种用于视频会议呈现的方法，包括：
[0006] 接收至少一个发送端点中每个发送端点的视频流；
[0007] 根据所述每个发送端点的视频流，对所述每个发送端点的视频流中的视频内容进 行等级划分，以确定所述每个发送端点对应的视频内容等级，其中，所述至少一个发送端点 对应的视频内容等级包括多个视频内容等级；
[0008] 确定视频布局，所述视频布局用于指示所述多个视频内容等级中每个视频内容等 级对应的显示区域，其中，所述显示区域是包含于接收端点的多个显示区域中的显示区域， 所述视频内容等级与所述显示区域一一对应；
[0009] 根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视 频布局，确定所述多个显示区域中每一个显示区域对应的待呈现视频内容，以便于通过所 述多个显示区域中每个显示区域呈现对应的待呈现视频内容，其中，不同的显示区域对应 的待呈现视频内容包括不同的视频内容等级对应的视频内容。
[0010] 结合第一方面，在第一方面的第一种可能的实现方式中，所述方法由控制设备执 行，所述方法还包括： toon] 向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容 以及指示信息，其中，所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应 关系，以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频 内容。
[0012] 结合第一方面，在第一方面的第二种可能的实现方式中，所述方法由所述接收端 点执行，所述方法还包括：
[0013] 所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内 容。
[0014] 结合第一方面或第一方面的第一种或第二种可能的实现方式，在第一方面的第三 种可能的实现方式中，所述方法还包括：接收所述至少一个发送端点中全部或部分发送端 点的事件信息；
[0015] 所述根据所述每个发送端点的视频流，对所述每个发送端点的视频流中的视频内 容进行等级划分，包括：
[0016] 根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的 视频流，对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
[0017] 结合第一方面的第三种可能的实现方式，在第一方面的第四种可能的实现方式 中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发 送端点的参与人事件；
[0018] 所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端 点的视频流，对所述全部或部分发送端点的视频流中的视频内容进行等级划分，包括：
[0019] 以人为单位对所述全部或部分发送端点的视频流进行视频分割，以得到所述全部 或部分发送端点的各个参与人的视频内容；
[0020] 根据所述全部或部分发送端点的参与人事件，对所述全部或部分端点的各个参与 人的视频内容进行等级划分，以确定所述各个参与人的视频内容的视频内容等级。
[0021] 结合第一方面的第四种可能的实现方式，在第一方面的第五种可能的实现方式 中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发 送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
[0022] 结合第一方面的第三种至第五种中任一种可能的实现方式，在第一方面的第六种 可能的实现方式中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所 述全部或部分发送端点需要分享数据文档，所述全部或部分发送端点的视频流包括数据文 档；
[0023] 所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端 点的视频流，对所述全部或部分发送端点的视频流中的视频内容进行等级划分，包括：
[0024] 根据所述事件信息，分割出所述全部或部分发送端点的视频流中的数据文档，以 及对所述全部或部分发送端点的分割出的数据文档进行等级划分，以确定所述数据文档的 视频内容等级。
[0025] 结合第一方面的第三种至第六种中任一种可能的实现方式，在第一方面的第七种 可能的实现方式中，所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部 分发送端点的视频流，对所述全部或部分发送端点的视频流中的视频内容进行等级划分之 后，所述方法还包括：
[0026] 若所述全部或部分发送端点中的任一发送端点的事件信息发生变化，动态调整全 部或部分发送端点对应的视频内容等级。
[0027] 结合第一方面或第一方面的第一种或第二种可能的实现方式，在第一方面的第八 种可能的实现方式中，根据所述每个发送端点的视频流，对所述每个发送端点的视频流中 的视频内容进行等级划分，包括：
[0028] 对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事 件判断，并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划 分。
[0029] 结合第一方面的第八种可能的实现方式，在第一方面的第九种可能的实现方式 中，所述对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件 判断，并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分， 包括：
[0030] 以人为单位对所述全部或部分发送端点的视频流进行视频分割，以得到所述全部 或部分发送端点的各个参与人的视频内容；
[0031] 对所述各个参与人的视频内容进行事件判断，并在事件判断后对所述各个参与人 的视频内容进行等级划分，以确定所述各个参与人的视频内容的视频内容等级。
[0032] 结合第一方面的第九种可能的实现方式，在第一方面的第十种可能的实现方式 中，所述对所述各个参与人的视频内容进行事件判断，包括：
[0033] 将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者 的视频内容或者材料分享者的视频内容。
[0034] 结合第一方面的第八种至第十种中任一种可能的实现方式，在第一方面的第十一 种可能的实现方式中，所述对所述至少一个发送端点中全部或部分发送端点的视频流中的 视频内容进行事件判断，并在事件判断后对所述全部或部分发送端点的视频流中的视频内 容进行等级划分，包括：
[0035] 对所述全部或部分发送端点的视频流进行视频分割，确定所述全部或部分发送端 点中的视频流存在数据文档；
[0036] 对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分，以确定 所述数据文档的视频内容等级。
[0037] 结合第一方面或第一方面的第一种至第十一种中任一种可能的实现方式，在第一 方面的第十二种可能的实现方式中，所述对所述每个发送端点的视频流中的视频内容进行 等级划分，包括：
[0038] 对所述每个发送端点的视频流中的视频内容进行等级划分；其中，所述每个发送 端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
[0039] 结合第一方面或第一方面的第一种至第十二种中任一种可能的实现方式，在第一 方面的第十三种可能的实现方式中，所述确定多个显示区域中每一个显示区域对应的待呈 现视频内容，包括：
[0040] 根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视 频布局，生成全部或部分显示区域对应的待呈现视频内容，其中，通过尺寸变换和/或颜色 标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
[0041] 第二方面，提供了一种用于视频会议呈现的装置，包括：
[0042] 接收单元，用于接收至少一个发送端点中每个发送端点的视频流；
[0043] 第一确定单元，用于根据所述每个发送端点的视频流，对所述每个发送端点的视 频流中的视频内容进行等级划分，以确定所述每个发送端点对应的视频内容等级，其中，所 述至少一个发送端点对应的视频内容等级包括多个视频内容等级；
[0044] 第二确定单元，用于确定视频布局，所述视频布局用于指示所述多个视频内容等 级中每个视频内容等级对应的显示区域，其中，所述显示区域是包含于接收端点的多个显 示区域中的显示区域，所述视频内容等级与所述显示区域一一对应；
[0045] 第三确定单元，用于根据所述多个视频内容等级中每一个视频内容等级对应的视 频内容以及所述视频布局，确定所述多个显示区域中每一个显示区域对应的待呈现视频内 容，以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容，其中，不同 的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
[0046] 结合第二方面，在第二方面的第一种可能的实现方式中，所述装置为控制设备，所 述装置还包括：
[0047] 发送单元，用于向所述接收端点发送所述多个显示区域中每个显示区域对应的待 呈现视频内容以及指示信息，其中，所述指示信息用于指示所述显示区域与所述待呈现视 频内容的对应关系，以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应 的待呈现视频内容。
[0048] 结合第二方面，在第二方面的第二种可能的实现方式中，所述装置为所述接收端 点，所述装置还包括：
[0049] 呈现单元，用于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内 容。
[0050] 结合第二方面或第二方面的第一种或第二种可能的实现方式，在第二方面的第三 种可能的实现方式中，所述接收单元还用于：接收所述至少一个发送端点中全部或部分发 送端点的事件信息；
[0051] 所述第一确定单元具体用于：根据所述全部或部分发送端点的事件信息以及根据 所述全部或部分发送端点的视频流，对所述全部或部分发送端点的视频流中的视频内容进 行等级划分。
[0052] 结合第二方面的第三种可能的实现方式，在第二方面的第四种可能的实现方式 中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发 送端点的参与人事件；
[0053] 所述第一确定单元具体用于：
[0054] 以人为单位对所述全部或部分发送端点的视频流进行视频分割，以得到所述全部 或部分发送端点的各个参与人的视频内容；
[0055] 根据所述全部或部分发送端点的参与人事件，对所述全部或部分端点的各个参与 人的视频内容进行等级划分，以确定所述各个参与人的视频内容的视频内容等级。
[0056] 结合第二方面的第四种可能的实现方式，在第二方面的第五种可能的实现方式 中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发 送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
[0057] 结合第二方面的第三种至第五种中任一种可能的实现方式，在第二方面的第六种 可能的实现方式中，所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所 述全部或部分发送端点需要分享数据文档，所述全部或部分发送端点的视频流包括数据文 档；
[0058] 所述第一确定单元具体用于：
[00