基于多摄像机的视频展示方法、装置及存储介质与流程

本发明涉及视频，特别涉及一种基于多摄像机的视频展示方法、装置及存储介质。

背景技术：

1、随着科技的发展，人们可以使用各种终端设备进行线上会议，例如，语音会议、视频会议等等。线上会议的方式无需人们在约定的时间到达约定的地点才能开展会议，使会议开展更高效更便捷。

2、对于稍大一些的会议室，需要部署多台从机设备采集会议数据，然后，主机设备将从机设备采集的会议数据合成视频图像，并将该视频图像在展示方的屏幕中进行展示，然而，由于主机设备与从机设备之间存在时间差异，导致合成的视频图像可能会存在画面衔接不上的问题，降低了视频的展示效果。

技术实现思路

1、本发明提供一种基于多摄像机的视频展示方法、装置及存储介质，可以提高视频的展示效果。

2、第一方面，本发明提出一种基于多摄像机的视频展示方法，包括：

3、向所述多个从机下发采集指令，并接收由所述从机返回的视频数据；

4、计算本地时间戳与每个视频数据的视频时间戳之间的差值；

5、保留所述本地时间戳与视频时间戳之间的差值小于或等于预设值的视频数据；

6、根据保留的视频数据，生成待展示视频，并将展示所述待展示视频。

7、可选地，在本发明的一些实施例中，所述根据保留的视频数据，确定待展示视频，包括：

8、从保留的视频数据中提取场景图像和场景声音；

9、对所述场景图像进行人脸检测；

10、基于检测结果在所述场景图像中裁剪出每个人脸对应的人像图像；

11、根据所述场景声音和人像图像，生成待展示视频。

12、可选地，在本发明的一些实施例中，所述基于检测结果在所述场景图像中裁剪出每个人脸对应的人像图像，包括：

13、基于检测结果在所述场景图像中构建覆盖人脸的人脸框；

14、根据所述人脸框的尺寸信息以及所述人脸框的坐标信息，在所述场景图像中分割出每个人脸对应的人像图像。

15、可选地，在本发明的一些实施例中，所述根据所述人脸框的尺寸信息以及所述人脸框的坐标信息，在所述场景图像中分割出每个人脸对应的人像图像，包括：

16、根据所述人脸框的坐标信息，确定所述人脸框中人脸在所述场景图像的位置；

17、基于所述人脸框的尺寸信息，确定所述人脸框中人脸的人脸尺寸；

18、根据所述位置以及人脸尺寸，在所述场景图像中分割出每个人脸对应的人像图像。

19、可选地，在本发明的一些实施例中，还包括：

20、检测分割的人像图像中是否存在相同的人脸；

21、当检测到分割的人像图像中存在相同的人脸，获取预设人脸五官的三维坐标；

22、根据所述人脸框的坐标信息确定所述人脸框中人脸对应的二维坐标；

23、基于所述二维坐标和三维坐标，识别具备相同人脸的人像图像中人脸的朝向；

24、根据所述人脸的朝向以及所述尺寸信息，在具备相同人脸的人像图像中确定目标人像图像。

25、可选地，在本发明的一些实施例中，所述基于所述二维坐标和三维坐标，识别具备相同人脸的人像图像中人脸的朝向，包括：

26、构建所述二维坐标与所述三维坐标之间的转换关系；

27、根据所述转换关系在所述人脸框中确定人脸对应的人脸区域；

28、对所述人脸区域进行归一化处理，并提取归一化图像的图像特征；

29、对所述图像特征进行卷积处理，得到所述图像特征对应的数值，并基于所述数值确定具备相同人脸的人像图像中人脸的朝向。

30、可选地，在本发明的一些实施例中，所述检测分割的人像图像中是否存在相同的人脸，包括：

31、对分割的人像图像的像素进行归一化处理，并提取归一化的人像图像中人脸的特征向量；

32、将所述特征向量为低维的特征向量；

33、确定转换后特征向量对应的数组；

34、根据所述待选人像图像对应的数组，确定分割的人像图像中是否存在相同的人脸。

35、可选地，在本发明的一些实施例中，还包括：

36、对所述场景图像进行行人检测；

37、根据行人检测结果在所述场景图像中构建覆盖行人的行人框；

38、所述根据所述人脸框的尺寸信息以及所述人脸框的坐标信息，在所述场景图像中分割出每个人脸对应的人像图像，包括：根据所述行人框的尺寸信息、所述行人框的坐标信息、所述人脸框的尺寸信息以及所述人脸框的坐标信息，在所述场景图像中分割出每个人脸对应的人像图像

39、第二方面，本发明还提出一种分布式麦克风的音频同步装置，包括：

40、接收模块，用于向所述多个从机下发采集指令，并接收由所述从机返回的视频数据；

41、计算模块，用于计算本地时间戳与每个视频数据的视频时间戳之间的差值；

42、保留模块，用于保留所述本地时间戳与视频时间戳之间的差值小于或等于预设值的视频数据；

43、生成模块，用于根据保留的视频数据，生成待展示视频；

44、展示模块，用于将展示所述待展示视频。

45、第三方面，本发明还提出一种计算机存储介质，所述计算机存储介质中存储有计算机程序，所述计算机程序被执行时，实现上述任意一项所述的基于多摄像机的视频展示方法。

46、本发明一种基于多摄像机的视频展示方法、装置及存储介质，在向所述多个从机下发采集指令，并接收由所述从机返回的视频数据后，计算本地时间戳与每个视频数据的视频时间戳之间的差值，接着，保留所述本地时间戳与视频时间戳之间的差值小于或等于预设值的视频数据，最后，根据保留的视频数据，生成待展示视频，并将展示所述待展示视频。在本发明提供的视频展示方案中，将本地时间戳与视频时间戳之间的差值大于预设值的视频数据进行过滤，使得保留的视频数据之间的时延在一个较小的范围内，避免合成的视频图像可能会存在画面衔接不上的问题，进而提高了视频的展示效果。

技术特征：

1.一种基于多摄像机的视频展示方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述根据保留的视频数据，确定待展示视频，包括：

3.根据权利要求2所述的方法，其特征在于，所述基于检测结果在所述场景图像中裁剪出每个人脸对应的人像图像，包括：

4.根据权利要求3所述的方法，其特征在于，所述根据所述人脸框的尺寸信息以及所述人脸框的坐标信息，在所述场景图像中分割出每个人脸对应的人像图像，包括：

5.根据权利要求4所述的方法，其特征在于，还包括：

6.根据权利要求5所述的方法，其特征在于，所述基于所述二维坐标和三维坐标，识别具备相同人脸的人像图像中人脸的朝向，包括：

7.根据权利要求5所述的方法，其特征在于，所述检测分割的人像图像中是否存在相同的人脸，包括：

8.根据权利要求3所述的方法，其特征在于，还包括：

9.一种图像处理装置，其特征在于，包括：

10.一种存储介质，其特征在于，其上存储有计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1-8任一项所述视频展示方法的步骤。

技术总结
本发明提供一种基于多摄像机的视频展示方法、装置及存储介质，向所述多个从机下发采集指令，并接收由所述从机返回的视频数据；计算本地时间戳与每个视频数据的视频时间戳之间的差值；保留所述本地时间戳与视频时间戳之间的差值小于或等于预设值的视频数据；根据保留的视频数据，生成待展示视频，并将展示所述待展示视频；可以提高视频的展示效果。

技术研发人员：高方奇,杨海军,马睿,郭锦文
受保护的技术使用者：深圳看到科技有限公司
技术研发日：
技术公布日：2024/1/14