从视频中提取进球帧和提取进球片段的方法及相关装置与流程

本公开涉及视频处理，并且更具体地，涉及从视频中提取进球帧的方法和从视频中提取进球片段的方法，以及能够用于实现前述方法的电子设备、非瞬态存储介质和计算机程序产品。

背景技术：

1、随着自媒体的发展，越来越多的人通过视频平台进行直播或分享自制视频。例如，球类运动(比如篮球、足球等)作为广受大众喜爱的体育运动，是很常见的视频主题。人们可以在观看球赛的时候通过视频平台直播赛况，或者是先将视频录制下来再在后处理之后将处理过的视频发布到视频平台上。在实际的球赛中，大部分时间是在传球或运球，而真正令人感兴趣的进球仅占很小的时间比例。因此，人们通常会在后处理期间从录制的视频中剪辑出进球片段，然后将各进球片段进行拼接及后处理最后发布到视频平台上。

技术实现思路

1、在下文中给出了关于本公开的简要概述，以便提供关于本公开的一些方面的基本理解。但是，应当理解，这个概述并不是关于本公开的穷举性概述。它并不是意图用来确定本公开的关键性部分或重要部分，也不是意图用来限定本公开的范围。其目的仅仅是以简化的形式给出关于本公开的某些概念，以此作为稍后给出的更详细描述的前序。

2、根据本公开的第一方面，提供了一种从视频中提取进球帧的方法，包括：针对视频中的每个图像帧，确定该图像帧中的球与框的第一接近程度以及球与网的第二接近程度；基于第一接近程度从视频中确定第一图像帧序列；基于第一图像帧序列和第二接近程度从视频中确定第二图像帧序列，其中，第二图像帧序列的起始帧为第一图像帧序列的结束帧；以及从第二图像帧序列中确定进球帧。

3、根据本公开的第二方面，提供了一种从视频中提取进球帧的方法，包括：针对视频中的每个图像帧，确定该图像帧中的球与框的第一接近程度以及球与网的第二接近程度；基于第一接近程度从视频中确定第一时段；基于第一时段和第二接近程度从视频中确定第二时段，其中，第二时段的起始时刻为第一时段的结束时刻；以及从第二时段中确定进球时刻，并将视频中与进球时刻对应的图像帧确定为进球帧。

4、根据本公开的第三方面，提供了一种从视频中提取进球片段的方法，包括：通过根据本公开的第一方面或第二方面所述的方法从视频中提取进球帧；以及生成进球片段，使得进球帧被包括在进球片段中。在一些实施例中，该方法还包括基于进球帧确定进球片段的起始帧和/或结束帧，以及将视频中从起始帧到进球帧的部分和/或从进球帧到结束帧的部分包括在进球片段中。

5、根据本公开的第四方面，提供了一种电子设备，包括：一个或多个处理器；以及存储计算机可执行指令的存储器，计算机可执行指令在被一个或多个处理器执行时使得一个或多个处理器执行根据本公开的第一方面或第二方面或第三方面所述的方法。

6、根据本公开的第五方面，提供了一种其上存储有计算机可执行指令的非瞬态存储介质，计算机可执行指令在被计算机执行时使得计算机执行根据本公开的第一方面或第二方面或第三方面所述的方法。

7、根据本公开的第六方面，提供了一种计算机程序产品，计算机程序产品包括指令，指令在被处理器执行时实现根据本公开的第一方面或第二方面或第三方面所述的方法。

技术特征：

1.一种从视频中提取进球帧的方法，包括：

2.根据权利要求1所述的方法，其中，基于所述第一接近程度从所述视频中确定第一图像帧序列包括：

3.根据权利要求2所述的方法，其中，基于所述第一图像帧序列和所述第二接近程度从所述视频中确定第二图像帧序列包括：

4.根据权利要求3所述的方法，其中，从所述第二图像帧序列中确定进球帧包括将所述第二图像帧序列中第二接近程度最大的图像帧确定为进球帧。

5.根据权利要求3所述的方法，其中，从所述第二图像帧序列中确定进球帧包括：

6.根据权利要求3所述的方法，还包括：

7.一种从视频中提取进球帧的方法，包括：

8.根据权利要求7所述的方法，其中，基于所述第一接近程度从所述视频中确定第一时段包括：

9.根据权利要求8所述的方法，其中，基于所述第一时段和所述第二接近程度从所述视频中确定第二时段包括：

10.根据权利要求9所述的方法，其中，从所述第二时段中确定进球时刻包括将所述第二时段中第二接近程度最大的时刻确定为进球时刻。

11.根据权利要求9所述的方法，其中，从所述第二时段中确定进球时刻包括：

12.根据权利要求9所述的方法，还包括：

13.根据权利要求1至12中任一项所述的方法，其中，针对所述视频中的每个图像帧，确定该图像帧中的球与框的第一接近程度以及球与网的第二接近程度包括以下之一：

14.根据权利要求7所述的方法，包括：

15.一种从视频中提取进球片段的方法，包括：

16.根据权利要求15所述的方法，其中，所述进球片段被生成为使得所述视频中从所述进球帧起正序延伸预设时段的部分被包括在所述进球片段中，所述预设时段包括基于框距地高度确定的自由落体时段。

17.根据权利要求15所述的方法，还包括：

18.根据权利要求17所述的方法，还包括：

19.根据权利要求17所述的方法，还包括：

20.根据权利要求17所述的方法，还包括：在所述倒序追溯中，确定首次出现进球人的人体与球之间的位置关系满足预设不接触位置关系的图像帧，

21.根据权利要求20所述的方法，其中，在所述倒序追溯中，每个图像帧中的进球人的人体被确定为该图像帧中的与其在所述倒序追溯中的上一图像帧中的进球人的人体最接近的人体。

22.根据权利要求21所述的方法，还包括：

23.根据权利要求20所述的方法，其中，在所述倒序追溯中确定首个与球之间的位置关系满足预设接触位置关系的人体运球关键点之后，对所述人体运球关键点所属的人体进行人脸识别以确定进球人的id，以及其中，在所述倒序追溯中，针对每个图像帧，通过以下操作来确定该图像帧中的进球人的人体：

24.据权利要求23所述的方法，还包括：

25.一种电子设备，包括：

26.一种其上存储有计算机可执行指令的非瞬态存储介质，所述计算机可执行指令在被计算机执行时使得计算机执行根据权利要求1至24中任一项所述的方法。

27.一种计算机程序产品，所述计算机程序产品包括指令，所述指令在被处理器执行时实现根据权利要求1至24中任一项所述的方法。

技术总结
本公开涉及从视频中提取进球帧和提取进球片段的方法及相关装置。一种从视频中提取进球帧的方法，包括：针对视频中的每个图像帧，确定该图像帧中的球与框的第一接近程度以及球与网的第二接近程度；基于第一接近程度从视频中确定第一图像帧序列；基于第一图像帧序列和第二接近程度从视频中确定第二图像帧序列，其中，第二图像帧序列的起始帧为第一图像帧序列的结束帧；以及从第二图像帧序列中确定进球帧。

技术研发人员：王淼军,郝冬宁,谢东,陈芳
受保护的技术使用者：湖北星纪魅族集团有限公司
技术研发日：
技术公布日：2024/5/9