一种基于实时信号的在线技审内审及比对的方法与流程

本发明涉及一种基于实时信号的在线技审内审及比对的方法，是一种视频数字信号处理的处理方法，是一种广电级实时视频数字信号的检测、监测处理的方法。

背景技术：

1、在目前的播出业务系统中，为保障播出系统的安全，需要对播出链路中各个节点的信号进行实时检测，以保障整个播出链路的安全，保证pgm信号最终安全输出。现有的现场的故障检测及审计方式，通常采用多画分对实时信号的画面音频层面的故障进行在线技审检测，针对主备链路中的信号，采用主备路的信号进行画面比对的方式。这一方式涵盖了对信号方面的技审和比对，可以满足部分场景的使用。随着对信号质量以及内容的严格要求，现有的检测和监测方式已经不能满足客户增长的需求。最明显的需求是缺少针对广电级实时信号进行内容方面的审核。广电级的节目播出要求相对与互联网上的视频信号播出的要求，包括：画质、内容、版权等方面都要符合较高的标准才能播出，而且要实时监控，随时将不符合要求的视频内容撤换掉。另一方面，随着互联网的发展，对广电领域也造成了很大的冲击，降本增效也被大家所认可。如何以较低的成本实施对实时信号进行在线技审、比对、内容审核多维度的检测，是一个需要解决的问题。

技术实现思路

1、为了克服现有技术的问题，本发明提出了一种基于实时信号的在线技审内审及比对的方法。所述的方法针对实时信号进行多维度的检测，并对检测结果进行仲裁，根据仲裁结果对末级信号进行综合判断，选择其中的最优路，以确保最终的pgm输出为最优选择。

2、本发明的目的是这样实现的：一种基于实时信号的在线技审内审及比对的方法，所述方法所述使用的系统包括：具有能够接收多种信源的输入模块，所述的输入模块与视频缓冲模块连接，所述的视频缓冲模块与指纹提取模块、带有ai智能分析库的内审模块、在线技审模块连接，所述的指纹提取模块与指纹比对模块连接，所述的指纹比对模块、内审模块、在线技审模块与仲裁模块连接，所述的仲裁模块与输出模块连接，所述的方法包括如下步骤：

3、步骤1，接收视音频数据：输入模块接收各种格式的被审计视音频数据，包括同一视音频数据的主备、三备两路视频信号；

4、以下2-4步骤同时进行；

5、步骤2，在线技审：在线技审模块对实时信号进行实时逐帧检测，根据检测项的类别对将采集到的视音频buffer提取特征，计算相应检测项的指标，据此判断信号是否符合质检标准，对每个像素点进行实时采集，实施信号故障的检测，实现实时在线技审；

6、依据在线技审的结果，对当前路信号进行评分，将结果分为三个等级，具体如下：

7、1)常见故障静帧、静音、前周音故障为1分；

8、2)比较严重的故障黑场、彩场、黑场且静音、彩场且静音故障为2分；

9、3)最为严重的故障：视频丢失、彩条故障为3分；

10、步骤3，内审：内审模块调用ai智能分析库,对广电级的实时信号进行逐帧校验，与ai库中的敏感人物进行校验，在校验成功后进行报警，并对实时信号中存在的涉黄、血腥暴力内容进行实时校验分析，当检测到信号出现涉黄、血腥暴力的内容时，实时报警；依据ai内审结果对当前路信号进行评分，将结果分为三个等级：血腥暴力为1分、敏感人物为2分、涉黄内容为3分；

11、步骤4，比对：对主备、三备两套末级信号进行实时比对，具体流程如下：

12、1)获取到信号数据以后，采用指纹提取模块将指纹进行提取，提取后将两路信号的指纹提交到底层；

13、2)获取到指纹信息后，采用异步工作的方式对两路信号的指纹进行匹配，分为两个步骤，首先时帧对齐，对齐帧后进行比较，若后续不匹配帧的数量超过了容忍度，则进行重新对齐，待对齐后重新进行比较；

14、3)对信号的亮度进行检测计算：

15、a.分别计算两路信号的y、u、v的相似度；

16、b.计算两路y、u、v比值的标准差；

17、c.对直方图指纹进行从小到大排序，然后计算相似度；

18、d.根据“亮度整体差异阈值”得到y相似度阈值；

19、e.若y相似度低于阈值，标准差小于阈值，u、v、直方图相似度高于阈值则认为只有亮度整体有差异；

20、4)根据亮度以及相似度计算出两路信号的相似度阈值，若是超过设定阈值则进行不一致提示；

21、步骤5，仲裁：对技审、内审、比对结果进行仲裁，并对每路信号的质量进行实时分析，对每路信号进行评分，依据评分结果得出最后的结果，具体计算结果如下：

22、1)在线技审的得分结果为a；内审的得分结果为b；比对得分结果为c；

23、2)技审的权重所占比例为50％；内审所占比例为30％；比对所占比例为20％；

24、3)最终某一路总得分m＝50％*a+30％*b+20％c；

25、步骤6，输出：将分值最高的画面作为输出信号，通过输出模块输出，结束审查。

26、本发明的优点和有益效果是：本发明对实时信号采用像素分析的方式进行在线技审、使用ai技术进行内审以及对视频指纹进行比对，并且整个业务系统结合三者的检测结果进行仲裁，根据仲裁结果对末级信号进行综合判断，选择其中的最优路，保证最终的pgm输出为最优选择。本发明将多种在线监测方式进行整合，大大降低了检测成本，提高了工作效率。

技术特征：

1.一种基于实时信号的在线技审内审及比对的方法，所述方法所述使用的系统包括：具有能够接收多种信源的输入模块，所述的输入模块与视频缓冲模块连接，所述的视频缓冲模块与指纹提取模块、带有ai智能分析库的内审模块、在线技审模块连接，所述的指纹提取模块与指纹比对模块连接，所述的指纹比对模块、内审模块、在线技审模块与仲裁模块连接，所述的仲裁模块与输出模块连接，其特征在于，所述的方法包括如下步骤：

技术总结
本发明涉及一种基于实时信号的在线技审内审及比对的方法，包括：接收视音频数据；在线技审；内审；比对；仲裁；输出。本发明对实时信号采用像素分析的方式进行在线技审、使用AI技术进行内审以及对视频指纹进行比对，并且整个业务系统结合三者的检测结果进行仲裁，根据仲裁结果对末级信号进行综合判断，选择其中的最优路，保证最终的PGM输出为最优选择。本发明将多种在线监测方式进行整合，大大降低了检测成本，提高了工作效率。

技术研发人员：方林,方正,邢圆庆,王伟,赵国强,莫鑫,符泰然,李淑华,易鑫,金心,蒋锦程,商同,李雨东
受保护的技术使用者：湖南广播影视集团有限公司
技术研发日：
技术公布日：2024/1/13