一种面向视频的视觉特征编码方法及装置的制造方法
【技术领域】
[0001] 本发明设及计算机技术，具体设及一种面向视频的视觉特征编码方法及装置。
【背景技术】
[0002] 当前，随着智能终端的普及，通过终端摄像头实时捕捉视频流，并进行实时的分析 和挖掘的应用越来越多。目P，如何在海量的图像视频中挖掘出用户需要的视频/图像信息 成为研究热点。
[0003] 当前技术中，基于智能终端的实时视频流分析方法有两种方案。
[0004] 第一种方案为：在移动终端侧直接发送经过编码后的视频流到服务器，服务器收 到视频流后会进行解码和视觉分析。该方案的缺陷是；为保证视频质量可用于视觉分析，视 频编码的压缩率较低，最终带来很大的带宽消耗。
[0005] 第二种方案为：移动终端对视频流的帖序列依次提取的全局视觉特征，然后将每 帖的全局视觉特征按顺序发送到服务端进行视觉分析。该方案在提取全局视觉特征的过程 中使用特征降维和量化处理的过程W获得较低的比特率，但在一定程度上影响视觉分析； 除此之外，第二种方案没有考虑帖间全局特征在时域上的相关性，因此，在特征数据流上存 在冗余，导致客户端传送的数据量非常大，且传输延迟。
【发明内容】
[0006] 针对现有技术中的缺陷，本发明提供了一种面向视频的视觉特征编码方法及装 置，能够在客户端传输数据时快速压缩传输的特征数据，降低传输数据量。
[0007] 第一方面，本发明提供一种面向视频的视觉特征编码方法，包括：
[000引获取视频流中当前帖的全局特征；
[0009] 根据所述视频流中当前帖相邻帖的全局特征，确定当前帖的全局特征是否有参考 全局特征；
[0010] 如果有，则根据当前帖的参考全局特征的子向量，获取所述当前帖的全局特征对 应的参考子向量；
[0011] 根据所述视频流中无参考全局特征的帖的全局特征的子向量，和有参考全局特征 的帖的全局特征的子向量及对应的参考子向量，对所述视频流中各帖的全局特征进行编 码，获取所述视频流的待发送的全局特征比特流。
[0012] 可选地，所述根据所述视频流中当前帖相邻帖的全局特征，确定当前帖的全局特 征是否有参考全局特征，包括：获取当前帖的全局特征与相邻的P帖中每一帖的全局特征 的相似度，P为大于等于1的自然数；
[0013] 如果有至少一个相似度大于等于预设阔值，则选择最高相似度对应的全局特征作 为当前帖的参考全局特征；
[0014] 如果所有相似度都小于预设阔值，则确定当前帖无参考全局特征。
[0015] 可选地，所述根据当前帖的参考全局特征的子向量，获取所述当前帖的全局特征 对应的参考子向量，包括：
[0016] 根据当前帖的全局特征的生成规则，确定当前帖的全局特征的子向量；
[0017] 根据参考全局特征的生成规则，确定参考全局特征的子向量；
[0018] 根据所述当前帖的全局特征的子向量和所述参考全局特征的子向量，确定所述全 局特征在所述参考全局特征中对应的参考子向量。
[0019] 可选地，所述全局特征比特流包括：头部区域；
[0020] 所述头部区域包括；是否使用参考全局特征的信息，所述参考全局特征的索引信 息、标示组成全局特征的概率密度函数使用信息、标示累积梯度向量的类别数信息、和标示 子向量的编码方式的信息；
[0021] 或者，
[0022] 所述全局特征比特流包括；头部区域和非头部区域；
[0023] 所述头部区域包括；是否使用参考全局特征的信息，所述参考全局特征的索引信 息、标示组成全局特征的概率密度函数使用信息、标示累积梯度向量的类别数信息、和标示 子向量的编码方式的信息、和/或编码方式对应的量化参数信息；
[0024] 所述非头部区域包括：编码后的无参考全局特征的帖的全局特征对应的子向量， 和/或，编码后的有参考全局特征的帖的子向量与参考子向量的残差。
[0025] 可选地，根据所述视频流中无参考全局特征的帖的全局特征的子向量，和有参考 全局特征的帖的全局特征的子向量及对应的参考子向量，对所述视频流中各帖的全局特征 进行编码，获取所述视频流的待发送的全局特征比特流，包括：
[0026] 对所述视频流中无参考全局特征的帖的全局特征的子向量和当前全局特征中无 参考子向量的子向量采用第一预设编码方式进行编码，获取第一比特流；
[0027] 获取有参考全局特征的帖的全局特征的子向量与所述参考全局特征的参考子向 量的残差；
[002引对所述残差采用第二预设编码方式进行编码，获取第二比特流；
[0029] 所述第一比特流和所述第二比特流组成所述视频流的待发送的全局特征比特 流；
[0030] 所述全局特征比特流的头部区域由二值码组成，非头部区域包括；采用第一预设 编码方式编码的子向量，和采用第二预设编码方式编码的残差；
[003U或者，
[0032] 获取有参考全局特征的帖的全局特征的子向量与所述参考全局特征的参考子向 量的残差；
[0033] 对所述残差采用第二预设编码方式进行编码，获取第二比特流；
[0034] 将所述第二比特流组成所述视频流的待发送的全局特征比特流；
[0035] 所述全局特征比特流的头部区域由二值码组成，非头部区域包括；采用第二预设 编码方式编码的残差；
[0036] 或者，
[0037] 所述全局特征比特流只包括由二值码组成的头部区域，无非头部区域。
[0038] 可选地，所述方法还包括：
[0039] 将所述视频流的待发送的全局特征比特流发送服务器，W使服务器基于所述全局 特征比特流和所述服务器中存储的与所述客户端中相同的全局特征生成规则，获取所述视 频流中各帖的全局特征。
[0040] 第二方面，本发明提供一种面向视频的视觉特征解码方法，包括：
[0041] 接收客户端发送的视频流的全局特征比特流，所述全局特征比特流包括；头部区 域；所述头部区域包括；是否使用参考全局特征的信息，所述参考全局特征的索引信息、标 示组成全局特征的概率密度函数使用信息、标示累积梯度向量的类别数信息、和标示子向 量的编码方式的信息；
[0042] 根据所述全局特征比特流和所述服务器中存储的与所述客户端中相同的全局特 征生成规则，获取所述视频流中各帖的全局特征；
[0043] 或者，
[0044] 接收客户端发送的视频流的全局特征比特流，所述全局特征比特流包括；头部区 域和非头部区域，所述头部区域包括：是否使用参考全局特征的信息，所述参考全局特征的 索引信息、标示组成全局特征的概率密度函数使用信息、标示累积梯度向量的类别数信息、 标示子向量的编码方式的信息、和/或编码方式对应的量化参数信息；所述非头部区域包 括；编码后的无参考全局特征的帖的全局特征对应的子向量，和/或，编码后的有参考全局 特征的帖的子向量与参考子向量的残差；
[0045] 根据所述全局特征比特流和所述服务器中存储的与所述客户端中相同的全局特 征生成规则，获取所述视频流中各帖的全局特征。
[0046] 第=方面，本发明还提供一种面向视频的视觉特征编码装置，包括：
[0047] 全局特征获取单元，用于获取视频流中当前帖的全局特征；
[0048] 判断单元，用于根据所述视频流中当前帖相邻帖的全局特征，确定当前帖的全局 特征是否有参考全局特征；
[0049] 参考子向量获取单元，用于在判断单元确定当前帖的全局特征有参考全局特征， 根据当前帖的参考全局特征的子向量，获取所述当