专利名称：视频信号处理方法和摄像设备的制作方法
技术领域：
本发明涉及摄像机领域，特别涉及一种视频信号处理方法和摄像设备。
背景技术：
随着视频技术的发展，人们还在追求更高的视频分辨率、更大的显示屏，远程呈现(Teleprence)会议系统就是最典型的应用。现有技术使用多个1920*1080的显示器拼接成更大的显示器，或者使用多个投影机通过融合技术实现高分辨率无缝大屏幕的现实。同样地，这种应用也需要超高分辨率的摄像机，现有技术使用多个摄像机进行图像拼接来提供超高分辨率的视频源。 在对现有技术进行分析后，发明人发现现有技术至少具有如下缺点现有技术一般将多个高清摄像机按一定的角度摆放，根据高清摄像机获得的图像拼接出超高分辨率的大图像。在使用多个高清摄像机获得的图像直接进行拼接时，由于摄像机光心不重合，只有在某一距离上的景物能无缝拼接，比该距离近的景物在拼接处会缺少一些图像，比该距离远的景物在拼接处会重复一些图像，造成拼接处图像不清，分辨率低。
发明内容
为了提高分辨率，保证图像拼接处的图像质量，本发明实施例提供了一种视频信号处理方法和摄像设备。所述技术方案如下一方面，本发明提供了一种视频信号处理方法，包括获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；输出处理后的若干巾贞图像的两个或两个以上子图。另一方面，本发明提供了一种摄像设备，包括镜头、传感器、图像分割器、控制器和两个或两个以上ISP处理单元；其中，所述传感器，用于通过所述镜头获取视频信号；所述图像分割器，用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述两个或两个以上ISP处理单元，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述控制器，用于控制所述两个或两个以上ISP处理单元。
本发明提供了一种视频信号处理方法和摄像设备，通过获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；输出处理后的若干帧图像的两个或两个以上子图。采用本发明的技术方案，通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他 的附图。图Ia是本发明实施例提供的一种视频信号处理方法的流程图；图Ib是图像分割示意图；图Ic是二种CFA格式的不意图；图2是本发明实施例提供的一种视频信号处理方法的流程图；图3是本发明实施例提供的一种视频信号处理方法的流程图；图4是本发明实施例提供的一种视频信号处理方法的流程图；图5是本实施例提供的一种摄像设备的结构示意图；图6是本实施例提供的一种摄像设备的结构示意图；图7是本实施例提供的一种摄像设备的结构示意图；图8是本实施例提供的一种摄像设备的结构示意图。
具体实施例方式为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。图Ia是本发明实施例提供的一种视频信号处理方法的流程图。参见图la，该实施例包括101、获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；该步骤101的获取视频信号的过程可以由图像传感器实现，优选地，该图像传感器为应用于单反数码照相机的超高清图像传感器，例如，可以为AIS(Area Image Sensor,区域图像传感器)，该AIS内部以矩阵形式布置多个图像采集元件，其具体原理和工作方式与现有技术所公开的一致，在此不做赘述。其中，对若干帧图像中的若每帧图像进行的分割可以根据以下任一种方法进行
(I)根据预设方位(子图的高度和宽度)，将图像帧分割为多个预设方位的子图。(2)根据预设像素值，将该图像帧分割为两个或两个以上子图，每个子图所包含的像素值最大为预设像素值。(3)根据ISP处理单元的个数N，将该图像帧分割为N个方位相等的子图。该分割的方式包括但不限于上述方法，本发明实施例不做具体限定。进一步地，该分割后的各个子图均具有对应的位置参数，该位置参数包括子图在原始图像中的起始点坐标以及子图的方位(子图的高度和宽度)。需要说明的是，在进行图像分割时，相邻图像之间可以有重叠部分，还可以有拼缝部分，当然，还可以是无缝拼接，其具体的分割方式可以根据播放设备的排列及其具体形态进行调整。参考图lb，点画线为原始图像，其相对原点坐标为(0，0)，子图I、子图2、子图3、子图4、子图5如图Ib中实线，通常有一段相互重叠的区域，在分割时，可设置每个子图的起始点坐标(StartX, StartY)和每个子图的方位(Width, Height)。本领域技术人员可以获知，该图像分割可以通过图像分割器实现，该图像分割器用于把一个大画面(一帧图像)分割成多个子画面( 子图)，且允许子画面之间有重叠区域。在本实施例中，在获取到视频信号后，将视频信号的若干帧图像中的每一帧分割为两个或两个以上子图，该若干帧可以是视频信号所包含的所有图像帧，还可以是视频信号中所包含的部分图像帧。优选地，在获取到视频信号后，可将所述视频信号中的每帧图像分割成两个或两个以上子图，以达到最佳的处理效果。102、使用两个或两个以上ISP(Image Sensor Processor,图像传感器处理器)处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；其中，该第一处理包括缩放处理、CFA(Color Filter Array,色彩滤波阵列)插值处理、RGB2RGB变换、GAMMA变换和RGB2YCbCr变换中一种或几种视频处理功能，下面对上述的各种视频处理功能进行一一介绍(I)缩放处理是指ISP处理单元对接收到的子图的RGB三基色进行放大或缩小的处理，该缩放处理可以根据预设的缩放参数进行，其具体公式可以如下Rout = GainRXRin ；Gout = GainGXGin ；Bout = GainBXBin ；其中，RiruGin和Bin分别为该接收到的子图的三基色指数，GainR、GainG和GainB分别为三基色对应的预设的缩放参数，Rout、Gout和Bout为经过缩放处理后的三基色指数。(2) CFA插值处理，是采用插值的方法为每个像素获得RGB三种颜色。由于来自传感器的图像信号每个像素只有RGB中的一种颜色，因此需要应用CFA插值算法进行CFA插值处理。图Ic是三种CFA格式的示意图，如图Ic所示，CFA格式包括三种，在进行本实施例中的CFA插值处理时，应用预设CFA格式，使CFA插值处理与传感器的CFA实际排列一致。(3) RGB2RGB变换，用于实现色彩空间转换，变换后的图像色彩更鲜艳，其具体公式可以如下Rout = Mil XRin+M21 XGin+M31 XBin+Roffset ；Gout = M12XRin+M22XGin+M32XBin+Goffset ；
Bout = M13 X Rin+M23 X Gin+M33 X Bin+Boffset ；其中，Rin、Gin和Bin分别为该接收到的子图的三基色指数，Mil、M21、M31、M12、M22、M32、M13、M23和M33为3X3矩阵的系数，Rout、Gout和Bout为经过调整的三基色指数，Roffset, Goffset和Boffset分别为三基色的调整值。(4) GAMMA变换是一种非线性变化，用于提高图像亮度，该变换通常使用查找表的方法Rout = LUT (Rin)；Gout = LUT (Gin)；Bout = LUT (Bin)。 其中，LUTO为预设的GAMMA变换表格，其中包含三基色指数及其相应的经过GAMMA变换的三基色指数。(5) RGB2YCbCr变换用于进行色彩空间转换Yout = KllX Rin+K21 X Gin+K31 X Bin+Yof f set ；Cbout = K12XRin+K22XGin+K32XBin+Cboffset ；Crout = K13XRin+K23XGin+K33XBin+Croffset ；其中，Rin、Gin和Bin分别为该接收到的子图的三基色指数，K11、K21、K31、K12、K22、K32、K13、K23和Κ33为3 X 3矩阵的系数，Yout、Cbout和Crout分别为输出亮度、输出蓝色差和输出红色差，在国际标准CCIR-601里均有明确定义，Yoffset、Cboffset和Croffset分别为亮度、蓝色差和红色差的调整值。需要说明的是，该ISP处理单元中第一处理各个参数的设置可以通过控制器进行，该重组单元的具体功能在于控制ISP处理单元对图像进行处理，以输出理想的无重叠、无缺失的视频流。103、输出处理后的若干巾贞图像的两个或两个以上子图。该两个或两个以上ISP处理单元对子图进行处理后，输出处理后的子图，输出的子图是按照帧排列，形成了视频数据流。在本实施例中，输出的视频数据流的条数与ISP处理单元的个数相同，可直接输出给播放设备进行视频播放。本实施例提供的方法，通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。图2是本发明实施例提供的一种视频信号处理方法的流程图。参见图2，该实施例具体包括201、获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；该步骤201与步骤101同理，在此不再赘述。202、使用所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；该步骤202与步骤102同理，在此不再赘述。
203、根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上ISP处理单元的数目不同；在本实施例中，重组后的视频流与所述两个或两个以上ISP处理单元的数目不同，也即是经过ISP处理单元处理后，各个ISP处理单元输出处理后的子图，该多条子图数据流经过重组后，得到大于或小于该多条子图数据流数目的视频流。其中，重组具体包括根据位置参数将处理后的子图进行拼接或剪裁处理。例如，m个ISP处理单元输出m个经过处理的子图，经过重组，排列为η个视频流，按照标准视频格式输出，其中，m不等于η。、
需要说明的是，该重组过程可以通过重组单元实现，该重组单元用于把多路视频画面(处理后的所述若干帧图像的两个或两个以上子图)重新分割、拼接，形成一路或多路视频画面(重组后的视频流)。204、输出所述重组后的视频流。得到重组后的视频流后，使得输出的视频数据流的条数与播放设备的个数相同或小于播放设备的个数，可直接输出给播放设备进行视频播放。本实施例提供的方法，通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。进一步地，对处理后的多路子图进行重组，使得其输出视频流的个数可以适应多种组合形式的播放设备，应用范围广泛。图3是本发明实施例提供的一种视频信号处理方法的流程图。参见图3，该实施例具体包括301、获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；该步骤301与步骤101同理，在此不再赘述。302、使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理；该步骤302与步骤102同理，在此不再赘述。303、当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理；该统计参数是对该ISP处理单元所输出的处理后的子图的三色增益和亮度进行统计得到的，在该步骤303中，ISP处理单元根据该统计参数调整三基色增益GainR、GainG、GainB，使得ISP处理单元输出的图像亮度合适，并保持白平衡。需要说明的是，该控制器根据统计参数对ISP处理单元的各个参数进行设置，以使得ISP处理单元进行第二处理，控制器根据步骤304中得到的统计参数和2A算法对三色增益和亮度进行计算，从而调整设置的参数，使得ISP处理单元对接收到的子图进行第二处理。
304、统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数；统计参数包括整幅图像或指定统计窗口内的RGB三基色的平均值和亮度Y的平均值。获取到统计参数后，根据2A(AE、AWB)算法的计算结果，调整三基色增益GainR、GainG、GainB，使得ISP处理单元输出的图像亮度合适，并保持白平衡。其中，2A是指AE(Auto-Exposure,自动曝光)和AWB(AutoWhite Balance,自动白平衡)，受环境照明的影响，从传感器输出的图像可能偏暗，也可能太亮，可能偏兰，也可能偏红。AE算法是根据“灰色世界假设”的原理调整三基色增益GainR、GainG、GainB使图像平均亮度Yavg达到预设的目标值。AWB算法是根据“灰色世界假设”的原理调整三基色增益GainR、GainG、GainB使图像三基色平均值Ravg、Gavg、Bavg接近相等。本领域技术人员可以获知，“灰色世界假设”原理是自然场景中图像平均值接近灰色，不太亮也不太暗，而且Ravg、Gavg、Bavg接近相等。本领域技术人员可以获知，2A算法可以有多种变形,本实施例对此不做具体限定。需要说明的是，该统计具体ISP处理单元实现，ISP处理单元对步骤304中经过第二处理的子图进行统计，得到该子图的RGB三基色的平均值和亮度Y的平均值，并将得到的数据发送给控制器，控制器利用各个平均值和2A算法调整ISP处理单元的参数，并控制ISP处理单元对接收到的子图进行第二处理。305、输出处理后的若干巾贞图像的两个或两个以上子图；该两个或两个以上ISP处理单元对子图进行处理后，输出处理后的子图，输出的子图是按照帧排列，形成了视频数据流。在本实施例中，输出的视频数据流的条数与ISP处理单元的个数相同，可直接输出给播放设备进行视频播放。本实施例提供的方法，通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。进一步地，对处理后的多路子图的三色增益和亮度进行统计，并根据统计得到的统计参数对ISP处理单元的三色增益和亮度的处理进行控制，使得输出的子图亮度合适，并保持白平衡。图4是本发明实施例提供的一种视频信号处理方法的流程图。参见图3，该实施例具体包括401、获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图；该步骤401与步骤101同理,在此不再赘述。402、使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；该步骤402与步骤102同理，在此不再赘述。403、当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个 或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理；该步骤403与步骤303同理，在此不再赘述。404、统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数；该步骤404与步骤304同理,在此不再赘述。405、根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若 干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上子图信号的数目不同；该步骤405与步骤203同理，在此不再赘述。406、输出所述重组后的视频流。得到重组后的视频流后，使得输出的视频数据流的条数与播放设备的个数相同或小于播放设备的个数，可直接输出给播放设备进行视频播放。本实施例提供的方法，通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。进一步地，对处理后的多路子图进行重组，使得其输出视频流的个数可以适应多种组合形式的播放设备，应用范围广泛。进一步地，对处理后的多路子图的三色增益和亮度进行统计，并根据统计得到的统计参数对ISP处理单元的三色增益和亮度的处理进行控制，使得输出的子图亮度合适，并保持白平衡。图5是本实施例提供的一种摄像设备的结构示意图。参见图5，该摄像设备包括镜头、传感器Sensorl、图像分割器splitterl、控制器Cl和两个或两个以上ISP处理单元 ISPl、ISP2......ISPm ；其中，所述传感器Sensorl，用于通过所述镜头获取视频信号；所述图像分割器splitterl，用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；具体地，该图像分割器splitterl对每帧图像进行的分割可以根据以下任一种方法进行(1)根据预设方位(子图的高度和宽度)，将图像帧分割为多个预设方位的子图。
(2)根据预设像素值，将图像帧分割为两个或两个以上子图，每个子图所包含的像素值最大为预设像素值。(3)根据ISP处理单元的个数N，将该图像帧分割为N个方位相等的子图。该分割的方式包括但不限于上述方法，本发明实施例不做具体限定。进一步地，该分割后的各个子图均具有对应的位置参数，该位置参数包括子图在原始图像中的起始点坐标以及子图的方位(子图的高度和宽度)。需要说明的是，在进行图像分割时，相邻图像之间可以有重叠部分，还可以有拼缝部分，当然，还可以是无缝拼接，其具体的分割方式可以根据播放设备的排列及其具体形态进行调整。所述两个或两个以上ISP处理单元ISP1、ISP2…ISPm，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述控制器Cl，用于控制所述两个或两个以上ISP处理单元ISPl、ISP2 "ISPm。具体地，该控制器Cl控制图像分割器splitterl对接收到的视频信号中的若干帧图像进行分割，并控制两个或两个以上ISP处理单元对分割得到的若干帧图像的两个或两个以上子图进行处理，以输出处理后的子图。其中，所述第一处理包括对缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能。图6是本实施例提供的一种摄像设备的结构示意图。参见图6，该摄像设备包括镜头、传感器Sensor2、图像分割器splitter2、控制器C2、两个或两个以上ISP处 理单元ISPl、ISP2......ISPm和重组单元Rl ；其中，所述传感器Sensorf，用于通过所述镜头获取视频信号；所述图像分割器splitterf，用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述两个或两个以上ISP处理单元ISP1、ISP2…ISPm，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述控制器C2，用于控制所述两个或两个以上ISP处理单元ISPl、ISP2 "ISPm。重组单元Rl，用于根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上ISP处理单元的数目不同。该控制器C2根据子图的位置参数设置重组单元Rl的重组参数，使得输出的η路视频流在拼接处既无重叠也无缺失。其中，所述第一处理包括对缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能。图7是本实施例提供的一种摄像设备的结构示意图。参见图7，该摄像设备包括镜头、传感器Sensor3、图像分割器splitter3、控制器C3、两个或两个以上ISP处理单元 ISPl、ISP2......ISPm ；其中，所述传感器Sensorf，用于通过所述镜头获取视频信号；所述图像分割器splitterf，用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述两个或两个以上ISP处理单元ISP1、ISP2…ISPm，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述控制器C3，用于控制所述两个或两个以上ISP处理单元ISPl、ISP2 "ISPm。所述两个或两个以上ISP处理单元ISPI、ISP2…I SPm还用于统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数，并将所述统计参数发送给所述控制器C3 ；所述控制器C3还用于当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理。重组单元R2， 用于根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上ISP处理单元的数目不同。其中，所述第一处理包括对缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能；所述第二处理至少包括三色增益调整和亮度调整
之一 O图8是本实施例提供的一种摄像设备的结构示意图。参见图8，该摄像设备包括镜头、传感器Sensor4、图像分割器splitter4、控制器C4、两个或两个以上ISP处理单元ISPl、ISP2......ISPm和重组单元R2 ；其中，所述传感器SenSOr4，用于通过所述镜头获取视频信号；所述图像分割器splitterl用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述两个或两个以上ISP处理单元ISP1、ISP2…ISPm，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同；所述控制器C4，用于控制所述两个或两个以上ISP处理单元ISPl、ISP2" ISPm。所述两个或两个以上ISP处理单元ISPI、ISP2…I SPm还用于统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数，并将所述统计参数发送给所述控制器C4 ；所述控制器C4还用于当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理。其中，所述第一处理包括对缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能；所述第二处理至少包括三色增益调整和亮度调整
之一 O需要说明的是，上述各个实施例中所述的m是大于等于2的整数，η为大于等于I的整数。需要说明的是上述实施例提供的各个摄像设备在视频信号处理时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。如，图像分割器、ISP处理单元和控制器等，均可以由硬件(一个或多个芯片)来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。另外，上述实施例提供的摄像设备与视频信号处理方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和 原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
权利要求
1.一种视频信号处理方法，其特征在于，包括 获取视频信号，将所述视频信号中的若干帧图像分割成两个或两个以上子图； 使用两个或两个以上图像传感器处理器ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同； 输出处理后的若干帧图像的两个或两个以上子图。
2.根据权利要求I所述的方法，其特征在于，使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，之后包括 根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上ISP处理单元的数目不同； 相应地，输出处理后的若干帧图像的两个或两个以上子图，具体包括 输出所述重组后的视频流。
3.根据权利要求I或2所述的方法，其特征在于，使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，之后包括 统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数； 相应地，所述方法还包括 当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理。
4.根据权利要求3所述的方法，其特征在于，所述第一处理包括缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能；所述第二处理至少包括三色增益调整和亮度调整之一。
5.一种摄像设备，其特征在于，包括镜头、传感器、图像分割器、控制器和两个或两个以上ISP处理单元；其中， 所述传感器，用于通过所述镜头获取视频信号； 所述图像分割器，用于将所述视频信号中的若干帧图像分割成两个或两个以上子图，并将所述若干帧图像的两个或两个以上子图分别传送给所述两个或两个以上ISP，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同； 所述两个或两个以上ISP处理单元，用于使用两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图进行第一处理，并输出处理后的若干帧图像的两个或两个以上子图，其中，所述两个或两个以上子图与所述两个或两个以上ISP处理单元的数目相同； 所述控制器，用于控制所述两个或两个以上ISP处理单元。
6.根据权利要求5所述的摄像设备，其特征在于，所述摄像设备还包括 重组单元，用于根据所述若干帧图像的两个或两个以上子图的位置参数对处理后的所述若干帧图像的两个或两个以上子图进行重组，得到重组后的视频流，所述重组后的视频流与所述两个或两个以上ISP处理单元的数目不同。
7.根据权利要求5或6所述的摄像设备，其特征在于，所述两个或两个以上ISP处理单元还用于统计处理后的所述若干帧图像的两个或两个以上子图的图像参数，得到统计参数，并将所述统计参数发送给所述控制器； 所述控制器还用于当所述两个或两个以上ISP处理单元进行所述第一处理时，根据所述两个或两个以上ISP处理单元的统计参数控制所述两个或两个以上ISP处理单元，使得所述两个或两个以上ISP处理单元对所述若干帧图像的两个或两个以上子图的三色增益和亮度进行第二处理。
8.根据权利要求7所述的摄像设备，其特征在于，所述第一处理包括对缩放处理、CFA插值处理、RHB2RGB变换、GAMMA变换和RGB2YCbCr中一种或几种视频处理功能；所述第二处理至少包括三色增益调整和亮度调整之一。
全文摘要
本发明公开了一种视频信号处理方法和摄像设备，属于摄像机领域。该方法包括获取视频信号，将该视频信号中的若干帧图像分割成两个或两个以上子图；使用两个或两个以上ISP处理单元对该若干帧图像的两个或两个以上子图进行第一处理；输出处理后的若干帧图像的两个或两个以上子图。该摄像设备包括包括镜头、传感器、图像分割器、控制器和两个或两个以上ISP处理单元。本发明通过使用图像分割、并使用两个或两个以上ISP处理单元，对分割后的子图进行分路处理，可提高输出图像的分辨率，避免拼接处图像不清，实现超高分辨率的摄像机，避免了现有超高清视频摄像系统使用多个摄像机进行图像拼接带来的拼缝重叠或缺失、色彩差异、不同步等缺陷。
文档编号H04N5/14GK102665031SQ20121013261
公开日2012年9月12日 申请日期2012年4月28日 优先权日2012年4月28日
发明者赵光耀 申请人:华为技术有限公司