图像拼接方法及其图像拼接装置与流程

本发明涉及一种图像拼接方法及其图像拼接装置，特别是有关一种可使拼接图像色彩一致的图像拼接方法及其图像拼接装置。

背景技术

全景相机利用多个摄像镜头对不同视角拍摄照片，在通过图像拼接技术将相邻照片接合以形成全景图片。然而环境光线在不同视角的光强度会有所差异，并且不同摄像镜头彼此间的镜头参数，例如曝光、白平衡与色彩，通常略有不同，故无论全景相机是个别或同时驱动多个摄像镜头拍摄不同视角的照片时，该些照片在色彩与亮度皆缺乏一致性。使用该些照片进行拼接所得的全景图片，在照片接缝处会形成明显可见的色彩和/或亮度落差。如何设计一种有效改善拼接效果的图像拼接方法，便为相关产业的发展目标。

技术实现要素：

本发明提供一种可使拼接图像色彩一致的图像拼接方法及其图像拼接装置，以解决上述的问题。

本发明公开一种图像拼接方法，其包括取得视野相邻的两张图像，侦测该两相邻图像之间的重叠区域，统计该两张相邻图像分别在该重叠区域的图像信息，利用该图像信息运算补偿函数，以及根据该补偿函数调整该两张相邻图像的其中一个图像，使该两张相邻图像的该图像信息彼此一致。

本发明进一步公开一种图像拼接装置，包括两个图像获取单元以及一个运算处理单元。该两个图像获取单元用来取得视野相邻的两张图像。该运算处理单元电连接在该些图像获取单元。该运算处理单元使用该两张图像执行图像拼接方法，意即侦测该两张相邻图像之间的重叠区域，统计该两张相邻图像分别在该重叠区域的图像信息，利用该图像信息运算补偿函数，以及根据该补偿函数调整该两张相邻图像的其中一个图像，使该两张相邻图像的该图像信息彼此一致。

本发明的图像拼接方法及其图像拼接装置使用图像获取单元的视角重叠现象，在相邻图像上的重叠区域进行一致性运算，计算出补偿函数的所需数值，对相邻图像中的其中一张或多张图像进行补偿，能够有效克服多个图像获取单元因为摆放视角、个别光学组件，例如图像传感器、透镜模块、滤光片等，所产生的图像信息差异，让拼接后全景画面能呈现亮度与色彩的一致性。

附图说明

图1为本发明实施例的图像拼接装置的功能方块图。

图2为本发明实施例的图像拼接装置的示意图。

图3为本发明实施例的图像拼接方法的流程图。

图4为本发明实施例的相邻图像的示意图。

其中，附图标记说明如下：

10图像拼接装置

12图像获取单元

14运算处理单元

i1、i2图像

fv1左图像获取单元的视野

fv2右图像获取单元的视野

fv3重叠区域

步骤300、302、304、306、308、310、312、314

具体实施方式

请参阅图1与图2，图1为本发明实施例的图像拼接装置10的功能方块图，图2为本发明实施例的图像拼接装置10的示意图。图像拼接装置10包括彼此电连接在一起的多个图像获取单元12以及运算处理单元14。多个图像获取单元12以不同视角指向监控区域，取得视野相邻的多张图像i1与i2。运算处理单元14可将该些相邻图像i1与i2拼接成全景画面，提供全方位的监控图像与录像。进行图像拼接时，运算处理单元14执行本发明所述的图像拼接方法，避免全景画面在图像相邻处形成色彩和/或亮度落差的不自然接缝。

请参阅图3与图4，图3为本发明实施例的图像拼接方法的流程图，图4为本发明实施例的相邻图像i1与i2的示意图。图3所述的图像拼接方法适用在图1与图2所示的图像拼接装置10。图像获取单元12的数量可为两个或两个以上，每一个图像获取单元12所取得的图像和相邻图像获取单元12取得的图像有视野重叠现象，如图1所示的重叠区域fv3，运算处理单元14才能将相邻图像i1与i2两两拼接在一起。图像获取单元12的排列方式与相邻图像的拼接排列不限在本实施例所述，端视实际需求而定；例如六张图像可以排成长宽比为一比六的条型全景画面、也可排成长宽比为二比三的方形全景画面。

启动图像拼接装置10的图像拼接功能后，首先执行步骤300与步骤302，运算处理单元14从图像获取单元12取得两张或两张以上视野相邻的图像i1与i2，并侦测该些相邻图像之间的重叠区域fv3。如图2所示，左侧图像获取单元12的视野fv1和右侧图像获取单元12的视野fv2之间形成重叠区域fv3。在本发明的可能实施态样中，图像拼接方法可将相邻图像的全部重叠画面都定义为重叠区域fv3、也可仅选定重叠画面的部分区域作为重叠区域fv3；重叠画面的部分选定可以手动挑选、也可利用图像辨识技术进行动态挑选，通过辨识重叠画面里的特定图案来定义重叠区域fv3，然实际应用并不限在此。此外，步骤302还能选择性表示为图像拼接方法先行侦测相邻图像i1与i2间的非重叠区域，通过从相邻图像i1与i2排除非重叠区域来得到所需的重叠区域fv3。

接着，执行步骤304与步骤306，在重叠区域fv3里选定有效信息区，再根据相邻图像i1与i2在有效信息区里的图像信息分别进行统计。有效信息区的选定设计用来滤掉重叠区域fv3内一些可能会影响图像拼接精确性的噪声。有效信息区可根据单一张图像i1或i2进行选定、或可同时考虑多张图像i1与i2进行选定；再者，有效信息区可以直接从重叠区域fv3里的特定范围进行静态指定、或通过图像辨识技术进行动态挑选。图像拼接方法还能根据重叠区域fv3里具有相似特征的范围选定有效信息区，而该些相似特征包括但不限在亮度相似、色彩相似、锐利度相似与图像梯度相似。相应地，图像信息可为亮度、色度与彩度等图像参数的集合。还需提及的是，步骤304为选择性步骤，若选择不执行步骤304，图像拼接方法直接统计相邻图像分别在重叠区域fv3里的图像信息。

接着，执行步骤308与步骤310，利用统计得到的图像信息运算补偿函数，判断补偿函数是否介在预定范围内。若补偿函数介在预定范围内，执行步骤312以原始的补偿函数调整相邻图像；若补偿函数超出预定范围，则执行步骤314以校正后的补偿函数调整相邻图像。该些相邻图像经补偿后，便能用来合并出没有色彩/亮度落差的全景画面在本发明优选实施例中，补偿函数为默认理想值和任一个图像的比值，然实际应用当不限在此。举例来说，某一个图像的图像信息值低在默认理想值时，补偿函数对该图像的补偿权重大在1.0；另一个图像的图像信息值高在默认理想值时，补偿函数对该图像的补偿权重会小在1.0。为了避免补偿调幅过大，造成图像拼接的不自然，图像拼接方法优选地需通过步骤314校正补偿函数的变动幅度，避免相邻图像间拼接处的色彩和/或亮度产生剧烈变化。

特别一提的是，补偿函数的补偿参数可定义为图像数据的色相(hue)、饱和度(saturation)、明度(value)、亮度(lightness)、彩度(chroma)和/或三原色光(rgb)等。计算补偿函数的校正权重时，图像拼接方法可选择上述全部的补偿参数、或仅选择部分的几个补偿参数，利用线性回归、非线性回归或线性规划技术去计算其均值、最高参数值、最低参数值或其它可能的运算方式，找出适合该些补偿参数的调配权重及其补偿函数，并通过线性补偿或非线性补偿技术调整相邻图像间其中一张图像，以显著提升相邻图像在拼接处的亮度与色彩一致性。其中，所述补偿可施行在模拟增益、数字增益、白平衡增益、色彩校正矩阵等任何可能的色彩和/或亮度的调整功能。

综上所述，本发明的图像拼接方法及其图像拼接装置使用图像获取单元的视角重叠现象，在相邻图像上的重叠区域进行一致性运算，计算出补偿函数的所需数值，对相邻图像中的其中一张或多张图像进行补偿，能够有效克服多个图像获取单元因为摆放视角、个别光学组件(例如图像传感器、透镜模块、滤光片等)所产生的图像信息差异，让拼接后全景画面能呈现亮度与色彩的一致性。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。