信息处理装置、信息处理方法和程序与流程

本技术涉及信息处理装置、信息处理方法和程序，并且使得能够容易地调整白平衡。

背景技术：

1、传统上，在使用成像设备对被摄体进行成像的情况下，执行白平衡调整，使得白色对象被识别为白色。在白平衡调整中，考虑到成像场景的光源等，针对每个颜色分量自动设置白平衡增益(在下文中，简称为“增益”)，并且利用所设置的增益来调整每个颜色分量的信号水平。例如，在被称为灰度世界的方法中，假设整个图像的像素值的平均值成为消色差来执行白平衡调整。另外，如专利文献1所述，在使用利用对象的反射模型来估计光源颜色的方法的情况下，可以基于估计的光源颜色来执行白平衡调整。此外，非专利文献1提出了使用深度学习执行白平衡调整的方法。

2、引文列表

3、专利文献

4、专利文献1：日本专利第4447520号

5、非专利文献

6、非专利文献1：afifi,mahmoud and brown,michael s.deep white-balanceediting,cvpr 2020.

技术实现思路

1、本发明要解决的问题

2、顺便提及，在被称为灰度世界的方法中，由于图像的平均颜色被视为光源颜色，因此在假设不成立的情况下，诸如当对象的平均颜色有偏差时，准确度降低。另外，由于使用整个图像的平均值，因此难以应对光源颜色按每个区域不同的场景。

3、另外，在专利文献1中公开的估计光源颜色的方法中，假设图像中的亮度值由“仅漫反射光”或“漫反射光+镜面反射光”构成，提取镜面反射光，并且将其视为光源颜色。然而，由于漫反射光的强度实际上取决于纹理或对象法线而改变，因此需要选择不受纹理或对象法线影响的对。另外，“仅漫反射光”的假设是非常严格的假设，而且也很难找到该假设成立的像素。此外，使用深度学习的方法可以使用诸如图像中的对象、环境和时区的上下文，但是取决于学习数据，并且需要非常繁重且复杂的处理。

4、因此，本技术的目标是提供能够使用彩色偏振图像容易地调整白平衡的信息处理装置、信息处理方法和程序。

5、问题的解决方案

6、本技术的第一方面是：

7、一种信息处理装置，包括：

8、消色差区域提取单元，其通过使用从彩色偏振图像获取的偏振信息来提取彩色偏振图像中的消色差区域；以及

9、增益设置单元，其将用于彩色偏振图像的白平衡调整的白平衡增益设置为使得由消色差区域提取单元提取的消色差区域为消色差的白平衡增益。

10、在本技术中，消色差区域提取单元使用从彩色偏振图像获取的偏振信息来提取彩色偏振图像中的消色差区域。例如，消色差区域提取单元通过使用偏振信息针对彩色偏振图像的每个颜色分量计算线性偏振度作为消色差确定信息，并且将线性偏振度的颜色分量之间的偏差在预设的消色差区域确定标准内的区域设置为消色差区域。另外，消色差区域提取单元计算斯托克斯矢量作为消色差确定信息，并且针对斯托克斯矢量的多个分量的比率，将颜色分量之间的偏差在预设的消色差区域确定标准内的区域设置为消色差区域。在这种情况下，消色差区域提取单元使用指示至少非偏振的亮度或平均亮度的分量作为多个分量。

11、增益设置单元将用于彩色偏振图像的白平衡调整的白平衡增益设置为使得由消色差区域提取单元提取的消色差区域成为消色差的白平衡增益。通过使用针对每个消色差区域设置的白平衡增益的插值处理来设置与消色差区域不同的区域的白平衡增益。此外，增益设置单元基于针对每个消色差区域设置的白平衡增益来设置用于彩色偏振图像的整个区域的白平衡增益或与消色差区域不同的区域的白平衡增益。此外，增益设置单元可以使用相邻的消色差区域的白平衡增益执行插值处理。例如，消色差区域提取单元执行提取的消色差区域的类别分类，并且增益设置单元将针对通过类别分类而分类的每个类别设置的白平衡增益和位置设置为相邻的消色差区域的白平衡增益和位置。此外，增益设置单元可以执行彩色偏振图像的区域划分，并且以划分区域为单位设置白平衡增益。

12、此外，增益设置单元可以根据针对由消色差区域提取单元提取的每个消色差区域设置的白平衡增益的偏差，切换针对彩色偏振图像的白平衡增益的设置。例如，在白平衡增益的偏差在预设的允许范围内的情况下，增益设置单元基于针对每个消色差区域设置的白平衡增益来设置用于彩色偏振图像的整个区域的白平衡增益。此外，在白平衡增益的偏差超过允许范围的情况下，增益设置单元基于针对每个消色差区域设置的白平衡增益来设置与消色差区域不同的区域的白平衡增益。

13、本技术的第二方面是：

14、一种信息处理方法，包括：

15、由消色差区域提取单元通过使用从彩色偏振图像获取的偏振信息来提取彩色偏振图像中的消色差区域；以及

16、由增益设置单元将用于彩色偏振图像的白平衡调整的白平衡增益设置为使得由消色差区域提取单元提取的消色差区域为消色差的白平衡增益。

17、本技术的第三方面是：

18、一种用于使计算机执行白平衡调整的程序，该程序使计算机执行：

19、通过使用从彩色偏振图像获取的偏振信息来提取彩色偏振图像中的消色差区域的过程；以及

20、将用于彩色偏振图像的白平衡调整的白平衡增益设置为使得所提取的消色差区域为消色差的白平衡增益。

21、注意，本技术的程序是可以由以计算机可读形式提供的存储介质和通信介质、例如诸如光盘、磁盘和半导体存储器的存储介质或者诸如到例如能够执行各种程序代码的通用计算机的网络的通信介质提供的程序。通过以计算机可读形式提供这样的程序，在计算机上实现根据程序的处理。

技术特征：

1.一种信息处理装置，包括：

2.根据权利要求1所述的信息处理装置，

3.根据权利要求2所述的信息处理装置，

4.根据权利要求3所述的信息处理装置，

5.根据权利要求2所述的信息处理装置，

6.根据权利要求5所述的信息处理装置，

7.根据权利要求6所述的信息处理装置，

8.根据权利要求1所述的信息处理装置，

9.根据权利要求1所述的信息处理装置，

10.根据权利要求9所述的信息处理装置，

11.根据权利要求10所述的信息处理装置，

12.根据权利要求11所述的信息处理装置，

13.根据权利要求9所述的信息处理装置，

14.根据权利要求9所述的信息处理装置，

15.根据权利要求14所述的信息处理装置，

16.根据权利要求14所述的信息处理装置，

17.一种信息处理方法，包括：

18.一种用于使计算机执行白平衡调整的程序，所述程序使所述计算机执行：

技术总结
消色差区域提取单元31使用从彩色偏振图像获取的偏振信息以针对彩色偏振图像的每个颜色分量计算消色差确定信息，并且提取消色差确定信息满足成为消色差的条件的区域作为消色差区域。基于使得由消色差区域提取单元31提取的消色差区域为消色差的白平衡增益，增益设置单元32设置要用于彩色偏振图像的白平衡调整的白平衡增益。例如，增益设置单元32基于消色差区域的白平衡增益设置针对整个彩色偏振图像的白平衡增益，或者基于多个消色差区域的白平衡增益设置针对不是消色差区域的区域的白平衡增益。本发明使得可以基于偏振信息容易地执行白平衡调整。

技术研发人员：大野大志,近藤雄飞,孙乐公
受保护的技术使用者：索尼集团公司
技术研发日：
技术公布日：2024/1/16