使用多频带近红外照明进行皮肤检测的制作方法

专利名称：使用多频带近红外照明进行皮肤检测的制作方法
技术领域：
本发明涉及信息处理设备和信息处理方法，更具体地说，本发明涉及在从例如通 过拍摄用户的图像而获得的拍摄图像中提取用户的手的形状等的情况下适合的信息处理 设备和信息处理方法。
背景技术：
近年来，研究了除了鼠标、图形输入板和触摸板之外，通过使用用户的手势(动 作)或者姿态(姿势)作为把数据输入个人计算机等中的输入手段，输入数据的数据输入 技术。由于在这种数据输入技术中，数据是利用例如用户的手的手势或姿态输入的，因 此必须从通过拍摄用户的图像而获得的拍摄图像中准确地提取用户的手的形状。作为提取用户的手的形状的提取技术，存在利用图像的模式匹配的模式匹配方 法，提取用户的皮肤区的皮肤区提取方法，等等。例如，在模式匹配方法中，预先学习通过拍摄具有各种形状和大小的手的图像而 获得的多个形状图像，在与拍摄的图像最相似的形状图像(例如，对应像素的像素值之间 的差的总和最小的形状图像)中表示的手的形状被提取为用户的手的形状。不过，在模式匹配方法中，当在与拍摄形状图像时的条件不同的条件(例如，摄像 方向，照明水平，背景，拍摄被摄物体的图像时被摄物体的大小)下获得拍摄图像时，难以 准确地提取用户的手的形状。尤其是在提取手的形状的情况下，当拍摄图像内的手的形状明显不同于形状图像 内的手的形状时，或者当拍摄图像内的手与面部等重叠时，与提取面部的形状的情况相比， 难以准确地提取手的形状。另外，当要求实时提取手的形状时，模式匹配需要大量的计算，在许多情况下这会 引起问题。在皮肤区提取方法中，利用表述人类皮肤的颜色的皮肤信息，提取表示拍摄图像 内的用户的皮肤的皮肤区。不过，在利用皮肤信息的皮肤区提取方法中，难以区分皮肤的颜色和与之接近的 颜色。此外，由于在不同种族之间，皮肤的颜色不同，因此不可能对所有种族提取适当的皮 肤区。在这方面，最近提出一种提取技术，其中根据皮肤对于波长的反射率变化恒定不 变，而与种族无关的事实，使用光谱反射率特性提取拍摄图像内的皮肤区(例如，参见非专 利文献1)。[引用列表][非专利文献][NPL 1] =Yasuhiro Suzuki ^,"Detection Method of Skin Regionby Near-IR Spectrum Multi-Band", IEEJ Transactions onElectronics, Information and SystemsVol. 127，No. 4,2007 年，日本。

发明内容
但是，在现有技术的其中使用光谱反射率特性的上述提取技术中，当作为皮肤区 在拍摄图像内存在被摄物体的面部和手时，面部和手的形状都被提取为皮肤区，于是，难以 只提取手的形状作为皮肤区。鉴于上述情况，理想的是从通过拍摄用户的图像而获得的拍摄图像中，高速提取 用户的手的准确形状等，同时抑制一系列处理所必需的运算量的增大。按照本发明的一个实施例，提供用于检测图像内的多个关心像素的信息处理设 备，方法，计算机可读存储介质和计算机程序。信息处理设备包括第一存储器，所述第一存 储器被配置成保存利用第一波长的光拍摄的第一图像，和利用第二波长的光拍摄的第二图 像，第二波长不同于第一波长。信息处理设备还包括至少一个处理器，所述至少一个处理 器被配置成根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内的多个关心像
ο此外，根据本发明的另一个实施例，提供用于识别与预定物体对应的亮度值的信 息处理设备，方法，计算机可读存储介质和计算机程序。信息处理设备包括存储器和至少一 个处理器。存储器被配置成保存根据图像生成的，包括多个关心像素的处理后图像。所述至 少一个处理器被配置成确定处理后图像中的多个关心像素的亮度值的频率(frequency)， 并根据确定的亮度值的频率，确定与处理后图像内的预定物体对应的亮度值的范围。按照本发明的实施例，能够高速提取用户的手的准确形状等，同时抑制一系列处 理所必需的运算量的增大。




图1是表示信息处理系统的结构例子的方框图。 图2是表示信息处理设备的结构例子的方框图。 图3是表示人类皮肤的反射特性的例子的示图。 图4是表示第一和第二拍摄图像的例子的示图。 图5是表示由二值化部分生成的二值化皮肤图像的例子的示图。 图6是表示由皮肤提取部分提取的皮肤图像的例子的示图。 图7是表示皮肤图像的直方图的例子的示图。 图8是表示由掩模图像生成部分生成的掩模图像的例子的示图。 图9是表示由形状提取部分生成的提取图像的例子的示图。 图10是说明形状提取处理的流程图。
图11是表示用在FFT阈值确定处理中的第一拍摄图像的示图。 图12是说明FFT阈值确定处理的流程图。 图13是表示相机的相对灵敏度特性的示图。 图14是表示LED的排列方法的示图。 图15是表示计算机的结构例子的方框图。
具体实施例方式下面，说明实现本发明的实施例(下面称为本实施例)。应指出的是将按照下述顺 序进行说明。1.本实施例(提取用户的手的形状的例子)2.变形例[1.本实施例][信息处理系统1的结构例子]图1表示本实施例的信息处理系统1的结构例子。信息处理系统1按照用用户的手做出的手势(或姿态)执行预定处理，包括信息 处理设备21，相机22和发光设备23。为了使信息处理系统1执行预定处理，用户改变他/她自己的手的形状(在相机 22的透镜表面之前)。这种情况下，信息处理系统1识别用户的手的形状，并按照识别结果执行预定处理。应注意在本实施例中，用户在相机22的透镜表面之前改变手的形状，并通过与他 /她的面部、胸部等相比，朝着更接近相机22的透镜表面的位置移动他/她的手，做出手势 (或姿势)。信息处理设备21控制相机22和发光设备23。此外，信息处理设备21根据由相机 22拍摄的拍摄图像，识别用户的手的形状，并按照识别结果执行预定处理。相机22包括拍摄诸如用户之类的被摄物体的图像的透镜，透镜的正面覆盖以遮 断可见光的可见光截止滤光片22a。借助这种结构，除了阳光或荧光的红外分量之外，相机22只接收由发光设备23照 射到被摄物体上的不可见光的反射光，并把所得到的拍摄图像提供给图像处理设备21。具体地说，例如，相机22只接收具有第一波长的光的反射光，所述光是由发光设 备23照射到被摄物体上的不可见光(例如，870nm的近红外光)，并把所得到的第一拍摄图 像提供给信息处理设备21。此外，相机22只接收具有不同于第一波长的第二波长的光的反射光，所述光是由 发光设备23照射到被摄物体上的不可见光(例如，950nm的近红外光)，并把所得到的第二 拍摄图像提供给信息处理设备21。发光设备23包括发出具有第一波长的光的LED(发光二极管)23 和23a2，以及 发出具有第二波长的光的LED 231^和23132。应注意下面在不需要相互区分LED 23a,和23a2的情况下，LED23ai和23a2被简称 为LED 23a。此外，在不需要相互区分LED 23b:和23b2的情况下，LED 23b:和23b2被简称 为 LED 23b。在信息处理设备21的控制下，LED 23a和23b交替发光。此外，调整LED 23a和LED 23b的输出，以致就具有第一波长的光的反射光和具有 第二波长的光的反射光来说，相机22接收的反射光的强度(光量)变得相同。另外，LED 23a和LED 23b被交替排列成网状，如图1中所示，并在LED 23a和LED 23b之前设置均勻扩散从LED 23a和LED 23b发出的光的扩散板23c。借助这种结构，用具有第一和第二波长的光均勻地照射被摄物体。应注意发光设备23被布置在从LED 23a或LED 23b发出的光可靠地照射到用户 的至少一只手的位置。在本实施例中，用户在相机22的透镜表面之前改变手的形状，因此， 发光设备23可被布置成例如接近相机22。[信息处理设备21的结构例子]图2表示信息处理设备21的结构例子。信息处理设备21包括控制器41，二值化部分42，皮肤提取部分43，阈值确定部分 44，掩模图像生成部分45和形状提取部分46。控制器41控制发光设备23，使LED 23a和LED 23b交替发光。从相机22把第一拍摄图像和第二拍摄图像提供给二值化部分42。根据从相机22 提供的第一和第二拍摄图像，二值化部分42提取(检测)关心的像素。在一个实施例中， 关心的像素对应于第一拍摄图像中，代表用户的皮肤的一个或多个皮肤区，和排除皮肤区 之外的区域。随后，二值化部分42产生通过把构成提取的皮肤区的像素的像素值，和构成排除 皮肤区之外的区域的像素的像素值二值化成不同的值(例如，0和1)而获得的二值化皮肤 图像，并把二值化皮肤图像提供给皮肤提取部分43和形状提取部分46。从相机22把第一拍摄图像提供给皮肤提取部分43和掩模图像生成部分45。根据从二值化部分42提供的二值化皮肤图像，皮肤提取部分43从自相机22供给 的第一拍摄图像中，提取与二值化皮肤图像内的皮肤区对应的区域(表示用户的皮肤区的 区域)。随后，皮肤提取部分43生成包括提取的区域的皮肤图像，并把该皮肤图像提供给 阈值确定部分44。应注意皮肤提取部分43可把提取的区域作为皮肤图像提供给阈值确定 部分44。阈值确定部分44根据从皮肤提取部分43供给的皮肤图像，产生处理后图像，比如 皮肤图像(构成皮肤图像的像素的亮度值)的直方图。随后，阈值确定部分44根据产生的 皮肤图像的直方图，确定用于生成掩模图像(后面说明)的掩模阈值，并把掩模阈值提供给 掩模图像生成部分45。掩模图像生成部分45根据从阈值确定部分44供给的掩模阈值，用从相机22供给 的第一拍摄图像生成掩模图像，并把掩模图像提供给形状提取部分46。应注意掩模图像是通过把第一拍摄图像二值化成掩模区和排除掩模区之外的非 掩模区而获得的图像，掩模区由亮度值在由掩模阈值规定的亮度值范围内的像素构成。根据来自掩模图像生成部分45的掩模图像，形状提取部分46从自二值化部分42 供给的二值化皮肤图像中，提取与表示用户的手的形状的形状区对应的至少一个对象，作 为与掩模图像内的掩模区对应的区域。随后，形状提取部分46根据提取的形状区，识别手的形状，执行与识别结果对应 的处理，并把处理结果输出给后一级。应注意二值化部分42从第一拍摄图像中提取皮肤区和排除皮肤区之外的区域， 不过，二值化部分42可从第二拍摄图像中提取皮肤区和排除皮肤区之外的区域。这种情况 下，从相机22向皮肤提取部分43和掩模图像生成部分45供给第二拍摄图像，而不是第一拍摄图像。随后，皮肤提取部分43根据第二拍摄图像生成皮肤图像，掩模图像生成部分45根 据第二拍摄图像生成掩模图像。[ 二值化皮肤图像的生成]下面参考图3-5，详细说明二值化部分42生成二值化皮肤图像的处理。应注意在图3和4中，将说明由相机22拍摄的第一拍摄图像和第二拍摄图像。此 外，在图5中，将说明由二值化部分42根据第一拍摄图像和第二拍摄图像生成的二值化皮 肤图像。图3表示人类皮肤对具有不同波长的照射光的反射特性。应注意该反射特性是普遍的，与人类肤色的差异(种族的差异)或者皮肤的状态 (晒黑等)无关。在图3中，水平轴表示要照射到人类皮肤的光的波长，垂直轴表示照射到人类皮 肤光的反射率。已知照射到人类皮肤的光的反射率在SOOnm附近达到峰值，从900nm附近开始急 剧降低，在IOOOnm附近达到最小值，之后重新增大。具体地说，如图3中所示，例如，通过把波长870nm的光照射到人类皮肤上而获得 的反射光的反射率为63%，通过把波长950nm的光照射到人类皮肤上而获得的反射光的反 射率为50%。上述现象为人类皮肤所特有，至于除人类皮肤之外的物体(例如，头发或衣服)来 说，在SOO-IOOOnm附近，反射率的变化常常变得平缓。下面参考图4，说明用相机22拍摄的第一和第二拍摄图像。图4表示通过接收照射到用户的波长870nm的光的反射光而获得的第一拍摄图 像，和通过接收照射到用户的波长950nm的光的反射光而获得的第二拍摄图像的例子。图4A表示其中用户的面部61和手62被表示成用户的皮肤区，用户所穿的衬衣63 和背景64被表示成排除用户的皮肤区之外的区域的第一拍摄图像。图4B表示其中用户的面部81和手82被表示成用户的皮肤区，用户所穿的衬衣83 和背景84被表示成排除用户的皮肤区之外的区域的第二拍摄图像。如图3中所示，就用户的皮肤部分的反射特性而论，波长870nm的光的反射率大于 波长950nm的光的反射率。因此，在波长870nm的光被映射到用户的情况下，作为照射到用户的皮肤部分的 光的反射光，比波长950nm的光的反射光更明亮的光进入相机22的透镜。结果，与构成第二拍摄图像内的用户的皮肤区(面部81和手82)的像素的亮度值 相比，构成第一拍摄图像内的用户的皮肤区(面部61和手62)的像素的亮度值取更大的值。因此，通过从构成第一拍摄图像内的用户的皮肤区的像素的亮度值中，减去构成 第二拍摄图像内的用户的对应皮肤区的像素的亮度值而获得的差取正值。与上面所述相反，就排除用户的皮肤部分之外的部分的反射特性而论，在一些情 况下，波长870nm的光的反射率等于或小于波长950nm的光的反射率。因此，在波长870nm的光被映射到用户的情况下，作为照射到排除用户的皮肤部分之外的部分的光的反射光，与波长950nm的光的反射光一样明亮或者更暗的光进入相机 22的透镜。结果，构成第一拍摄图像内的排除用户的皮肤区之外的区域(衬衣63和背景64) 的像素的亮度值等于或小于构成第二拍摄图像内的排除用户的皮肤区之外的区域(衬衣 83和背景84)的像素的亮度值。因此，通过从构成第一拍摄图像内的排除用户的皮肤部分之外的部分的像素的亮 度值中，减去构成第二拍摄图像内的排除用户的皮肤部分之外的对应部分的像素的亮度值 而获得的差取等于或小于0的值(除正值之外的值)。从而，二值化部分42计算第一拍摄图像和第二拍摄图像的对应像素的亮度值之 间的差，并根据计算的差提取关心的像素(例如，皮肤区)，和排除用户的皮肤区之外的区 域。随后，二值化部分42生成二值化皮肤图像，其中提取的用户的皮肤区用值1表示，排除 提取的用户的皮肤区之外的区域用值0表示。换句话说，例如，在计算的差为正值的情况下，二值化部分42提取对应的像素作 为构成用户的皮肤区的像素，在计算的差不为正值的情况下，二值化部分42提取对应的像 素作为构成排除用户的皮肤区之外的区域的像素。随后，二值化部分42把作为构成用户的皮肤区的像素而提取的像素的值均设为 1，把作为构成排除用户的皮肤区之外的区域的像素而提取的像素的值均设为0，从而生成 二值化皮肤图像，并把二值化皮肤图像提供给皮肤提取部分43和形状提取部分46。应注意取决于排除用户的皮肤部分之外的部分中的反射率，可能出现对于排除皮 肤部分之外的部分计算的差小于对于皮肤部分计算的差，但是取正值的情况。于是，在差取 正值，但是小于预定阈值的情况下，理想的是假定所述差是排除用户的皮肤部分之外的部 分的差，从而对该部分设定值0。此外，二值化部分42可计算第一拍摄图像和第二拍摄图像的对应像素的亮度值 之间的差绝对值，并根据计算的差绝对值是否等于或大于预定阈值，提取用户的皮肤部分 (皮肤区)，和排除皮肤部分之外的部分(排除皮肤区之外的区域)，从而生成二值化皮肤图像。上面的操作利用了由于反射特性的缘故，与用户的皮肤部分对应的差绝对值取较 大值，与排除用户的皮肤部分之外的部分对应的差绝对值取较小值的事实。下面，图5表示由二值化部分42生成的二值化皮肤图像的例子。在图5中所示的二值化皮肤图像中，用黑色表示的一部分指示用值1代表的皮肤 区。皮肤区包括指示用户的面部的皮肤部分的面部区101，和指示用户的手的皮肤部分的手 区 102。应注意为了便于举例说明，除了面部的皮肤部分之外，图5中所示的面部区101还 包括眉毛、眼睛、头发等，不过实际上，面部区101仅由面部的皮肤部分构成。另外，在图5中所示的二值化皮肤图像中，用白色表示的一部分指示排除皮肤区 之外的区域，用值0表示。二值化部分42把生成的二值化皮肤图像提供给皮肤提取部分43和形状提取部分 46。皮肤提取部分43根据从二值化部分42供给的二值化皮肤图像，从自相机22供给的第一拍摄图像中，提取与二值化皮肤图像内的面部区101和手区102对应的区域(包括 面部61和手62的区域)。随后，皮肤提取部分43生成包括提取的区域在内的皮肤图像。[皮肤图像的生成]下面参考图6，说明皮肤提取部分43根据从二值化部分42供给的二值化皮肤图 像，从第一拍摄图像生成处理后的图像(例如，皮肤图像)的处理。图6表示皮肤提取部分43提取的皮肤图像的例子。图6中所示的皮肤图像显示 用户的面部61和手62。应注意为了便于举例说明，除了面部的皮肤部分之外，图6中所示的皮肤图像还 包括眉毛、眼睛、头发等，作为用户的面部61，不过实际上，图6中所示的面部61仅仅表示面 部的皮肤部分。皮肤提取部分43把从二值化部分42供给的二值化皮肤图像的像素的亮度值和从 相机22供给的第一拍摄图像的对应像素的亮度值相乘。随后，皮肤提取部分43从构成第一拍摄图像的像素中，提取由其乘法结果不为0 的像素构成的区域(包括面部61和手62的区域)，从而生成包括提取的区域在内的皮肤图像。因此，在第一拍摄图像内的区域之中，包括在与二值化皮肤图像的面部区101对 应的区域中的面部61，和包括在与二值化皮肤图像的手区102对应的区域中的手62被原样 提取。与二值化皮肤图像中的排除皮肤区之外的区域对应的区域(图6中用白色表示的区 域)被赋予亮度值255，从而从第一拍摄图像生成如图6中所示的皮肤图像。皮肤提取部分43把生成的皮肤图像提供给阈值确定部分44。阈值确定部分44根据从皮肤提取部分43供给的皮肤图像，确定用于生成掩模图 像的掩模阈值。[掩模阈值的确定]下面参考图7，详细说明阈值确定部分44确定掩模阈值的处理。图7表示皮肤图像的直方图的例子。在图7中，水平轴表示构成皮肤图像的像素的亮度值。此外，垂直轴表示与水平轴 的亮度值对应的像素的数目。应注意构成图6的皮肤图像中，用白色表示的，并且具有亮度值255的区域的像素 的数目一般表示在图7的直方图中，不过其图示被省略，因为亮度值255的像素的数目不被 用于确定掩模阈值。阈值确定部分44关于构成从皮肤提取部分43供给的皮肤图像的像素的亮度值， 创建如图7中所示的直方图。在图7的直方图中，大量的像素集中在亮度值0和亮度值M之间，以及亮度值55 和亮度值110之间。S卩，在图7的直方图中，多个关心的像素被分成独立的两组。顺便提及，如上所述，假定手位于接近相机22的位置，面部、胸部等位于远离相机 22的位置。例如，由于在接近相机22的时候，发光设备23的LED 23a和LED 2 发光，用户 的接近相机22 (发光设备23)的身体部位(这种情况下，手)具有较大的亮度值，用户的远 离相机22的身体部位(这种情况下，面部等)具有较小的亮度值。
11
因此，与构成远离相机22的面部的皮肤部分的像素的亮度值相比，构成接近相机 22的手的皮肤部分的像素的亮度值取较大的值。于是，在亮度值0和亮度值M之间的亮度值是构成面部61 (面部区)的像素的亮 度值，在亮度值阳和亮度值110之间的亮度值是构成预定物体，比如手62的像素的亮度值。阈值确定部分44确定作为下限阈值Th_L的最小亮度阈值(在本例中，亮度值 阳)，和作为上限阈值Th_H的最大亮度阈值(在这种情况下，亮度值110)。随后，阈值确定部分44把确定的下限阈值Th_L和上限阈值Th_H作为掩模阈值， 提供给掩模图像生成部分45。根据从阈值确定部分44提供的掩模阈值(下限阈值Th_L和上限阈值Th_H)，掩模 图像生成部分45从自相机22供给的第一拍摄图像中检测掩模区和非掩模区，生成其中把 检测到的掩模区和非掩模区二值化成不同值的掩模图像。[掩模图像的生成]下面参考图8，详细说明掩模图像生成部分45根据来自阈值确定部分44的掩模阈 值，生成掩模图像的处理。图8表示掩模图像的例子。在图8中所示的掩模图像中，用黑色表示的掩模区121 是在对应的第一拍摄图像内，亮度值等于或大于下限阈值Th_L，并且等于或小于上限阈值 Th_H的区域。此外，在图8中所示的掩模图像中，用白色表示的非掩模区是在对应的第一拍摄 图像内，亮度值小于下限阈值Th_L，或者大于上限阈值Th_H的区域。在构成从相机22供给的第一拍摄图像的像素的亮度值等于或大于下限阈值Th_ L，并且等于或小于上限阈值Th_H的情况下，掩模图像生成部分45检测到具有像包括在掩 模区中的像素那样的亮度值的像素，并把这些亮度值都转换成值1。此外，在构成从相机22供给的第一拍摄图像的像素的亮度值小于下限阈值Th_L， 或者大于上限阈值Th_H的情况下，掩模图像生成部分45检测到具有像包括在非掩模区中 的像素那样的亮度值的像素，并把这些亮度值都转换成值0。因此，掩模图像生成部分45生成由掩模区121(用黑色表示)和非掩模区(用白 色表示)构成的掩模图像，掩模区121由均具有值1的像素构成，非掩模区由均具有值0的 像素构成，并把掩模图像提供给形状提取部分46。根据从掩模图像生成部分45供给的掩模图像，形状提取部分46从自二值化部分 42供给的二值化皮肤图像内的面部区101和手区102中，提取代表用户的手的形状的形状 区，作为与掩模图像内的掩模区121对应的区域。[手的形状的提取]下面参考图9，详细说明形状提取部分46从二值化皮肤图像中提取用户的手的形 状的处理。图9表示包括由形状提取部分46提取的形状区的提取图像的显示例子。在图9中所示的提取图像中，形状区141是用户的手的形状。形状提取部分46把构成从掩模图像生成部分45提供的掩模图像的像素的亮度值 与从二值化部分42供给的二值化皮肤图像的对应像素的亮度值相乘。
随后，形状提取部分46提取二值化皮肤图像内，乘法结果不为0的区域，S卩，二值 化皮肤图像内的面部区101和手区102(图5)之中，与掩模图像内的掩模区121(图8)重 叠的部分，作为形状区141。此外，形状提取部分46根据提取的形状区141，识别用户的手的形状，并执行与识 别结果对应的处理。应注意除了用户的手之外，图8中所示的掩模图像内的掩模区121还包括用户所 穿的衬衣。不过，由于二值化皮肤图像内的面部区101和手区102不包括用户所穿的衬衣，因 此形状提取部分46能够准确地提取只表示手的形状的形状区141，而不提取表示衬衣的形 状的区域。[形状提取处理操作的说明]下面，详细说明信息处理系统1提取用户的手的形状等的形状提取处理。图10是说明形状提取处理的流程图。应注意从打开信息处理系统1的电源的时 候开始，反复进行形状提取处理。下面，说明当用户在相机22之前时进行的形状提取处理。在步骤Si，控制器41控制发光设备23的LED 23a开始发出具有第一波长的光。 应注意在LED 23b发光的情况下，控制器41停止LED 23b的光的发射，随后使LED 23a开 始发光。在步骤S2，相机22拍摄用具有第一波长的光照射的用户的图像，并把所得到的第 一拍摄图像提供给信息处理设备21。 在步骤S3，控制器41控制发光设备23的LED 23a停止发射具有第一波长的光，并 控制发光设备23的LED 23b开始发出具有第二波长的光。在步骤S4，相机22拍摄用具有第二波长的光照射的用户的图像，并把所得到的第 二拍摄图像提供给信息处理设备21。在步骤S5，二值化部分42根据从相机22提供的第一拍摄图像和第二拍摄图像的 对应像素的亮度值之间的差，生成图5中所示的二值化皮肤图像，并把二值化皮肤图像提 供给皮肤提取部分43和形状提取部分46。在步骤S6，皮肤提取部分43根据从二值化部分42供给的二值化皮肤图像，从自相 机22供给的第一拍摄图像中，提取与二值化皮肤图像内的皮肤区(表示用户的皮肤部分的 区域)对应的区域。随后，皮肤提取部分43生成包括提取区域在内的皮肤图像，并把该皮肤图像提供 给阈值确定部分44。在步骤S7,阈值确定部分44根据构成从皮肤提取部分43供给的皮肤图像的像素 的亮度值，创建如图7中所示的皮肤图像的直方图。在步骤S8,阈值确定部分44根据创建的皮肤图像的直方图，确定像素数目极小的 亮度值，作为下限阈值Th_L，和最大亮度值，作为上限阈值Th_H。随后，阈值确定部分44把确定的下限阈值Th_L和上限阈值Th_H，作为掩模阈值提 供给掩模图像生成部分45。在步骤S9，掩模图像生成部分45根据从阈值确定部分44提供的掩模阈值(下限
13阈值Th_L和上限阈值Th_H)，使从相机22供给的第一拍摄图像二值化，从而生成如图8中 所示的掩模图像，并把该掩模图像提供给形状提取部分46。在步骤S10，根据从掩模图像生成部分45供给的掩模图像，形状提取部分46从自 二值化部分42供给的二值化皮肤图像中提取表示用户的手的形状的提取区，作为与掩模 图像内的掩模区对应的区域。随后，形状提取部分46依据这样提取的提取区，识别手的形状，执行与识别结果 对应的处理，并把处理结果输出给后一级。借助上面的处理，结束形状提取处理。如上所述，在形状提取处理中，根据掩模阈值，从一部相机22拍摄的第一拍摄图 像生成掩模图像，根据生成的掩模图像，从二值化皮肤图像中提取用户的手的形状。因此，与根据由多部相机拍摄的多个拍摄图像，生成表示相机和用户的手等之间 的距离的距离图像，并利用距离图像作为掩模图像提取用户的手的形状的情况相比，能够 减少生成掩模图像所必需的计算量，并用数目较少的组件提取用户的手的形状。此外，在形状提取处理中，根据从相机22到用户的面部的距离和从相机22到用户 的手的距离之间的差，生成包括掩模区121和非掩模区的掩模图像，所述掩模区121只包括 手的皮肤部分作为皮肤部分，而不包括面部的皮肤部分。因此，在二值化皮肤图像中，即使当包括要被提取的手的手区102与包括作为除 手之外的皮肤部分的面部的面部区101重叠时，作为皮肤部分，掩模区121也只包括手的皮 肤部分，而不包括面部的皮肤部分，其结果是能够只从二值化皮肤图像中提取手区102。从而，能够准确地提取用户的手的形状。此外，在形状提取处理中，从LED 23a和LED 2 发出人类看不到的不可见近红外 射线(光)。因此，由于用户不能在视觉上看到从LED 23a和LED 2 发出的光，因此用户不会 因从LED 23a和LED 23b发出的亮光而感到不适。此外，在信息处理系统1的发光设备23的LED 23a和LED 23b之前设置有扩散板 23c。借助这种结构，从LED 23a和LED 2 发出的不可见光被均勻扩散。于是，不存在 由光量引起的不均勻性的均勻光线被映射到被摄物体上。因此，作为不存在由光量引起的不均勻性的均勻光线，照射到被摄物体上的不可 见光的反射光被相机22接收，其结果是相机22能够获得不存在由光量引起的不均勻性的
第一和第二拍摄图像。因此，由于在信息处理系统1中，不存在由光量引起的不均勻性的第一和第二拍 摄图像被用于提取手的形状等，因此与使用存在由光量引起的不均勻性的第一和第二拍摄 图像的情况相比，能够更准确地提取手的形状等等。应注意在信息处理系统1中，理想的是在开始形状提取处理之后约80ms内提取手 的形状，以致每次用户改变手的形状时，能够识别改变之后的手的形状。[2.变形例]在上面说明的形状提取处理中，每次进行形状提取处理时，通过步骤S6-S8的处 理，提取皮肤图像，并根据提取的皮肤图像的直方图，确定掩模阈值(下限阈值Th_L和上限
14阈值Th_H)，不过形状提取处理并不局限于此。换句话说，例如，在形状提取处理中，当进行形状提取处理时，可原样使用先前在 步骤S6-S8中确定的掩模阈值。这种情况下，由于能够省略步骤S6-S8中的处理，因此能够用形状提取处理快速 提取手的形状等等。此外，通过在进行形状提取处理之前执行与步骤S6-S8中的处理相同的处理，以 预先确定掩模阈值，也能够在形状提取处理中省略步骤S6-S8中的处理。应注意作为在进行形状提取处理之前预先确定掩模阈值的处理，另外还可根据构 成用户的手区的像素的亮度值的平均值确定掩模阈值。[确定掩模阈值的方法]下面参考图11，说明FFT(快速傅里叶变换)阈值确定处理，其中阈值确定部分44 根据构成用户的手区的像素的亮度值的平均值，确定掩模阈值。图11表示通过拍摄用波长870nm的光照射的用户的图像而获得的第一拍摄图像 的例子。应注意当进行FFT阈值确定处理时，从相机22向阈值确定部分44提供通过用相 机22拍摄挥手的用户的图像而获得的多个第一拍摄图像。阈值确定部分44对多个第一拍摄图像进行FFT处理，检测第一拍摄图像内以恒定 频率移动的手区。随后，阈值确定部分44计算构成矩形区161的像素的亮度值的平均值ave_L，矩形 区161是检测到的手区的一部分。此外，阈值确定部分44把通过从平均值ave_L中减去调整值a而获得的值ave_ L-a确定为下限阈值Th_L，把通过将调整值b与平均值ave_L相加而获得的值ave_L+b确 定为上限阈值Th_H。应注意调整值a和b是用于调整平均值ave_L，和确定下限阈值Th_L和上限阈值 Th_H的值。调整值a和b是按照从LED 23a和LED 23b发出的光的强度(光量)，从相机22 到用户的距离，和在相机22中使用的CCD(电荷耦合器件图像传感器)的光灵敏度计算的 变量，不过在许多情况下，这些变量实际上是通过实验计算的。[利用FFT阈值确定处理的操作的说明]下面，说明其中阈值确定部分44根据构成用户的手区的像素的亮度值的平均值， 确定掩模阈值的FFT阈值确定处理。图12是说明FFT阈值确定处理的流程图。例如，当打开信息处理系统的电源时， 并在进行形状提取处理之前，开始FFT阈值确定处理。在步骤S31，控制器41控制发光设备23的LED 23a开始发出具有第一波长的光。在步骤S32，控制器41控制设置在信息处理设备21中的显示器、扬声器等(未示 出)指令用户挥手。在步骤S33，相机22拍摄挥手的用户的图像，并把所得到的第一拍摄图像提供给 信息处理设备21的阈值确定部分44。在步骤S34，阈值确定部分44对第一拍摄图像进行FFT处理，并检测第一拍摄图像内的手区，所述手区以恒定频率移动。在步骤S35，阈值确定部分44计算构成矩形区161的像素的亮度值的平均值ave_ L，矩形区161是检测到的手区的一部分。在步骤S36，阈值确定部分44把通过从平均值ave_L中减去调整值a而获得的值 ave_L-a确定为下限阈值Th_L，把通过将调整值b与平均值ave_L相加而获得的值ave_L+b 确定为上限阈值Th_H。借助上述处理，结束FFT阈值确定处理。如上所述，在FFT阈值确定处理中，掩模 阈值是在进行形状提取处理之前确定的，其结果是也能够省略步骤S6-S8的处理，从而在 形状提取处理中，能够更迅速地提取手的形状等等。应注意在FFT阈值确定处理中，对多个第一拍摄图像进行FFT处理，以检测第一拍 摄图像内的手区，并根据手区内的像素的亮度值的平均值确定掩模阈值(下限阈值Th_L和 上限阈值Th_H)，不过FFT阈值确定处理并不局限于此。 换句话说，例如，在FFT阈值确定处理中，通过对通过用相机22拍摄挥手的用户的 图像而获得的多个第二拍摄图像进行FFT处理，也可检测第二拍摄图像内的手区，并根据 该手区内的像素的亮度值的平均值确定掩模阈值。在本实施例中，二值化部分42从第一拍摄图像中提取用户的皮肤区，和排除用户 的皮肤区之外的区域，并把由提取的皮肤区和排除皮肤区之外的区域构成的二值化皮肤图 像提供给皮肤提取部分43和形状提取部分46，不过本发明并不局限于此。换句话说，例如，二值化部分42可从第一拍摄图像中提取用户的皮肤区，并把至 少包括提取的皮肤区的二值化皮肤图像提供给皮肤提取部分43和形状提取部分46。这种情况下，皮肤提取部分43从相机22拍摄的第一拍摄图像中提取与包含在从 二值化部分42供给的二值化皮肤图像中的皮肤区对应的区域。此外，形状提取部分46从 包括在从二值化部分42提供的二值化皮肤图像中的皮肤区中，提取形状区。在本实施例中，掩模图像生成部分45从第一拍摄图像中检测掩模区和非掩模区， 并生成由检测的掩模区和非掩模区构成的掩模图像，不过本发明并不局限于此。换句话说，例如，掩模图像生成部分45只检测掩模区，用作用于从二值化皮肤图 像中提取形状区的提取区，并生成至少包括检测的掩模区的掩模图像。在这种情况下，在形 状提取部分46中，在从二值化部分42供给的二值化皮肤图像内的皮肤区中，提取与掩模图 像内的掩模区对应的区域，作为形状区。此外，例如，掩模图像生成部分45可以只检测非掩模区，作为提取区，并生成至少 包括检测的非掩模区的掩模图像。这种情况下，在形状提取部分46中，在从二值化部分42 供给的二值化皮肤图像内的皮肤区中，提取与掩模图像内排除非掩模区之外的区域对应的 区域，作为形状区。[相机 22，LED 23a 和 LED 23b 的性能]下面参考图13和14，说明当本发明的申请人实际进行形状提取处理和FFT阈值确 定处理时，构成信息处理系统1的相机22和发光设备23的性能。本发明的申请人使用Sony公司制造的相机作为相机22。相机22的型号为 )(C-EI50，包括作为摄像器件的1/2IT式CCD。 此外，相机22具有768 X 494的有效像素，采用C接口作为镜头接口，和隔行525线的扫描方法作为扫描方法。此外，灵敏度为Fll (400 lx)，最小景深为0.1 Ix0此外，用相机22拍摄的拍摄图 像的S/N (信噪)比为60dB。此外，在相机22中，由预先为相机22设置的快门按钮(标准快门)的快门速度 为1/100-1/10000秒，外部与相机22连接的释放开关(外部触发快门)的快门速度为 1/4-1/10000 秒。此外，相机22具有四(宽)\四(高)\32(深)的外部尺寸，重量约50g。此外， 相机22具有70G的抗振性。此外，相机22具有在从400nm的可见光区到IOOOnm的近红外区的范围内的灵敏性。图13表示相机22的相对灵敏度特性的例子。应注意在图13中，水平轴表示入射到相机22的透镜的波长，垂直轴表示与该波长 对应的相对灵敏度。此外，本发明的申请人使用如图14中所示，交替排列成网状的8个LED 23a和8 个LED 23b，作为发光设备23。作为本发明的申请人实际使用的LED 23a，使用的是发出波长870nm的光的LED， 作为LED 23b，使用的是发出波长950nm的光的LED。另外，具有IOOmA的DC正向电流(额定最大值)和1. 6V的正向电压的LED被用 作 LED 23a 和 LED 23b。在利用具有上述性能的相机22及如图14中所示排列的LED 23a和LED 23b的时 候，本发明的申请人实际进行形状提取处理和FFT阈值确定处理，因此能够获得上面所述 的明显操作效果。在本实施例中，掩模图像生成部分45根据从阈值确定部分44提供的掩模阈值，用 从相机22供给的第一拍摄图像生成掩模图像，不过，生成掩模图像的方法并不局限于此。换句话说，例如，掩模图像生成部分45能够进行根据由沿不同方向拍摄图像的多 部相机拍摄的拍摄图像，生成表示从照相机到用户的距离的距离图像的立体处理，并把所 得到的距离图像用作掩模图像。这种情况下，形状提取部分46提取其中从掩模图像生成部分45提供的距离图像 内，表示从相机到手的距离的区域，与从二值化部分42提供的二值化皮肤图像内的面部区 101和手区102重叠的部分，作为表示用户的手的形状的形状区141。此外，除了立体处理之外，作为生成距离图像用作掩模图像的方法，还可在利用激 光测距仪等的时候生成用户的距离图像，所述激光测距仪等根据使红外线照射到用户，并 从用户反射回来所用的时间，计算到用户的距离。此外，在本实施例中，从LED 23a发出的第一波长被设定为870nm，从LED 2 发出 的第二波长被设定为950nm，不过，波长的组合并不局限于此。具体地说，可以设定波长的任意组合，只要与关于除用户的皮肤之外的物体所获 得的反射率之间的差绝对值相比，所述组合导致第一波长的反射率与第二波长的反射率之 间的足够大的差绝对值即可。具体地说，如图3中明显所示，除了 870nm和950nm的组合之 外，800nm和950nm的组合，870nm和IOOOnm的组合，以及800nm和IOOOnm的组合都是可能的。应注意在可见光被用作从LED 23a发出的光的情况下，代替可见光截止滤光片 22a，使用只透过从LED 23a发出的可见光，并使该可见光进入相机22的透镜的滤光片。这 同样适用于LED 23b。此外，在本实施例中，在形状提取处理中，LED 23a和LED 2 单独发光。不过，也 可通过使LED 23a和LED 2 同时发光，获得第一拍摄图像和第二拍摄图像。具体地说，例如，代替相机22，相互接近地设置具有与相机22相同功能的两部相 机。在这两部相机中的一部相机之前，设置只透过具有第一波长的光的滤光片，在另一部相 机之前设置只透过具有第二波长的光的滤光片。这种情况下，即使LED 23a和LED 2 同时发光，也只有具有第一波长的光进入所 述一部相机中，其结果是能够在所述一部相机中获得第一拍摄图像。此外，由于只有具有第 二波长的光进入所述另一部相机中，因此能够在所述另一部相机中获得第二拍摄图像。在本实施例中，LED 23a的数目和LED 2 的数目都被设为2，不过，它们的数目并 不局限于此。另外，在本实施例中，作为表示用户的身体部位的物体的手(手的形状)被改变， 以使信息处理设备21执行预定处理，不过除了手之外，也可采用用户的脚等作为所述物 体。顺便提及，上述一系列处理可用专用硬件或软件执行。在用软件执行所述一系列 处理的情况下，从记录介质把构成所述软件的程序安装到所谓的内置计算机，或者通过安 装各种程序，能够执行各种功能的通用个人计算机中。[计算机的结构例子]下面，图15表示用程序执行上述一系列处理的个人计算机的结构例子。例如，图2 中图解说明的信息处理设备21的各个部分，或者每个部分可用至少一个处理器，比如图15 中图解说明的中央处理器201实现。在一个实施例中，二值化部分42，皮肤提取部分43，阈 值确定部分44，掩模图像生成部分45和形状提取部分46 (或者这些部分中的每一个)可用 单个处理器，或者多个不同的处理器实现。CPU(中央处理器)201按照保存在R0M(只读存储器)202或存储部分208中的程 序，执行各种处理。RAM(随机存取存储器)203酌情保存将由CPU 201执行的程序，数据等 等。这些CPU 201，ROM 202和RAM 203通过总线204相互连接。此外，CPU 201通过总线204与输入/输出接口 205连接。输入/输出接口 205与 诸如键盘、鼠标和麦克风之类的输入部分206，和诸如显示器和扬声器之类的输出部分207 连接。CPU 201按照从输入部分206输入的命令，执行各种处理。随后，CPU 201把处理结 果输出给输出部分207。与输入/输出接口 205连接的存储部分208由例如硬盘构成，保存将由CPU 201 执行的程序，以及各种数据。通信部分209通过诸如因特网和局域网之类的网络，与外部设
备通{曰ο此外，程序可通过通信部分209获得，并保存在存储部分208中。当可拆卸介质211，比如磁盘、光盘、磁光盘和半导体存储器被装入其中时，与输入 /输出接口 205连接的驱动器210驱动可拆卸介质211，从而获得保存在可拆卸介质211中的程序和数据。根据需要，获得的程序和数据被传给存储部分208，并保存在存储部分208 中。如图15中所示，记录(保存)安装在计算机中，并由计算机执行的程序的记录介 质由可拆卸介质211构成，可拆卸介质211是诸如磁盘(包括软盘)、光盘(包括CD-ROM(压 缩光盘-只读存储器)和DVD (数字通用光盘))、磁光盘(包括MD (小型光盘))和半导体 存储器之类的套装介质，临时或永久保存程序的ROM 202，或者构成存储部分208的硬盘。 在利用有线或无线通信介质，比如局域网、因特网和数字广播的时候，酌情经作为接口的通 信部分209，比如路由器和调制解调器，把程序记录在记录介质上。应注意除了按照所述顺序，时序地执行的处理之外，这里描述上述一系列处理的 步骤还包括并行或者单独执行的，而不是按时间顺序执行的处理。此外，这里的系统代表由多个设备构成的整个设备。应注意本发明的实施例并不局限于上述本实施例，可以做出各种修改，而不脱离 本发明的要旨。本申请包含于在2009年6月30日和日本专利局提交的日本优先权专利申请JP 2009-154921中公开的主题相关的主题，该申请的整个内容在此引为参考。[附图标记列表]
1信息处理系统
21信息处理设备
22相机
23发光设备
41控制器
42二值化部分
43皮肤提取部分
44阈值确定部分
45掩模图像生成
46形状提取部分
权利要求
1.一种信息处理设备，包括第一存储器，所述第一存储器被配置成保存利用第一波长的光拍摄的第一图像和利用 第二波长的光拍摄的第二图像，第一波长不同于第二波长；和至少一个处理器，所述至少一个处理器被配置成根据保存的第一和第二拍摄图像的亮 度值，检测第一拍摄图像内的多个关心像素。
2.按照权利要求1所述的信息处理设备，其中所述至少一个处理器被配置成生成二值化图像，在所述二值化图像中，检测的第一拍 摄图像内的多个关心像素用第一预定值表示，第一拍摄图像内的多个其它像素用第二预定 值表示。
3.按照权利要求1所述的信息处理设备，其中 所述至少一个处理器被配置成计算保存的第一和第二拍摄图像的对应像素之间的亮度值的差，和 根据计算的与多个关心像素对应的亮度值的差是否超过预定阈值，检测第一拍摄图像 内的多个关心像素。
4.按照权利要求1所述的信息处理设备，其中所述至少一个处理器被配置成检测与表示用户的皮肤的至少一个皮肤区对应的多个关心像素。
5.按照权利要求1所述的信息处理设备，还包括第二存储器，所述第二存储器被配置成保存处理后的图像，所述处理后的图像包括所 述多个关心像素，其中所述至少一个处理器被配置成确定处理后的图像中的多个关心像素的亮度值的频率，和根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
6.按照权利要求5所述的信息处理设备，其中 第一存储器和第二存储器是同一存储器。
7.一种利用信息处理设备检测图像内的多个关心像素的方法，所述方法包括保存利用第一波长的光拍摄的第一图像和利用第二波长的光拍摄的第二图像，第一波 长不同于第二波长；和利用信息处理设备，根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内 的多个关心像素。
8.按照权利要求7所述的方法，还包括生成二值化图像，在所述二值化图像中，检测的第一拍摄图像内的多个关心像素用第 一预定值表示，第一拍摄图像内的多个其它像素用第二预定值表示。
9.按照权利要求7所述的方法，还包括计算保存的第一和第二拍摄图像的对应像素之间的亮度值的差，其中 检测步骤包括根据计算的与多个关心像素对应的亮度值的差是否超过预定阈值，检测 第一拍摄图像内的多个关心像素。
10.按照权利要求7所述的方法，其中检测步骤包括检测与表示用户的皮肤的至少一个皮肤区对应的多个关心像素。
11.按照权利要求7所述的方法，还包括保存处理后的图像，所述处理后的图像包括所述多个关心像素； 确定处理后的图像中的多个关心像素的亮度值的频率；和根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
12.一种包括指令的非暂时性计算机可读存储介质，当被处理器执行时，所述指令使处 理器执行检测图像内的多个关心像素的方法，所述方法包括保存利用第一波长的光拍摄的第一图像和利用第二波长的光拍摄的第二图像，第一波 长不同于第二波长；和根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内的多个关心像素。
13.一种执行检测图像内的多个关心像素的方法的计算机程序，所述方法包括保存利用第一波长的光拍摄的第一图像和利用第二波长的光拍摄的第二图像，第一波 长不同于第二波长；和根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内的多个关心像素。
14.一种信息处理设备，包括保存利用第一波长的光拍摄的第一图像和利用第二波长的光拍摄的第二图像的装置， 第一波长不同于第二波长；和根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内的多个关心像素的装置。
15.一种信息处理设备，包括存储器，所述存储器被配置成保存处理后的图像，所述处理后的图像是根据图像生成 的并包括多个关心像素；和至少一个处理器，所述至少一个处理器被配置成 确定处理后的图像中的多个关心像素的亮度值的频率，和根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
16.按照权利要求15所述的信息处理设备，其中所述至少一个处理器被配置成根据确定的亮度值的频率，把多个关心像素分成至少一组。
17.按照权利要求16所述的信息处理设备，其中所述至少一个处理器被配置成根据所述至少一组的多个关心像素之中、具有最高亮度 值的一组的亮度值，确定与预定物体对应的亮度值的范围。
18.按照权利要求16所述的信息处理设备，其中 所述至少一个处理器被配置成根据确定的范围的最小亮度值，设定下限阈值， 根据确定的范围的最大亮度值，设定上限阈值， 根据下限阈值和上限阈值，检测图像内的至少一个掩模区，和 生成掩模图像，在所述掩模图像中，与图像的所述至少一个掩模区对应的像素用第一 预定值表示，与在所述至少一个掩模区之外的任意区域对应的像素用第二预定值表示。
19.一种利用信息处理设备识别与预定物体对应的亮度值的方法，所述方法包括 保存处理后的图像，所述处理后的图像是根据图像生成的并包括多个关心像素；和确定处理后的图像中的多个关心像素的亮度值的频率；和利用信息处理设备，根据确定的亮度值的频率，确定与处理后的图像内的预定物体对 应的亮度值的范围。
20.按照权利要求19所述的方法，还包括根据确定的亮度值的频率，把多个关心像素分成至少一组。
21.按照权利要求20所述的方法，其中确定亮度值的范围的步骤包括根据所述至少一组的多个关心像素之中、具有最高亮度 值的一组的亮度值，确定与预定物体对应的亮度值的范围。
22.按照权利要求20所述的方法，还包括 根据确定的范围的最小亮度值，设定下限阈值； 根据确定的范围的最大亮度值，设定上限阈值；根据下限阈值和上限阈值，检测图像内的至少一个掩模区；和 生成掩模图像，在所述掩模图像中，与图像的所述至少一个掩模区对应的像素用第一 预定值表示，与在所述至少一个掩模区之外的任意区域对应的像素用第二预定值表示。
23.一种包括指令的非暂时性计算机可读存储介质，当被处理器执行时，所述指令使处 理器执行识别与预定物体对应的亮度值的方法，所述方法包括保存处理后的图像，所述处理后的图像是根据图像生成的并包括多个关心像素；和 确定处理后的图像中的多个关心像素的亮度值的频率；和根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
24.一种执行识别与预定物体对应的亮度值的方法的计算机程序，所述方法包括 保存处理后的图像，所述处理后的图像是根据图像生成的并包括多个关心像素；和 确定处理后的图像中的多个关心像素的亮度值的频率；和根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
25.一种信息处理设备，包括保存处理后的图像的装置，所述处理后的图像是根据图像生成的并包括多个关心像 素；和确定处理后的图像中的多个关心像素的亮度值的频率的装置；和 根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围的直ο
全文摘要
检测图像内的多个关心像素，和识别与预定物体对应的亮度值的方法和设备。检测设备包括配置成保存分别利用第一波长的光和第二波长的光，拍摄的第一图像和第二图像的存储器。检测设备还包括配置成根据保存的第一和第二拍摄图像的亮度值，检测第一拍摄图像内的多个关心像素的至少一个处理器。识别设备包括配置成存储处理后的图像的存储器，和至少一个处理器，所述至少一个处理器被配置成确定处理后的图像中的多个关心像素的亮度值的频率，并根据确定的亮度值的频率，确定与处理后的图像内的预定物体对应的亮度值的范围。
文档编号G06K9/00GK102138148SQ20108000242
公开日2011年7月27日 申请日期2010年5月21日 优先权日2009年6月30日
发明者西条信广 申请人:索尼公司