图像发送装置、方法及程序、图像识别认证系统及图像接收装置制造方法
【专利摘要】本发明提供图像发送装置、方法及程序、图像识别认证系统及图像接收装置。图像发送装置（10）具备输入多个连续的图像的图像输入部（12）、削减向图像输入部（12）输入的多个图像的数据量而生成数据量削减图像的数据量削减部（15）、将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置（20）发送的发送部（19）。数据量削减部（15）通过与由图像接收装置（20）进行的识别认证处理对应的削减方法来削减多个图像的数据量。
【专利说明】图像发送装置、方法及程序、图像识别认证系统及图像接收装置
[0001]在本申请中，主张在2012年7月19日向日本提出申请的专利申请编号2012-160453的利益，该申请的内容通过引用而援引于此。
【技术领域】
[0002]本发明涉及一种进行连续输入的图像的识别或认证的图像识别认证系统、及构成该图像识别认证系统的图像发送装置及图像接收装置、以及图像发送方法及图像发送程序。
【背景技术】[0003]以往，在由摄像机和服务器构成的图像识别认证系统中，已知有将通过摄像机的拍摄而得到的图像向服务器发送，通过服务器基于图像进行被拍摄体的识别处理及/或认证处理(以下称为“识别认证处理”)的图像识别认证系统。例如有利用监控摄像机来拍摄人物，作为识别认证处理，进行识别对象(脸)的检测、年龄或性别的判定、个人认证等的图像识别认证系统。
[0004]以往，利用摄像机来拍摄连续的图像(动态图像)，生成这些连续的多个图像，将它们全部向服务器发送，在服务器侧，对于接收到的全部图像(帧)进行了识别认证处理。如此将全部图像向服务器发送而进行识别认证处理时，图像的传送量增多，不仅作用于网络的负荷增大，而且服务器的处理负荷增大，且用于蓄积由服务器接收到的图像的容量增大等，服务器的成本也增大。
[0005]相对于此，提出了一种在摄像机侧对连续的多个图像进行识别对象的检测处理，仅将检测到识别对象的图像向服务器发送的技术。如此，仅限定为检测到识别对象的图像从摄像机向服务器发送，由此能够减少上述的网络负荷及服务器的成本。
[0006]而且，作为用于减少网络负荷及服务器的成本的技术，提出了在摄像机侧，对于连续的多个图像进行识别对象的检测处理，仅选择检测到识别对象的图像中的最佳的图像而向服务器发送的技术(例如，专利文献I至4)。由此，能够限制从摄像机侧向服务器发送的图像的个数，因此能够进一步减少上述的网络负荷及服务器的成本。
[0007]【在先技术文献】
[0008]【专利文献】
[0009]【专利文献I】日本专利第3727798号公报
[0010]【专利文献2】日本专利第4208450号公报
[0011]【专利文献3】日本专利第4021873号公报
[0012]【专利文献4】日本专利第4377472号公报
[0013]然而，以往，在摄像机侧被选择而向服务器发送的图像未必是适合于服务器中的识别认证处理的图像，因此从摄像机向服务器发送而进行识别认证处理的图像的个数受到限制，由此存在识别精度下降的问题。[0014]另外，如上述那样依然存在不使识别精度下降的要求且减少网络负荷及服务器的成本这样的要求。
【发明内容】
[0015]本发明鉴于上述的问题而作出，目的是在将通过摄像机的拍摄得到的图像向服务器发送并通过服务器基于图像进行被拍摄体的识别认证处理的图像识别认证系统中，减少网络负荷及服务器的成本。
[0016]本发明另一目的在于提供一种将通过摄像机的拍摄而得到的图像向服务器发送并通过服务器基于图像进行被拍摄体的识别认证处理的图像识别认证系统，其减少网络负荷及服务器的成本，并抑制由此引起的识别精度的下降。
[0017]图像发送装置具备:输入多个连续的图像的图像输入部；削减向图像输入部输入的多个图像的数据量而生成数据量削减图像的数据量削减部；以及将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送的发送部，数据量削减部通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0018]图像发送方法包括:输入多个连续的图像的图像输入步骤；削减输入的多个图像的数据量而生成数据量削减图像的数据量削减步骤；以及将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送的发送步骤，数据量削减步骤通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0019]图像发送程序使计算机作为图像输入部、数据量削减部、发送部发挥功能，该图像输入部输入多个连续的图像，该数据量削减部削减向图像输入部输入的多个图像的数据量而生成数据量削减图像，该发送部将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送，数据量削减部通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0020]图像识别认证系统由图像发送装置和图像接收装置构成，图像发送装置具备:输入多个连续的图像的图像输入部；削减向图像输入部输入的多个图像的数据量而生成数据量削减图像的数据量削减部；以及将数据量削减图像向图像接收装置发送的发送部，图像接收装置具备:接收由发送部发送的数据量削减图像的接收部；以及对于由接收部接收的数据量削减图像进行识别认证处理的识别认证处理部，数据量削减部通过与由识别认证处理部进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0021]图像接收装置具备:接收从图像发送装置发送的图像的接收部；对于由接收部接收的图像进行识别认证处理的识别认证处理部；以及将由识别认证处理部进行的识别认证处理的模式信息向图像发送装置发送的发送部。
[0022]另一方式的图像接收装置具备:接收从图像发送装置发送的图像的接收部；对于由接收部接收的图像进行识别认证处理的识别认证处理部；存储由识别认证处理部进行的识别认证处理的模式信息与用于生成图像的图像生成方法之间的对应关系的存储部；按照设定的模式信息并参照存储部而决定图像生成方法的图像生成控制部；以及将表示由图像生成控制部决定的图像生成方法的信息向图像发送装置发送的发送部。
[0023]如以下说明那样，在本发明中存在其他的方式。因此，本发明的公开想要进行本发明的一部分的提供，并没有意图限制在此记述并请求的发明的范围。[0024]【发明效果】
[0025]根据本发明，利用与识别认证处理对应的方法来削减从图像发送装置向图像接收装置发送的图像的数据量，因此能够减少网络负荷及服务器的成本，并且能够抑制这样的数据量的削减造成的识别认证处理的精度的下降。
【专利附图】
【附图说明】
[0026]图1是表示实施方式的图像发送装置的结构的框图。
[0027]图2是表示实施方式中的图像识别认证系统的结构的框图。
[0028]图3是表示实施方式中的图像接收装置的结构的框图。
[0029]图4是表示实施方式中的解析结果的显示例的图。
[0030]图5是说明实施方式中的从图像接收装置对图像发送装置的模式信息的指定的图。
[0031]图6是表示实施方式中的分辨率(像素数)与识别认证的精度的关系的例子的坐标图。
[0032]图7是表示实施方式中的参数存储部存储的表格的例子的表。
[0033]图8是实施方式中的图像发送装置的图像发送方法的流程图。
[0034]图9是表示实施方式中的带域成分检测部的带域成分检测处理的流程图。
[0035]图10是表示实施方式中的图像数据量削减部的图像数据量削减处理的流程图。
`[0036]图11是说明实施方式中的从图像接收装置对图像发送装置的参数的指定的图。
[0037]图12是表示实施方式中的图像识别认证系统的系统结构的另一例的图。
[0038]图13是表示实施方式中的图像识别认证系统的系统结构的又一例的图。
[0039]【标号说明】
[0040]100图像识别认证系统
[0041]10 图像发送装置
[0042]11 拍摄部
[0043]12 图像输入部
[0044]13 对象检测部
[0045]14 对象追踪部
[0046]15 数据削减部
[0047]151最佳拍摄判定部
[0048]152图像数据量削减部
[0049]153对象特征解析部
[0050]154带域成分检测部
[0051]155图像选择部
[0052]156必要区域提取部
[0053]157必要带域检测部
[0054]158分辨率转换部
[0055]159图像编码部
[0056]16 参数存储部[0057]17削减控制部
[0058]18接收部
[0059]19发送部
[0060]20图像接收装置[0061]21接收部
[0062]22图像译码部
[0063]23对象解析部
[0064]24数据库
[0065]30结果显示装置
【具体实施方式】
[0066]以下，叙述本发明的详细的说明。以下说明的实施方式只不过是本发明的例子，本发明能够变形为各种方式。因此，以下公开的特定的结构及功能没有限定专利申请的范围。在本说明书中，“识别认证”这一用语作为表示“识别及/或认证”的用语而使用。
[0067]实施方式的图像发送装置具备输入多个连续的图像的图像输入部、削减向图像输入部输入的多个图像的数据量而生成数据量削减图像的数据量削减部、将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送的发送部，数据量削减部通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0068]根据该结构，由于通过与识别认证处理对应的方法来削减从图像发送装置向图像接收装置发送的图像的数据量，因此能够减少网络负荷及服务器的成本，并且能够抑制这样的数据量的削减造成的识别认证处理的精度的下降。
[0069]在上述的图像发送装置中，数据量削减部可以以与由图像接收装置进行的识别认证处理对应的基准，从多个图像中选择一部分图像，从而削减多个图像的数据量。
[0070]根据该结构，由于从向图像输入部输入的多个图像中选择一部分图像，因此与发送向图像输入部输入的全部图像的情况相比，能够减少网络负荷及服务器的成本，并且以与识别认证处理对应的基准进行这样的图像选择，因此能够抑制限制图像接收装置中的成为识别认证处理的对象的图像的个数造成的识别认证处理的精度的下降。
[0071]在上述的图像发送装置中，数据量削减部可以对多个图像或从多个图像中选择的一部分图像的、与由图像接收装置进行的识别认证处理对应的区域进行修剪，从而削减多个图像的数据量。
[0072]根据该结构，对于多个图像或从多个图像中选择的一部分图像进行修剪，因此与发送向图像输入部输入的图像的整体的情况相比，能削减数据量，能够减少网络负荷及服务器的成本，并以与识别认证处理对应的方法进行这样的修剪，因此能够抑制数据量的削减造成的识别认证处理的精度的下降。
[0073]在上述的图像发送装置中，数据量削减部可以将多个图像或从多个图像中选择的一部分图像的、与由图像接收装置进行的识别认证处理对应的带域成分提取出，从而削减多个图像的数据量。
[0074]根据该结构，对于多个图像或从多个图像中选择的一部分图像，提取出一部分带域成分，因此与发送向图像输入部输入的图像的整个带域成分的情况相比，能够削减数据量，而能够减少网络负荷及服务器的成本，并且提取出的带域成分是与识别认证处理对应的带域成分，因此能够抑制数据量的削减造成的识别认证处理的精度的下降。
[0075]在上述的图像发送装置中，数据量削减部可以对多个图像或从多个图像中选择的一部分图像进行分辨率转换，而转换成与由图像接收装置进行的识别认证处理对应的分辨率，从而削减多个图像的数据量。
[0076]根据该结构，对多个图像或从多个图像中选择的一部分图像进行分辨率转换(压缩)，因此与不对向图像输入部输入的图像进行分辨率转换(压缩)而发送的情况相比，能削减数据量，能够削减网络负荷及服务器的成本，并以与识别认证处理对应的分辨率进行这样的分辨率转换，因此能够抑制数据量的削减造成的识别认证处理的精度的过度的下降。
[0077]在上述的图像发送装置中，数据量削减部可以以与图像接收装置进行的识别认证处理对应的编码率，对多个图像或从多个图像中选择的一部分图像进行编码，从而削减多个图像的数据量。
[0078]根据该结构，对多个图像或从多个图像中选择的一部分图像进行编码，因此与不对向图像输入部输入的图像进行编码而发送的情况相比，能削减数据量，能够减少网络负荷及服务器的成本，并以与识别认证处理对应的编码率进行这样的编码，因此能够抑制数据量的削减造成的识别认证处理的精度的过度的下降。
[0079]上述的图像发送装置可以还具备:接收由图像接收装置进行的识别认证处理的模式信息的接收部；存储模式信息与削减方法之间的对应关系的存储部；参照存储部而决定与由接收部接收到的模式信息对应的削减方法的削减控制部，数据量削减部可以按照由削减控制部决定的削减方法来生成数据量削减图像。
[0080]根据该结构，通过从图像接收装置接受该识别认证处理的模式信息，而以与该模式信息对应的削减方法削减图像的数据量而生成数据量削减图像，因此能够抑制图像接收装置中的识别认证处理的精度的下降。
[0081]上述的图像发送装置可以还具备接收表示削减方法的信息的接收部，数据量削减部可以按照用由接收部接收到的信息表示的削减方法而生成数据量削减图像。
[0082]根据该结构，通过从图像接收装置接受表示削减方法的信息，而利用该削减方法来削减图像的数据量而生成数据量削减图像，因此能够抑制图像接收装置中的识别认证处理的精度的下降。
[0083]实施方式的图像发送方法包括:输入多个连续的图像的图像输入步骤；削减输入的多个图像的数据量而生成数据量削减图像的数据量削减步骤；以及将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送的发送步骤，数据量削减步骤通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0084]根据该结构，由于利用与识别认证处理对应的方法来削减从图像发送装置向图像接收装置发送的图像的数据量，因此能够削减网络负荷及服务器的成本，并且能够抑制这样的数据量的削减造成的识别认证处理的精度的下降。
[0085]实施方式的图像发送程序使计算机作为图像输入部、数据量削减部、发送部发挥功能，该图像输入部输入多个连续的图像，该数据量削减部削减向图像输入部输入的多个图像的数据量而生成数据量削减图像，该发送部将数据量削减图像向对数据量削减图像进行识别认证处理的图像接收装置发送，数据量削减部通过与由图像接收装置进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0086]根据该结构，由于利用与识别认证处理对应的方法来削减从图像发送装置向图像接收装置发送的图像的数据量，因此能够削减网络负荷及服务器的成本，并且能够抑制这样的数据量的削减造成的识别认证处理的精度的下降。
[0087]实施方式的图像识别认证系统由图像发送装置和图像接收装置构成，图像发送装置具备:输入多个连续的图像的图像输入部；削减向图像输入部输入的多个图像的数据量而生成数据量削减图像的数据量削减部；以及将数据量削减图像向图像接收装置发送的发送部，图像接收装置具备:接收由发送部发送的数据量削减图像的接收部；以及对于由接收部接收的数据量削减图像进行识别认证处理的识别认证处理部，数据量削减部通过与由识别认证处理部进行的识别认证处理对应的削减方法来削减多个图像的数据量。
[0088]根据该结构，利用与识别认证处理对应的方法来削减从图像发送装置向图像接收装置发送的图像的数据量，因此能够削减网络负荷及服务器的成本，并且能够抑制这样的数据量的削减造成的识别认证处理的精度的下降。
[0089]实施方式的图像接收装置具备:接收从图像发送装置发送的图像的接收部；对于由接收部接收的图像进行识别认证处理的识别认证处理部；将由识别认证处理部进行的识别认证处理的模式信息向图像发送装置发送的发送部。
[0090]根据该结构，对于发送图像的图像发送装置，发送识别认证处理的模式信息，因此在图像发送装置中，能够以与该模式信息对应的图像生成方法来生成图像，由此，能够抑制识别认证处理部中的识别认证处理的精度的下降。
[0091]另一实施方式的图像接收装置具备:接收从图像发送装置发送的图像的接收部；对于由接收部接收的图像进行识别认证处理的识别认证处理部；存储由识别认证处理部进行的识别认证处理的模式信息与用于生成图像的图像生成方法之间的对应关系的存储部；按照设定的模式信息，参照存储部而决定图像生成方法的图像生成控制部；将表示由图像生成控制部决定的图像生成方法的信息向图像发送装置发送的发送部。
[0092]根据该结构，对于发送图像的图像发送装置，通知与识别认证处理的模式信息对应的图像生成方法，因此在图像发送装置中，能够按照该图像生成方法生成图像，由此，能够抑制识别认证处理部中的识别认证处理的精度的下降。
[0093]以下，参照附图，说明本发明的实施方式的图像识别认证系统。图2是表示本发明的实施方式的图像识别认证系统的结构的框图。如图2所示，图像识别认证系统100具备图像发送装置10和图像接收装置20。图像发送装置10与图像接收装置20经由网络NW连接，能够从图像发送装置10向图像接收装置20传送各种数据，而且能够从图像接收装置20向图像发送装置10传送各种数据。尤其是在图像发送装置10中通过拍摄取得图像，将该图像向图像接收装置20发送。在图像接收装置20中，对于由图像发送装置10接收的图像进行对象的识别认证处理。
[0094]在图2中，图像发送装置10及图像接收装置20分别以有线的方式与网络NW连接，但图像发送装置10及图像接收装置20也可以以无线的方式与网络NW连接。尤其是在能够使图像发送装置10移动时，图像发送装置10以无线的方式与网络NW连接的结构有利。
[0095]图像识别认证系统100通过设定后述的模式，而能够使用于各种用途。图像识别认证系统100能够作为监控系统、销售信息收集系统、车辆识别系统等而应用。例如，在监控系统的情况下，图像发送装置10设置在监控对象部位，图像接收装置20设置在从监控对象部位分离的监控中心，进行作为监控对象的人物的脸的识别认证。而且，例如在车辆识别系统的情况下，图像发送装置10设置在设施的停车场的出口，图像接收装置20设置在设施内的管理室并与设置在设施内的停车费用结算机连接，通过进行车辆的号码的识别认证处理，而进行停车场的出口的门的开闭。
[0096]图1是表示构成本发明的实施方式的图像识别认证系统的图像发送装置的结构的框图。如图1所示，图像发送装置10具备拍摄部11、图像输入部12、对象检测部13、对象追踪部14、数据削减部15、参数存储部16、削减控制部17、接收部18、及发送部19。图像发送装置10作为数字摄像机构成。
[0097]拍摄部11具备透镜、光圈、摄像元件、及信号处理电路。拍摄部11拍摄作为识别认证处理的对象的被拍摄体而生成图像。拍摄部11拍摄动态图像，由此生成连续的(例如，每秒30帧的)图像。拍摄部11将生成的图像向图像输入部12输出。
[0098]图像输入部12连续地输入从拍摄部11输出的图像。对象检测部13对于向图像输入部12输入的图像，进行解析而检测规定的识别认证对象(以下简称为“对象”)。对象例如是人物、人物的脸、车辆的号牌、衣服、鞋等。具体的对象由后述的削减控制部17指定。在对象的检测中，可以使用已知的技术(例如，参照美国专利第7483548号公报、专利第3930504号公报等)。在此，美国专利第7483548号公报及日本专利第3930504号公报的内容通过引用而包含于此。
[0099]对象追踪部14追踪由对象检测部13检测到的对象，将同一对象彼此沿着时序方向连结。在对象的追踪中，可以使用已知的技术(例如，参照日本特开2004-310281号公报、日本专利第3930504号公报、日本专利第4578864号公报等)。在此，日本特开2004-310281号公报、日本专利第3930504号公报、日本专利第4578864号公报的内容通过引用而包含于此。
[0100]数据削减部15削减输入的多个连续的图像的数据量而生成数据量削减图像。数据削减部15从多个连续的图像选择一部分图像并削减选择的图像自身的数据量，由此削减从图像发送装置10向图像接收装置20发送的图像的数据量。即，数据削减部15不是将输入的多个图像全部向图像接收装置20发送，而仅发送判断为最佳拍摄的图像(削减发送的图像的个数)，由此削减从图像发送装置10向图像接收装置20发送的图像的数据量，并且对于该发送的图像，在利用图像发送装置10削减了该图像自身的数据量的基础上向图像接收装置20发送，因此在这一点上能削减从图像发送装置10向图像接收装置20发送的图像的数据量。
[0101]数据削减部15具备最佳拍摄判定部151作为用于削减发送的图像的个数的结构，且具备图像数据量削减部152作为用于削减发送的图像自身的数据量的结构。最佳拍摄判定部151及图像数据量削减部152分别以与图像接收装置20中的识别认证处理适合的削减方法，来削减发送的图像的数据量。因此，图像发送装置10具备参数存储部16、削减控制部17、及接收部18。
[0102]接收部18从图像接收装置20接收识别认证处理的模式信息。该模式信息对应于图像识别认证系统100的上述的各种用途。模式信息与各种削减参数建立对应而存储于在参数存储部16。削减控制部17从参数存储部16读出与由接收部18接收到的模式信息对应的削减参数，设定在对象检测部13及数据削减部15的各种处理中使用的参数。模式信息与削减参数的关系、及使用了削减参数的各种处理，在后面叙述。
[0103]最佳拍摄判定部151由对象特征解析部153、带域成分检测部154、及图像选择部155构成。对象特征解析部153对于由对象检测部13检测到的对象进行特征解析，算出可靠度(例如脸相似度)、对象物的方向(例如脸的朝向)等。在特征解析中可以使用已知的技术(例如，参照日本特开2005-227957号公报等)。在此，日本特开2005-227957号公报的内容通过引用而包含于此。带域成分检测部154按照由削减控制部17设定的削减参数，检测在通过图像接收装置20进行的识别认证处理中重视的带域成分。
[0104]图像选择部155基于对象特征解析部153的特征解析的结果、及带域成分检测部154的带域成分检测的结果，从包含同一对象的多个图像中选择最佳拍摄(最佳的图像)，向图像数据量削减部152输出(以下，将由最佳拍摄判定部151选择的图像称为“选择图像”)。具体而言，按照由削减控制部17设定的参数，决定对由对象特征解析部153得到的可靠度和方向、及由带域成分检测部154得到的带域成分中的哪一个重视到何种程度，以其为选择基准而选择图像。图像选择部155例如在进行年龄判定作为图像接收装置20中的识别认证处理时，以与脸的方向相比更重视包含多个高频成分的图像这样的基准，选择图像。
[0105]图像数据量削减部152具备必要区域提取部156、必要带域提取部157、分辨率转换部158、及图像编码部159。必要区域提取部156按照由削减控制部17设定的削减参数，从选择图像算出适合于通过图像接收装置20进行识别认证处理的区域而提取(修剪)。必要带域提取部157按照由削减控制部17设定的削减参数，从选择图像算出适合于通过图像接收装置20进行识别认证处理的带域而提取。分辨率转换部158按照通过削减控制部17设定的削减参数，以成为通过图像接收装置20进行识别认证处理所需的最小限度的分辨率(像素数)的方式进行选择图像的分辨率转换(重新设定尺寸)。图像编码部159按照由削减控制部17设定的削减参数，以成为通过图像接收装置20进行识别认证处理所需的最小限度的编码率的方式对选择图像进行编码。
[0106]发送部19将从数据削减部15输出的图像和与该图像相关的附属信息向图像接收装置20发送。如上所述，由发送部19向图像接收装置20发送的图像是从由拍摄部11向图像输入部12连续输入的多个图像选择一部分作为选择图像的基础上，对选择图像进行修剪、重新设定尺寸、及编码，由此削减其数据量的图像(数据量削减图像)。如此，在图像发送装置10中，进行从多个图像选择一部分并削减该选择图像自身的数据量的处理(修剪、重新设定尺寸、编码)，因此能够削减从图像发送装置10向图像接收装置20发送的图像的数据量，由此，能够减少网络NW的负荷及图像接收装置20的处理负荷、数据库的必要容量。
[0107]另一方面，在最佳拍摄判定部151中，选择与图像接收装置20的识别认证处理适合的图像，而且，在图像数据量削减部152的修剪中，提取出图像接收装置20的识别认证处理所需的区域，在图像数据量削减部152的重新设定尺寸及编码中，以图像接收装置20的识别认证处理所需的限度进行数据量的削减。由此，通过基于最佳拍摄判定部151及图像数据量削减部152的数据量的削减，能够抑制图像接收装置20的识别认证处理的精度的下降。
[0108]图3是表示图像接收装置20的结构的框图。如图3所示，图像接收装置20具备接收部21、图像译码部22、对象解析部23、数据库24、模式设定部25、及发送部26。图像接收装置20构成作为图像识别认证服务器，与作为数字摄像机而构成的图像发送装置10连接。
[0109]接收部21接收从图像发送装置10的发送部19发送的数据量削减图像及该图像的附属信息。图像译码部22对接收到的图像进行译码。对象解析部23对译码后的图像及附属信息进行解析，而进行对象的识别认证处理。在此的识别认证处理例如是从人物的脸的年龄及性别的识别、从人物的脸的特定的人物的认证、车辆的号牌的识别等。数据库24保存由图像译码部22译码的图像及由对象解析部23得到的解析结果。
[0110]如图3所示，在图像接收装置20上还连接有结果显示装置30。结果显示装置30例如是液晶显示面板，显示保存于数据库24的图像及/或解析结果。图4是表示解析结果的显示例的图。在图4的例子中，以人物的脸为对象，进行年龄及性别的识别，其统计由坐标图表示。在将拍摄部11设于店铺的基础上，通过使用这样的解析结果，能够有助于该店铺的销售活动。
[0111]返回图3，模式设定部25设定由对象解析部23进行的识别认证处理的模式。对象解析部23按照由模式设定部25设定的模式而执行识别认证处理。发送部26将表示由模式设定部25设定的模式的信息(模式信息)向图像发送装置10发送。
[0112]图5是说明从图像接收装置20对图像发送装置10的模式的指定的图。如图5所示，从图像接收装置20向图像发送装置10发送模式信息。发送的该模式信息如上述那样，由图像发送装置10的接收部18接收，在削减控制部17的控制中使用。在数据削减部15中，通过与该模式信息对应的削减方法，生成数据量削减图像。如此生成的数据量削减图像从图像发送装置10向图像接收装置20发送。即，图像接收装置20将由模式设定部25设定的识别认证处理的模式信息对于图像发送装置10发送时，从图像发送装置10按照该模式信息适当地选择而削减了数据量的数据量削减图像被发送。
[0113]接下来，详细说明图像的识别认证处理的模式和从图像发送装置10发送的图像的数据量的削减(最佳拍摄的选择、及图像自身的数据量的削减)的方法的关系。如上述那样，在图像发送装置10中，通过最佳拍摄判定部151从多个图像选择一部分，并通过图像数据量削减部152进行削减该选择图像自身的数据量的处理(修剪、重新设定尺寸、编码)，由此能够减少网络NW的负荷及图像接收装置20的处理负荷、数据库的必要容量，但对于同一对象，图像接收装置20接收的图像的个数受限制，由此，图像接收装置20中的识别认证处理的精度可能会下降，而且，在图像接收装置20中接收的图像的数据量被削减，识别认证处理的精度也可能会下降。
[0114]因此，在本实施方式的图像识别认证系统100中，以选择对于图像接收装置20的识别认证处理而言适当的图像的方式设定通过最佳拍摄判定部151选择图像时的基准，由此抑制对于同一对象限制图像接收装置20接收的图像的个数所造成的识别认证处理的精度的下降，并且，以在图像接收装置20的识别认证处理所需的范围内削减数据量的方式设定通过图像数据量削减部152削减图像的数据量时的削减方法，由此抑制由图像接收装置20接收的图像的数据量被削减所造成的识别认证处理的精度的下降。
[0115]图6是表示分辨率(像素数)与识别认证的精度的关系的例子的坐标图。如图6所示，在进行脸的检测(作为脸的识别)作为识别认证处理时，只要是12X12左右的分辨率，就能够以80%左右的精度进行判定。而且，在进行性别判定作为识别认证处理时，能够以60X60左右的分辨率且以80%左右的精度进行判定。在进行年龄判定作为识别认证处理时，为了得到80%左右的精度，需要80X80左右的分辨率。如此，对应于识别认证处理的内容为了得到一定的精度所需的分辨率不同。即，在上述的图像识别认证系统100中，在通过图像发送装置10进行的脸的检测处理和通过图像接收装置20进行的性别判定处理或年龄判定处理中，由于必要的分辨率不同，因此不考虑通过图像接收装置20进行的识别认证处理而通过图像发送装置10选择了图像时，对于图像接收装置20的判定而言产生不适合的情况，发生精度劣化。
[0116]从图6可知，在任一识别认证处理中，在一定的分辨率以上，识别认证的精度的上升的程度变缓，由此，即使为一定以上的分辨率，与作用于网络的负荷或作用于识别认证处理的负荷等增加相比，无法期待识别认证的精度的上升。
[0117]在图像发送装置10的参数存储部16中存储有规定了识别认证处理的内容(模式)与包含分辨率或高频成分的必要度的削减参数之间的对应关系的表格。图7是表示存储在参数存储部16中的表格的例子的表。在图像接收装置20的识别认证处理的模式中存在年龄判定模式、性别判定模式、人物认证模式、时装流行解析模式、体型判定模式、人种判定模式、车种判定模式、号码判定模式、宠物判定模式、及人缩略图显示模式。
[0118]在表格中，关于各模式，规定了 “检测目标”、“解析目标”、“带域”、“区域”、“分辨率”、及“图像质量”的参数。在图6中，对于“分辨率”，说明了各模式所需的分辨率，但关于“带域”及“图像质量”，可以说同样。即，为了进行一定的精度的识别认证处理而需要高频成分多的图像，但其程度按照脸的检测、性别判定、年龄判定的顺序升高。并且，当高频成分存在的程度增多时，这以上的话，与高频成分的增多相对的识别认证处理的精度的上升变缓。而且，为了进行一定的精度的识别认证处理，需要图像质量高的图像，但其程度按照脸的检测、性别判定、年龄判定的顺序升高。并且，当图像质量变好某种程度时，这以上的话，与图像质量的变好相对的识别认证处理的精度的上升变缓。
[0119]参照图7具体说明的话，例如，在年龄判定模式中，首先“检测目标”当然是人。而且，对象解析部23以人物的脸图像为基础来判定该人物的年龄，因此“解析目标”成为脸图像。而且，为了从脸图像来判定年龄而需要脸的皱纹或各部位的详细的位置等细微的信息，因此模糊、抖动少，需要包含较多的高频成分的脸图像，由此，“带域”成为需要高频成分。
[0120]年龄判定所需的区域仅是脸的区域，头发的部分等的信息不需要，因此“区域”成为脸区域。而且，在年龄判定中，如图6所示，需要80X80左右的分辨率，因此“分辨率”成为高分辨率。而且，同样地，为了从脸图像判定年龄，进行细致的解析，因此需要充分的量的信息，图像质量成为高图像质量。需要说明的是，图像质量对应于编码的编码量，高图像质量意味着编码后的编码量多。
[0121]削减控制部17参照存储在参数存储部16中的表格，由此取得与由接收部18接受到的模式信息对应的各参数，对于数据削减部15等，设定取得的参数。具体而言，削减控制部17将“检测目标”设定在对象检测部，将“解析目标”设定在对象特征解析部153，将“带域”设定在带域成分检测部154及必要带域提取部157，将“区域”设定在必要区域提取部156，将“分辨率”设定在分辨率转换部158，将“图像质量”设定在图像编码部159。
[0122]接下来，参照图8，说明图像发送装置10的动作。图8是图像发送装置10中的图像发送方法的流程图。图8所示的流程图通过在图像发送装置10中安装图像发送程序，按照该图像发送程序来执行。
[0123]首先，图像输入部12输入拍摄部11拍摄到的图像(步骤S81)。如上所述，从拍摄部11连续地向图像输入部12输入图像，但以下的流程按照每一个图像(帧)反复执行。当输入I帧的图像时，利用对象检测部13检测对象(步骤S82)。此时，应由对象检测部13检测的对象由削减控制部17设定作为“检测目标”。然后，进行由对象追踪部14检测到的对象的追踪(步骤S83)。
[0124]接下来，对象追踪部14判断计数值是否达到阈值(步骤S84)。该计数值是无法检测出对象的连续的帧的个数，该阈值是无法检测出对象的连续的帧的容许数。需要说明的是，该计数值对每个对象保持，以下的流程对每个对象进行，例如在画面内存在两个对象时，对于这2个对象分别进行。在计数值未到达阈值时(在步骤S84中为“否”)，判断是否检测到对象(步骤S85)。在检测到对象时(在步骤S85中为“是”)，将计数值重置(步骤S86)，对象特征解析部153进行对象的特征解析(步骤S87)。此时的特征解析的对象通过削减控制部17设定作为“解析目标”。接着，带域成分检测部154检测带域成分(步骤S88)。
[0125]图9是表示带域成分检测部154的带域成分检测处理(图8的步骤S88)的流程图。带域成分检测部154首先对检测到图像内的对象(步骤S82)的区域的频率进行解析(步骤S881)。带域成分检测部154接着算出通过削减控制部17设定的“带域”的成分量(步骤S882)。
[0126]返回图8，接着，图像选择部155进行最佳拍摄的判定(步骤S89)。具体而言，图像选择部155将作为最佳拍摄而保存在暂时保存缓冲器内的图像与此时处理的图像进行比较，基于对象特征解析部153的特征解析的结果及带域成分检测部154的带域成分检测的结果，若为更好的图像(在步骤S89中为“是”)，为了将暂时保存缓冲器的图像更新为此时处理的图像，而进行图像数据削减处理(步骤S90)。在保存的图像为更好的图像时(在步骤S89中为“否”)，不更新暂时保存缓冲器而结束该图像(帧)的处理。
[0127]图10是表示图像数据量削减部152中的图像数据量削减处理(图8的步骤90)的流程图。必要区域提取部156按照由削减控制部17设定的“区域”，提取出图像内的必要的区域(步骤S901)。接下来，必要带域提取部157按照由削减控制部17设定的“带域”，提取出必要的带域(步骤S902)。接着，分辨率转换部158按照由削减控制部17设定的“分辨率”，进行图像的分辨率转换(步骤S903)。接着，图像编码部159按照由削减控制部17设定的“图像质量”，对图像进行编码(步骤S904)。
[0128]返回图8，图像数据量削减部152将存储在暂时保存缓冲器中的图像改写成通过图像数据量削减处理而削减了数据量的图像(数据量削减图像)(步骤S91)，结束该图像(帧)的处理。反复进行这样的处理，当对象不再暂时地出现在图像内时，由于在步骤S85中未检测到对象(在步骤S85中为“否”)，因此增加计数值(步骤S92)，结束该图像(帧)的处理。
[0129]当未检测对象的帧发生连续时，经由步骤S85至步骤S92而结束处理的处理发生连续，如此在未重置计数值的状态下到达规定的阈值时(在步骤S84中为“否”)，判断为追踪完成(追踪对象从摄像机之前完全消失)，发送部19发送此时保存在暂时保存缓冲器内的图像(数据量削减图像)(步骤S93)。
[0130]如以上那样，根据本实施方式的图像识别认证系统100，图像发送装置10的最佳拍摄判定部151选择输入的图像中的最佳拍摄，因此从图像发送装置10向图像接收装置20发送的图像的个数受到限制，由此，能够削减网络的负荷、图像接收装置20的识别认证处理的负荷、图像保存的必要容量。而且，图像发送装置10的图像数据量削减部152对于发送的图像，利用修剪、重新设定尺寸、编码等方法进行削减数据量的处理，因此在这一点上，也能够削减网络的负荷、图像接收装置20内的识别认证处理的负荷、图像保存的必要容量。需要说明的是，也可以仅进行上述的最佳拍摄判定部151的最佳拍摄的选择及图像数据量削减部152的图像数据量的削减中的任一个。
[0131]在本实施方式的图像识别认证系统100中，还通过与图像接收装置20中的图像的识别认证处理适合的方法来进行图像发送装置10中的上述的最佳拍摄判定及图像数据量削减的处理，因此不仅能够削减发送的数据的量，而且能够抑制这样的数据量的削减引起的图像接收装置20的识别认证处理的精度的下降。
[0132]对于上述的图像识别认证系统100，能够进行各种变形。以下，说明几个其具体例。最佳拍摄判定部151及图像数据量削减部152中的任一者可以省略的情况如上所述。而且，可以仅省略图像数据量削减部152的一部分的结构。
[0133]另外，在上述的实施方式中，图像发送装置10具备存储有规定了图像的识别认证的模式和与应发送的数据量的削减方法相关的各种参数之间的对应关系的表格的参数存储部16，通过接收部18从图像接收装置20接收模式信息，而削减控制部17设定了与该模式信息对应的各种参数，但本发明并不局限于此。例如，模式信息可以从图像接收装置20以外接收。而且，可以取代接收部18而具备输入部，模式信息在图像发送装置10中由使用者输入。
[0134]另外，在上述的实施方式中，图像选择部155按照由削减控制部17设定的条件仅选择了一个最佳的图像(最佳拍摄)，但图像选择部155可以选择最佳的规定个数的图像，也可以选择满足规定的条件的全部图像(个数没有限制)。
[0135]而且，图像接收装置20可以具备存储有上述的表格的参数存储部，并将与图像的识别认证处理的模式对应的各种参数向图像发送装置10发送。这种情况下，在图像发送装置10不需要参数存储部16，接收部18接收各种参数，而削减控制部17对其进行设定。图11是表示其变形例的图。
[0136]图像接收装置20当设定模式时，参照表格，读出与该模式对应的各种参数，作为表示削减方法的信息而将这些参数向图像发送装置10发送。在图像发送装置10中，由接收部18接收该信息，削减控制部17按照该信息来设定各种参数，由此，以对应于该参数的削减方法来生成数据量削减图像而向图像接收装置20发送。在图像接收装置20中，对于从图像发送装置10发送的数据量削减图像执行识别认证处理，但此时，假设若识别认证的精度不好，则再将提高识别认证的精度的参数向图像发送装置10指定。图像发送装置10按照由图像接收装置20指定的参数，生成数据量削减图像而向图像接收装置20发送。
[0137]另外，上述的实施方式的图像识别认证系统10经由网络NW将I个图像发送装置10与I个图像接收装置20连接，但系统结构并不局限于此。图12是表示系统结构的另一例的图。在该例子中，图像发送装置10与图像接收装置20不经由网络而直接连接。图13是表示系统结构的又一例的图。如图13所示，多个图像发送装置10与多个图像接收装置20也可以经由网络NW连接。需要说明的是，也可以是仅图像发送装置10为多个，并经由网络NW与I个图像接收装置20连接。
[0138]以上说明了当前时刻考虑到的本发明的优选实施方式，但对于本实施方式能够进行多样的变形，并且，权利要求书包括存在于本发明的真实的主旨和范围内的这样的全部的变形。
[0139]【工业上的可利用性】
[0140]本发明具有能够减少网络负荷及服务器的成本，并抑制这样的数据量的削减造成的识别认证处理的精度的下降这样的效果，作为连续输入的图像的识别或进行识别的图像识别认证系统等有用。
【权利要求】
1.一种图像发送装置，其特征在于，具备: 输入多个连续的图像的图像输入部； 削减向所述图像输入部输入的所述多个图像的数据量而生成数据量削减图像的数据量削减部；以及 将所述数据量削减图像向对所述数据量削减图像进行识别认证处理的图像接收装置发送的发送部， 所述数据量削减部通过与由所述图像接收装置进行的所述识别认证处理对应的削减方法来削减所述多个图像的数据量。
2.根据权利要求1所述的图像发送装置，其特征在于， 所述数据量削减部以与由所述图像接收装置进行的所述识别认证处理对应的基准，从所述多个图像中选择一部分图像，从而削减所述多个图像的数据量。
3.根据权利要求1所述的图像发送装置，其特征在于， 所述数据量削减部对所述多个图像或从所述多个图像中选择的一部分图像的、与由所述图像接收装置进行的所述识别认证处理对应的区域进行修剪，从而削减所述多个图像的数据量。
4.根据权利要求1所述的图像发送装置，其特征在于， 所述数据量削减部将所述多个图像或从所述多个图像中选择的一部分图像的、与由所述图像接收装置进行的所述识别认证处理对应的带域成分提取出，从而削减所述多个图像的数据量。
5.根据权利要求1所述的图像发送装置，其特征在于， 所述数据量削减部对所述多个图像或从所述多个图像中选择的一部分图像进行分辨率转换，转换成与由所述图像接收装置进行的所述识别认证处理对应的分辨率，从而削减所述多个图像的数据量。
6.根据权利要求1所述的图像发送装置，其特征在于， 所述数据量削减部以与由所述图像接收装置进行的所述识别认证处理对应的编码率，对所述多个图像或从所述多个图像中选择的一部分图像进行编码，从而削减所述多个图像的数据量。
7.根据权利要求1所述的图像发送装置，其特征在于， 具备: 接收由所述图像接收装置进行的所述识别认证处理的模式信息的接收部； 存储所述模式信息与所述削减方法之间的对应关系的存储部；以及 参照所述存储部而决定与由所述接收部接收到的所述模式信息对应的所述削减方法的削减控制部， 所述数据量削减部按照由所述削减控制部决定的所述削减方法来生成所述数据量削减图像 。
8.根据权利要求1所述的图像发送装置，其特征在于， 具备接收表示所述削减方法的信息的接收部， 所述数据量削减部按照用由所述接收部接收到的所述信息表示的所述削减方法而生成所述数据量削减图像。
9.一种图像发送方法，其特征在于， 包括: 输入多个连续的图像的图像输入步骤； 削减输入的所述多个图像的数据量而生成数据量削减图像的数据量削减步骤；以及将所述数据量削减图像向对所述数据量削减图像进行识别认证处理的图像接收装置发送的发送步骤， 所述数据量削减步骤通过与由所述图像接收装置进行的所述识别认证处理对应的削减方法来削减所述多个图像的数据量。
10.一种图像发送程序，其特征在于， 使计算机作为如下各部分发挥功能: 输入多个连续的图像的图像输入部； 削减向所述图像输入部输入的所述多个图像的数据量而生成数据量削减图像的数据量削减部；以及 将所述数据量削减图像向对所述数据量削减图像进行识别认证处理的图像接收装置发送的发送部， 所述数据量削减部通过与由所述图像接收装置进行的所述识别认证处理对应的削减方法来削减所述多个图像的数据量。
11.一种图像识别认证系统，由图像发送装置和图像接收装置构成，其特征在于， 所述图像发送装置具备: 输入多个连续的图像的图像输入部； 削减向所述图像输入部输入的所述多个图像的数据量而生成数据量削减图像的数据量削减部；以及 将所述数据量削减图像向所述图像接收装置发送的发送部， 所述图像接收装置具备: 接收由所述发送部发送的所述数据量削减图像的接收部；以及对于由所述接收部接收的所述数据量削减图像进行识别认证处理的识别认证处理部，所述数据量削减部通过与由所述识别认证处理部进行的所述识别认证处理对应的削减方法来削减所述多个图像的数据量。
12.—种图像接收装置，其特征在于，具备: 接收从图像发送装置发送的图像的接收部； 对于由所述接收部接收的所述图像进行识别认证处理的识别认证处理部；以及将由所述识别认证处理部进行的所述识别认证处理的模式信息向所述图像发送装置发送的发送部。
13.一种图像接收装置，其特征在于，具备: 接收从图像发送装置发送的图像的接收部； 对于由所述接收部接收的所述图像进行识别认证处理的识别认证处理部； 存储由所述识别认证处理部进行的所述识别认证处理的模式信息与用于生成所述图像的图像生成方法之间的对应关系的存储部； 按照设定的模式信息并参照所述存储部而决定所述图像生成方法的图像生成控制部；以及 将表示由 所述图像生成控制部决定的所述图像生成方法的信息向所述图像发送装置发送的发送部。
【文档编号】H04N5/232GK103577802SQ201310306018
【公开日】2014年2月12日 申请日期:2013年7月19日 优先权日:2012年7月19日
【发明者】桑原麻理惠, 池田淳, 中村学, 横光澄男, 佐藤雅也 申请人:松下电器产业株式会社