图像识别装置、商品信息处理装置及图像识别方法
【专利说明】图像识别装置、商品信息处理装置及图像识别方法
[0001]本申请主张申请日为2015年07月13日、申请号为JP2015-139581的日本申请以及申请日为2014年12月23日、申请号为US14/581，861的美国申请为优先权，并引用上述申请的内容。
技术领域
[0002]本发明涉及一种图像识别装置、商品信息处理装置及图像识别方法。
【背景技术】
[0003]从摄像头摄像的图像中识别商品的图像识别装置，在规定位置安置有商品后摄像图像，并采用已摄像的图像识别商品。在图像识别装置执行识别处理的期间，使用者有时追加商品或者移动商品。这时，现有图像识别装置存在有不能识别变更后的商品这样的技术问题。
【发明内容】
[0004]鉴于上述问题，本发明的目的在于提供一种图像识别装置、商品信息处理装置及图像识别方法，其能够识别在识别处理中已变更的对象物。
[0005]为解决上述问题，本发明第一方面涉及的图像识别装置，包括取得部及控制部。取得部取得摄像了表示对象物的图案的图像。控制部从所述取得部所取得的第一图像指定图案区，识别已指定的所述图案区所包含的图案，从所述取得部取得第二图像，判定所述第一图像的对象物的配置和所述第二图像的对象物的配置是否一致，当判定出所述第一图像的所述对象物的所述配置和所述第二图像的所述对象物的所述配置不一致时，从所述第二图像指定图案区，识别已指定的所述图案区所包含的图案。
[0006]本发明第二方面涉及的商品信息处理装置，用于识别图案，该商品信息处理装置，包括:取得部，取得摄像了表示对象物的图案的图像；以及控制部，从所述取得部所取得的第一图像指定图案区，识别已指定的所述图案区所包含的图案，从所述取得部取得第二图像，判定所述第一图像的对象物的配置和所述第二图像的对象物的配置是否一致，当判定出所述第一图像的所述对象物的所述配置和所述第二图像的所述对象物的所述配置不一致时，从所述第二图像指定图案区，识别已指定的所述图案区所包含的图案，取得与已识别的所述图案对应的商品信息，基于已取得的所述商品信息进行结算处理。
[0007]本发明第三方面涉及的图像识别方法，用于识别图案，该图像识别方法，包括以下步骤:取得摄像了表示对象物的图案的第一图像的步骤；从已取得的第一图像指定图案区的步骤；识别已指定的所述图案区所包含的图案的步骤；取得摄像了表示所述对象物的图案的第二图像的步骤；判定所述第一图像的对象物的配置和所述第二图像的对象物的配置是否一致的步骤；以及当判定出所述第一图像的所述对象物的所述配置和所述第二图像的所述对象物的所述配置不一致时，从所述第二图像指定图案区，识别已指定的所述图案区所包含的图案的步骤。
【附图说明】
[0008]下面，参照附图对本发明所涉及的图像识别装置、商品信息处理装置及图像识别方法进行说明。当结合附图考虑时，通过参照下面的详细描述，能够更完整更好地理解本发明以及容易得知其中许多伴随的优点，但此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定，其中:
[0009]图1是概略地示出第一实施例所涉及的商品信息处理装置的构成例的图；
[0010]图2是示出第一实施例所涉及的商品信息处理装置的构成例的框图；
[0011]图3是示出第一实施例所涉及的商品信息处理装置所摄像的图像的例图；
[0012]图4是示出第一实施例所涉及的商品信息处理装置的动作例的流程图；
[0013]图5是示出第一实施例所涉及的商品信息处理装置的动作例的流程图；
[0014]图6是示出第二实施例所涉及的商品信息处理装置的动作例的流程图；
[0015]图7是示出第三实施例所涉及的商品信息处理装置的动作例的流程图；
[0016]图8是示出第三实施例所涉及的商品信息处理装置的动作例的流程图；
[0017]图9是示出第三实施例所涉及的商品信息处理装置的动作例的流程图；
[0018]图1Oa及图1Ob分别是示出第四实施例所涉及的商品信息处理装置所摄像的图像的例图；以及
[0019]图11是示出第四实施例所涉及的商品信息处理装置的动作例的流程图。
[0020]附图标记说明
[0021]I商品信息处理装置3摄像头
[0022]5显示部6操作部
[0023]21 CPU23 RAM
[0024]25摄像头接口
【具体实施方式】
[0025]以下，参照附图，对实施例进行说明。
[0026]第一实施例
[0027]首先，对第一实施例所涉及的商品信息处理装置(图像识别装置)进行说明。
[0028]图1概略地示出第一实施例所涉及的商品信息处理装置I的构成例。
[0029]商品信息处理装置I对筐10内的商品进行结算处理。商品信息处理装置I设置在销售商品的店铺等中。商品信息处理装置I当将筐10配置在规定的位置时，对筐10内的商品执行结算处理。商品信息处理装置I也可以作为使用者亲自进行结算处理的自助收银机来被设置。此外，商品信息处理装置I也可以作为店铺的店员进行结算处理的通常收银机来被设置。
[0030]商品信息处理装置I基于指定商品(对象物)的图案，识别商品。筐10内的商品具有指定商品的图案。例如，指定商品的图案是条形码、QR代码(登记商标)、字符、数字或标识等。此外，商品信息处理装置I也可以通过目的物识别(商品本身的图案的识别)识别商品。在这里，指定商品的图案是条形码。
[0031]如图1所示，商品信息处理装置I具有机箱2、摄像头3、显示部5及操作部6等。
[0032]机箱2是形成商品信息处理装置I的外形的框架。机箱2以能够设置筐10的方式形成。在图1所示的例子中，机箱2为3字形，并以能够载置筐10的方式形成。
[0033]此外，机箱2在内部收纳CPU等的控制部。
[0034]摄像头3摄像筐10内的商品。在图1所示的例子中，摄像头3以从上方摄像筐10的方式设置。摄像头3也可以从斜上方摄像筐10内的方式设置。摄像头3所设置的位置及方向并不限定于指定构成。
[0035]另外，商品信息处理装置I也可以具有多个摄像头3。这时，以在各个不同的位置及角度摄像筐10内的商品的方式设置有多个摄像头3。
[0036]例如，摄像头3是CCD摄像头等。此外，摄像头3也可以是摄像不可见光的摄像装置。摄像头3的构成并不限定于指定构成。
[0037]显示部5是通过控制部的控制显示各种信息的显示装置。显示部5诸如是液晶显示器等。
[0038]操作部6通过商品信息处理装置I的利用者输入有各种操作指示。操作部6向控制部发送操作者所输入的操作指示的数据。操作部6诸如是键盘、数字(置数)键及触摸面板等。此外，操作部6也可以接受来自利用者的手势的输入。
[0039]在这里，操作部6是触摸面板，与显示部5 —体地形成。
[0040]另外，摄像头3、显示部5或操作部6也可以与机箱2 —体形成。
[0041]此外，商品信息处理装置I也可以根据需要适当设置照明等其他构成，或者去掉上述构成。例如，当利用者放置筐10时则自动地开始识别处理并用预先登记的信用卡信息进行结算时，商品信息处理装置I也可以去掉显示部5或/及操作部6。
[0042]接着，对商品信息处理装置I的构成例进行说明。
[0043]图2是表示商品信息处理装置I的构成例的框图。
[0044]如图2所示，商品信息处理装置I具有摄像头3、显示部5、操作部6、CPU21、R0M22、RAM23、NVM24及摄像头接口 25等。
[0045]摄像头3、显示部5及操作部6如上述。
[0046]CPU21是管理商品信息处理装置I整体控制的控制部。CPU21基于R0M22或者NVM24所存储的控制程序及控制数据进行各种处理。例如，CPU21通过执行R0M22所存储的程序，进行与商品信息处理装置I的动作控制或者商品信息处理装置I的运用形式对应的各种处理。
[0047]另外，各种功能中的一部分功能也可以通过硬件电路实现。这时，CPU21控制通过硬件电路执行的功能。
[0048]R0M22是预先存储控制用程序及控制数据等的非易失性存储器。R0M22以在制造阶段存储了控制程序及控制数据等的状态下被安装到商品信息处理装置I中。也就是说，R0M22所存储的控制程序及控制数据，预先根据商品信息处理装置I的规格来安装。
[0049]RAM23是易失性的存储器。RAM23临时存储CPU21的处理中的数据等。RAM23基于来自CPU21的命令存储各种应用程序。此外，RAM23也可以存储执行应用程序所需要的数据及应用程序的执行结果等。
[0050]NVM24诸如由EEPR0M(登记商标)或者闪存ROM等可写入及改写数据的非易失性的存储器构成。NVM24根据商品信息处理装置I的运用用途存储控制程序、应用程序及各种数据。例如，在NVM24中创建程序文件及数据文件等。所创建的各文件写入有控制程序及各种数据等。
[0051 ] 摄像头接口 25是用于CPU21与摄像头3进行通信的接口。摄像头接口 25 (对应于取得部)，取得摄像头3所摄像的图像。也就是说，CPU21通过摄像头接口 25取得摄像头3所摄像的图像。
[0052]接着，对CPU21所实现的功能进行说明