058]在本示例性实施例中，图像识别装置10通过使用数据中心5的服务器计算机的云计算来实现，但本发明并不限于此。另外，图像识别装置10的服务器计算机可由虚拟服务器等构成。
[0059]信息处理终端110包括图像捕获单元112和传输单元114。
[0060]例如，图像捕获单元112可以是内置到便携式终端24中的摄像机、安装于店铺7中的监控摄像机22、能够由信息处理终端110或图像识别装置10控制的可捕获店铺7内部的图像的网络摄像机或其组合。另外，由图像捕获单元112捕获的图像可以是静止图像或电影(movie)。当所捕获的图像是电影时，从电影顺序地获得的图像数据段可以用于由图像识别装置10执行的图像识别过程中。考虑到每一信息处理终端110的处理能力和网络3的通信负荷，可能适当地采用哪一图像捕获单元被使用并且静止图像和电影中的哪一个被用于图像识别过程中。
[0061]当使用信息处理终端110捕获到图像时，信息处理终端110可启动预定的应用程序来通过应用程序控制图像捕获单元112，由此通过捕获商品架20获取图像。另外，作为图像捕获单元，除了其中图像捕获单元112内置到信息处理终端110中的配置之外，还可以采用其中外部摄像机连接到信息处理终端110的配置。
[0062]传输单元114通过网络3将由图像捕获单元112捕获的图像传输到图像识别装置10。
[0063]传输单元114的通信手段可以是有线通信和无线通信中的任一个。通信可通过便携式通信网络、公用线网络、局域网络(LAN)或广域网络(WAN)中的任何一个来执行，并且可根据信息处理终端110的配置等适当地采用通信手段。以此方式，各种图像通信方法被考虑并且与本发明的本质无关，并且因此将不描述对其的详细描述。另外，信息处理终端110还可包括其中执行加密过程和鉴别过程作为通信期间的安全措施的配置。
[0064]由图像捕获单元112通过捕获商品架20获得的图像可在图像捕获期间在不用存储于信息处理终端I1中的情况下由传输单元114顺序地传输到图像识别装置10。可替代地，图像可存储于信息处理终端110中，并且然后所述多个图像可由传输单元114集中地传输到图像识别装置10。
[0065]当使用利用监控摄像机22或网络摄像机捕获的图像时，店铺7中所提供的信息处理终端110可获取通过远程地操作监控摄像机22捕获的图像，或可通过从其上记录有图像的记录介质读出图像而获取由监控摄像机22捕获的图像。获取图像的各种方法被考虑并且与本发明的本质无关，并且因此将不描述对其的详细描述。
[0066]在本示例性实施例中，采用其中所捕获的图像数据从店铺7侧传输到数据中心5并且然后数据中心5的图像识别装置10执行图像识别过程的配置，但本发明并不限于此。例如，信息处理终端110可包括从由图像捕获单元112捕获的图像提取特征量的提取单元(未示出)。另外，还可采用其中传输单元114将特征量的信息传输到数据中心5的配置。与其中传输图像数据的情形相比较，在其中传输特征量的信息的配置的情形中可能减少通信量并且抑制通信负荷。
[0067]此外，信息处理终端110可包括存储待识别的商品图像的特征量数据并且执行识别所捕获的图像的过程的图像识别单元122。另外，还可采用其中传输单元114将图像识别的结果传输到数据中心5的配置。例如，在其中待识别的商品的种类的数目小的情形中和在其中信息处理终端110的处理能力高的情形中，这个配置是有效的，并且可能减小数据中心5的服务器的负荷。
[0068]以此方式，图1的商品信息处理装置100可通过数据中心5的图像识别装置10 (图4)和店铺7的信息处理终端110 (图4)的组合来实现。优选地，考虑到图像识别装置10或信息处理终端110的处理能力、通信负荷等，商品信息处理装置100的部件之间共享的功能被确定以适当地组合。
[0069]另外，除了图像数据自身之外，由传输单元114从店铺7传输到图像识别装置10的信息可进一步包括例如店铺的标识信息、摄影师信息、监控摄像机22或信息处理终端110的标识信息等。另外，当图像信息不包括属性信息(诸如，图像捕获的日期和时间)时，图像信息可包括图像捕获的日期和时间。此外，当传输通过捕获商品架20的部分区域获得的图像时，优选地，关于所传输图像的信息包括指示哪一区域在进行图像捕获的信息。
[0070]例如，这些信息段可与用于创建每日报告的应用程序相关联地自动地获取。可替代地，信息可由操作员使用便携式终端24的操作屏幕输入。
[0071]另外，图像识别装置10可连接到输入装置(未示出)(诸如，键盘或鼠标)、显示器装置(诸如，显示器)和输出装置(未示出)(诸如，打印机)，并且可具有由操作员操作的用户界面的功能。另外，图像识别装置10可被配置成与输入和输出装置(诸如，触控面板)一体地形成。
[0072]图像识别装置10包括接收单元120、图像识别单元122、商品指定单元132、相对位置指定单元134和正面数目计数单元142，并且连接到特征量数据库12和商品数据库130(在附图中由“商品DB”示出)。同时，商品指定单元132、相对位置指定单元134和正面数目计数单元142可通过用于管理与图像识别装置10分开地提供的商品信息的服务器装置(未示出)来实现。
[0073]图5是图示根据本示例性实施例的特征量数据库12的结构的示例的图解。
[0074]如图5(a)中所图示，关于相应商品的正面图像的信息段记录于特征量数据库12中。具体而言，如图5(b)中所图示，特征量数据库12存储用于标识商品的商品ID，所述商品ID与具有允许识别商品的正面图像的特征量的至少一个特征点的数据(如特征量表124)相关联。
[0075]返回参考图4，接收单元120通过网络3从信息处理终端110接收图像数据。图像识别单元122从由接收单元120接收的图像数据提取特征量，并且参考特征量数据库12，检查特征量数据库12是否包括与所提取的特征量匹配的特征量。
[0076]例如，由图像识别单元122执行的识别过程包括以下处理。
[0077](al)过程是从所捕获的图像提取特征量由此执行参考特征量数据库12识别商品的正面图像的模式的过程。这里，进行模式识别过程的商品正面图像的商品名称可能不能被指定。例如，当商品是饮料时，其可能能够识别这样的作为来自图像的PET瓶的正面区域。这里，存在于所捕获的图像内的所有商品的所有正面区域可以被指定。
[0078](a2)过程是获取所捕获的图像内的商品的所识别的正面区域的相对位置。
[0079](a3)过程是核对所识别的正面区域内的图像的特征量与存储于特征量数据库12中的特征量以由此搜寻具有至少等于或大于阈值的重合度的特征量。
[0080](a4)过程是指定对应于重合特征量的商品ID。
[0081 ] 如图6中所图示，作为商品主控器136，商品数据库130存储信息，诸如，例如，商品ID、商品名称、商品的分类代码、价格和用于标识商品的正面图像数据的图像ID。例如，商品的分类代码可包括指示层次分类的信息。当主要分类是饮料时，诸如茶、咖啡、红茶、果汁、碳酸饮料和水的分类可包括为中级分类，诸如炒青绿茶、绿茶、乌龙茶和混合茶的分类可包括为茶的较小分类，并且诸如有限区域、有限周期和活动的分类可包括为分支数。此外，商品数据库130可包括关于其它公司的商品的信息。
[0082]另外，当关于从同一商品的相应侧表面捕获的图像的信息记录于商品数据库130中时，图像识别单元122可识别商品的定向。
[0083]返回参考图4，商品指定单元132从图像识别单元122获取具有由图像识别单元122识别为与记录于特征量数据库12中的特征量重合的特征量的商品ID，并且然后指定对应商品。考虑以下标示待由商品指定单元132指定的商品(在下文中，称为“特定商品”)的方法。类似地，可标示待稍后描述的目标商品。
[0084](bl)操作员在由图像捕获单元112执行的图像捕获期间标示在信息处理终端110侧上的至少一个种类的特定商品。此时，信息处理终端110可显示用于标示特定商品(例如，商品清单)的屏幕，并且可接收操作员的选择。另外，信息处理终端110可将关于所标示的特定商品的信息与所捕获的图像一起传输到图像识别装置10，并且商品指定单元132可基于关于特定商品的所接收的信息而执行处理。
[0085](b2)图像识别装置10侧将至少一个种类的特定商品标示为预定的设定信息并且存储设定信息。商品指定单元132参照设定信息基于关于所标示的特定商品的信息而执行处理。另外，设定信息的设定可被配置成能够通过与其它条件(诸如，例如，预定时间周期和店铺区域)组合而被选择或更新。
[0086](b3)图像识别装置10执行自动识别。
[0087]例如，商品指定单元132可将记录于特征量数据库12中的商品自动地识别为特定商品。在这个情形中，假定仅特定商品记录于特征量数据库12中。另外，商品指定单元132可基于特定商品的分类而将属于相同分类的商品自动地识别为目标商品。当分类具有层次结构时，相同层级或较高层级的商品设定为目标商品。例如，当商品是饮料并且特定商品是绿茶时，目标商品可被设定为绿茶或可被设定为属于较高层级的分类的茶。
[0088]这里，特定商品是指商品信息处理系统I中待管理的至少一个种类的商品。例如，所述特定商品可以是一个人自己的公司的某一特定商品或可以是某一特定系列的商品群组。另外，其它商品是除特定商品之外的商品。待管理的商品(目标商品)包括特定商品和其它商品，并且是待进行商品架20中陈列关系的断定的商品。例如，当待进行陈列关系的断定的特定商品是饮料时，通过种类(诸如，碳酸饮料和茶)的商品群组单独管理。即，假定在包括属于诸如碳酸饮料和茶的不同分类的多个种类的商品的商品群组中的陈列关系不受管理。
[0089]在本发明中，至少一个种类的特定商品(碳酸饮料商品A)在相同分类中(例如，在碳酸饮料中)与其它商品(碳酸饮料商品B、C和D)区分开，并且断定包括特定商品和其它商品的商品架20中的目标商品(碳酸饮料商品A、B、C和D)的陈列状态之间的陈列关系O
[0090]在本示例性实施例中，假定相同分类的商品在商品架20中集中地邻近陈列。在其中不同分类的商品混合陈列的陈列状态中，可能从待断定的目标排除陈列关系。即，假定包括相同分类的目标商品的区域存在于商品架20的相同架中或布置成彼此垂直地连续的架的多个层阶中。商品信息处理装置100可被进一步配置成检测商品的这样的混合状态并且通知所述状态。
[0091]商品指定单兀132标识对应于所获取的商品ID的每一商品是待管理的特定商品还是其它商品中的任何一者，并且指定每一商品。此时，商品指定单元132可参考商品数据库130从商品主控器136获取关于对应于商品ID的商品的信息。此外，商品指定单元132辨别其它商品是否是待进行陈列关系的断定的目标商品，并且指定目标商品。
[0092]特征量数据库12虽然可