商品信息处理装置、其数据处理方法和程序的制作方法
【技术领域】
[0001]本发明涉及一种商品信息处理装置、其数据处理方法和程序，更具体地讲，涉及一种处理相对于商品陈列架的正面(face)的信息的商品信息处理装置、其数据处理方法和程序。
【背景技术】
[0002]专利文献I公开了通过数值在数量上表达商品陈列架中的朝向正面的性能的技术的示例。专利文献I中所公开的系统标识陈列架图像中的商品存在区域和商品缺乏区域并且提取边界线。
[0003]另外，专利文献2公开了这样一种系统，其捕获自动售货机的正面图像、比较并确定通过分析图像(分析列编号、商品代码、销售价格和Η/C分类)和自动售货机的安装数据(列编号、销售价格和Η/C分类)获得的结果，并且当设置未如自动售货机的正面上所陈列的而被执行时给出通知。
[0004]另外，专利文献3公开了从通过捕获商品的陈列状态获得的图像产生商品陈列模式、比较所产生的商品陈列模式与参考陈列模式并且检测陈列的扰乱的系统。
[0005]相关文献
[0006]专利文献
[0007][专利文献I]日本未审专利公开第2006-59038号
[0008][专利文献2]日本未审专利公开第2012-73738号
[0009][专利文献3]日本未审专利公开第2003-230131号
【发明内容】
[0010]本发明要解决的问题
[0011]可能从通过捕获商品陈列架获得的图像指定商品并且通过使用上文所提及的技术指定所述商品的布置。然而，不可能辨别待管理的特定商品与其它商品并且断定在包括其它商品的整个陈列状态中特定商品是如何陈列的陈列关系。
[0012]鉴于上文所提及的状况提出本发明，并且其目的是提供能够有效地断定店铺的商品陈列架中特定商品与其它商品之间的陈列关系的商品信息处理装置，其数据处理方法和程序。
[0013]解决问题的方法
[0014]本发明的商品信息处理装置包括:商品提取单元，所述商品提取单元从通过捕获商品的陈列状态获得的图像提取至少一个种类的特定商品；以及陈列关系指定单元，所述陈列关系指定单元指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系。
[0015]本发明的商品信息处理装置的数据处理方法包括:从通过捕获商品的陈列状态获得的图像通过所述商品信息处理装置提取至少一个种类的特定商品；以及通过所述商品信息处理装置指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系。
[0016]本发明的计算机程序是致使用于实现商品信息处理装置的计算机执行以下进程的程序:从通过捕获商品的陈列状态获得的图像提取至少一个种类的特定商品；以及指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系。
[0017]同时，在方法、设备、系统、记录介质、计算机程序等等之间转换的本发明的上文所提及的部件和表达的任何组合也与本发明的方面一样有效。
[0018]另外，本发明的各种部件无需总是彼此独立。多个部件可形成为一个构件，一个部件可由多个构件形成，某一部件可以是另一部件的一部分或某一部件的一部分，并且另一部件的一部分可彼此重叠。
[0019]按次序在本发明的数据处理方法和计算机程序中描述多个进程。然而，描述的次序并不限制执行所述多个进程的次序。出于这个原因，当实施本发明的数据处理方法和计算机程序时，所述多个进程的次序可在上下文中不具有任何困难的范围内改变。
[0020]此外，本发明的数据处理方法和计算机程序中的多个进程无需总是以不同定时分别执行。出于这个原因，在执行某一进程期间可出现另一进程，或某一进程的执行定时可部分地或全部地重叠另一进程的执行定时。
[0021]本发明的效果
[0022]根据本发明，提供能够有效地断定店铺的商品陈列架中特定商品与其它商品之间的陈列关系的商品信息处理装置、其数据处理方法和程序。
【附图说明】
[0023]依据下文所描述的优选示例性实施例和如下附图，上文所描述的目的、其它目的、特征和优点将更加显而易见。
[0024]图1是图示根据本发明的示例性实施例的商品信息处理装置的配置的功能性框图。
[0025]图2是图示使用根据本发明的示例性实施例的商品信息处理装置的商品信息处理系统的配置示例的框图。
[0026]图3是图示根据本发明的示例性实施例的商品信息处理装置的使用场景的图解。
[0027]图4是图示根据本发明的示例性实施例的商品信息处理装置的特定配置示例的功能性框图。
[0028]图5是图示根据本示例性实施例的图像识别装置的特征量数据库的结构的示例的图解。
[0029]图6是图示存储于根据本示例性实施例的商品数据库中的商品主控器的结构的示例的图解。
[0030]图7是图示根据本示例性实施例的商品信息处理装置的操作的示例的流程图。
[0031]图8是图示根据本发明的示例性实施例的商品信息处理系统的便携式终端和图像识别装置的操作的程序的示例的流程图。
[0032]图9是图示从根据本示例性实施例的商品信息处理装置中的所捕获的图像识别正面区域的过程的图解。
[0033]图10是图示使用根据本示例性实施例的商品信息处理装置中的便携式终端的所捕获屏幕的示例的图解。
[0034]图11是图示根据本发明的示例性实施例的商品信息处理装置的配置的功能性框图。
[0035]图12是图示使用根据本发明的示例性实施例的商品信息处理装置的商品信息处理系统的配置示例的框图。
[0036]图13是图示根据本发明的示例性实施例的商品信息处理装置的特定配置示例的功能性框图。
[0037]图14是图示存储于根据本示例性实施例的商品数据库中的合同信息表的结构的示例的图解。
[0038]图15是图示标识其图像通过根据本发明的示例性实施例的商品信息处理装置捕获的商品架的布置的方法的图解。
[0039]图16是图示在根据本发明的示例性实施例的商品信息处理装置中自动地辨别目标商品陈列区域的过程的图解。
[0040]图17是图示在根据本发明的示例性实施例的商品信息处理装置中捕获商品架的图像的方法的图解。
【具体实施方式】
[0041]在下文中，将参考附图描述本发明的示例性实施例。在所有附图中，类似的附图标记指示类似部件，并且将不重复对其的描述。
[0042](第一示例性实施例)
[0043]图1是图示根据本发明的示例性实施例的商品信息处理装置100的配置的功能性框图。
[0044]迄今，关于在每一零售店铺中的商品陈列架的商品的陈列状态的信息由销售员或进每一店铺的像商品制造商一样的人手动收集，并且被记录为每日报告等并且进行管理。
[0045]根据本发明的示例性实施例的商品信息处理装置100辨别店铺的商品陈列架中待管理的特定商品与其它商品，并且从捕获的图像，断定特定商品如何陈列于包括其它商品的陈列状态中的陈列关系。
[0046]根据本发明的示例性实施例的商品信息处理装置100包括从通过捕获商品的陈列状态获得的图像提取至少一个种类的特定商品的商品提取单元102和指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系的陈列关系指定单元104。
[0047]商品信息处理装置100的部件通过包括中央处理单元(CPU)、存储器、用于实现图1的部件的程序(所述部件被载入到存储器中)、存储程序的存储单元和通信接口的任何计算机(未示出)的硬件和软件的任何组合来实现。另外，本领域的技术人员理解，可对其实现方法和其装置做出各种修改。下文描述的附图中的每一个图示功能单元中的逻辑块而非图示硬件单元中的配置。同时，在附图中的每一个中，与本发明的本质无关的一部分的配置并未予以描述并且未不出。
[0048]在图1的商品信息处理装置100中，每一元件和整个商品信息处理装置100由CPU控制。CPU可通过将存储于硬盘中的程序读出到存储器中并且执行所述程序而实现图1中所图示的商品信息处理装置100的每一单元的功能。
[0049]描述根据本示例性实施例的计算机程序以便致使用于实现商品信息处理装置100的计算机执行从通过捕获商品的陈列状态获得的图像提取至少一个种类的特定商品的进程和指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系的进程。
[0050]根据本示例性实施例的计算机程序可记录于计算机可读记录介质中。记录介质并不受特别限制，并且考虑具有各种形式的记录介质。另外，程序可从记录介质载入到计算机的存储器中，或可通过网络下载到计算机中，并且可被载入到存储器中。
[0051]图2是图示使用根据本发明的示例性实施例的商品信息处理装置100的商品信息处理系统I的配置示例的框图。图3是图示根据本发明的示例性实施例的商品信息处理装置100的使用场景的图解。图4是图示根据本发明的示例性实施例的商品信息处理装置100的特定配置示例的功能性框图。
[0052]如图2和3中所图示，根据本示例性实施例的商品信息处理系统I通过网络3将通过捕获店铺7的商品架20上所陈列的商品获得的图像传输到数据中心5(由附图中的“DC”示出)，并且基于存储于特征量数据库12(由附图中的“特征量DB”示出)中的特征量而执行识别由数据中心5中所提供的图像识别装置10接收的图像的过程。
[0053]考虑捕获商品架20的图像的各种方法。作为图像捕获方法的示例，包括多个层阶和列的架或图像捕获的区域26的商品架20的整体可在相对宽广范围中使用安装于店铺7中的监控摄像机22集中地捕获。可替代地，作为图像捕获方法的另一示例，例如，操作员27可通过在所述范围上保持具有摄像机的便携式终端24来捕获商品架20的若干层阶或若干列的一部分相对窄范围的图像。
[0054]如图4中所图示，根据本示例性实施例的商品信息处理系统I包括店铺7中所使用的信息处理终端110和数据中心5中所提供的图像识别装置10。信息处理终端110和图像识别装置10通过网络3彼此连接。
[0055]例如，信息处理终端110是具有内置摄像机(未示出)的图2的便携式终端24，或连接到监控摄像机22的终端(未示出)。
[0056]便携式终端24是能够通过中继站(未示出)连接到网络3的便携式终端，并且，例如，是平板电脑终端、智能电话、个人数字助理(PDA)等。例如，连接到监控摄像机22的终端是个人计算机、销售点系统(POS)终端、平板电脑终端、智能电话、个人数字助理(PDA)
终端等。
[0057]信息处理终端110和图像识别装置10的部件通过包括CPU、存储器、用于实现图4的部件的程序(所述部件被载入到存储器中)、存储程序的存储单元和通信接口的任何计算机的硬件和软件的任何组合来实现。另外，本领域的技术人员理解，可对其实现方法和其装置做出各种修改。
[0