商品信息处理装置、其数据处理方法和程序的制作方法_3

文档序号:8548130阅读:来源:国知局
仅存储关于至少待管理的特定商品的信息,但也可存储关于其它商品的信息,例如,其它公司的商品或除待管理的商品之外的商品。
[0093]当仅存储关于特定商品的信息段时,商品指定单元132可将具有与记录于特征量数据库12中的特征量匹配的特征量的商品指定为特定商品。具有与其不匹配的特征量的商品可被指定为其它商品。在这个情形中,假定图像内的目标商品的区域被提前指定或仅目标商品被包括于所捕获的图像中。稍后将描述指定目标商品的区域的方法。
[0094]另外,当特征量数据库12或商品主控器136存储关于其它商品的信息时,可能基于所标示的特定商品的信息而辨别具有与记录于特征量数据库12中的特征量匹配的特征量的商品的商品ID是特定商品还是其它商品中的任何一者。此外,从关于所标示的特定商品的信息辨别特定商品的分类,并且属于与特定商品相同的分类的其它商品被指定为目标商品。这里,例如,当是一个人自己的公司的碳酸饮料的商品A被设定为特定商品时,属于相同分类的一个人自己的公司的商品(即,除是碳酸饮料的商品A和是其它公司的碳酸饮料的商品之外的商品)可被设定为目标商品。
[0095]例如,如图9中所图示,由点线围绕的区域52是指在所捕获的图像50中被识别为特定商品或目标商品的商品的正面区域。同时,在其中同时执行图像识别过程和图像捕获的配置中,指示以此方式识别的商品的正面区域的框可显示于便携式终端24的屏幕上。另夕卜,目标商品陈列区域54可由如虚线所指示的框围绕,并且可呈现于所捕获的图像50的显示屏幕上。
[0096]另外,在其中同时执行图像识别过程和图像捕获的配置中,所捕获的图像可显示于便携式终端24的屏幕60上,如图10(a)中所图示,并且商品信息62可基于从图像指定的商品ID而被显示成重叠对应商品位置,如图10(b)中所图示。
[0097]另外,当操作员确认这些识别结果并且图像识别结果不正确时,商品信息处理装置100可进一步被配置以便校正识别结果或通知识别结果的不正确性。
[0098]如上文所描述,图1的陈列关系指定单元104基于每一商品正面的位置而指定特定商品与其它商品之间的陈列关系。在本示例性实施例中,如图4中所图示,相对位置指定单元134和正面数目计数单元142被提供为图1的陈列关系指定单元104。
[0099]这里,例如,陈列关系可包括以下项。陈列关系指定单元104指定陈列关系中的至少一个。
[0100](Cl)特定商品的正面的数目与目标商品中的其它商品的正面的数目之间的关系
[0101]例如,特定商品的正面的数目相对于所有目标商品的正面的数目(五个正面中有三个正面等)
[0102]特定商品的正面的数目相对于所有目标商品的正面的数目的比率(30 %等)
[0103](c2)特定商品的正面区域的面积与目标商品中其它商品的正面区域的面积之间的关系
[0104]例如,特定商品的正面区域的面积相对于所有目标商品的正面区域的面积的比率(40% 等)
[0105](c3)目标商品中特定商品的相对位置
[0106]例如,其中陈列特定商品的架的层阶的数目相对于其中陈列所有目标商品的架的层阶的数目(四个层阶中有两个层阶)
[0107]其中陈列特定商品的架的位置相对于其中陈列所有目标商品的架的所有层阶(四个层阶中的最高层阶、中间层阶、第一和第二层阶等)
[0108]其中陈列特定商品的架内的特定商品的位置相对于其中陈列目标商品的架内的所有目标商品的位置(架的左侧、其中心、从左边第三正面开始的正面的某一数目等)。
[0109](c4)商品架20中特定商品的绝对位置
[0110]例如,通过陈列多少个正面(或者,通过在架中的百分之几)特定商品从商品架20的哪一层阶的左边的什么数目正面等
[0111](C5)特定商品的正面定向的状态
[0112]例如,当特定商品具有四个定向(第一定向到第四定向)的商品图像时,定向的总数目和状态(在所有十个正面中,第一定向的五个正面,第二定向的三个正面和第三和第四定向的每一个的一个正面)。
[0113]在本示例性实施例中,将通过采取其中特定商品的正面的数目与目标商品中的其它商品的正面的数目之间的关系和特定商品与目标商品中的其它商品之间的相对位置被指定为陈列关系的情形的示例给出描述。
[0114]陈列关系指定单元104可从所捕获的图像获得特定商品与其它商品之间的相对位置并且可将相对位置输出为陈列关系。
[0115]在本示例性实施例中,相对位置指定单元134基于由图像识别单元122从所捕获的图像识别的相应商品正面的位置而指定包括由商品指定单元132指定的特定商品的图像中目标商品的相对位置。可替代地,如稍后将对此予以描述,当可指定图像捕获的区域时,陈列关系指定单元104可指定商品架20内的相应商品正面的绝对位置。商品正面的位置可通过商品正面图像区域中的至少一个位置(例如,中心、图心或顶部或下部和右部或左部的拐角中的至少一个)的坐标来表达。可替代地,陈列关系指定单元104可获得特定商品的陈列区域相对于目标商品的陈列区域的相对位置和作为陈列关系的分布信息。相对位置指定单元134将特定商品与目标商品之间的所获得的相对位置输出为陈列关系。
[0116]正面数目计数单元142计数由图像识别单元122提取的至少一个种类的特定商品的正面数目并且基于特定商品的正面数目而指定特定商品与其它商品之间的陈列关系。
[0117]在本示例性实施例中,正面数目计数单元142计数由商品指定单元132指定的特定商品的正面数目和目标商品的正面数目,并且基于正面的数目而指定特定商品与其它商品之间的陈列关系并且输出所述陈列关系。
[0118]此外,当从相同商品的每一侧表面捕获的图像记录于商品数据库130中时,正面数目计数单元142可针对商品的定向中的每一者计数特定商品的正面数目和目标商品的正面数目。
[0119]以此方式,在本示例性实施例中,可能通过相对位置指定单元134和正面数目计数单元142获得特定商品与目标商品之间的陈列关系并且输出所获得的陈列关系。例如,关于目标商品的正面的总数目与特定商品的正面的数目之间的陈列关系的信息段与图像捕获的日期和时间和特定商品的商品代码或商品名称一起输出。陈列关系可输出为文本数据、预定的程序语言或信息数据,可存储为个别文档,并且可存储于数据库中。可替代地,信息可通过网络3传输到信息处理终端110。关于陈列关系的信息段可显示于图像识别装置10的屏幕或能够连接到图像识别装置10的终端装置上,或可显示于信息处理终端110的显示器单元的屏幕上。可替代地,关于陈列关系的信息段可输出为报告,诸如,每日报告。
[0120]在上文所提及的配置中,下文将描述由根据本示例性实施例的商品信息处理装置100执行的数据处理方法。图7是图示根据本示例性实施例的商品信息处理装置100的操作的示例的流程图。
[0121]在根据本示例性实施例的数据处理方法中,商品信息处理装置100的商品提取单元102从通过捕获商品的陈列状态获得的图像提取至少一个种类的特定商品(步骤S101),并且陈列关系指定单元104指定所提取的至少一个种类的特定商品与其它商品之间的陈列关系(步骤S103)。
[0122]这里,将在其中使用便携式终端24捕获店铺7的商品架20并且执行到数据中心5的传输的配置中给出对商品信息处理系统I的操作的详细描述。
[0123]图8是图示根据本发明的示例性实施例的商品信息处理系统I的便携式终端24和图像识别装置10的操作的进程的示例的流程图。
[0124]首先,便携式终端24通过图像捕获单元112捕获商品架20的图像(步骤S111)。然后,便携式终端24通过传输单元114将所捕获的图像传输到数据中心5的图像识别装置10 (步骤 SI 13)。
[0125]在图像识别装置10中,接收单元120接收所捕获的图像(步骤S115)。然后,图像识别单元122从图像提取特征量并且执行识别商品的正面图像的模式的过程(步骤S117)。图像识别单元122获取被识别为所捕获的图像内的商品的正面图像的正面区域的相对位置(步骤SI 19)。
[0126]然后,图像识别单元122核对所识别的正面图像的特征量与记录于特征量数据库12中的特征量以由此获取商品ID(步骤S121)。商品指定单元132指定对应于正面图像的商品是特定商品还是其它商品(步骤S123)。
[0127]此外,商品指定单元132辨别其它商品是否是目标商品并且指定目标商品(步骤S125)。然后,相对位置指定单元134指定图像内的特定商品与目标商品之间的相对位置(步骤S127)。另外,正面数目计数单元142计数特定商品的正面的数目和目标商品的正面的数目(步骤S129)。然后,将由商品指定单元132和正面数目计数单元142获得的正面的数目和相对位置输出为陈列关系(步骤S131)。
[0128]以此方式,在本示例性实施例中,可能从通过捕获店铺7中的商品架20获得的图像单独地识别商品并且获取特定商品的正面的数目和其它商品的正面的数目和其相对位置作为特定商品与其它商品之间的陈列关系。
[0129]例如,在本示例性实施例中,可能获取陈列关系,诸如,目标商品的正面的数目中特定商品的正面的数目和在其中存在目标商品的层阶和列中特定商品的多少正面从哪一层阶的哪一列存在。
[0130]如上文所描述,根据按照本发明的示例性实施例的商品信息处理装置100,当操作员进入每一店铺7,使用便携式终端24捕获商品架20的图像并且上传所捕获的图像时,或当收集到由安装于店铺7中的监控摄像机22捕获的图像时,可能自动地辨别待管理的特定商品与其它商品并且断定在包括其它商品的整个陈列状态中特定商品如何陈列的陈列关系。以此方式,根据本发明的本示例性实施例中的商品信息处理装置100,可能有效地断定店铺的商品陈列架中特定商品与其它商品之间的陈列关系。
[0131](第二示例性实施例)
[0132]图11是图示根据本发明的另一示例性实施例的商品信息处理装置200的配置的功能性框图。
[0133]根据本示例性实施例的商品信息处理装置200与上文所提及的示例性实施例的商品信息处理装置不同之处在于确定通过商品信息处理装置100获得的陈列关系是否满足预定的陈列条件并且输出辨别结果。
[0134]商品信息处理装置200包括与上文所提及的示例性实施例中的商品信息处理装置100的那些商品提取单元和陈列关系指定单元相同的商品提取单元102和陈列关系指定单元104,并且进一步包括辨别单元202和输出单元204。
[0135]辨别单元202基于由陈列关系指定单元104指定的陈列关系而辨别特定商品的陈列状态是否满足特定商品的预定陈列条件。
[0136]输出单元204输出由辨别单元202获得的辨别结果。
[0137]图12是图示使用根据本示例性实施例的商品信息处理装置200的商品
当前第3页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1