使信息终端显示销售信息的控制方法与流程

本发明属于店面布局评价技术的技术领域。

背景技术：

所谓店面布局是指为了陈列各种商品而对货架地点的规定。作为货架的配置地点，有出入口附近、收银台前、面向道路的位置、店里面等各种地方。如果与应陈列的商品特性相应地确定商品的配置地点，则能够提高商品的销售额。拥有很多小卖店来展开营业的特许加盟连锁店的营业者期望作为销售的一环，对各个小卖店的店面布局进行评价，以把握消费者动向。

现有技术文献

专利文献

专利文献1:日本特开平11－64505号公报

专利文献2:日本特开2003－323539号公报

技术实现要素：

发明要解决的课题

在隶属于特许加盟连锁店旗下的小卖店中，所有店铺中经营的商品基本上都是一样的。但是却存在这种情况：尽管经营的商品相同，但商品的销售额却根据每家店铺而大有不同。作为商品销售额在店铺之间大有不同的原因，考虑到有店铺的地理条件的不同、销售人员的不同、店铺内的货架的布局的不同等。关于店铺的地理条件，有的店铺在车站前，或者在商业街，亦或在学生多的街区，都是不同的，而从现实的角度讲改变该条件很难。因为需要进行“店铺搬家”这种大规模的作业。由销售人员产生的贡献度也是如此。而另一方面，改变店铺中的货架的平面布局(間取り)或商品的陈列地点在一定程度上是能够做到的。因为这样的货架布局的变更通过店铺内的外观改变或简单的改装工程就能够实现。因此，对每家店铺的商品的销售额的不同与货架布局有着怎样的关系这个问题进行分析来改善货架布局，在特许加盟连锁店的事业战略上具有重大意义。但是，对于每家店铺的商品销售额，由于店铺的地理条件等的贡献度与货架的布局的贡献度是混为一体，因此，从每家店铺的商品销售额中除去地理条件的贡献度来评价货架的布局的贡献度是非常困难的。

虽然存在销售额低的小卖店，但由于缺乏关于如何改善店内的货架的布局的这种方针，所以在当前的特许加盟连锁店的事业战略上，很多情况是：销售额低的小卖店以一直保持低销售额的状态而被置之不理。由于发生很多这样置之不理的情况，因此有时存在连锁加盟业者的营业收益大幅度下降的情况。

在作为促销的对象的店铺是特许加盟连锁店旗下的便利店这个假设下提出了技术问题，但该假设只是在说明上述技术问题时选择了身边的题材而已，而在本申请中作为对象的技术问题不限定于上述例子的情况。上述技术问题在超市、大规模贩卖店的整个商品贩卖中都有可能发生，在不久的将来，在想要将上述技术实用化时，上述技术问题是本申请的技术领域内的本领域技术人员必须面对的技术障碍。

本发明的目的在于，从大局的视角来评价店铺的货架布局。

用于解决问题的手段

上述课题通过如下手段解决，该手段包括：

将包含一个以上的货架目标的店铺画面显示在所述显示器上的手段，所述一个以上的货架目标分别表示设置在店铺中的一个以上的货架；以及

在店铺画面中，从管理装置取得多个种类的销售信息，并使与多个种类的销售信息中的各个种类的销售信息对应的第一图形和第二图形与某个货架目标或其附近重合的手段。

在此，在多个种类的销售信息中，至少一个种类的销售信息表示顾客在货架附近采取了怎样的行动的这种行动统计，

第一图形和第二图形中的至少一个根据所述行动统计的统计值而确定显示形态。

发明的效果

由于第一图形、第二图形分别与多种销售信息中的各种销售信息相对应，因此，能够进行多种销售信息的比较显示。此外，第一图形、第二图形中的至少一方的显示形态表示顾客在货架周围采取的行动的统计值，因此，该比较显示与店铺中的顾客的行踪紧密相关，关于所述店铺中的顾客的行踪，比如有“相对于靠近货架发生了多少次购买”、“多个种类的行动统计中的各个种类的行动统计以怎样的比例发生”这些方面。由于这样的图形显示在货架图标的附近，因此，能够根据多个顾客的行踪的统计来直观地分析如下问题：货架的什么样的配置对顾客的行动造成影响并与对顾客的吸引和销售额有关，另外，商品的销售额不怎么增加的问题是出在店铺内的货架的什么样的配置上。由此，能够判断如何改善各个店铺内的货架的布局，因此，拥有多个小卖店来开展事业的连锁加盟业者或超市、大规模贩卖店、个人店铺的所有者能够准确地针对销售额低的小卖店进行如何改善店面布局的这种指导，能够改善营业收益。

附图说明

图1是表示包含信息终端装置20、md信息管理装置30的系统的概略结构的图。

图2是表示信息终端装置20、md信息管理装置30的框图结构的图。

图3表示设置有对人传感器101、102、103……的店铺内部。

图4(a)表示设置在货架的间隔部的对人传感器110的外观。图4(b)表示浏览货架上的陈列品的顾客与对人传感器的位置关系。图4(c)表示作为设备的对人传感器的内部结构。

图5(a)是表示安装有对人传感器的店铺的顶棚的图。图5(b)表示浏览货架上的陈列品的顾客与对人传感器的位置关系。

图6(a)表示拍摄了通道的对面侧的货架的图像数据(无人的图像数据)。图6(b)表示拍摄了在货架前停步的顾客的图像数据(有人图像数据)。图6(c)表示拍摄了在货架前向商品伸手的顾客的图像数据(伸手图像数据)，图6(d)表示拍摄了在货架前将商品拿在手里观察的顾客的图像数据(手持图像数据)。

图7是将图6(a)～(c)所示的无人图像数据、有人图像数据、伸手图像数据、手持图像数据、无人图像数据分配在时间轴上的图。

图8表示在对人传感器的图像识别部110f、用户行动统计信息管理部5的构成要素间形成的通信序列。

图9表示店铺信息、用户行动统计信息、购买历史信息的内部结构。

图10(a)表示向饼干、巧克力货架的累计靠近时间、停步次数、伸手次数的一例。图10(b)表示向小吃零食货架的累计靠近时间、停步次数、伸手次数的一例。

图11(a)～(d)是表示累计靠近时间、停步次数、伸手次数、购买数与缩放率之间的关系的一例的图表。图11(e)表示将缩放率分割为5个等级的柱状图。图11(f)表示累计靠近时间、停步次数、伸手次数、购买数与图形之间的关系。

图12是表示店铺信息的数据结构的图。

图13(a)是在画面座标系中，将货架配置座标即(xi－j，yi－j)、楼层形状座标即(xt1，yt1)、(xt2，yt2)、(xt3，yt3)……、收银机形状座标即(xr1，yr1)、(xr2，yr2)，(xr3，yr3)……进行绘制的图。图13(b)表示根据货架的货架配置座标、楼层形状座标、入口部形状座标制作的店铺画面的一例。

图14(a)表示平面层中的购买数/统计值平面与店铺画面平面的合成。图14(b)表示菱形卡图形、图14(c)表示圆与金字塔图形。图14(d)表示通过对全部的货架执行购买数图形、3种统计值图形(伸手次数图形、累计靠近时间图形和停步次数图形)的图形合成而得到的应用画面图像。

图15(a)表示根据通道连接的方向，x轴方向的偏移、y轴方向的偏移如何变化。图15(b)～(e)平面地表示购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形的配置。

图16(a)表示在店铺画面平面、购买数和统计值图形平面中合成md信息画面平面的层合成。图16(b)表示在店铺画面平面、购买数和统计值图形平面中合成辅助店铺画面和md信息画面平面的层合成。

图17是表示利用店铺信息、用户行动统计、购买历史信息的局面的序列图。

图18是表示使用了信息终端装置20的局面的一例的图。

图19表示关于一个店铺制作的应用画面图像的一例。

图20表示md信息的显示对象期间设定时的店铺画面的一例。

图21表示md信息的显示对象项目设定时的店铺画面的一例。

图22表示特定货架图标选择时的辅助店铺画面和md信息画面的一例。

图23(a)表示显示了小吃零食货架的累计靠近时间(119秒)、停步次数(23次)、伸手次数(0次)、购买数(0次)的一例。图23(b)表示选择了同一类别货架信息的一并显示按钮时的辅助店铺画面和md信息画面的一例。

图24是表示对人传感器的处理步骤的流程图。

图25是表示店铺画面显示的处理步骤的流程图。

图26(a)是表示显示对象项目的等级阈值计算步骤的流程图。图26(b)是表示图形制作和重叠显示的处理步骤的流程图。

图27是表示向货架附近的图形显示的处理步骤的流程图。

图28是表示用于显示辅助店铺画面、md信息画面的处理步骤的流程图。

图29表示将店铺画面和辅助店铺画面的功能集于一身的统合型应用画面图像。

图30表示按下同一类别货架信息的一并显示按钮的情况下的货架选择显示时的店铺画面和md信息画面的一例。

图31表示在选择了面包的全部的货架图标的状态下，累计靠近时间的显示对象项目、停步次数的显示对象项目、伸手次数的显示对象项目、购买数的显示对象项目被锁定的情况下的店铺画面和md信息画面的一例。

图32表示在选择了糖果的货架图标且显示了该货架图标的停步次数的状态下，累计靠近时间的全显示按钮、停步次数的全显示按钮、伸手次数的全显示按钮、购买数的全显示按钮被锁定的情况下的店铺画面和md信息画面的一例。

图33表示在全选择按钮被锁定的情况下的店铺画面和md信息画面的一例。

图34表示将用于分级显示停步次数、伸手次数、购买数的图形的数值范围的阈值设为根据停步次数、伸手次数、购买数而不同的情况下的店铺画面的一例。

图35表示使用于分级显示图形的数值范围的阈值在停步次数、伸手次数、购买数之间共同的情况下的店铺画面和md信息画面的一例。

图36表示将显示控制部8、显示md信息计算部9都设置在md信息管理装置30中，而在信息终端装置20中不设置显示控制部8、显示md信息计算部9的框图结构的变形例。

图37表示将显示控制部8、显示md信息计算部9都设置在信息终端装置20中，而在md信息管理装置30中不设置显示控制部8、显示md信息计算部9的框图结构的变形例。

图38表示购买历史信息管理部4不成为md信息管理装置30的构成要素，而显示md信息计算部9成为构成要素的md信息管理装置30的内部结构。

图39表示购买历史信息管理部4不成为md信息管理装置30的构成要素，显示控制部8、显示md信息计算部9成为构成要素的md信息管理装置30的内部结构。

图40表示购买历史信息管理部4不成为构成要素，且显示控制部8、显示md信息计算部9也不成为构成要素的md信息管理装置30的内部结构。

图41表示店铺信息管理部6成为信息终端装置20的构成要素，且显示控制部8、显示md信息计算部9成为md信息管理装置30的构成要素的内部结构。

图42表示店铺信息管理部6、显示控制部8成为信息终端装置20的构成要素，且显示md信息计算部9成为md信息管理装置30的构成要素的内部结构。

图43表示店铺信息管理部6、显示控制部8、显示md信息计算部9成为信息终端装置20的构成要素的内部结构。

图44是店铺画面显示的处理步骤的主例程。

图45(a)是表示用于显示店铺画面、md信息画面的处理步骤的流程图。图45(b)是表示md信息画面制作顺序的流程图。

图46(a)表示用于实现销售信息提供的计算机系统(信息提供系统)。图46(b)表示设备制造商的计算机相当于数据运营中心3000的结构。图46(c)表示设备制造商和其它的管理公司两者或任意一方的计算机相当于数据运营中心3000的一例。

图47是表示信息提供系统的网络结构的图。

图48(a)表示云端服务器的内部结构。图48(b)表示应用319的内部结构。图48(c)表示信息终端装置20的内部结构。

图49(a)表示服务的类型1(本公司数据中心型)。图49(b)表示服务的类型2(iaas利用型)。图49(c)表示服务的类型3(paas利用型)。图49(d)表示服务的类型4(saas利用型)。

图50(a)表示用云端服务器301一并地进行处理1～3的形态。图50(b)表示在信息终端装置20侧执行处理1～3中的处理3的序列图。图50(c)表示在信息终端装置20侧执行处理1～3中的处理2、3的序列图。

图51(a)是表示第9实施方式中的对人传感器的设置的图。图51(b)表示相位式测距传感器501的外观结构。图51(c)表示由相位式测距传感器501形成的感应帘。

具体实施方式

发明人在实施具备上述课题解决手段的控制方法的过程中，遇到了各种技术障碍。以下，对直到克服这些技术障碍为止的步骤进行叙述。

有些顾客是抱着“会不会碰到令人心动的商品呢”的这种不明确的、模糊的期待而来到店里的，货架布局对这样的顾客的心理会产生影响。

具体来说，在经营多种类商品的便利店、超市、大规模贩卖店、个人店铺中，存在不少为了寻求遇到“令人心动的商品”而踏进店内的这种顾客。这样的顾客的心态反复无常，他们会根据店内的无意的氛围而购买商品或者不购买商品。

从这样的顾客的动向来看，需要分析货架附近的顾客的行动以及购买与销售额有着怎样的因果关系。也就是说，如下的大局分析是必不可少的，即，虽然靠近了货架但最终却没有购买商品的这种顾客多的货架、和与购买有关联的货架之间的不同在哪里；店内的滞留时间或向商品伸手的动作如何与商品的购买相关联。

发明人认为，为了把握这样的顾客的动向，利用销售信息显示技术是最合适的。作为按照每个货架来显示销售信息的技术，有专利文献1、专利文献2中记载的现有技术。专利文献1的现有技术是一种利用黑点将货架处的累计靠近时间符号化地显示的技术。专利文献2是一种利用带有畅销商品标记/滞销商品标记的货架比例图来显示特定货架的销售信息的技术。

具体来说，专利文献1通过在货架上配置信号发射器并在顾客携带的购物筐上安装信号接收器，从而计算顾客的移动轨迹和向各货架的累计靠近时间。利用黑点将计算出的顾客向各货架的累计靠近时间符号化，并显示在货架比例图中。这样的专利文献1的货架比例图的显示忠实地再现了来访店铺的特定的顾客的行踪，但没有分析货架的布局如何影响来访店铺的非特定的多数顾客的动向。

关于专利文献2，当在货架比例图中选择了特定的货架图标的情况下，显示该货架的商品详细信息。每个货架的商品详细信息包含采购数量、库存数量、制造商。利用该专利文献2的现有技术，能够按照不同货架来掌握采购数量、库存数量、制造商这些信息，但关于如何影响非特定的多数顾客的行踪这个问题，没有提示足够的信息。

在能够克服上述实施障碍的方式中，有以下的1.中所示的基本的方式、和以下2.、3.、4.的实施了变更的衍生出来的方式。

(1.基本的方式)

用于克服上述实施障碍的控制方法的方式是一种具有显示器并显示店铺画面的信息终端装置的控制方法，

所述控制方法使所述信息终端装置的计算机执行如下处理：

使包含一个以上的货架目标的店铺画面显示在所述显示器上，所述一个以上的货架目标分别表示设置在店铺中的一个以上的货架，

在所述店铺画面中，从管理装置取得多个种类的销售信息，将与多个种类的销售信息中的各个种类的销售信息相对应的第一图形和第二图形与某个货架目标或其附近重合，并显示在所述显示器上，

在所述多个种类的销售信息中，至少一个种类的销售信息表示顾客在货架附近采取了怎样的行动的行动统计，

在第一图形和第二图形中，至少一个图形根据所述行动统计的统计值而确定显示形态。

第一图形、第二图形分别与多个种类销售信息中的各个种类的销售信息相对应，因此，能够进行多个种类的销售信息的比较显示。另外，第一图形或第二图形中的至少一方的显示形态将用户在某个特定的货架附近采取的行动的统计值可视化地表示，因此，在着眼于由顾客进行的特定种类的行动的情况下，“该特定种类的行动在哪个货架上发生得多”的这种每个货架的行动分布，通过第一图形或第二图形的显示形态而被表现出来。由于每个货架的行动分布被可视化，因此能够正确地评价销售额中的店面布局的贡献度。

另外，由于来访店铺的多数顾客的行动被集中地显示在店铺画面中，因此能够从大局上分析来访店铺的多数顾客的动向。

下面说明在上述基本的方式的用语中所包含的技术范围。

“销售信息(以下叫做md信息)”是指，由一些数值印证了的用于商品促销的信息。这里的“促销的信息”是指，只要是由一些数值印证了的信息，可以是任意的信息，广泛地包含：由当前的汇率或平均股价、经济指数、gdp印证了的广告或宣传信息、由商品的出货数、流通数、销售额数、贩卖目标数印证了的营业手册、由表示用户的动向或流行趋势的统计值印证了的营业知识、由消费者调查问卷的回答者数或回答者比例印证了的促销信息、由收视率印证了的促销信息等。另外，所谓的“商品”可以指以下的任意一个：表示商品的区分和类别的东西、特定制造商的品牌、由一个发行代码识别的一个商品、社会通用概念上的一个商品、以及用概括的名称指示的一系列的商品。在上述基本的方式中，特征之处在于，在多个种类的md信息中，一个种类的md信息是由货架附近的顾客的某种种类的行动统计的统计值印证了的、用于特定商品类别的商品促销的信息，并能够将由行动统计的统计值印证了的促销信息、与用其它数值印证了的促销信息进行对比。

“行动统计”是指，将年龄层、性别、职业种类不同的各种顾客在店内可能采取的行动按照某种规范进行分类并统计化了的东西。在作为行动统计的对象的行动中，包含：进入店铺、从店铺出来、在收银台付款、在店铺内领取小票、在道路上步行、与店员或其它顾客对话、阅览小册子或传单或海报等纸面、参照商品标签、操作移动电话或智能手机、使用卫生间、使用现金自动付款机等行为，是包含利用以物理手法、电磁手法、光学手法、图像识别为代表的信息处理手法所能够收集到的所有行为。如果针对包含在行动统计中的全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的说明中，将行动统计集中在向货架靠近、停步、和向商品伸手来进行说明。

“统计值”是将这样的行动统计定量化了的值，包含：平均值或分散值、偏差值、百分率。如果针对这些全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的第一实施方式中，统计值是由次数或时间表示的量。

关于“图形的显示形态”，除了由柱状图、折线图表、彩色图表、雷达图表来表示统计值的高低的方式之外，还有用图形的形状来表示统计值的高低的方式(例如，用多边形的边数表示统计值的高低的方式)、用贴附于图形的纹理来表示统计值的高低的方式、用角色的表情变化来表示统计值的方式、用图形显示的浓淡、明暗来表示统计值的方式。如果针对这些全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，将图形的显示形态设为由图形的缩放率(图形的大小)表示的方式，来实现以后的说明的简单化。

“货架目标”是指，以由对象指向编程语言定义的类结构体为基础而生成、以视觉传达的方式提示给用户、并作为用户操作的对象的数据客体。具体来说，在图形用户界面(gui)中，所有表示一个货架的控件(widget)相当于该货架目标。如果针对包含在控件中的全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的说明中，将表示货架的图标(货架图标)作为货架目标地进行说明。

“管理装置”包含：由单个计算机构成的装置、和由分散环境中的两个以上的计算机构成的装置。因此，管理装置也可以由如下部分构成：对在各货架处的顾客的行动日志进行收集的计算机(收集服务器)；根据收集到的行动日志，对行动统计的数据库进行更新的计算机(数据库服务器)；以及，根据被更新了的数据库来制作md信息并提供该md信息的计算机(信息提供服务器)。另外，也可以将数据库服务器或收集服务器分别由多个计算机构成。如果针对管理装置的这些全部的下位概念阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的第一实施方式的说明中，对管理装置由单个计算机构成的情况进行说明。关于“系统”，广泛地包含：由客户端计算机、服务器计算机形成的计算机系统；在云端服务器加载应用的形态的云网计算机系统；以及，计算机彼此进行点对点连接的计算机系统。

“至少一个是表示行动统计的统计值的第一图形、第二图形”包含如下情况：将第一图形、第二图形作为购买数图形、统计值图形的组合(1)；将第一图形、第二图形作为两个种类的统计值图形的组合(2)。在此，购买数图形是表示货架处的购买数的图形。统计值图形是将货架处的用户行动的统计值按照其每个行动的种类进行表示的图形。如果针对第一图形、第二图形的全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的第一实施方式中，对第一图形、第二图形是购买数图形、统计值图形，除了该第一图形、第二图形之外，还存在第三图形、第四图形的这种情况进行说明。此外，第二图形、第三图形、第四图形是表示三个种类的行动统计的统计值的统计值图形。

(2.由管理装置进行的行动统计的更新)

在基本的方式中，行动统计的更新能够展开为具体的方式。即，优选地，在所述店铺中设置有对人传感器，对人传感器检测货架附近有无顾客、和当货架附近存在顾客的情况下的顾客的行动，

在所述行动统计中，存在与顾客的不同行动相对应的多个种类的行动统计，

每当从对人传感器发送表示顾客在某个货架附近采取了规定的行动的行动日志时，就更新与涉及该通知的货架相对应的行动统计、而且是与被通知的行动的种类一致的行动统计。

由于根据来自对人传感器的通知，来更新与货架对应的行动统计、而且是与货架前的行动种类一致的行动统计，因此，来访店铺的各种顾客的行动按照每个种类被分离开后，提供给统计处理。无论顾客是男女老少，都按照其每个种类进行分类。

由于店铺中的各种顾客的行动被定型化地显示，因此，作为店面布局的分析资料很有意义。

从可获得性和简便性等观点出发，对人传感器例举有红外线方式的传感器。红外线方式的对人传感器对从人体发出的红外线进行反应，当人靠近时，对人传感器内的感应部工作，输出对人检测信号。另外，也可以是超声波式或微波式、声学式的传感器。也可以是相位式测距传感器、热电传感器。也可以是通过防扒窃用的标签来检测商品的把持的传感器，也可以是由于照明效果而感知顾客向货架的接近或伸手的人体感应传感器。

另外，也可以是图像传感器、距离图像传感器。图像传感器、距离图像传感器通过背景差分法来检测顾客的进入、滞留或伸手。背景差分法是指，预先拍摄好不含有检测对象的背景图像，并根据背景图像与另外在同一条件下拍摄的输入图像之间的差分来检测出检测对象的处理。如果针对这些全部的下位概念来阐述实施方式的话，则说明变得繁杂，不优选。因此，在以后的第一实施方式中，针对对人传感器是图像传感器的情况进行说明。

(3.基于靠近的累计时间的具体化)

在2.的方式中，所述规定的行动和行动统计能够展开为以下内容。即，优选地，所述多个种类的行动统计包含向货架的停步次数，

在从对人传感器发送的行动日志中，存在表示发生顾客向货架的靠近的行动日志，

根据表示发生顾客的靠近的行动日志的输出，使由所述管理装置管理的已经存在的停步次数增加，从而进行向货架的停步次数的更新。

由于在行动统计中体现了顾客在某个货架前滞留了多长时间的滞留时间的累计，因此，对顾客有何种程度的吸引力在行动统计中被表示出来。由此，能够从滞留时间的观点来评价出在多个货架中陈列方式优良的货架是哪个货架等的这种顾客吸引力。

(4.基于向货架的停步次数的具体化)

在2.的基本的方式中，所述规定的行动和行动统计能够展开为以下内容。

即，优选地，所述多个种类的行动统计包含向货架的累计靠近时间，

在从对人传感器发送的行动日志中，存在表示发生顾客向货架的靠近的行动日志，

根据表示发生顾客的靠近的时刻和表示发生顾客的离去的时刻之间的差分，使由所述管理装置管理的已经存在的累计靠近时间增加，从而进行向货架的累计靠近时间的更新。

由于货架的图形的显示形态根据顾客向货架的停步次数的多少而发生变化，因此能够分析出人流集中在哪个货架。由此，能够判断为了改变人流应该如何改变货架的布局，这对每家店铺的单独指导是有益的。

(5.基于伸手次数的具体化)

在3.的基本的方式中，所述规定的行动和行动统计能够展开为以下内容。即，优选地，所述多个种类的行动统计包含向货架的伸手次数，

在从对人传感器发送的行动日志中，存在表示发生向货架的伸手的行动日志，

根据表示发生向货架的伸手的行动日志的输出，使由所述管理装置管理的已经存在的伸手次数增加，从而进行向货架的伸手次数的更新。能够根据对发生了多少次顾客将商品拿在手里观察的积极行为的统计，来评价各货架的顾客集中力。

(6.基于购买数的具体化)

在从1.到5.的任一方式中，所述第一图形、第二图形能够展开为以下内容。

即，优选地，第一图形和第二图形中的一方的图形根据向货架的停步次数、向货架的累计靠近时间、向货架的伸手次数中的某个而决定，另一方的图形根据货架上的商品的购买数而决定。由于能够进行每个货架的行动统计和每个货架的购买数之间的直接对比，因此，能够细致地分析货架处的顾客的行动与采购数量之间的因果关系。

(7.与统计值相应的显示方式的具体化)

在从1.到6.的任一方式中，与统计值相应的显示方式能够展开为以下内容。即，优选地，所述第一图形的显示形态、和第二图形的显示形态以与第一图形对应的统计值或购买数、和与第二图形对应的统计值或购买数属于多个数值范围中的哪个数值范围的方式而分等级地变化，

用于确定所述第一图形的显示形态的多个数值范围、和用于确定第二图形的显示形态的多个数值范围由共同的阈值规定。

能够通过比较在店铺的货架中哪个货架的图形大，来直观地理解每个货架的统计值的大小。

(8.用于统计值分类的多个等级的具体化)

在从1.到6.的任一方式中，与统计值相应的显示方式能够展开为以下内容。

即，优选地，所述第一图形的显示形态、或第二图形的显示形态以与第一图形对应的统计值或与第二图形对应的统计值属于多个数值范围中的哪个数值范围的方式而分等级地变化，

所述多个数值范围中的最大等级的数值范围的开始值，根据多个货架的统计值中的最大的值而确定，

所述多个数值范围中的最小等级的数值范围的开始值，根据用等级数除最大等级的数值范围的开始值所得的值而确定，

除了最小等级和最大等级，中间等级的数值范围的开始值根据最小等级的数值范围的开始值的倍数而确定。

在通过使图形的大小分等级地变化来表示统计值的情况下，该分级显示的等级数根据统计值的最大数而确定，因此，店铺画面中的统计值图形的大小成为根据多个行动统计的最大值而取得标准化了的平衡的大小。由此，能够从感觉上理解发生了很多的用户行动的货架是哪个货架。在本方式中，在将与多个种类的md信息相对应的图形重叠地显示的情况下，购买数、统计值的大小关系的比较从视觉上容易理解。

(9.各等级的数值范围的具体化)

在8.的方式中，各等级的数值范围能够展开为以下内容。即，优选地，各等级的数值范围的结束值，基于在各等级的数值范围的开始值上加上最小等级的开始值而得到的值。

数值范围的结束点由各等级的数值范围的开始点、和最小等级的开始点规定，行动统计的统计值的最大值和等级数由各等级的数值范围的开始点、最小等级的开始点间接地反映，店铺画面中的统计值图形的大小取得了由多个行动统计的最大值标准化了的平衡。

(基于根据10.的数值化显示)

从1.到9.的任一方式能够展开为以下内容。即，优选地，店铺画面中的各个货架目标根据由用户进行的选择操作而成为选择状态，

在某个货架目标成为选择状态的情况下，显示所选择的货架目标固有的销售信息画面，该销售信息画面将作为第一图形或第二图形的对象的统计值与表示统计值的类型的字符串一起数值化而显示。

在某个图标被选择了的情况下，显示针对与所选择的图标对应的货架特殊化了的辅助店铺画面和md信息画面，因此，如果从店铺画面中选择用户想要关注的货架的图标，就能够得知与该货架相关的指示的详细情况。

关于与所选择的货架图标相对应的货架在店铺中存在于何处、站在该货架前的用户行动以怎样程度的频率发生，这些信息都以视觉传达的方式被表示出来。由此，能够对着眼于某个货架的顾客的行踪进行分析，因此，能够按照每个货架来评价店铺的销售额中的布局的贡献度。

(11.通过店铺画面的货架图标选择，显示带有货架图标的新的店铺画面和md信息)

10.的方式能够展开为以下内容。即，优选地，当存在对某个货架的选择时，使信息终端装置制作包含多个货架目标的辅助店铺画面，

包含在辅助店铺画面中的多个货架目标与存在于店铺画面中的多个货架目标分别对应，

所述辅助店铺画面中的货架目标、和所述销售信息的字符串以及数值以不重叠的方式显示在信息终端装置的显示器上。

由辅助店铺画面和md画面的组合叠加后的店铺画面通过被用户选择，从而再次成为前面侧，因此，能够自由地进行店铺画面与辅助店铺画面和md画面的组合之间的交替。对于店铺画面的货架的选择由辅助店铺画面接管，因此能够从着眼于一个货架的观点出发，分析顾客的行踪。

在确认与特定的货架相关的md信息时继续确认与另外的货架相关的md信息的情况下，能够不切换画面地选择与另外的货架相对应的货架图标，因此，操作数减少，能够容易地确认与另外的货架相关的md信息。

(12.将新的店铺画面和md信息叠加在店铺画面上显示)

11.的方式能够展开为以下内容。即，优选地，在所述店铺画面中的货架目标成为选择状态的情况下，使所述辅助店铺画面、和关于所述所选择的货架目标的销售信息的画面与所述店铺画面叠加，并同时显示在所述显示器上，

使所述店铺画面中的各个货架目标转变为不能选择的状态。

由于以将店铺画面覆盖隐藏的形式显示辅助店铺画面和md画面，因此能够强调辅助店铺画面的存在，并促使用户进行迅速的判断。

另外，将包含在店铺画面中的一个以上的货架图标以不能选择的状态显示，由此，能够防止用户错误地选择包含在所述店铺画面中的货架图标。

(13.在新的店铺画面中，将店铺画面中所选择的货架图标明示化)

11.的方式能够展开为以下内容。即，优选地，将包含在辅助店铺画面中的货架目标、而且是与所述店铺画面中被选择的一个货架目标相对应的货架目标，转变为与包含在所述辅助店铺画面中的其它货架的货架目标不同的显示形态。根据本方式，在视觉上容易知道选择了哪个货架图标。

(14.在新的店铺画面中，当选择货架图标时切换md信息)

11.的方式能够展开为以下内容。即，优选地，当包含在所述辅助店铺画面中的货架目标中的某个货架目标成为选择状态的情况下，

进行显示在所述显示器上的销售信息画面的更新，在更新后的销售信息画面中，将与包含在所述辅助店铺画面中的货架目标中的成为选择状态的货架目标有关的行动统计的统计值进行数值化，并与表示该行动统计的类型的字符串一起显示。根据本方式，由于在检测到某个货架图标被选择的情况下只是切换md信息画面，因此能够不切换画面而选择与另外的货架相对应的货架图标。

(15.当在带有货架图标的店铺画面中选择货架图标时，用与店铺画面相同的画面切换md信息)

10.的方式能够展开为以下内容。即，优选地，当在对某个货架目标显示了第一图形和第二图形的状态下由用户选择了另外的货架目标的情况下，消去第一图形和第二图形的显示，并将所述店铺画面、和与所述所选择的一个货架目标相对应的销售信息画面同时显示在所述显示器上，

将所述新选择的一个货架目标转变为与其它的货架目标不同的形态。根据本方式，当判断为检测到选择了某个货架图标的情况下，通过在店铺画面中消去所述第一图形和第二图形的显示，从而用户容易看见店铺画面中的货架图标，能够容易地选择下个货架图标。

(16.与货架目标的选择相应的图形消去)

1.的方式能够展开为以下内容。即，优选地，当在对所述某个货架显示了第一图形和第二图形的状态下检测到对另外的货架目标的选择的情况下，从所述店铺画面中消去所述第一图形和第二图形。

由于当进行了货架目标的选择时，只显示以该所选择的货架目标为对象的第一图形、第二图形，因此，能够使第一图形、第二图形的显示与货架目标的选择联动。

(17.只继续显示所选择的货架的图形，其它的消去)

1.的方式能够展开为以下内容。即，优选地，当在对多个货架显示了第一图形和第二图形的状态下选择了某个货架目标的情况下，继续进行关于多个货架目标中的所选择的货架目标的第一图形和第二图形的显示，而消去关于其以外的货架目标的第一图形和第二图形的显示。

由于对关于所选择的货架目标的第一图形、第二图形进行显示，消去关于其以外的货架目标的第一图形、第二图形，因此，以跟随由用户进行的货架目标的选择的这种方式，使第一图形、第二图形的对象转变。由于即使存在货架目标的选择也继续进行第一图形、第二图形的显示，所以能够一边看着每个货架目标的第一图形、第二图形的显示，一边依次改变作为对象的货架目标。

(18.只继续显示所选择的货架的图形，其它的消去)

1.的方式能够展开为以下内容。即，优选地，当在对所述某个货架目标显示了第一图形和第二图形的状态下选择了另外的某个货架目标的情况下，在所述店铺画面中，继续进行所述第一图形和第二图形的显示。由于继续进行关于所选择的货架目标的第一图形、第二图形的显示，因此用户能够一边看着第一图形、第二图形，一边选择货架。借助对第一图形、第二图形的参照，具有提高针对货架目标的操作性的效果。

(19.即使存在货架选择也继续图形显示)

1.的方式能够展开为以下内容。即，优选地，作为所述第一图形和所述第二图形的重合显示的对象的货架，是设置在所述店铺中的全部的货架，

当在对全部的货架显示了第一图形和第二图形的状态下检测到对某个货架目标的选择的情况下，与该检测无关而继续进行关于全部的货架的第一图形和第二图形的显示。

由于第一图形、第二图形的显示以店铺中的全部货架为对象而进行，因此，以视觉传达的方式表现了店铺整体的行动统计的高低分布。由此，能够进行店铺中的货架布局的整体评价。

(20.与多个货架选择联动的md显示)

1.的方式能够展开为以下内容。即，优选地，所述店铺画面受理两个以上的货架目标的选择，

在所述控制方法中，在选择了两个以上的货架的全体的情况下，对所述所选择的两个以上的货架的全体进行第一图形和第二图形的显示，并且针对两个以上的货架目标分别进行行动统计的统计值的合计，将通过合计而得到的合计值进行数值化并显示。由于显示了由属于店铺的多个店铺中的两个以上的货架组成的货架群的统计值的总计，因此，能够进行着眼于属于某个特定领域的商品群的、局部的货架布局的评价。

(21.与多个货架选择联动的图形显示)

1.的方式能够展开为以下内容。即，优选地，在所述店铺画面中，能够进行两个以上的货架目标的选择，

在选择了两个以上的货架目标的情况下，在该两个以上的货架目标或其附近，重叠地显示关于与所述多个货架目标相对应的货架的第一图形和第二图形。由于在发生了多个货架目标的选择的情况下，与这些货架相关的第一图形、第二图形配置在各货架或其附近，因此，在一次被选择的多个货架中，哪个货架的行动统计高的这种行动统计分布的高低变得明确。

(22.显示同一类别的货架的md信息一并显示按钮)

1.的方式能够展开为以下内容。即，优选地，当在店铺画面中从用户受理了对某个货架目标的选择的情况下，该货架目标成为选择状态，

在控制方法中，当显示在店铺画面中的货架目标和陈列在货架上的商品类别满足一定条件的情况下，显示一并指定按钮，

该一定条件是指，在通过用户操作某个货架目标从而选择了与该货架目标相对应的货架的状况下，与陈列在所选择的货架上的商品相同类别的商品还陈列在与所述所选择的一个货架目标相对应的货架以外的货架上，

当按下一并指定按钮的情况下，使与该所选择的一个货架以外的货架相对应的货架目标成为选择状态。根据本方式，能够在同一类别的商品位于多个货架上的情况下，显示每个商品类别的md信息的累计。另外，用户不对多个货架进行选择，而是用户选择一并显示按钮，由此，能够显示每同一类别的md信息的累计。因此，能够消除用户一边确认是否是包含同一类别的商品的货架，一边选择多个货架的这种麻烦。此外，能够防止用户错误地选择不是同一类别的商品的多个货架。

(23.通过店铺画面的货架图标选择，来显示带有货架图标的新的店铺画面、md信息)

从操作方面来考虑，上述专利文献2的现有技术存在以下的技术问题。专利文献2中记载的现有技术是，针对货架分配图的货架图标与选择联动地显示每个货架的销售额，但由于按照每个货架受理应显示的md信息的指定，因此存在操作步骤数多的这种次要的技术问题。

为了克服这样的技术问题，有一种控制方法，优选地，在包含信息终端装置和管理装置的系统中，通过使包含一个以上的货架目标的店铺画面显示在信息终端装置上，来进行店铺中的促销，

各个货架目标根据由用户进行的选择操作而成为选择状态，

在某个货架目标成为选择状态的情况下，显示所选择的货架目标固有的销售信息画面和辅助店铺画面，

所述销售信息画面将表示顾客在货架附近采取了怎样的行动的统计值与表示统计值的类型的字符串一起数值化并显示，

包含在辅助店铺画面中的多个货架目标分别与存在于店铺画面中的多个货架目标相对应，

所述辅助店铺画面中的货架目标、与所述销售信息的字符串以及数值以不重叠的方式显示在信息终端装置的显示器上。

由于在选择一个货架目标时，显示以特定的货架为焦点的辅助店铺画面、和md信息画面，因此能够用少的操作步骤数取得与特定的货架相关的信息。

(24.显示同一类别的货架的md信息一并显示按钮)

根据现实的店铺中的货架的配置，专利文献2还存在另外的技术问题。在专利文献2中，存在如下次要的技术问题：在同一类别的商品分开地存在于多个货架上的情况下，提示其中一个货架的销售额，而误读成类别整体的销售额。

因此，有一种控制方法，优选地，在包含信息终端装置和管理装置的系统中，通过将包含一个以上的货架目标的店铺画面显示在信息终端装置上，来进行店铺中的促销，

在显示在店铺画面中的货架目标以及陈列在货架上的商品类别满足一定条件的情况下，显示一并指定按钮，

该一定条件是指，在通过用户对某个货架目标进行操作从而选择了与该货架目标相对应的货架的状况下，与陈列在所选择的货架上的商品相同类别的商品还陈列在与所述所选择的一个货架目标相对应的货架以外的货架上，

当按下一并指定按钮的情况下，使与该所选择的一个货架以外的货架相对应的货架目标成为选择状态。由于在某个货架目标被选择，并且存在与该货架目标相同类别的货架目标的情况下，能够进行属于该类别的全部货架的md信息的一并显示，因此，在同一类别的商品分开地存在于多个货架上的情况下，不会发生误读为整体的销售额的情况。

在上述1.的基本的方式和2.～4.的衍生中，能够选择两个以上的任意的方式进行组合。以下的多个实施方式表示用于实施在基本的方式以及其衍生的组合中的典型的方式的、更接近产品的信息终端装置、md管理装置的形态。以下，参照附图说明这些实施方式。

(第一实施方式)

第一实施方式公开了信息终端装置20、md信息管理装置30的基本内部结构。首先，说明系统的概略结构。图1是表示包含信息终端装置20、md信息管理装置30的系统的概略结构的图。如图1所示，店铺内网络包括传感器组10。作为与该店铺内网络相关联的装置，在图1中绘出了信息终端装置20、md信息管理装置30。

传感器组10由多个对人传感器(对人传感器101、102、103……)构成。对人传感器是将摄像机、图像识别装置一体化了的设备，对摄像机拍摄的帧图像进行图像识别，并进行在帧图像内是否存在人物像的判断。当存在人物像的情况下，将表示该人物像采取的行动的行动日志发送给md信息管理装置30。

信息终端装置20由进行与店铺相关联的业务的用户所持有，并接受来自md信息管理装置30的md信息的提供。图中的箭头spy1示意地表示向信息终端装置20的信息提供。

md信息管理装置30根据对人传感器101、102、103……取得的行动日志，对统计性地表示由店铺内的非特定的多数顾客进行的行动的行动统计进行管理，并将包含行动统计的统计值的md信息提供给信息终端装置20。本实施方式中的md信息是用于促进位于店铺中的一个货架上所陈列的商品的贩卖的信息，由表示该货架上的商品的购买数、或用户在各货架附近采取的行动的统计值来印证。也就是说，作为促销的对象的商品限定为陈列在店铺的一个货架上的商品群，并且，作为促销的印证的数值也专门针对于店铺中的一个货架，这是本实施方式的md信息的特征。

以上是关于包含信息终端装置20和md信息管理装置30的系统的概略结构的说明。关于系统的概略结构的说明结束，下面以信息终端装置20、md信息管理装置30为重点进行说明。

图2是表示信息终端装置20、md信息管理装置30的框图结构的图。在图2中，信息终端装置20固有的构成要素是输入部1、显示部2、和通信部3。md信息管理装置30固有的构成要素是购买历史信息管理部4、用户行动统计信息管理部5、店铺信息管理部6、和通信部7。作为存在于信息终端装置20和md信息管理装置30中的任一方皆可的构成要素，有显示控制部8、显示md信息计算部9。

下面说明信息终端装置20固有的构成要素(输入部1、显示部2、通信部3)。

输入部1受理用户操作输入，并将表示该输入内容的操作事件输出给通信部3。该操作事件通过通信部3被移交给md信息管理装置30。针对gui的操作输入包括：显示对象期间或显示对象项目的gui输入、货架图标的按下、同一类别货架信息的一并显示按钮的按下等。

显示部2对两个以上的画面图像实施层合成，将由层合成得到的合成画面即应用画面图像提供给触控面板的显示。显示部的显示对象是多个平面存储器。通过将作为合成对象的画面图像分别存储在多个平面存储器的各个平面存储器中并对存储于平面存储器中的行像素(linepixel)执行重叠处理，来进行上述层合成。在作为合成对象的画面图像中，有店铺画面、辅助店铺画面、和md信息画面。店铺画面是指，表示店铺楼层中的收银机或入口部、多个货架的空间配置的店铺内地图。货架图标是指，以视觉传达的方式显示店铺内的货架的存在并根据用户的操作进行状态转变的gui部件。在该货架图标的状态中，有一般状态、选择状态、确定状态。

md信息画面是指，受理显示对象期间/显示对象项目的指定、一并显示指定，并以与该指定相对应的方式显示md信息的画面。辅助店铺画面是指，以专门针对一个货架的商品的方式显示的店铺画面。

通信部3进行输入部受理的操作事件的发送、和从信息终端装置20被发送的画面图像的接收。

以上是关于信息终端装置20固有的构成要素的说明。接下来，说明md信息管理装置30固有的内部结构(购买历史信息管理部4、用户行动统计信息管理部5、店铺信息管理部6、通信部7)。

购买历史信息管理部4管理各店铺的不同货架的购买历史，并根据各店铺的每天的销售额的累计进行相应购买历史的更新。另外，如果有购买历史的制作请求，则读出属于请求源的店铺的货架的购买历史读出并返回给显示md信息计算部9。

如果检测到某个店铺的某个货架处的用户行动，则用户行动统计信息管理部5对按照各店铺的各货架管理的行动统计进行更新。另外，如果从显示md信息计算部9发出了指示某个店铺的md信息制作请求，则读出与属于该店铺的全部的货架有关的用户的行动统计，并返回给显示md信息计算部9。

店铺信息管理部6保存各店铺的店铺信息，如果从显示md信息计算部9发出了对请求源的店铺指定制作店铺画面的制作请求，则读出该店铺信息，并返回给显示md信息计算部9。

通信部7接收表示店铺信息登记的登记事件、表示商品购买的购买历史事件，并使店铺信息管理部6、购买历史信息管理部4进行与相关事件相应的店铺信息的更新和购买历史的更新。如果发送了表示货架附近的用户行动发生的行动日志，则使用户行动统计信息管理部5进行与行动日志相应的行动统计的更新。另外，执行以通信部3作为对方侧的通信。

接下来，说明位于信息终端装置20和md信息管理装置30中的任一方皆可的构成要素(显示控制部8、显示md信息计算部9)。

显示控制部8根据与请求源的店铺相对应的店铺信息、和由显示md信息计算部9制作的显示md信息来制作店铺画面。另外，与图标按下或一并显示按钮的按下相应地进行店铺画面的更新，并且制作辅助店铺画面、md信息画面。

当发生了包含输入条件的操作事件的情况下，显示md信息计算部9读出关于请求源的用户所属的店铺内的全部货架的行动统计、以及购买历史，并计算出用于显示的显示md信息。当在操作事件中包含输入条件的情况下，仅利用与包含在相关输入条件中的显示对象期间、显示对象项目一致的行动统计、和购买历史来制作显示md信息。显示md信息是指，与由用户输入的输入条件相应地，使每个货架的用户行动的统计值、或购买数与店铺信息中的店面布局和多个货架信息相对应，从而能够进行视觉上的促销的信息。在这样的显示md信息中，由于货架信息与购买数、或统计值的组合相对应，因此，通过根据店面布局显示店铺的平面布局画面，并根据货架信息的货架配置座标将货架图标排列在平面布局画面中，将购买数或统计值一并地显示，从而能够制作表示每个货架的用户行动的分布、购买数的分布的店铺画面。

图2是将显示控制部8设置于信息终端装置20，并将显示md信息计算部9设置于md信息管理装置30的结构，因此，显示控制部8将输入部1受理输入的输入条件通过通信部3、通信部7发送给md信息管理装置30，并且从md信息管理装置30通过通信部3、通信部7接收由md信息管理装置30的显示md信息计算部9制作的显示md信息。以上是信息终端装置20、md信息管理装置30的构成要素的说明。在说明了信息终端装置20、md信息管理装置30的内部结构之后，下面说明作为行动统计收集的对象的店铺的内部。

图3表示设置有对人传感器101、102、103……的店铺内部。在图3的店铺中，存在一般类型的货架41、低温橱窗类型的货架42、冷库类型的货架43、书籍货架类型的货架44、保温类型的货架45这五种类型的货架。这些类型的货架虽然在功能和形状上存在差异，但是在如下一点上是共同的：用于陈列并存放商品的商品架在纵向上具备多层，并且在该各商品架上，商品存放栏在横向上排列设置多列。

一般类型的货架41的前方及/或后方面向通道。在店铺等中，多个货架沿其长度方向配置在一列上。货架由柱部件、与柱部件直角地连接的横梁部件、和由横梁部件固定的多个货架板构成。各货架板是用于陈列并存放商品的商品架，在该各商品架上，商品存放栏在横向上排列多列而设置。

低温橱窗类型的货架42是用于陈列饭团、便当、沙拉、蔬菜、加工食品、牛奶、乳饮料等商品的货架，由向前面开口的陈列室构成。商品架和商品存放栏形成于该陈列室中。在这样的陈列室中，截面大致コ字形的隔热壁安装于两侧。另外，在陈列室的背面，沿纵向设置有冷却器、通风管道。在通风管道内存在送风机，从开口下缘的通风管道吸入口被吸入的空气被送入制冷机。来自制冷机的冷却风从陈列室的开口上缘的排出口被排出，并被送向陈列室中的各商品架的商品存放栏中陈列的商品。由此，陈列室的商品的温度被保持在低温。

冷库类型的货架43是装入店铺的壁面中的装入型的商品存放库，主要用于冰激凌、冷冻食品等冷冻品、或酒类、咖啡、茶/水、果汁等饮品的存放。商品架和商品存放栏形成于该商品存放库中。商品存放库的前面整体地成为开口部分，该开口部分由单开的门覆盖。单开的门是镶玻璃的，使得各商品存放栏中最前列的饮品能够被视觉辨认。商品存放库中的各商品架的商品存放栏沿进深方向延伸，将多个饮品沿进深方向排列成一列而存放，并且能够逐个地取出。

书籍货架类型的货架44是形成为左右横向长的、由一对支柱支承的书籍货架，用于杂志类的陈列。在书籍货架的正面侧架设有贩卖用书籍的陈列台，在背面侧架设有样品用书籍的纵向放置用的样品台。在陈列台的下方，设置有将书籍平放堆积的平放堆积用陈列台。这些陈列台、样品台、平放堆积用陈列台构成商品架。

保温类型的货架45用于油炸制品或肉包、豆包的存放。具体来说，保温类型的货架包含：多个陈列室、作为配置于该陈列室的下方的空调单元的暖风供给单元、与暖风供给单元并列地配置在暖风供给单元的后方的冷藏库、和配置于暖风供给单元的下方的冷却单元。

在一般类型的货架41、低温橱窗类型的货架42、冷库类型的货架43、书籍货架类型的货架44、保温类型的货架45中分别设置有对人传感器101、102、103……。关于对人传感器的设置，有在一个货架的上面或其两侧设置固有的对人传感器的方式、和在店铺的顶棚上设置对人传感器从而俯瞰多个货架的方式。前者的设置方法如图4所示，后者的设置方法如图5所示。

图4(a)中的对人传感器110在货架的两侧的分隔网上各设置一个，将货架在长度方向上面对的通道侧的范围作为检测区域，并检测该检测区域中是否有人。在本实施方式中，在货架的间隔部设置对人传感器。图4(b)表示浏览货架上的陈列品的顾客与对人传感器之间的位置关系。对人传感器以面临通道的方式设置，因此，当顾客在货架前驻足、或向货架上的商品伸手时，其样态由对人传感器110拍摄。

图5(a)是表示安装有对人传感器101、102、103……的店铺的顶棚的图。图5(b)表示浏览货架上的陈列品的顾客与对人传感器之间的位置关系。对人传感器以从顶棚俯视店内的方式设置，因此，当顾客在货架前驻足、或向货架上的商品伸手时，其样态由对人传感器拍摄。以上是关于对人传感器的安装形态的说明。接下来，说明对人传感器的内部结构。参照图4(b)说明对人传感器110的结构。在图4(b)中，对人传感器110由摄像机主体110a、方向转台110b构成。方向转台110b能够沿水平方向(方位角、平移(pan)方向)和垂直方向(仰角、倾斜(tilt)方向)在一定的限制范围内改变摄像机整体的朝向，由此，能够改变镜头拍摄的范围。摄像机主体110a通过具备方向转台110b来移动摄像机1110a的朝向，能够在一定的范围内改变摄像范围。图4(c)表示对人传感器的内部结构。如本图所示，对人传感器110由摄像电路元件110c、识别词典110d、通信部110e、和图像识别部110f构成。

摄像电路元件110c由ccd传感器或cmos传感器等光电转换元件构成，以规定的时间间隔，得到由一个画面量的像素形成的帧图像数据。

在识别词典110d中，表示人体的各部位的形状的特征的特征图案与该部位的名称相对应地被登记。作为登记的对象的身体的部位是从衣服露出的部位(脸、脖子、手等)。尤其是，关于手，登记有表示伸出指尖的状态的形状图案。这是为了检测出向货架的伸手动作。

当检测到有人图像、伸手图像的情况下，通信部110e将表示在货架附近发生了向货架的靠近或向货架的伸手等种类的行动的行动日志发送给管理装置。行动日志是包含表示行动种类的id和行动发生的日期时间的通信消息。

图像识别部110f进行在从摄像电路元件110c输出的帧图像中是否存在构成人体的肤色分布的像素区域的判定。当不存在的情况下，得出拍摄到的帧图像中不存在顾客的像的识别结果。当存在构成人体的肤色分布的像素区域的情况下，将构成该人体的肤色分布的像素区域的轮郭形状抽出，并进行在词典里是否存在与抽出的轮郭形状相近的特征图案的搜索。当人体的脸、脖子的特征图案作为与抽出的轮郭形状相近的特征图案而被确认的情况下，得出拍摄到的帧图像是有人图像、发生了顾客靠近的识别结果。

此外，当伸出指尖的状态的手的形状图案作为与抽出的轮郭形状相近的形状图案而被确认的情况下，图像识别部110f判断形成手的形状的像素区域是否位于货架的附近范围。如果在附近范围，则得出拍摄到的帧图像是伸手图像、发生了向货架的伸手的识别结果。

附近范围是关于是否发生了伸手的空间的基准，按照以下来确定。在识别词典的数据库中，事先登记有表示在理想条件下发生了向货架的各栏伸手的情况下的顾客的姿态的图像。制作者对在这样的登记图像中用户的指尖出现在帧图像的哪处进行分析。这里的理想条件是指，在货架的侧面存在摄像机，平均身高的男女与平均高度和宽度的货架接触。如图4(a)所示，当在货架的间隔部存在对人传感器110的情况下，通过相关分析，将帧图像的下半部分附近确定为该“附近范围”。在帧图像中的该附近范围内，如果存在指尖朝向货架的方向的手的轮郭形状，则可以识别为发生了向货架的伸手。通过以上那样的附近范围的设定，来适当地识别向货架的伸手的动作。当将要从货架前路过的顾客对货架前的商品显示出兴趣的情况下，其在货架前停步、或向货架上的商品伸手等各种姿态被对人传感器的摄像机捕捉。这样，拍摄了通道的对面侧的货架的图像数据、拍摄了在货架前停步的顾客的有人图像、拍摄了在货架前向商品伸手的顾客的伸手图像，是通过由对人传感器进行的拍摄而得到的。

图6(a)表示拍摄了通道的对面侧的货架的图像数据(无人图像数据)，图6(b)表示拍摄了在货架前停步的顾客的图像数据(有人图像数据)。图6(c)是拍摄了在货架前向商品伸手的顾客的图像数据(伸手图像数据)，图6(d)是拍摄了在货架前将商品拿在手里观察的顾客的图像数据(手持图像数据)。在本实施方式中，在图6(a)～(d)的图像中，将图6(c)的伸手图像作为识别对象，将图6(d)不作为识别对象，不作为行动统计的对象。这是因为，向商品的伸手、和商品的把持是一体的行为，只要将向商品的伸手作为行动统计的对象就足够了。相反地，也可以将商品的把持作为行动统计的对象，而将向商品的伸手不作为行动统计的对象。

下面，说明得到这些无人图像数据、有人图像数据、伸手图像数据、手持图像数据的生成时刻的时间关系。图7是将图6(a)～(d)所示的无人图像数据、有人图像数据、伸手图像数据、手持图像数据、无人图像数据分配在时间轴上的图。在图7的第一段中，表示图6(a)～(d)所示的无人图像数据、有人图像数据、伸手图像数据、手持图像数据、无人图像数据，第二段表示时间轴。在该时间轴上绘出有t0、t1、t2、t3这四个时刻。t0表示无人图像数据的拍摄时刻，t1是表示有人图像数据的检测定时，t2表示伸手图像数据的拍摄时刻，t3表示有人图像数据取得后的无人图像数据的拍摄时刻。第三段表示在有人图像的拍摄时刻、伸手图像的拍摄时刻、无人图像的拍摄时刻的各个时刻，在信息终端装置20中进行了怎样的处理。在得到无人图像的期间中，不发生任何处理。但是，当在时刻t1生成有人图像时，经过5秒后开始靠近时间的计测，将有人图像生成的通知、和靠近开始时刻登记在md信息管理装置30中。时刻t2表示伸手图像的生成时刻。在该t2时，伸手发生的通知、和伸手发生时刻被登记在md信息管理装置30中。t3是检测出无人图像的发生的检测定时。在该检测定时，用户的离去被登记，人的靠近的累计时间被计算出来。图中的dif表示从有人图像的发生时刻开始到无人图像的发生时刻为止的经过时间。并且，在md信息管理装置30中的货架固有的靠近时间上，加上经过时间dif。

图8的序列图表示通过以上的无人图像、有人图像、伸手图像的发生，在信息终端装置20、md信息管理装置30中形成的通信序列。图8表示在对人传感器的图像识别部110f、和用户行动统计信息管理部5的构成要素间形成的通信序列。在本图的横向上，分别配置有属于系统的对人传感器的图像识别部110f、和用户行动统计信息管理部5。在纵向上，描绘有多个时间轴。这些时间轴被对人传感器、用户行动统计信息管理部5具备的时钟所管理。时间轴上的各时刻是收发消息的定时。图中所示的各数据来往于这些时间轴间。并且，各时间轴上的时刻t1、t2、t3……表示这些数据的发送时刻。图中的框表示本通信序列中的多个阶段(phase)。具体来说，在本序列图中，存在：等级1，该等级1进行某个顾客靠近货架时的对人传感器与md信息管理装置30之间的信息交换；和等级2，该等级2进行其它顾客靠近货架时的对人传感器与md信息管理装置30之间的信息交换。首先，先说明阶段ph1。

阶段ph1内的时刻t1是第一次的有人图像的检测定时。从t1开始经过5秒后发送靠近检测消息。靠近检测消息包含靠近发生时刻(图中的2013/12/1013：01：10)。通过该信息的接收，图中的2013/12/1013：01：10被登记作为靠近发生时刻。与之相应地，停步次数增加为“1”。

本图中的时刻t2是第一次的伸手检测定时。在该定时，伸手检测消息被发送。伸手检测消息从信息终端装置20向md信息管理装置30发送，包含伸手发生时刻(图中的2013/12/1013：01：50)。通过该信息的接收，图中的2013/12/1013：01：50被登记作为伸手发生时刻。与之相应地，伸手次数增加为“1”。

时刻t3是检测第一次的靠近检测消息发送后的无人图像发生的定时。在该定时，离去检测消息从信息终端装置20向md信息管理装置30发送。通过该信息的收发，向货架靠近的累计时间被更新为“2分钟”。

以上是关于阶段ph1的说明。接下来，开始说明阶段ph2。本图中的时刻t4是第二次的靠近发生时的有人图像的检测定时。从时刻t4开始经过5秒后，靠近检测消息被发送。靠近检测消息包含靠近发生时刻(图中的2013/12/1015：03：10)。通过该消息的接收，图中的2013/12/1015：03：10被登记作为靠近发生时刻。与之相应地，停步次数增加为“2”。

本图中的时刻t5是第二次的伸手检测定时。在该定时，伸手检测消息从信息终端装置20向md信息管理装置30被发送。伸手检测消息包含伸手图像发生时刻(图中的2013/12/1015：03：50)。通过该消息的接收，图中的2013/12/1015：03：50被登记作为伸手图像发生时刻。与之相应地，伸手次数增加为“2”。

时刻t6是第二次的靠近发生时的第二次的无人图像的检测定时。在该定时，离去检测消息从信息终端装置20向md信息管理装置30发送。通过该信息的收发，伸手的累计时间被更新为“3分钟”。

通过发生在2013/12/10的13：01：10、和15：03：10的两次顾客的靠近，关于小吃零食的货架的行动统计被更新为：停步次数是2次，伸手次数是2次，累计靠近时间是3分钟。在一周、一个月这种长跨度的时间中，持续地进行伴随着有人图像数据、伸手图像数据、无人图像数据的制作的行动统计的更新，由此，包含停步次数、伸手次数的行动统计被累计起来。

经过以上的处理，在用户行动统计信息管理部5中，用户的行动历史被累计起来。

当累计靠近时间被相加，并且靠近次数、伸手次数增加下去时，在图9那样的数据结构中用户行动统计信息被积累在显示md信息计算部9中。用户行动统计信息成为md信息的一部分。已说明了用户行动统计信息的积累，接下来以店铺信息、用户行动统计信息、购买历史信息的内部结构为重点进行说明。图9表示店铺信息、用户行动统计信息、购买历史信息的内部结构。本图的左端表示由系统管理的多个店铺信息(店铺－1、－2、－3、－4……，－n的店铺信息)。该店铺信息是从一个类结构的型生成的多个实例，都具有共同的数据结构。图中的引出线cup1将店铺信息的内部结构特写地表示。店铺信息包含：“店铺－1的id”、“店铺的布局数据”、布局中的“货架信息群”。

图中的链接lnk1表示与根据店铺的id的每家店铺的用户行动统计信息之间的链接。以下，说明用户行动统计信息。在用户行动统计信息管理部5，存在与n个店铺分别对应的n个用户行动统计信息(店铺－1、－2、－3……－n的行动统计信息)，各个用户行动统计信息通过店铺的id而被识别。该行动统计信息是从共同的类结构体生成的实例。引出线cup2将行动统计信息的结构特写表示。如引出线cup2所示，行动统计信息由“店铺－1的id”、“不同货架的行动统计信息(货架1－1、1－2、1－3……1－n的行动统计信息)”构成。引出线cup3将行动统计信息的结构特写表示。如引出线cup3所示，行动统计信息由“累计靠近时间”、“停步次数”、“靠近发生通知”、“靠近发生时刻”、“靠近结束时刻”、“伸手次数”、“伸手发生时刻”构成。

图中的链接lnk2表示与根据店铺的id的每家店铺的购买历史信息之间的链接。以下，说明购买历史信息。不同店铺的购买历史信息(店铺－1、－2、－3……－n的购买历史信息)是从共同的类结构体生成的实例。引出线cup4将购买历史信息的内部结构特写显示。如引出线cup4所示，购买历史信息由“店铺－1的id”、“不同货架的购买历史信息(货架1－1，1－2，1－3……1－n的购买历史信息)”构成。引出线cup5将货架1－1的货架信息的内部结构特写显示。如引出线cup5所示，购买历史由“购买数”、“购买商品名”、“购买用户属性”构成。

在此，假设在存在于id＝1的店铺的货架中，对饼干/巧克力货架、小吃零食货架反复进行行动统计的累计。反复进行上述处理的结果是，图10中的饼干/巧克力货架、小吃零食货架的行动统计成为如图10(a)、(b)所示的内容。可知，图10(a)被设定为：向饼干/巧克力货架的累计靠近时间是178秒，停步次数是35次，靠近发生通知是“有通知(是)”，靠近发生时刻是2013/12/10的13：01：00、2013/12/10的15：03：10、靠近结束时刻是2013/12/10的13：03：00、2013/12/10的15：06：10，伸手次数是42次，伸手发生时刻是2013/12/10的13：01：50、2013/12/10的15：03：50。

可知，在图10(b)中，设定为：向小吃零食货架的累计靠近时间是214秒，停步次数是42次，靠近发生通知是“有通知(是)”，靠近发生时刻是2013/12/10的13：11：00、2013/12/10的15：13：10，靠近结束时刻是2013/12/10的13：13：00、2013/12/10的15：16：10，伸手次数是42次，伸手发生时刻是2013/12/10的13：11：50、2013/12/10的15：13：50。这些成为店铺画面的统计值显示的基础。

具体来说，与行动统计所示的统计值相应地决定应被合成在店铺画面中的图形的缩放率。图11(a)～(d)是表示累计靠近时间、停步次数、伸手次数、购买数与缩放率之间的关系的一例的图表。在图11(a)～(d)中，都用共同的标记制作，图中的纵轴表示缩放率，横轴表示累计靠近时间、停步次数、伸手次数、购买数。纵轴、横轴之间的直线表示与累计靠近时间、停步次数、伸手次数、购买数的大小相应的缩放率的变化。在图11(a)～(d)的图表中显示了：当累计靠近时间、停步次数、伸手次数、购买数变大时，缩放率变大。图中的圆、三角、方形、菱形是分配给累计靠近时间、停步次数、伸手次数、购买数的记号图形。如此可知，在累计靠近时间、停步次数、伸手次数、购买数与缩放率之间，如下的比例关系成立：随着累计靠近时间、停步次数、伸手次数、购买数变大，缩放率也变大。

虽然缩放率具有这样的比例关系，但是优选地，为了店铺画面的尺寸的方便，将缩放率限制在某确定的等级(例如，5个等级等)。

图11(e)表示将缩放率分割为5个等级的柱状图。按照这样，在将缩放率分为5个等级的情况下，累计靠近时间、停步次数、伸手次数、购买数可能取到的数值范围也分割为5个数值范围，通过使累计靠近时间、停步次数、伸手次数、购买数隶属于某个数值范围的方式，来确定图形显示时的缩放率。图11(e)的柱状图中的各个柱表示为了将缩放率分为5个等级而生成的5个数值范围。

以使累计靠近时间、停步次数、伸手次数、购买数属于某个数值范围的方式使缩放率变化，由此，累计靠近时间、停步次数、伸手次数、购买数与图形之间的关系能够如图11(f)所示地表示。图11(f)的纵向表示累计靠近时间的图形、停步次数的图形、伸手次数的图形、购买数的图形的这种图形种类(累计靠近时间的图形、停步次数的图形、伸手次数的图形有时称为统计值图形)。横向表示基于5个等级的缩放率的图形大小的不同。即，图11(f)的横向将分配有5个等级的缩放率的图形从大到小地排列显示。各缩放率的图形的横向右侧的数值范围表示图形的大小意味着怎样程度的数值范围。如上所述，显示在每个货架的行动统计中的累计靠近时间、停步次数、伸手次数、购买数用大小以5个等级变化的统计值图形、购买数图形来显示。

以上是关于统计值图形、购买数图形的说明。接下来，说明店铺信息的构成要素即货架信息群、和布局数据。图12是表示店铺信息中的货架信息群的数据结构的图。引出线cup10将货架信息群的结构特写表示。如引出线cup10所示，货架信息群由属于一个店铺的多个货架信息构成。图中的1－1、1－2、1－3等数值表示该货架信息是识别子＝1的店铺中的1、2、3号货架的货架信息。引出线cup11将一个货架信息的内部结构特写表示。如引出线cup11所示，货架信息由如下部分构成：表示陈列在货架上的商品的类别的“陈列商品类别”；表示应该配置货架图标的座标的“货架配置座标”；表示货架是横向放置还是纵向放置的“货架配置方向”；表示构成货架图标的位图的“货架图标位图”；表示当根据用户操作来使货架图标的状态变化时的对显示色的指定的“颜色代码”；以及，表示通道相对于货架存在于上下左右的哪个方向、至通道的距离是多少的“通道方向和偏移”。

图12的引出线cup12将店面布局数据的结构特写表示。如引出线cup12所示，店面布局数据由表示店铺楼层的形状的“楼层形状座标”、表示店铺楼层中的收银机的形状的“收银机形状座标”、表示入口部的形状的“入口部形状座标”构成。图12的(xi－j，yi－j)表示在画面座标系中应该配置有一个货架图标的“货架座标”的一例。(xt1，yt1)、(xt2，yt2)、(xt3，yt3)、(xt4，yt4)是入口部形状座标的一例，表示在画面座标系中楼层形状的四角存在于哪处。(xr1，yr1)、(xr2，yr2)、(xr3，yr3)……是收银机形状座标的一例，表示在画面座标系中收银机占据楼层的哪处。(xe1，ye1)、(xe2，ye2)、(xe3，ye3)……是入口部形状座标的一例，表示在画面座标系中入口部占据楼层的哪处。

图13(a)是在画面座标系中将货架配置座标即(xi－j，yi－j)、楼层形状座标即(xt1，yt1)、(xt2，yt2)、(xt3，yt3)……、收银机形状座标即(xr1，yr1)、(xr2，yr2)、(xr3，yr3)……进行绘制的图。(c)的横向表示x轴，纵向表示y轴。如果在该画面的座标系中用线连结(xt1，yt1)、(xt2，yt2)、(xt3，yt3)、(xt4，yt4)，则在画面座标系中描绘出楼层的整体形状。如果用线连结(xr1，yr1)、(xr2，yr2)、(xr3，yr3)……则描绘出收银机，如果用线连结(xe1，ye1)、(xe2，ye2)、(xe3，ye3)……则描绘出入口部。并且，货架图标以左上是(xi－j，yi－j)的方式配置。图13(b)表示根据货架的货架配置座标、楼层形状座标、入口部形状座标制作的店铺画面的一例。该店铺画面配置在平面层中的最下层的店铺画面平面中。

图14(a)表示平面层中购买数/统计值平面与店铺画面平面的合成。如本图所示，店铺画面位图存放于最下层的店铺画面平面中。在购买数/统计值图形平面中，存放有组合了统计值图形、购买数图形的图形。图中的箭头aw1表示合成顺序。即，购买数/统计值平面配置于最近前侧，并以在该购买数/统计值图形平面的背后合成店铺画面平面的这种顺序得到应用画面图像。

在将统计值图形、购买数图形组合了的图形中，有以方形为背面并配置了菱形的菱形卡图形、和以圆形记号为背面并配置了三角形的圆与金字塔图形。图14(b)表示菱形卡图形，图14(c)表示圆与金字塔图形。

按照这样，在货架图标上，重叠有表示购买数的购买数图形、和表示伸手次数的统计值图形，在货架图标前方的通道中，重叠有表示累计靠近时间、停步次数的统计值图形。

当对于全部的货架执行购买数图形、3种统计值图形(伸手次数图形、累计靠近时间图形和停步次数图形)的合成时，得到图14(d)的应用画面图像。

在此，在店铺画面中，货架有纵向放置、横向放置的，另外，通道与货架相接的方向有在上方向相接的、在下方向相接的、在左方向相接的、和在右方向相接的。这些不同被设定为货架信息的货架配置方向、通道方向/偏移。图15(a)的表表示根据通道相接的方向，x轴方向的偏移、y轴方向的偏移如何变化。图15(a)的纵向排列表示通道存在于上下左右的哪处。横向的排列表示offsetx、offsety的值。

offsetx、offsety是表示购买数图形、3种统计值图形(伸手次数图形、累计靠近时间图形和停步次数图形)的座标从货架的座标偏移了多少的、带有正负符号的数值。如果offsetx、offsety的符号是正符号，则表示通道存在于x轴的正方向、y轴的正方向。如果offsetx、offsety的符号是负符号，则表示通道存在于x轴的负方向、y轴的负方向。另外，“icon＿width”是货架图标的横向宽度，“icon＿height”是货架图标的纵向宽度。根据图15(a)，当通道在下侧的情况下，offsetx被设定为icon＿width/4，offsety被设定为+icon＿height，当通道在上侧的情况下，offsetx被设定为icon＿width/4，offsety被设定为icon＿height。当通道在左侧的情况下，offsetx被设定为－icon＿width，offsety被设定为icon＿height/4，当通道在右侧的情况下，offsetx被设定为+icon＿width，offsety被设定为icon＿height/4。

图15(b)～(e)平面地表示在offsetx、offsety如图15(a)的表那样地被指定的情况下的购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形。在图15(b)、(c)中，购买数图形和伸手次数图形被配置在(xi－j+offsetx、yi－j)。在图15(d)、(e)中，购买数图形和伸手次数图形被配置在(xi－j、yi－j+offsety)。在图15(b)～(e)中，累计靠近时间图形和停步次数图形被配置在(xi－j+offsetx、yi－j+offsety)。

在这些图中，图15(b)表示货架横向放置，且通道存在于货架的下侧的情况下的购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形的配置。根据图15(b)，在通道存在于下侧的情况下，offsetx被设定为icon＿width/4，因此，由购买数图形和伸手次数图形形成的菱形卡图形与货架图标重合。

offsety被设定为icon＿height，因此，累计靠近时间图形和停步次数图形被配置在横向放置的货架图标的正下方。

图15(c)表示货架横向放置，且通道存在于货架的上侧的情况下的购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形的配置。根据图15(c)，当通道存在于上侧的情况下，offsetx被设定为icon＿width/4，因此，购买数图形和伸手次数图形被配置在横向放置的货架图标的正中央附近。offsety被设定为－icon＿height，因此，累计靠近时间图形和停步次数图形被配置在横向放置的货架图标的正上方。

图15(d)表示货架纵向放置，且通道存在于货架的左侧的情况下的购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形的配置。根据图15(d)，在通道存在于左侧的情况下，offsety被设定为icon＿height/4，因此，购买数图形和伸手次数图形被配置在纵向放置的货架图标的正中央附近。offsetx被设定为－icon＿width，因此，累计靠近时间图形和停步次数图形被配置在纵向放置的货架图标的左侧。

图15(e)表示货架纵向放置，且通道存在于货架的右侧的情况下的购买数图形和伸手次数图形、累计靠近时间图形和停步次数图形的配置。根据图15(e)，当通道存在于右侧的情况下，offsety被设定为icon＿height/4，因此，购买数图形和伸手次数图形被配置在纵向放置的货架图标的正中央附近。offsetx被设定为+icon＿width，因此，累计靠近时间图形和停步次数图形被配置在纵向放置的货架图标的右侧。

接下来，说明其它的层合成。图16(a)表示向店铺画面平面、购买数/统计值图形平面合成md信息画面平面的层合成。近前侧的md信息画面平面是用于存放用于md信息显示的gui的平面存储器。图中的箭头aw2表示合成顺序。即，表示md信息画面平面配置在最近前侧，并以在该md信息画面平面的背后合成购买数/统计值图形平面、店铺画面平面的这种顺序得到应用画面图像。图16(b)表示向店铺画面平面、购买数/统计值图形平面合成辅助店铺画面/md信息画面平面的层合成。图中的箭头aw3表示合成顺序。即，表示辅助店铺画面/md信息画面平面被配置在最近前侧，并以在该辅助店铺画面/md信息画面平面的背后合成购买数/统计值图形平面、店铺画面平面的这种顺序得到应用画面图像。

以上是关于应用画面图像的制作过程的说明。接下来，说明用户行动统计、购买历史信息、店铺信息的利用局面的详细情况。

图17是表示利用店铺信息、用户行动统计、购买历史信息的局面的序列图。本图的序列包含：对用户aaa提供服务的阶段ph11、对用户zzz提供服务的阶段ph12。下面，说明阶段ph11内的序列。

阶段ph11的时刻t11是画面制作请求的发生定时，在该发生时刻，包含从用户受理的输入条件的店铺画面请求信息被从信息终端装置20的输入部1向md信息管理装置30的显示md信息计算部9发送。图中的acc1、acc2、acc3表示接收该请求信息时的行动统计信息、店铺信息、购买历史信息的访问。

时刻t12是基于该店铺画面的发送的店铺画面的初始显示的定时。

时刻t13是受理用户针对店铺画面的初始显示的操作的受理定时。通过该受理，gui事件被从信息终端装置20的显示控制部8发送给店铺信息管理部6。通过该发送，进行了画面更新的更新后的画面被发送给显示控制部8。时刻t14是被更新了的店铺画面的显示定时(更新显示定时)。

以上是关于阶段ph11内的序列的说明。阶段ph12内的序列也由同样的信息收发(t21、t22、t23、t24)构成。通过按照每个用户地进行以上的序列，关于用户所属的店铺的店铺画面、辅助店铺画面、md信息信息画面被显示在各用户的信息终端装置20上。以上是关于用于店铺画面制作的收发信序列的说明。已完成了信息收发序列的说明，接下来开始关于信息终端装置20的应用画面图像的说明。

图18是表示使用信息终端装置20的局面的一例的图。在图18中，信息终端装置20是平板式终端，向画面的触摸意味着图标的选择、按钮的按下。另外，如果是平板式，则信息终端装置20也可以是智能手机。另外，也可以是用鼠标、键盘等定点设备操作的笔记本型计算机、笔记本电脑。通过受理画面上的触摸操作，能够使店铺画面中的某个货架图标成为选择状态，或者能够将店铺画面中的各种按钮按下。在该局面下，信息终端装置20由特许加盟连锁店本部的工作人员或店铺的所有者等用户所持有，并供该用户使用。信息终端装置20根据该用户的操作，显示店铺画面、辅助店铺画面、md信息画面。

图19表示关于一个店铺而制作的应用画面图像的一例。本图中的图19的右侧是店铺画面。店铺画面通过将多个货架图标沿着店内的货架的示意图平面地配置而构成。各个货架图标是在四边形的gui部件上附上“甜点”、“日式点心”、“面包”等商品名的字符串而形成的。下面说明图19的店铺画面中的货架布局。在店铺中，沿纵向和/或横向排列的多个货架形成一个分区。在图19中，在店铺的收银机前，存在横向排列的分区pt1、pt2、pt3。另外，沿着店铺的墙壁，存在分区pt4、pt5、pt6。分区pt5主要由用于饮料陈列的货架构成，分区pt6由书物陈列的货架构成。

当同一类别的商品存在很多的情况下，在这些分区中，能够将这些同一类别的商品集中地配置在以横向排列或纵向排列连续的多个货架上。在图19中，小吃零食占据分区pt1的横向排列的两个货架，甜点占据分区pt1的左端的纵向放置的货架、和在其相邻的纵向上相互面对的两个货架。此外，面包占据分区pt1的l字形的3个货架。仅通过观察该店铺画面，特许加盟连锁店本部的工作人员就能够想像远方的店铺画面是怎样的货架比例。

由于信息终端装置20是平板终端，因此用户通过触摸画面就能够使某个货架图标成为选择状态。在图19的左侧，存在包含显示对象期间设定按钮bn1、显示对象项目按钮bx1、bx2、bx3、bx4的纵向放置的工具栏。在这些显示对象项目按钮上，有累计靠近时间、停步次数、伸手次数、购买数等项目。在该工具栏的下侧，存在表示累计靠近时间、停步次数、伸手次数、购买数与图形之间的对应关系的标记ir1。在该标记中，表示5个等级的大小的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形。这些图形表示圆、三角、方形、菱形这4种形状，并被设定为5个等级的大小之中的任一个等级的大小。

在使显示期间设定受理按钮bn1成为选择状态的基础上进行确定，则图20的显示对象期间设定画面显示在md信息画面平面上。图20表示显示对象期间设定画面的一例。该一例的画面受理开始日的年月日、和结束日的年月日的数值输入，受理2011～2013的范围中的公历的指定、9～11的范围中的“月”的指定、和21～23、22～24的范围中的“日”的指定。通过在该画面中指定年月日并进行确定，从而开始日和结束日被设定为md信息的显示对象期间。

图21表示md信息的显示对象项目设定时的店铺画面的一例。在本图中，累计靠近时间、停步次数、伸手次数、购买数等项目的检查框被选中，合成在货架上的菱形卡、合成在货架前的通道中的圆与金字塔作为特征性的视觉表现而被显示。圆与金字塔是以圆形图形为背景并配置了正三角形的图形。圆图形的大小表示累计靠近时间，三角形的大小表示停步次数。该圆与金字塔图形大并且菱形卡图形大的货架表示具有很强的顾客集中力，并且对于销售额贡献得多的货架。

另一方面，虽然菱形小但圆与金字塔大的货架具有留住顾客的顾客集中力，如果在这样的货架上陈列宣传活动的商品，则能够促成高的销售额。

在货架中，化妆品货架、蒸煮食品货架的菱形卡的菱形部分相对于卡整体的大小较小。这表示，虽然没有达成购买但发生了很多向商品的伸手动作，潜藏有在不久的将来产生销售额的可能性。

衣服、女性杂志、男性杂志的货架不存在菱形卡，只有小的方形。这表示虽然发生了少量的伸手动作，但几乎没有购买。没有菱形只有方形框被显示的货架图标表示，虽然发生了伸手但完全不存在购买。由于了解到这样的货架图标的存在，因此能够讨论：虽然发生了伸手但完全不存在购买的商品有哪些；想要使伸手与购买相关联，需要做出怎样的努力。

通过仔细地观察该图形的合成，会注意到平时的业务中忽视的事实：虽然销售额不景气，但在一部分货架上发生了很多顾客的靠近；或者，在一部分商品上发生了很多的伸手动作；或者，顾客长时间停留在意想不到的货架处等。

当在店铺画面中显示的多个货架图标中，某个货架图标被用户触摸时，信息终端装置20将该货架图标的状态从一般状态变更为选择状态。该变更是通过取得在店铺信息的货架信息中与被触摸的货架图标相对应的货架信息的颜色代码，并用该颜色代码变更货架图标的显示色来实现的。设在图19的店铺画面中，饼干/巧克力货架的货架图标被触摸。在该情况下，图19的店铺画面切换为图22的店铺画面。图22表示在饼干/巧克力货架的货架图标被触摸的情况下的md信息画面和辅助店铺画面的一例。在辅助店铺画面中，在店铺画面中被触摸的饼干/巧克力货架以强调方式显示。由于累计靠近时间、停步次数、伸手次数、购买数等检查框被选中，因此，在md信息画面中，显示为：饼干/巧克力货架固有的累计靠近时间是178秒，饼干/巧克力货架固有的停步次数35次，饼干/巧克力货架固有的伸手次数是42次，饼干/巧克力货架固有的购买数是26个。在该图22中，md信息画面和辅助店铺画面被重合在图19的店铺画面上，md信息画面/辅助店铺画面成为前面侧。在重合形态下，店铺画面不被消去，而是保存着。在此，如果触摸下方的店铺画面，则md信息画面/辅助店铺画面与店铺画面之间的前后关系发生替换，店铺画面成为前面侧。

如图22所示，当辅助店铺画面和md信息画面成为层合成的前面侧，且店铺画面被叠加而成为层合成的后面侧的情况下，后面侧的店铺画面中的各个货架图标变成灰色，成为不能选择的状态。

另一方面，如果店铺画面被选择，则店铺画面再次成为前面侧，这次，使辅助店铺画面和md信息画面变成灰色，使辅助店铺画面中的货架图标成为不能选择的状态。在图22中的成为前面侧的辅助店铺画面中，在店铺画面中被选择了的货架图标被明示化。具体来说，使包含在辅助店铺画面中的货架图表、而且是与在店铺画面中被选择了的一个货架图标相对应的图标成为与包含在辅助店铺画面中的其它货架的货架图标不同的显示形态。在该辅助店铺画面中，也能够进行任意的货架图标的选择。当进行了该选择时，进行md信息画面的更新。也就是说，当包含在辅助店铺画面中的货架图标中的某个货架图标成为选择状态的情况下，进行显示在显示器上的md信息画面的更新，更新后的md信息画面将与包含在辅助店铺画面中的货架图标中的、成为选择状态的货架图标相关的行动统计的统计值数值化，并显示在md信息画面中。

饼干/巧克力货架的货架只有一个。但是，在图19的店铺画面中，面包、小吃零食、甜点等种类的商品占据多个货架。当一个种类的商品占据多个货架且这些多个货架中的一个货架被触摸了的情况下，信息终端装置20进行如图23(a)、(b)所示的画面转变。在此，作为占据多个货架的商品类别，着眼于小吃零食。图23(a)是表示小吃零食的货架中的一个被触摸了的状态下的店铺画面的一例的图。如图23(a)所示，当分区pt1中的从左边开始第三个小吃零食的货架被触摸时，被触摸的货架成为选择状态，并且在上部的工具栏中配置有同一类别货架信息的一并显示按钮。在图23(a)的md信息画面中，显示为：被触摸的一个小吃零食货架的累计靠近时间是119秒，停步次数是23次，伸手次数是0次，购买数是0个。

图23(b)表示当触摸了同一类别货架信息的一并显示按钮的情况下的店铺画面的一例。由于小吃零食占据分区中的两个连续的货架，因此，通过同一类别货架信息的一并显示按钮的触摸，该两个连续的小吃零食的货架变更为选择状态。另外，在md信息画面中，显示有小吃零食所占据的两个货架的统计值图形、购买数的累计。具体来说，显示为：两个小吃零食货架的累计靠近时间的累计是214秒，停步次数的累计是42次、伸手次数的累计是49次，购买数的累计是38个。被同一类别的商品占据的货架通过同一类别货架信息的一并显示按钮的触摸而全部被强调地显示，因此，能够确认某个集中的商品群在多个货架之间是怎样陈列的。并且，能够考察遍布该多个货架的陈列方式是否存在问题。

以上是关于用信息终端装置20显示的显示画面的说明。根据从管理装置提供的显示md信息，使平板式的信息终端装置20制作图19～图23的应用画面图像并显示，因此，持有该信息终端装置20的本部工作人员能够对远方的店铺中的非特定的多数顾客的行踪进行分析。结束了对这样的应用画面图像的说明之后，接下来说明根据构成要素的处理步骤的详细情况。

到此为止阐述的md信息管理装置30、信息终端装置20的构成要素的处理内容能够作为与各种外部事象或装置的内部参数相应的、针对硬件资源的处理程序而一般化。图24～图28的流程图表示这样的一般化了的处理程序。

图24是表示对人传感器的处理步骤的流程图。在本流程图中，变量i是对存在于店铺中的多个货架中检测出顾客的行动的货架进行确定的变量。将每个货架的行动统计信息中与该变量i相对应的信息的信息要素用“货架i.－－”的标记表示。

步骤s1是进行在某个货架处是否检测出有人图像的判定的判定步骤。如果检出有人图像，则从步骤s1向步骤s2移动。在步骤s2中，对检测出有人图像的货架进行确定，并进入步骤s3～步骤s5的循环。该循环监视如下事件：是否从有人图像的检出开始经过了5秒(步骤s3)；是否检测出了伸手图像(步骤s4)；是否检测出了无人图像。

如果从有人图像的检出开始经过了5秒的时间，则步骤s3成为“是”，将货架i.靠近发生通知信息、和货架信息的货架i.发生时刻登记在用户行动统计信息管理部5中(步骤s6)，并使货架信息的货架i.停步次数增加(步骤s7)。如果检测出伸手图像，则步骤s4成为“是”，将货架信息的货架i.伸手发生通知信息、和货架i.伸手发生时刻登记在用户行动统计信息管理部5中(步骤s8)，并使货架i.伸手次数增加(步骤s9)。在无人图像的检出后，如果检测出无人图像，则步骤s5成为“是”，并向步骤s10移动。步骤s10是关于靠近发生通知信息是否已经被登记的判定，如果是“是”，则结束靠近发生时间的计测(步骤s11)，计算出计测结束时刻、和计测开始时刻之间的差分时间(步骤s12)，将货架i的靠近开始时刻、货架i的靠近结束时刻登记(步骤s13)，并在货架i.累计靠近时间上加上差分时间，由此，来更新货架i.累计靠近时间(步骤s14)。

接下来，说明信息终端装置20的处理步骤。图25是表示店铺画面显示的处理步骤的流程图。流程图相当于最上位的处理即主例程，作为该流程图的下位的流程图，存在图26～图28的流程图。该主流程的处理步骤表示：对于包含店铺的货架图标的店铺画面，将表示多种md信息中的购买数、统计值的图形重合地显示在货架图标附近。以下，说明主例程中的处理步骤。

该主例程在步骤s21中判定是否有店铺信息，如果有，则取得店铺信息，制作店铺画面并显示(步骤s22)，将md信息的显示对象期间、显示对象项目的输入按钮以不与货架图标重叠的方式显示(步骤s23)，然后，在步骤s24中等待md信息的显示对象期间输入的检出。如果检测出输入，则将所输入的显示对象期间以不与货架图标重叠的方式显示(步骤s25)，并计算所输入的显示对象期间内的md信息的全部的显示对象项目的等级阈值(步骤s26)。

接下来，取得被计算出的等级阈值，将等级阈值、和表示各显示对象项目的购买数、统计值的分等级的大小的图形以不与货架图标重叠的方式显示(步骤s27)。在步骤s28中，进行md信息的显示对象项目的输入等待，如果有输入，则关于所输入的显示对象项目，按照每个货架地计算出所输入的显示对象期间内的md信息(步骤s29)。在步骤s30中，判定所输入的显示对象项目是否是多个，如果是多个，则移动至步骤s31，取得计算出的显示对象项目的每个货架的md信息，制作与取得的md信息的购买数、统计值相应的分等级的大小的图形，并将制作的各显示对象项目的图形重叠地显示在店铺画面的各货架图标附近。

如果是单个，则移动至步骤s32，取得计算出的显示对象项目的每个货架的md信息，制作与取得的md信息的购买数、统计值相应的分等级的大小的图形，并将制作的图形显示在店铺画面的各货架图标附近。

步骤s26中的等级阈值的计算能够展开为更详细的顺序。图26(a)是表示显示对象项目的等级阈值计算步骤的流程图。在该流程图中，变量u是指示各个显示对象项目的控制变量。变量k是在将与显示对象项目相对应的购买数图形、统计值图形以多个等级显示时，指示多个等级中的任意的等级的变量。在步骤s41中，对于全部的显示对象项目取得md信息的值，并移动至步骤s42。步骤s42规定对于各显示对象项目反复进行步骤s43～步骤s50的处理的循环结构。在步骤s43中，计算出显示对象项目u中的md信息的最大值，在步骤s44中，将舍去了显示对象项目u.最大值的第一位得到的值作为项目u.最大等级的开始值。然后，用1将变量k初始化(步骤s45)，将用5除显示对象项目u.最大等级的开始值得到的数作为显示对象项目u的最小等级的开始值(步骤s46)。然后，使变量k增加(步骤s47)，移动至由步骤s47～步骤s50构成的循环。该循环以用变量k乘以显示对象项目u.最小等级的开始值所得的值作为显示对象项目u的k等级的开始值(步骤s48)，判断变量k是否成为了最大值(步骤s49)，如果未成为最大值，则在项目u.k等级的开始值上加上项目u的最小等级的开始值，并将相加后的值作为项目u.k等级的结束值(步骤s50)，反复上述这样的处理，直到步骤s49被判断为“是”。通过执行以上的循环，显示对象项目的各等级的阈值根据与显示对象项目相对应的统计值的最大值、最小值而适当地被设定。

图26(b)是表示图形制作和重叠显示的处理步骤的流程图。在图26(b)中，由针对全部的显示对象项目反复进行步骤s53～步骤s56的处理的第一重循环(步骤s52)、以及针对全部的货架反复进行步骤s52的第一重循环的第二重循环(步骤s51)构成。

步骤s53～步骤s56的处理判断显示对象项目u是否被勾选(检查)(步骤s53)，如果未被勾选，则跳过步骤s54～步骤s56。如果显示对象项目u被勾选，则从用户购买历史信息、和用户行动统计信息中取出显示对象项目u的购买数或统计值(步骤s54)，根据被取出的购买数或统计值、和等级阈值，确定显示对象项目u的缩放率(步骤s55)，将与显示对象项目u相对应的图形数据以缩放率u进行伸缩并显示在货架i附近(步骤s56)。通过执行以上的循环，在各货架上或货架的附近，表示各个显示对象项目的图形数据以适当的大小显示。

图27是表示向货架的图形显示的流程图。在该流程图中，在刚刚开始处理后，执行步骤s61、步骤s62。步骤s61判断通道是否存在于货架的上侧/下侧，步骤s62判断通道是否存在于货架的左侧/右侧。当存在于上侧的情况下，在步骤s63中，将offsetx设定为icon＿width/4的值，将offsety设定为－icon＿height。当存在于下侧的情况下，在步骤s64中，将offsetx设定为+icon＿width/4的值，将offsety设定为+icon＿height。

当存在于左侧的情况下，在步骤s65中，将offsetx设定为(－icon＿width)的值，将offsety设定为+icon＿height/4。当存在于右侧的情况下，在步骤s66中，将offsetx设定为+icon＿width/4的值，将offsety设定为+icon＿height。

步骤s67判断显示对象项目是否是购买数/伸手次数，步骤s68判断货架的货架配置是否是横向放置/纵向放置。如果显示对象项目是累计靠近时间、停步次数，则在步骤s71中将图形显示在(xi－j+offsetx、yi－j+offsety)。

如果显示对象项目是购买数/伸手次数，且货架是横向放置的话，则在步骤s69中将图形显示在(xi－j+offsetx、yi－j)。如果显示对象项目是购买数/伸手次数，且货架是纵向放置的话，则在步骤s70中将图形显示在(xi－j、yi－j+offsety)。通过执行以上的循环，各图形被显示在与货架的配置方向相应的适当的位置。

图28是表示用于显示辅助店铺画面、md信息画面的处理步骤的流程图。该流程图在货架图标选择时，显示包含货架图标的新的店铺画面、和选择货架的md信息。在显示时，使新的店铺画面的货架图标和md信息不重叠。另外，如果在所选择的货架图标中有同一类别的货架的话，则显示同一类别货架信息的一并显示按钮。

步骤s81判断输入了md信息的显示对象期间的店铺画面是否被显示，如果被显示，则在步骤s82中等待关于是否检测出店铺画面的特定货架图标的按下的检测。如果被检测出，则在将被按下的特定货架明示的基础上，制作包含货架图标的辅助店铺画面并显示(步骤s83)。将在被按下的特定货架的md信息中与在店铺画面中所输入的显示对象项目一致的信息取出(步骤s84)，制作包含取得的md信息和显示对象期间的md信息画面，并以不与辅助店铺画面的货架图标重叠的方式显示(步骤s85)。然后，移动至步骤s86。

步骤s86判断是否存在与被按下的特定货架的类别相同类别的货架。当存在的情况下，取得全部的同一类别的货架的md信息中在店铺画面中所输入的显示对象项目的md信息(步骤s87)，并将被按下的特定货架的md信息中的购买数、统计值与取得的全部的同一类别的货架的md信息中的购买数、统计值合计(步骤s88)。然后，为了从用户受理该合计值的显示指示，将同一类别货架信息的一并显示按钮以不与辅助店铺画面的货架图标重叠的方式显示(步骤s89)。当不存在同一类别的货架的情况下，跳过步骤s87～步骤s89。以上是关于流程图的说明。

根据以上那样的本实施方式，顾客在货架的周边采取的向货架的靠近、停步、伸手的统计值由md信息管理装置管理，在信息终端中，与靠近、停步、伸手的统计值相应的形态的图形被显示在货架图标的附近，因此，能够根据多个顾客的行踪的统计直观地分析：货架的什么样的配置对顾客的行动造成影响并与对顾客的吸引和销售额的提高相关联，另外，商品的销售额不增加的问题是出在店铺内的货架的什么样的配置上。由于能够进行如何改善各店铺内的货架的布局的判断，因此，拥有多个小卖店来开展事业的连锁加盟业者或超市、大规模贩卖店的贩卖方针工作人员能够准确地针对销售额低的小卖店进行关于如何改善店面布局的指导，能够改善营业收益。

(第2实施方式)

在第一实施方式中，将md信息画面和辅助店铺画面叠加地显示在店铺画面中。与此相比，在本实施方式中，利用集店铺画面的功能、md信息以及辅助店铺画面的功能于一身的应用画面图像(统合型应用画面图像)来实现对话操作。

图29表示集店铺画面和md信息以及辅助店铺画面的功能于一身的应用画面图像。在该应用画面图像中，在4个显示对象项目上分别存在锁定按钮bn11、bn12、bn13、bn14，在上部工具栏中，存在受理进行全部的货架图标的全选择的全选择按钮bn20、和受理是否要进行累计靠近时间、停步次数、伸手次数、购买数等各个显示对象项目的全显示的全显示按钮bn21、bn22、bn23、bn24。

分别存在于4个显示对象项目上的锁定按钮bn11、bn12、bn13、bn14是受理对与显示对象项目相对应的图形的显示与否进行设定的按钮。这些按钮通过第一次的按下，保持指定了全显示的状态地，按钮状态被锁定。通过第二次的按下，全显示的指定被解除。利用该按钮，能够进行是否对购买数图形、停步次数图形、伸手次数图形、累计靠近时间图形的全显示进行固定的设定。

全选择按钮bn20是规定是否对选择全部的货架图标的这种全选择指定进行受理的按钮。该按钮通过第一次的按下，保持指定了全选择的状态地，按钮状态被锁定。通过第二次的按下，店铺中的多个货架的全选择被解除。

全显示按钮bn21、bn22、bn23、bn24是用于受理如下指定的按钮，该指定表示是将作为累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示对象的货架图标设为全部的货架图标，还是只设为与所选择的一个货架图标相对应的货架图标。这些按钮通过第一次的按下，保持指定了全显示的状态地，按钮状态被锁定。通过第二次的按下，全显示的指定被解除。

在图29的店铺画面中，在第2段分区pt1中，存在4个面包的货架。当存在于该第2段分区的货架中的一个货架图标所选择的情况下，显示同一类别货架的一并显示图标。

图30表示当同一类别货架信息的一并显示按钮被按下的情况下的店铺画面和md信息画面。

当同一类别货架信息的一并显示按钮被按下的情况下，在第2段分区pt1中，以l字形排列的4个面包的货架图标成为选择状态。其结果是，关于4个面包货架的累计靠近时间的合计值(374秒)、停步次数的合计值(69次)、伸手次数的合计值(32次)、购买数的合计值(28次)被显示出来。

在图30中，能够与多个货架图标的选择联动地，更新与两个以上的货架图标相对应的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示内容。在图30的店铺画面中，当关于面包的4个货架图标被选择的情况下，显示关于所选择的4个货架全体的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形，并将通过把关于4个货架图标各自的行动统计的统计值合计而得到的合计值数值化并显示在md信息画面中。

当两个以上的货架图标被选择时，能够进行与该两个以上的货架图标相对应的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示。图31表示该显示。

图31表示在面包的全部的货架图标被选择的状态下，累计靠近时间的显示对象项目、停步次数的显示对象项目、伸手次数的显示对象项目、购买数的显示对象项目被锁定的情况下的应用画面图像的一例。在本图中可知，在以l字形配置的货架图标中的各个货架图标上，显示了累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形。也就是说，当图30中的关于面包的4个货架图标被选择的情况下，如图31所示，将与关于面包的4个货架相关的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形重叠地显示在显示器上。在显示了累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的状态下，作为其它货架图标被选择的情况下的显示控制，有：显示控制(a)，即以继续进行在此之前的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示的状态，使新选择的货架图标成为选择状态，并更新md信息画面；和显示控制(b)，即消去在此之前的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示，使新选择的货架图标成为选择状态，并更新md信息画面。前者的显示控制(a)的优点是，能够在货架图标间进行对比统计值或购买数的对比观察；后者的显示控制(b)的优点是，能够实现货架图标的选择与图形显示之间的联动。

图32表示在糖果的货架图标被选择且该货架图标的累计靠近时间、停步次数、伸手次数、购买数被显示的状态下，累计靠近时间的全显示按钮、停步次数的全显示按钮、伸手次数的全显示按钮、购买数的全显示按钮被锁定的情况下的店铺画面和md信息画面的一例。在本图的应用画面图像中，购买数图形、统计值图形、累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形被合成在全部的货架上。另一方面，在md信息画面中显示：关于糖果货架的累计靠近时间的合计值(27秒)、停步次数的合计值(4次)、伸手次数的合计值(0次)、购买数的合计值(0次)。

如图32所示，在关于全部的货架图标设定了显示累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的状态下，能够与由用户进行的货架图标的选择联动地进行以下的(1)、(2)的显示控制。

(1)是将图形显示限定为1个的显示控制。也就是说，如图32所示，在显示了与多个货架相关的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的状态下，当某一个货架图标被选择了的情况下，继续进行和与被选择了的一个货架图标相对应的货架相关的累计靠近时间图形、停步次数图形、伸手次数图形和购买数图形的显示，并消去和与被选择了的一个货架图标相对应的货架以外的货架相关的累计靠近时间图形、停步次数图形、伸手次数图形和购买数图形。关于全部的货架图标而显示的累计靠近时间图形、停步次数图形、伸手次数图形和购买数图形通过货架图标的选择，成为唯一的显示，因此，能够进行对用户来说容易看的画面演示。

(2)是维持图形显示的同一性的显示控制。即，如图32所示，在显示了全部的货架的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的状态下，即使选择货架图标，也继续进行全部的货架的累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形的显示。作为累计靠近时间图形、停步次数图形、伸手次数图形和购买数图形的重合显示的对象的货架是设置在店铺中的全部的货架图标，即使这些货架图标中的某个被选择，也继续显示累计靠近时间图形、停步次数图形、伸手次数图形显示、购买数图形。在该情况下，由于保持了画面内容的同一性，所以不会导致用户的混乱。

图33表示全选择按钮被锁定的情况下的店铺画面和md信息画面的一例。在该图中，表示货架图标全部成为反转显示且全部的货架图标被锁定为选择状态的情况。在该状态下，当累计靠近时间的全显示按钮、停步次数的全显示按钮、伸手次数的全显示按钮、购买数的全显示按钮被锁定时，在各个货架图标上显示累计靠近时间图形、停步次数图形、伸手次数图形、购买数图形，并且，在md信息画面中显示：累计靠近时间的合计值(2149秒)、停步次数的合计值(697次)、伸手次数的合计值(508次)、购买数的合计值(324次)。

根据如上的该实施方式，能够针对购买数、停步次数、伸手次数、累计靠近时间这些各个显示对象项目受理全部货架的选择，另外，在选择了一个货架时，关于该货架的购买数图形、停步次数图形、伸手次数图形、累计靠近时间图形的显示是固定化的，因此，md信息和辅助店铺画面、店铺画面的功能集中在一个画面中，从而提高了便利性。

(第三实施方式)

在第一实施方式中，针对停步次数、伸手次数、累计靠近时间、购买数分别确定用于决定停步次数图形、伸手次数图形、累计靠近时间图形、购买数图形的显示形态的多个阈值。与此相比，在本实施方式中，使用于确定停步次数图形、伸手次数图形、购买数图形的显示形态的多个阈值在停步次数、伸手次数、购买数之间是共同的。

图34表示使用于停步次数、伸手次数、购买数的图形的分级显示的数值范围的阈值在停步次数、伸手次数、购买数之间不同的情况下的店铺画面和md信息画面显示的一例。与此相对，图35表示将用于图形分级显示的数值范围的阈值设为在停步次数、伸手次数、购买数之间共同的阈值的情况下的店铺画面和md信息画面的一例。在该图的画面的下段，停步次数、伸手次数、购买数被分类为50次～、40～50次、30～40次、20～30次、10～20次这5个数值范围，停步次数图形、伸手次数图形、购买数图形的大小以各货架图标的停步次数、伸手次数、购买数隶属于这些数值范围中的某个范围的方式发生变化。

在图35中，在货架图标的附近，设定了共同的缩放率的停步次数图形、伸手次数图形、购买数图形显示在各货架图标的附近。由于用于分级显示的阈值被共同化，因此能够在视觉上表现出购买数、停步次数、伸手次数的彼此的大小的不同。

本实施方式中的等级阈值的算出能够通过如下地改变图26(a)的流程图所示的处理步骤来实现。在图26(a)中，通过步骤s42的循环，来针对各个显示对象项目计算出md信息的最大值。与此相对，在本实施方式中，比较累计靠近时间的最大值、停步次数的最大值、伸手次数的最大值、购买数的最大值，并将这些之中最大的值作为累计靠近时间、停步次数、伸手次数、购买数共同的最大值(全显示对象项目的共同的最大值)。然后，移动至步骤s44～s49。在步骤s44中，将舍去了全显示对象项目的最大值的第一位所得的值作为全显示对象项目的最大等级的开始值。然后，用1将变量k初始化(步骤s45)，将用5除全显示对象项目的最大等级的开始值所得的数作为全显示对象项目的最小等级的开始值(步骤s46)。然后使变量k增加(步骤s47)，移动至由步骤s47～步骤s50构成的循环。在该循环中，将全显示对象项目的最小等级的开始值乘以变量k所得的值作为全显示对象项目的k等级的开始值(步骤s48)，并判断变量k是否成为最大值(步骤s49)，如果未成为最大值，则在全显示对象项目的k等级的开始值上加上全显示项目项目的最小等级的开始值，并将相加后的值作为全显示对象项目的k等级的结束值(步骤s50)，反复进行上述这样的处理，直到步骤s49被判断为yes。通过执行以上的循环，显示对象项目的各等级的阈值根据与显示对象项目相对应的统计值的最大值、最小值而适当地被设定。按照这样，图35中的共同的数值范围被规定。

根据如上的本实施方式，由于设用于图形分级显示的数值范围的阈值在停步次数、伸手次数、购买数之间是共同的阈值，因此，能够根据图形的大小考察：伸手相对于向货架的停步的比率是何种程度、购买相对于停步的比率是何种程度。此外，如果观察菱形图形相对于方形图形的比率，能够知道购买数相对于伸手次数的比率，因此，能够知道虽然发生了很多伸手动作但却没有发生购买的这种商品分布在哪个货架上。

(第四实施方式)

在第一实施方式中，在md信息管理装置30中存在显示md信息计算部9，在信息终端装置20中存在显示控制部8。但是，该形态只是一个例子而已，在信息终端装置20、md信息管理装置30中的哪一方中都可以配置显示md信息计算部9和显示控制部8。本实施方式就涉及根据该显示控制部8、显示md信息计算部9的配置的不同而产生的变形。根据将显示控制部4、md信息计算部5配置在何处的这种不同，在信息终端装置20、md信息管理装置30中存在图36～图37的变形。

图36表示如下框图结构的变形：将显示控制部8、显示md信息计算部9都配置在md信息管理装置30中，而在信息终端装置20中不设置显示控制部8、显示md信息计算部9。

图37表示如下框图结构的变形：将显示控制部8、显示md信息计算部9都设置在信息终端装置20中，而在md信息管理装置30中不设置显示控制部8、显示md信息计算部9。

根据如上的本实施方式，当在信息终端装置20、md信息管理装置30中存在硬件性能的差异的情况下，通过将显示md信息计算部9、显示控制部8的组合配置在硬件性能高的一侧，从而能够实现处理性能的提高。通过将显示md信息计算部9和显示控制部8的组合作为md信息管理装置或信息终端装置中的某一方的构成要素，从而能够实现不被网络传输速率的高低影响的服务。

(第五实施方式)

在第一实施方式中，将购买历史信息累计在购买历史信息管理部4中，从购买历史信息管理部4取得购买历史信息，进行显示的制作。但是，暂且不说以后新开店的店铺，在已存在的店铺中，商品销售额由pos终端网络管理，从该pos终端网络取得最新的销售额数。因此，从pos终端网络取得最新的销售额数的这种方式能够显示与最新的状况相近的行动统计。

以下，说明从pos终端网络取得购买历史的情况下的结构。参照图38～图40，来说明从pos终端网络取得购买历史的情况下的信息终端装置20、md信息管理装置30的内部结构。

pos(point－of－sales)终端网络是将具备扫描码、扫描器的出纳机设备作为终端而构成的网络。该pos终端将产生销售额时的出入账登记、商品的种类和数量发送给特许加盟连锁店中心。

图38表示购买历史信息管理部4不成为md信息管理装置30的构成要素而显示md信息计算部9成为md信息管理装置30的构成要素的、md信息管理装置30的内部结构。在该内部结构中，由于显示md信息计算部9成为md信息管理装置30的构成要素，因此，md信息管理装置30的显示md信息计算部9从pos终端网络取得商品购买数，并进行变换每个货架的购买数的处理。然后，md信息管理装置30的显示md信息计算部9利用由变换得到的每个货架的购买历史和行动统计来制作显示md信息。

图39表示购买历史信息管理部4不成为md信息管理装置30的构成要素而显示控制部8、显示md信息计算部9成为md信息管理装置30的构成要素的、md信息管理装置30的内部结构。在该内部结构中也同样，由于显示md信息计算部9成为md信息管理装置30的构成要素，因此，md信息管理装置30的显示md信息计算部9从pos终端网络取得商品购买数，并进行变换每个货架的购买数的处理。然后，md信息管理装置30的显示md信息计算部9利用由变换得到的每个货架的购买历史和行动统计来进行显示md信息的制作。

图40表示购买历史信息管理部4不成为构成要素且显示控制部8、显示md信息计算部9也不成为构成要素的、md信息管理装置30的内部结构。在该内部结构中，由于显示md信息计算部9成为信息终端装置20的构成要素，因此，信息终端装置20的显示md信息计算部9从pos终端网络取得商品购买数，并进行变换每个货架的购买数的处理。然后，信息终端装置20的显示md信息计算部9利用由变换得到的每个货架的购买历史和行动统计来制作显示。

根据如上的本实施方式，在显示的计算时，由于显示md信息计算部9从pos终端网络取得购买商品的信息，并将该信息变换成每个货架的购买数从而得到购买数，因此，能够使购买数图形的显示以实际的购买数为基础。能够消除用pos终端网络和系统对购买数进行双重管理的这种浪费，能够提高系统效率。

(第六实施方式)

在第一实施方式中，用管理装置对行动统计、购买历史、店铺信息中的店铺信息进行统一管理。但是有时候，用各店铺的信息终端装置20来对店铺信息进行分散管理的这种方式更好。本实施方式就是用各店铺的信息终端装置来对店铺信息进行分散管理的情况下的实施方式。

图41表示店铺信息管理部6成为信息终端装置20的构成要素且显示控制部8、显示md信息计算部9成为md信息管理装置30的构成要素的内部结构。图42表示店铺信息管理部6、显示控制部8成为信息终端装置20的构成要素且显示md信息计算部9成为md信息管理装置30的构成要素的内部结构。图43表示店铺信息管理部6、显示控制部8、显示md信息计算部9成为信息终端装置20的构成要素的内部结构。如这些内部结构所示，在本实施方式中，店铺信息管理部6成为信息终端装置20的构成要素。

根据如上的本实施方式，能够进行关于一个店铺的本地货架布局的变更如何影响顾客的行踪的这种分析。

(第七实施方式)

在第一实施方式的图30中，用各个输入等待循环来分别受理显示对象期间、显示对象项目输入、货架图标按下，但也能够用其中一个输入等待循环来受理。本实施方式就是用一个输入等待循环来实现显示对象期间、显示对象项目输入、货架图标按下的输入等待的实施方式。

图44是店铺画面显示的处理步骤的主例程。本流程图是以图25的主流程、图28的流程为基础制作的。因此，关于与图25的流程图相同的步骤，附上相同的附图标记并省略其说明。在本流程图中，在判断是否存在与步骤s21中的请求源的店铺相对应的店铺信息之前，执行步骤s20。该步骤s20是设定默认的显示对象期间的步骤。作为默认的显示对象期间，例如设定1年这种长的期间(例如2013/01/01～2013/12/31)。由此，作为md信息取得的对象的时期范围被临时确定。之后，移动至步骤s21，执行步骤s22、步骤s23。然后，移动至步骤s24、步骤s28、步骤s82的循环。

该循环监视如下情况的成立与否：是否存在md信息的显示对象期间输入(步骤s24)；是否存在md信息的显示对象期间的设定(步骤s28)；店铺画面的特定货架图标是否被按下(步骤s82)。

如果存在md信息的显示对象项目的输入，则步骤s25成为yes，进行步骤s29～s31的处理。由此，制作与md信息的购买数、统计值相应的分等级的大小的图形并显示在店铺画面的各货架图标附近。如果存在店铺画面的特定货架图标的按下，则步骤s82成为“是”，移动至步骤s80。在步骤s80中，进行店铺画面和选择货架的md信息显示。在步骤s20中，设定有默认的显示对象期间，因此即使没有来自用户的显示对象期间的设定，也能够与md信息的显示对象项目的输入、或店铺画面的特定货架图标的按下相应地执行相应的处理。

另外，如果存在显示对象期间的设定，则步骤s24成为“是”，执行图25的步骤s25～s27的处理。由此，能够将被临时确定的显示对象期间置换为更具体的显示对象期间。

图45(a)是表示用于显示店铺画面、md信息画面的处理步骤的流程图。本流程图是以图28的流程为基础制作的。因此，对于与图28的流程图相同的步骤，附上相同的附图标记并省略其说明。

步骤s81判断输入了md信息的显示对象期间的店铺画面是否被显示，如果未被显示，则执行步骤s83～s85。由此，md信息画面被制作，并以不与辅助店铺画面的货架图标重叠的方式显示。步骤s86判断是否存在与被按下的特定货架的类别相同类别的货架。当存在的情况下，执行步骤s87～s89。由此，同一类别货架信息的一并显示按钮以不与辅助店铺画面的货架图标重叠的方式显示。图45(b)是表示md信息画面制作步骤的流程图。步骤s91规定对全部的显示对象项目反复进行步骤s92、步骤s93的处理的循环结构。在步骤s92中，从用户行动统计信息中取出显示对象项目t的值，在步骤s93中，将显示对象项目j的值(购买数、统计值)显示在显示对象项目t上。

根据如上的本实施方式，由于省略显示对象期间的设定就能够进行货架图标的选择，因此，能够进一步削减操作步骤数。

(第八实施方式)

本实施方式是将与显示md信息计算部9相当的应用、与显示控制部8相当的应用在云网上起动并从云网进行服务提供的实施方式。

图46(a)表示用于实现md信息提供的计算机系统(信息提供系统)。该计算机系统实现家电设备的md服务。该信息提供系统由多个设备组1000(包含家庭网关100、家电设备101、102……)、数据运营中心3000(包含云端服务器301、大数据存储群302)、服务提供中心2000(包含服务器200)、和信息终端装置20构成。

设备组1000是店铺内网络，由设置在店铺中的设备的集合体构成，包含家庭网关100、设备101、102……。

服务提供中心2000是对由服务提供中心进行的服务提供进行受理的窗口，受理指定了url的访问请求，并进行与用户的店铺业务直接相连的数据的管理。在该数据管理中，有用户登记。作为用户登记，有如下的方式：在店铺新开店时从用户受理用户登记，然后将进行了用户登记的用户作为md服务的会员来管理。该用户登记包含：作为md的对象的店铺信息的登记、和该用户为了成为md服务的会员的会员登记。服务提供中心2000按照这样，进行被登记的店铺信息、和通过会员登记输入的用户的登记信息的管理。在构成该服务提供中心2000的计算机中，有服务器200。服务器200用单点划线描绘，这是因为存在服务提供中心2000不具有服务器200的情况。例如，当云端服务器301进行全部的数据管理的情况下等，不需要服务器200。

数据运营中心3000是在服务提供中心的后台来执行业务的业务主体。数据运营中心3000不限于只进行数据管理或云端服务器301的运营等的公司。例如，当对设备101、102进行开发和制造的设备制造商一同进行数据管理或云端服务器301的管理等的情况下，设备制造商的计算机相当于数据运营中心3000(参照图46(b))。另外，数据运营中心3000不限于一个公司。例如，当设备制造商和另外的管理公司共同或分担地进行数据管理和云端服务器301的运营的情况下，则两者或任意一方的计算机相当于数据运营中心3000(参照图46(c))。作为另外的管理公司，有警备公司或电力运营商。

云端服务器301存在于数据运营中心3000的内部，是以不将设置于数据中心运营公司的公司内的内部网络、和公司外的互联网分隔的方式就能够访问的虚拟服务器，经由互联网与各种设备协作，从而管理大数据。

大数据存储群302由将大数据分散地存储的多个存储器构成。本实施方式中的大数据是表示用户在各店铺的各货架处采取怎样的行动的行动统计信息、和购买历史信息。

接下来，说明上述服务中的信息的流动。首先，设备组100的设备101、102每当检测出用户行动就生成行动日志，并通过云端服务器301存储在数据运营中心3000的大数据存储群302(参照箭头a1)。这里的行动日志是指，设置在店铺中的货架的周边并表示被设置的货架周边的用户行动的日志。存在行动日志经由互联网从多个家电设备101自身直接被提供给云端服务器301的情况。另外，也存在行动日志积累在家庭网关100中，并从家庭网关102被提供给云端服务器301的情况。

接着，数据运营中心3000的云端服务器301将积累的行动日志以一定的单位提供给服务提供中心2000。在该提供的单位中，考虑能够对数据中心运营公司积累的信息进行整理并提供给服务提供中心2000的单位、或是服务提供中心2000要求的单位。虽然记载为一定的单位，但也可以不是一定的，存在提供的信息量根据状况变化的情况。

行动日志通过云端服务器301的存储器，根据需要也被保存在服务提供中心2000具有的服务器200中(参照箭头b1)。然后，服务提供中心2000整理出与向用户提供行动日志的服务相适合的信息，并提供给用户。作为被整理的信息的接受方的用户，假定有使用多个家电设备101的用户aaa、和外部的用户zzz这两者。在向用户的服务提供方法中，存在如箭头f1、e1所示的提供路径。

另外，在向用户的服务提供方法中，还有如箭头c1、d1所示的提供路径，即再次经由数据运营中心3000的云端服务器301并提供给用户的这种路径。数据运营中心3000的云端服务器301具有整理成与向用户提供行动日志的服务相适合的这种功能。也存在由这样的整理功能得到的信息被提供给服务提供中心2000的情况。

图47是表示信息提供系统的网络结构的图。在本图中，作为设备组，描绘了客户专用网络1001、1002、1003、1004。另外，在图47中，作为图46所示的数据运营中心3000的具体形态描绘了云网3001，作为服务提供中心2000的具体形态描绘了服务供应商网络2001。

在隶属于作为设备组1000的客户专用网络1001、1002……1004的构成要素上，附上以1000号的附图标记为依据的100号系列的附图标记，来与其它网络的构成要素区别。

在隶属于数据提供中心2000、服务供应商网络2001的构成要素上，附上以2000号的附图标记为依据的200号系列的附图标记，来与其它网络的构成要素区别，在隶属于数据运营中心3000、云网3001的构成要素上，附上以3000号的附图标记为依据的300号系列的附图标记，来与其它网络的构成要素区别。

客户专用网络1001～1004是构成设置在信息提供服务的顾客的店铺内的设备组的专用网络。这其中，客户专用网络1001由家庭网关100、设备101、102……构成。

服务供应商网络2000是服务提供中心内的内部网络，在受理用户的登记操作时，有认证用户的正当性的认证服务器201、管理各店铺的店铺信息的店铺信息服务器202、从各店铺的pos系统取得购买历史并管理的购买历史服务器203、提供服务提供所需要的应用的应用供应商服务器204。

云网3000是通过integratedelasticcloudcomputing(iec2)架构等的采用来与数据提供中心中的服务供应商网络一体地进行处理的虚拟局域网(vlan)，由如下部分构成：云端服务器301a、b、c、d、e、f；大数据存储群302；目录服务器303，所述目录服务器303将云网中的实例的所在、以及与云端服务器连接的开关的所在与处理的请求源节点的ip地址和mac地址、处理的请求目标节点的ip地址和mac地址的组合相对应地进行管理；以及用于云端服务器之间的相互连接的开关群304。以上是网络结构的说明。接下来，说明形成云网的核心的、云端服务器的内部结构。

图48(a)表示云端服务器的内部结构。云端服务器的硬件结构包含：微处理器单元(mpu)310、随机访问存储器(ram)311、只读存储器(rom)312、图形处理器单元(gpu)313、i/o电路314、存储驱动器315、和通信硬件316。

云端服务器的程序结构是由如下部分构成的：管理程序317，所述管理程序317监视操作系统(os)，与来自终端的请求相应地进行os实例的生成，并进行os实例的状态管理；利用虚拟机管理器为各登记用户生成的按照每个用户的os实例318a、b……z(图中的用户aaa.os实例、用户bbb.os实例……用户zzz.os实例)；由os实例起动，并实现状态管理的应用319a、b……z(图中的用户aaa应用、用户bbb应用……用户zzz应用)。

用户.os实例是承担中间件的处理的程序库程序的实例。作为该程序库程序的实例，有如下的实例：与来自应用的api调用相应地描绘窗口或菜单等gui的图形渲染引擎的实例；监视针对gui的操作，如果有该操作则将表示该操作内容的事件输出的事件模块的实例；用于从网络驱动器或本地驱动器取得各种文件的网络文件系统的实例；起动应用并进行应用的状态管理的内核的实例；以及，执行用于服务器连接的各种协议的协议栈的实例。在如上的云网中，可知，承担中间件的处理的程序库程序的功能不是由信息终端装置20提供的，而是由云端服务器301提供的。

图48(b)表示应用319的内部结构。如本图所示，应用319分别包含：进行显示md信息的计算的显示md信息计算应用；和根据显示md信息制作店铺画面、辅助店铺画面、md画面的显示控制应用。

图48(c)表示信息终端装置20的硬件结构。信息终端装置的硬件结构与由微处理器单元(mpu)111、随机访问存储器(ram)112、只读存储器(rom)113、图形处理器单元(gpu)114、通信硬件115、显示面板116、触摸传感器电路117、加速度传感器电路118、磁传感器电路119、i/o电路120、存储驱动器121构成的云端服务器的硬件结构相比，不同点在于：信息终端装置20的硬件结构具备用于构筑针对用户的操作环境的显示面板16、触摸传感器电路117、加速度传感器电路118、和磁传感器电路119。在上述硬件结构中，触摸传感器电路117以光学或电气的方式检测由用户进行的触摸操作。作为该检测的一种，有表面型静电容量方式的检测。在表面型静电容量方式中，在内部具有在玻璃基板上铺设透明电极膜(导电层)并在表面叠置保护罩的这种结构。在位于玻璃基板的四角的电极上施加电压，使面板整体产生均匀的低压的电场，用面板四角测定手指触摸表面时的静电容量的变化，并确定手指的座标。由此，能够检测出触摸操作的座标。

另外，如果与云端服务器的程序结构比较，不同点在于：在云端服务器的程序结构中不存在相当于操作系统的层级，只存在浏览器程序131。该浏览器程序实现信息终端装置20的输入部1、显示部2的处理。信息终端装置20的程序结构只有浏览器是因为，其是以进行与md相关的处理的应用全部被云端服务器加载为前提的。还因为，利用应用的各种处理由云端服务器侧的用户.os实例进行，信息终端装置20只要阅读该用户os.实例的处理结果就足够了。因此，信息终端装置20的浏览器进行如下控制：将画面的制作请求事件、画面的更新请求事件发送给云端服务器上的应用，从云端服务器上的应用接收与该请求相应的画面，并显示。

与服务供应商网络的店铺信息服务器、以及购买历史服务器连接并加载md信息计算应用和显示控制应用的云端服务器构成md信息管理装置30。关于将应用和用户os实例加载到服务提供中心2000、数据运营中心3000中的哪一方，有图49(a)～(d)的变形。图49(a)～(d)表示云服务的4个类型。

在图49(a)～(d)中共同的是以下的三点。第1，应用319、用户os实例318存在于数据运营中心3000的云端服务器上；第2，如箭头321所示，从设备组100向数据中心的云端服务器301发送行动日志；第3，如箭头322所示，数据中心的云端服务器301向信息终端装置20进行信息提供。

(服务的类型1：本公司数据中心型)

图49(a)表示服务的类型1(本公司数据中心型)。本类型是如下的类型：服务提供中心2000从设备组100取得信息并对用户提供服务。在本类型中，服务提供中心2000具有数据中心运营公司的功能。即，服务供应商具有进行大数据的管理的云端服务器301。因此，不存在数据中心运营公司。

在本类型中，服务提供中心2000的数据中心运营和管理云端服务器301。另外，服务提供中心2000管理用户os实例318和应用319。服务提供中心2000利用服务提供中心2000管理的用户os实例318和应用319来进行针对用户的服务提供322。

(服务的类型2：iaas利用型)

图49(b)表示服务的类型2(iaas利用型)。在此，iaas是infrastructureasaservice的简写，是一种将用于构筑计算机系统以及使其工作的基盘本身作为经由互联网的服务来提供的云服务提供模型。

在本类型中，数据中心运营公司运营和管理数据中心301(这相当于云端服务器301)。另外，服务提供中心2000管理用户os实例318和应用319。服务提供中心2000利用服务提供中心2000管理的用户os实例318和应用319来进行针对用户的服务提供。

(服务的类型3：paas利用型)

图49(c)表示服务的类型3(paas利用型)。在此，paas是platformasaservice的简写，是一种将作为构筑软件并使其工作的基台的平台作为经由互联网的服务来提供的云服务提供模型。

在本类型中，数据中心运营中心3000管理用户os实例318，并运营和管理数据中心301(相当于云端服务器301)。另外，服务提供中心2000管理应用319。服务提供中心2000利用数据中心运营公司管理的用户os实例318和服务提供云网中心2000管理的应用319来进行针对用户的服务提供322。

(服务的类型4：saas利用型)

图49(d)表示服务的类型4(saas利用型)。在此，saas是softwareasaservice的简写。例如，是一种具备使不具有数据中心(云端服务器)的公司或个人(利用者)通过经由互联网等网络就能够使用具有数据中心(云端服务器)的平台提供者所提供的应用的这种功能的云服务提供模型。

在本类型中，数据中心运营中心3000管理应用319，管理用户os实例318，并运营和管理数据中心301(相当于云端服务器301)。另外，服务提供中心2000利用数据中心运营中心3000管理的用户os实例318和应用319来进行针对用户的服务提供322。

在以上的任一类型中，服务提供行为的主体是服务提供中心2000。另外，例如，服务供应商或数据中心运营公司也可以自行开发os、应用或大数据的数据库等，另外，也可以外包给第三方。

接下来，说明在经由云端服务器进行日志信息的收集和提供的情况下的通信序列。

图50(a)是云端服务器301和信息终端装置20的通信序列的基本情况。在图50(a)中，设备即对人传感器101进行网络连接(s501)，将行动日志发送给云端服务器301并在云端服务器301一并地进行该处理1～3。该处理1(步骤s503)、处理2(步骤504)、处理3(步骤s505)是将第一实施方式所示的多个步骤作为3个处理而提取出来进行表示的处理步骤。具体来说，将按照行动日志的行动统计的收集作为处理1，将由显示md信息计算部9进行的显示md信息的计算作为处理2，将由显示控制部8进行的店铺画面的制作和更新作为处理3。

指令的发送(s506)表示该处理1～3的处理结果。在信息终端装置20中，与被发送的指令相应地进行显示(s507)。图50(b)是图50(a)的变形，表示将由云端服务器301进行的处理1～3中的处理3在信息终端装置20的一侧来执行的序列。图50(c)是图41(a)的进一步变形，表示将由云端服务器301进行的处理1～3中的处理2、3在信息终端装置20的一侧来执行的序列。

根据如上的本实施方式，由于将相当于显示md信息计算部9的应用、或是相当于显示控制部8的应用加载到云端服务器上，在云网上进行由显示md信息计算部9进行的显示计算或是由显示控制部8进行的店铺画面的生成和更新，因此，能够实现可计测性高的md信息的提供。

此外，在第8实施方式中，优选地，专用企业网络、服务供应商网络和云网分别由数据包交换网络构成。优选地，云网在使用多协议标签交换(mpls)等3层协议而构筑的虚拟专用网络(vpn)中，由通过共同的vlan标签而被识别的虚拟存根(stub)构成。优选地，在客户的专用网络中，作为路由器或交换机发挥功能的网络节点具有使用了mpls(l3mpls)的三层通信的能力、使用了以太网(注册商标)和虚拟专用lan服务(vpls)的两层通信的能力。

另外，优选地，第8实施方式所示的云端服务器安装有自动定标器。自动定标器进行性能监视、缩放管理和实例管理。在性能监视中，收集一系列的用户os实例的性能数据，并根据基于收集到的性能数据而计算出的性能指标，计算系统性能，生成表示每1秒结束了的请求的平均数、应答时间等的指标。在缩放管理中，对弹性的请求或非弹性的请求进行应答，评价是否应该调整云网中的资源。在实例管理中，经由数据链接层的安全的平面连接与一系列的服务器os实例连接，并管理在云网中生成的服务器os实例。此外，优选地，第8实施方式的云网安装有负荷分散装置。负荷分散装置经由数据链接层的安全的平面连接与一系列的用户os实例连接，在内部服务器和/或一系列的用户os实例之间分配作业。在该分配中，例如有加权轮询、最小连接、或最快处理等。

在第8实施方式中，由于对在特许加盟连锁店的旗下的多个店铺中按照每个货架地每天积累的累计靠近时间、伸手次数、停步数、购买数进行管理，因此，其数据量非常庞大。但是，上述自动定标器或负荷分散装置与来自信息终端装置20的请求相应地，使用户os实例的生成数变化，因此，即使每天从多个店铺积累的累计靠近时间、伸手次数、停步数、购买数的量非常庞大，也能够迅速地应对来自信息终端装置20的信息提供请求。

(第9实施方式)

在第一实施方式中，使用了图形传感器作为对人传感器，而在本实施方式中，使用相位式测距传感器作为对人传感器。在相位式测距传感器中，存在测域传感器、激光测距仪。图51(a)是表示第9实施方式中的对人传感器的设置的图。

作为对人传感器的相位式测距传感器501、502、503、504、505、506安装于顶棚，通过从顶棚朝向通道进行光束扫描来形成光束的感应帘。图51(b)表示相位式测距传感器501的外观结构。在相位式测距传感器501的窗部501a设置有投光元件和受光元件的组合。方向转台501b能够调整投光元件和受光元件的组合的方位角(平移方向)、仰角(倾斜方向)。

图51(c)表示由相位式测距传感器501形成的感应帘。感应帘形成以传感器的位置为顶点、以通道为底边的三角形。感应帘的顶点的角度等于规定投光元件和受光元件的组合的扫描范围的可动角。在感应帘中，相位式测距传感器501通过受光元件接受光束的反射光。在此，如果设投光元件和受光元件之间的相位差是φ，变调频率是f、光速是c，则反射对象物的距离通过l＝φ×(c/4πf)得到。通过发光时和受光时的相位差测定到反射对象物的动作。当不存在顾客的情况下，没有遮挡货架前的感应帘的物体，因此被测定的动作是从顶点到底边的距离(到通道的距离)。

但是，如果发生了向货架的伸手，由于该手的存在，光束发生反射，因此，测定距离变得更短。将这种测定距离变短的情况考虑为发生了由顾客进行的伸手，因此，进行发生了伸手的检测。

根据如上的本实施方式，通过使用相位式测距传感器501能够适当地检测出向货架的伸手的发生。

＜备考＞

以上说明了在本发明提出申请时申请人所能够知道的最佳实施方式，关于以下所示的技术课题，能够加上进一步的改良或变更实施。是按照各实施方式所示地进行实施还是实施这些改良和变更，都是任意的，取决于实施者的主观判断，这一点望留意。

＜由md信息管理装置30进行的最适合布局提供＞

md信息管理装置30也可以根据来自信息终端装置20的请求提供最适合的货架的布局。如果从信息终端装置20发出指定了商品类别的最适合布局的阅览请求，则在md信息管理装置30的购买历史信息管理部4中，从各店铺中搜索按照每个货架被管理的购买数最大的一方，将包含搜索到的购买数的md信息、和表示该店铺的货架布局的店铺信息送回给请求源的信息终端装置20。此时，被送回的md信息也可以包含累计靠近时间、伸手次数、停步数。根据包含这些购买数、伸手次数、停步数、累计靠近时间的md信息、和店铺信息，请求源的信息终端装置20制作店铺画面、辅助店铺画面、md信息画面，将应用画面图像提供给显示。按照这样，用户能够深入地探讨为了贩卖某个种类的商品，怎样的货架布局是最合适的，另外，最合适的货架布局与自己负责的店铺中的货架布局的不同在哪里。

＜由md信息管理装置30进行的综合成绩的提供＞

md信息管理装置30也可以根据来自信息终端装置20的请求提供被管理的店铺全体的综合成绩。当发出了关于某个特定的店铺的货架的综合成绩的阅览请求的情况下，针对该商品类别的购买数，md信息管理装置30求出在系统中被管理的店铺全体中的特定种类商品的购买数的平均值，此外，计算出针对作为请求源的用户的店铺的一个货架上的该商品类别的购买数的方差、偏差值、综合排名、定额达成率。另外，计算出关于购买数以外的伸手次数、停步数、累计靠近时间的平均值、方差、偏差值、综合排名、定额达成率。将包含该关于购买数、伸手次数、停步数、累计靠近时间的平均值、方差、偏差值、综合排名、定额达成率的md信息提供给信息终端装置20，根据该md信息制作包含店铺画面、md信息画面、辅助店铺画面的应用并显示，由此，能够促进工作人员的工作热情。

＜月度图表、周度图表的显示＞

在特定货架图标的选择时，也可以将关于该货架的累计靠近时间、伸手次数、停步数、购买数的月度图表作为第一图形、第二图形制作并显示。该月度图表将显示对象期间所属的周或日作为横轴，将累计靠近时间的时长、伸手次数、停步数、购买数的次数作为纵轴。通过关于所选择的特定货架图标显示该图表，从而能够从另外的观点观察每个货架的顾客的动向。另外，也可以不是月度图表，而是周度图表、年度图表。此外，也可以将各货架的月度图表、周度图表缩略图化，合成在店铺画面中的各货架图标上。

＜检索引擎的追加＞

也可以具备关于店铺信息、货架信息、购买历史信息、行动统计信息的检索引擎。具体来说，信息终端装置20在应用画面图像中受理检索条件的输入，从由md信息管理装置30管理的店铺信息、货架信息中搜索与该检索条件一致的信息。在该搜索中，如果搜索到店铺信息、货架信息，则将关于相应的店铺信息、货架信息的行动统计的统计值、购买历史中的购买数提供给店铺画面中的图形显示，或是提供给md信息画面的数值显示。作为检索条件，可以是店铺id的输入或地区名的输入、商品类别的输入、货架的输入。另外，也可以受理货架的组合的输入，将关于包含该组合的分区的行动统计的统计值、购买历史中的购买数提供给显示。另外，也可以受理形成一个分区的货架的组合的输入，并执行包含这样的分区的货架布局的店铺是否存在的搜索。

＜货架显示的变更＞

第一实施方式的应用画面图像是在货架布局中配置图形的画面结构，但也可以是与行动统计的统计值、商品的购买数相应地将货架排序的画面结构。此外，也可以按照店铺画面的显示中的用户操作进行该排序，并显示排序后的画面。另外，也可以具备向用户提案按照统计值近的顺序排列货架的货架布局的这种功能。

＜对人传感器的变形＞

对人传感器通过图像识别来检测向货架的靠近、伸手，但不限于此，也可以通过其它手法检测向货架的靠近、向货架的伸手。虽然是原始的方法，但也可以将由发光元件和受光元件构成的遮光传感器设置在货架的两端，来检测向货架的伸手。如果顾客向货架上的商品伸手，则来自发光元件的光被遮挡，因此，能够通过该遮光检测出向商品的伸手的发生。

＜对人传感器的捕捉范围＞

在第一实施方式中，在一个货架上设置一个对人传感器来检测货架附近的用户行动，但也可以用一个对人传感器监视两个以上的货架。在该情况下，将由对人传感器得到的图像沿水平方向分割，得到两个以上的区域，将各个区域分配给多个货架中的各个货架。在分割成n个区域的情况下，在各个区域分配n个区域中的各个区域。在从左数第1个区域中分配货架3，在第2个区域中分配货架2，在第3个区域中分配货架3，按照这种规则进行分配。然后进行人体识别，通过由识别得到的人体像的座标包含在n个区域中的哪个，从而进行顾客靠近的货架、或顾客进行伸手的货架是哪个的这种识别。另外，作为对人传感器的图像传感器也可以是监视摄像机装置。

＜识别词典110d、图像识别部110f的变形＞

图4(c)中的对人传感器的构成要素(识别词典110d、图像识别部110f)也可以是多个对人传感器中共同的构成要素。具体来说，也可以用摄像机主体、通信部构成对人传感器，与对人传感器分开地在店铺内网络设置日志收集装置，并将识别词典110d、图像识别部110f作为该日志收集装置的构成要素。此外，也可以将识别词典110d、图像识别部110f作为md信息管理装置30的构成要素。

＜行动日志的发送＞

由对人传感器发送的行动日志也可以包含对人传感器拍摄的图像数据。另外，也可以包含表示由对人传感器拍摄的图像中的特征的元数据。通过在行动日志中存在该数据，能够进行用户的性别和年龄层的分析，能够进行考虑了顾客的性别、年龄层的行动统计的分析。

＜用于顾客检测的帧图像的拍摄周期＞

用于顾客检测的帧图像既可以是用动态图像拍摄得到的各个帧图像，也可以是用静态图像拍摄得到的各个帧图像。在用动态图像拍摄取得帧图像的情况下，顾客的检测周期是播放动态图像时的显示器的显示周期。例如，如果显示器的显示频率是1/23.976hz，则测定周期是1/23.976秒，如果显示频率按照场换算是59.94hz，则测定周期是1/59.94秒，如果显示频率按照场换算是50hz，则测定周期是1/50秒。

在用静态图像拍摄取得帧图像的情况下，根据对人传感器的计时器设定，确定用于顾客检测的周期。例如，如果对人传感器的计时器被设定为5秒，则对人传感器每隔5秒地进行拍摄，从而检测顾客向货架的接近的有无。

＜用户认证＞

由于md信息是与店铺营业相关的高机密性的信息，因此优选地，使信息终端装置20进行用户认证。使用信息终端装置20的用户被限定为特许加盟连锁店的监督者(在此，监督者是指，轮流地负责隶属于某个地域的多个店铺的地域单位的管理者)、特许加盟连锁店本部的工作人员、特许加盟连锁店本部直营的官方的店铺的所有者。因此，优选地，信息终端装置20的输入部进行如下认证：想要使用信息终端装置20来接受服务的用户相当于上述这些身份中的哪个。

＜检测对象的变形＞

在第一实施方式中，将向商品的伸手作为行动统计的对象，而将商品的把持不作为行动统计的对象，但也可以将商品的把持作为行动统计的对象，而将向商品的伸手不作为对象。

＜图像传感器的变形＞

作为图像传感器的对人传感器110也可以不具备方向转台等，而是固定地设置，摄像范围被固定。当摄像机主体110a固定地设置的情况下，既可以通过手动来调整摄像机的设置角度，也可以通过来自外部装置的操作改变仰角、方位角。

＜三维姿势的推定＞

在进行顾客的行动统计收集时，也可以根据由摄像机拍摄的图像数据，推定顾客的三维的姿势，将该姿势图案化，进行姿势推定或运动解析，从而分析顾客的行动。在从单眼摄像机映像进行人体的三维动作的推定中，使用概率性的维数压缩方法。使用该概率性的维数压缩方法，将把高维数的姿势空间中表现的三维的动作在低维数的潜在空间中图案化的方法作为事先的知识而取得。利用通过该事先的知识得到的动作图案，根据在以二维表现的映像中追踪的人物的关节点推定用于在三维的假想空间中表现的信息，并根据该信息，将顾客的行动种类，得到各货架处的顾客的行动统计。

＜应加载的应用＞

在第8实施方式中，信息终端装置20中的程序结构只是浏览器，但也可以在信息终端装置20中设置操作系统，通过加载显示md信息计算应用、显示控制应用这两者或者是任意一方，来使信息终端装置20具有显示控制部8、显示md信息计算部9的功能。另外，在md信息管理装置30中加载的应用也可以只是显示控制应用、显示md信息计算应用中的一方。另外，也可以都不加载。通过选择应加载的应用，能够实现图36～图43中的各种的内部结构的变形。

＜应用画面图像的变形＞

从图21到图23、从图29到图35的应用画面图像只是将各种控件(widget)组合而构筑的gui的一例而已。只要是用于促进店铺的商品贩卖的目的，各实施方式的应用画面图像可以是任何样式。具体来说，由显示控制部8显示的画面广泛包含按照以下的方针制作的gui。

i)当在店铺的货架布局的评价时想要受理某种信息要素的选择的情况下，显示控制部8将“开关按钮”、“单选按钮”、“列表框”、“滑块”、“检查框”、“微调按钮(下拉列表)”、“工具栏”、“组合框”、“图标”、“树形视图”等控件提供给显示。“开关按钮”是每次按下时状态都变化的控件。“单选按钮”是输入部1用于从多个选项中选择一个的控件。“列表框”是输入部1用于受理从列表状的项目中选择1个以上的项目的这种操作的控件。“检查框”是输入部1用于受理项目有无检查的控件。第一实施方式的md信息画面是将该列表框、检查框加以组合而制作的。“滑块”是为了根据滑块的移动设定某个值而被使用的控件。“微调按钮(下拉列表)”是与列表框类似的控件，一般时只显示所选择的项目。“工具栏”是由沿纵向或横向排成一列的按钮或图标构成的控件。第2实施方式的统合应用画面图像中的上部栏就是通过沿横向排列开关按钮而制作的。“组合框”是在文本框上追加菜单或列表框的控件。“图标”是用于表现能够单个选择的各个项目的控件。“树形视图”是表示树形结构的控件。例如，在用图标表现货架的情况下，将该货架与陈列在该货架上的多个商品之间的关系通过树形视图表现。“网格视图”是与排列相对应的表形式的控件。

ii)当在店铺的货架布局的评价时想要引导用户的操作的情况下，使用“选项卡”、“滚动条”等控件。“选项卡”是模仿文件夹的选项卡的控件，在画面上的相同区域中进行各种切换地显示。“滚动条”是为了在画面上的某个区域中显示比该区域大的大量的信息而被使用的控件。

iii)当在店铺的货架布局的评价时想要受理文本输入的情况下，使用“文本框”、“组合框”等控件。“文本框”是用于供用户输入文本(字符串)的控件。“组合框”是在文本框上追加了菜单或列表框的控件。

iv)当在店铺的货架布局的评价时将针对用户操作的应答反馈给用户的情况下，使用“标签”、“工具提示”、“气泡帮助”、“进度条”、“信息栏”等控件。

“标签”是用于显示文本的静态的控件。“工具提示”是当手指或鼠标指针指向项目时被显示的控件。“气泡帮助”是与工具提示类似的控件。“状态栏”通常位于窗口的最下部，是显示各种信息的控件。“进度条”是显示某个任务的进行状况的控件，“信息栏”是在浏览器中显示在工具栏的下方的控件。

v)当在店铺的货架布局的评价时想要显示jpeg、tiff、gif、tiff等格式的图像数据或html、xml格式的文档数据时，使用“模态窗口”、“托盘窗口”等控件。“模态窗口”是如果用户不将某个应答返回则不将控制返回给母窗口的子窗口。“对话框”是将错误信息等信息传递给用户的窗口。“托盘窗口”是表示各种功能的子窗口(也称为实用程序窗口)。在显示通过拍摄店铺内的景象而得到的图像数据、对人传感器通过拍摄货架附近而得到的图像数据、传票数据、交付数据时，显示控制部8使用“模态窗口”、“托盘窗口”等控件来将这些图像数据、传票数据、交付数据提供给显示。

＜货架图标的生成法＞

在各实施方式中，用货架图标构成店铺画面。但货架图标只是货架图标的一例而已。也可以用真实的立体形状图案来表现货架图标，从而构筑虚拟店铺图像。在该情况下，货架图标由在三维座标中规定货架形状的形状图案数据构成。

并且，信息终端装置20的显示部2针对规定货架图标的形状图案数据进行座标变换、亮度计算、纹理映射、视区变换等一系列的描画处理，使立体形状图案可视化。在此，在纹理映射中，贴附使人联想到陈列在货架上的商品的图案、字符串。由此，能够识别各货架是什么样的货架。

＜集合体的利用＞

表示行动统计的图形也可以是表示人物的集合体或动物、虚构的角色的集合体的图形。也可以通过使这些集合体中的人物、动物、角色的个数与向货架的靠近数、停步数、向商品的伸手数、购买数相应地变化，从而实现图形的显示方式的变化，并合成在店铺图像中的货架的附近。由此，关于顾客在货架附近采取了怎样的行动的行动分布以更容易判断的形式被视觉化。

＜作为程序的实施方式＞

本发明也可以构成为如下程序模块，即：通过将店铺、以及/或货架的指定作为自变量来受理，并调用所需的应用编程接口，从而返回所需的返回值(包含购买数图形、统计值图形的店铺画面的显示、md信息画面的显示)。构成该程序模块的程序代码，即，使计算机进行图24～图28、图44～图45的处理步骤的程序代码能够按照如下地制作。首先，软件开发者使用编程语言，记述实现各流程图或功能性的构成要素的源程序。在该记述时，软件开发者按照编程语言的语法，使用类结构体或变量、排列变量、外部函数的调用，记述实现各流程图或功能性的构成要素的源程序。

被记述的源程序作为文件被交给编译器。编译器对这些源程序进行翻译并生成目标程序。由编译器进行的翻译由语法解析、最适化、资源分配、代码生成等过程组成。利用代码生成而生成的程序代码如处理器的本地代码、字节代码一样，有各种种类。可以将该程序代码从应用供应商服务器提供给分散环境中的多个计算机，也可以记录在非临时性的、计算机能够读取的记录介质中来提供给用户。

工业实用性

本发明能够进行根据销售契约运营的多个店铺的管理，因此可以用于根据特许经营契约进行的店铺的发展。

附图标记的说明

1输入部

2显示部

8显示控制部

9显示md信息计算部

10信息终端装置

20md信息管理装置