一种无人售货机管理方法、装置及设备、存储介质与流程

本公开一般涉及无人售货领域，尤其涉及一种无人售货机管理方法、装置及设备、存储介质。

背景技术：

无人售货机依据其24小时营业，无需售货员等优势得到巨大发展，然而目前市场上多为封闭式无人货架，虽具有高安全性和高度智能化，然而其具有成本高，上货效率低，用户体验差，维护不便等缺点。由于控制系统故障或机械故障导致客户付款后并未货物供应，对客户体验造成严重影响，极大的降低了客户使用无人售货机的信心。

开放式无人售货机虽能解决以上问题，但依然存在自身缺点：开放式无人售货机完全依靠客户诚信运营，容易导致货物丢失等货损情况发生，即顾客并未付款却拿走商品。

技术实现要素：

鉴于现有技术中的上述缺陷或不足，期望提供一种无人售货机管理方法、装置及无人售货机，以减少开放式无人售货机的货损情况。

第一方面，本发明实施例提供一种无人售货机管理方法，包括：

获取激光传感器单元的感测信号数据及图像采集单元的采集图像，所述激光传感器单元的感测区域至少覆盖所述无人售货机的格口；

基于感测信号数据及采集图像，判断用户是否存在取货操作；

若存在，则基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

进一步，所述基于感测信号数据及采集图像，判断用户是否存在取货操作之前，还包括

基于采集图像，调取预存失信人员名单并进行对比，若判断为失信人员，则升级监控策略。

更进一步，所述升级监控策略，包括

调整图像采集单元工作模式，对失信人员进行持续图像信息采集。

进一步，所述基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理，包括

基于采集图像计算客户拿取商品对应的付款款额，判断付款款额中应付款额与实付款额是否一致，并基于判断结果对客户进行诚信管理。

进一步，所述基于采集图像计算客户拿取商品对应的付款款额，包括

对拿取商品的数量进行提取统计；

对拿取商品的特征进行提取并计算应付款额。

进一步，还包括

判断是否有客户进入无人售货机区域，若进入则唤醒激光传感器单元；和/或，

判断客户是否离开无人售货机区域，若离开则令激光传感器单元进入待机。

更进一步，所述判断是否有客户进入无人售货机区域，包括

获取红外感应单元感测无人售货机外围的感测数据；

基于感测数据，获取图像采集单元采集的进入图像采集区域的物体图像，判断是否有客户进入无人售货机区域。

第二方面，本发明实施例还提供一种无人售货机管理装置，包括：

获取模块，用于获取激光传感器单元的感测信号数据及图像采集单元的采集图像，所述激光传感器单元的感测区域至少覆盖所述无人售货机的格口；

判断模块，用于基于感测信号数据及采集图像，判断用户是否存在取货操作；

管理模块，用于在存在取货操作时，基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

进一步，所述判断模块还用于：

在基于感测信号数据及采集图像，判断用户是否存在取货操作之前，基于采集图像，调取预存失信人员名单并进行对比，若判断为失信人员，则升级监控策略。

更进一步，所述判断模块升级监控策略，包括：

调整图像采集单元工作模式，对失信人员进行持续图像信息采集。

进一步，所述管理模块，具体用于：

基于采集图像计算客户拿取商品对应的付款款额，判断付款款额中应付款额与实付款额是否一致，并基于判断结果对客户进行诚信管理。

进一步，所述管理模块基于采集图像计算客户拿取商品对应的付款款额，包括

对拿取商品的数量进行提取统计；

对拿取商品的特征进行提取并计算应付款额。

进一步，所述获取模块还用于：

判断是否有客户进入无人售货机区域，若进入则唤醒激光传感器单元；和/或，

判断客户是否离开无人售货机区域，若离开则令激光传感器单元进入待机。

更进一步，所述获取模块判断是否有客户进入无人售货机区域，包括：

获取红外感应单元感测无人售货机外围的感测数据；

基于感测数据，获取图像采集单元采集的进入图像采集区域的物体图像，判断是否有客户进入无人售货机区域。

第三方面，本发明实施例还提供一种无人售货机管理设备，包括存储器和处理器，所述存储器包含可由所述处理器执行的指令以使得所述处理器执行：

获取激光传感器单元的感测信号数据及图像采集单元的采集图像，所述激光传感器单元的感测区域至少覆盖所述无人售货机的格口；

基于感测信号数据及采集图像，判断用户是否存在取货操作；

若存在，则基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

第四方面，本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序用于：

获取激光传感器单元的感测信号数据及图像采集单元的采集图像，所述激光传感器单元的感测区域至少覆盖所述无人售货机的格口；

基于感测信号数据及采集图像，判断用户是否存在取货操作；

若存在，则基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

本发明实施例提供一种无人售货机管理方法、装置及设备、存储介质，由于激光传感器单元的感测区域至少覆盖无人售货机的格口，所以用户在伸手拿取货物时，会被感测到，此时，可以根据感测信号数据以及采集图像，来确定用户是否有拿取货物的动作，并在用户有拿取货物的动作时，结合摄像头采集的图像，进一步识别用户所拿取的货物，进而可以根据用户拿取货物的情况以及用户的付款情况，对用户的信用进行管理，从而减少开放式无人售货机的货损情况。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1为本发明实施例提供的无人售货机管理方法流程图；

图2为本发明实施例提供的无人售货机结构示意图；

图3为本发明实施例提供的无人售货机实体结构示意图

图4和图5为本发明实施例提供的无人售货机激光射线反射示意图；

图6为本发明实施例提供的另一无人售货机结构示意图；

图7为本发明实施例提供的无人售货机管理装置结构示意图；

图8为本发明实施例提供的无人售货机管理设备结构示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

请参考图1，本发明实施例提供的无人售货机管理方法，包括：

步骤s101、获取激光传感器单元的感测信号数据及图像采集单元的采集图像，激光传感器单元的感测区域至少覆盖无人售货机的格口；

步骤s102、基于感测信号数据及采集图像，判断用户是否存在取货操作；

步骤s103、若存在，则基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

由于激光传感器单元的感测区域至少覆盖无人售货机的格口，所以用户在伸手拿取货物时，会被感测到，此时，可以根据感测信号数据以及采集图像，来确定用户是否有拿取货物的动作，并在用户有拿取货物的动作时，结合摄像头采集的图像，进一步识别用户所拿取的货物，进而可以根据用户拿取货物的情况以及用户的付款情况，对用户的信用进行管理，从而减少开放式无人售货机的货损情况。

进一步，对于曾经有过失信记录的人员，可以升级监控策略，重点进行监控，此时，在步骤s102，基于感测信号数据及采集图像，判断用户是否存在取货操作之前，还包括

基于采集图像，调取预存失信人员名单并进行对比，若判断为失信人员，则升级监控策略。

其中，升级监控策略，可以包括：调整图像采集单元工作模式，对失信人员进行持续图像信息采集。

对曾经有过失信记录的人员，图像采集的频次更高，或者直接进行视频采集，从而可以更加精确的识别其拿取的商品及数量。

进一步，步骤s103中，基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理，包括

基于采集图像计算客户拿取商品对应的付款款额，判断付款款额中应付款额与实付款额是否一致，并基于判断结果对客户进行诚信管理。

其中，基于采集图像计算客户拿取商品对应的付款款额，包括：

对拿取商品的数量进行提取统计；

对拿取商品的特征进行提取并计算应付款额。

进一步，为节省无人售货机的能耗，可以在确定有客户进入售货区域时，再使得激光传感器单元开始工作，此时，该方法还包括：

判断是否有客户进入无人售货机区域，若进入则唤醒激光传感器单元；和/或，

判断客户是否离开无人售货机区域，若离开则令激光传感器单元进入待机。

其中，判断是否有客户进入无人售货机区域，可以通过获取红外感应单元感测无人售货机外围的感测数据进行判断，还可以基于红外感应单元感测无人售货机外围的感测数据，进一步获取图像采集单元采集的进入图像采集区域的物体图像，根据物体图像更精确的判断是否有客户进入无人售货机区域，避免由于猫狗老鼠等动物进入红外感应单元感测区域而进行误判。

在红外感应单元感应到有物体进入感应区域时，再开启图像采集单元进行图像采集，进而通过所采集的图像，确定有客户进入无人售货机区域。可更进一步的节省无人售货机的能耗。

若有猫鼠一类的动物进入红外感应单元的感应区域，图像采集单元开启，但通过采集的图像，检测不到人脸，则可以记录为动物进入，不进一步开启激光传感器单元。

若某区域频繁有动物进入感应区域，则可以认为该位置不适合摆放无人售货机，或者在该位置的无人售货机需要增加柜门。

若某区域频繁有动物进入感应区域，图像采集单元人脸识别失败，通过拍照上传服务器可以看到老鼠等动物，这样可以得知此位置老鼠较多，不适合摆放无人售货机，因为老鼠会毁坏商品。

对于有实体柜门的无人售货机，可以在开门时，再启动激光传感器单元和图像采集单元，从而达到节省能耗的目的。

当无人购买时，整个系统进入待机模式(mcu待机，图像采集单元不工作，通信模块断电，激光传感器单元不工作，只有红外感应单元工作，其功耗约为50ua)，红外感应单元的红外检测范围为货架周围的3到5米，当有人进入红外感应区域时，系统进入工作模式(mcu工作，图像采集单元采集图像进行人脸识别，激光传感器单元不工作，通信模块不工作)，但图像采集单元确定是人走进检测区域，而非猫鼠等动物触发红外开关时，激光传感器单元工作，通信模块初始化完成等待指令。

客户手动打开货架舱门，对商品进行挑选，通过扫码付款，取走货物然后离开，当激光传感器单元检测到客户伸手拿物品时，图像采集单元会以一定周期拍若干张照片，发送给处理器或者通过通信模块上传至服务器，处理器或服务器图像算法做人脸识别、特征提取以及客户手中商品识别，建立数据库，黑白名单管理，当处理器或服务器没有收到客户付款信息或少付款，将该客户加入黑名单，当黑名单客户再次购买商品时，图像采集单元将不再是拍照，而是录制其整个购买过程，以便后续采取追讨措施，当客户完成付款购物加入白名单，建立征信系统存档，红外感应单元检测到客户离开时购物，系统进入待机模式。

应当注意，尽管在附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。相反，流程图中描绘的步骤可以改变执行顺序。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

本发明实施例提供的无人售货机管理方法，所应用的无人售货机，如图2所示，包括柜体及开设于柜体上的格口，还包括：

设置在柜体上的至少一激光传感器单元101，激光传感器单元101的检测区域至少覆盖格口所在区域；

图像采集单元102，设置于无人售货机的柜体上，用于采集柜体内部和/或外部图像；

处理器103，连接激光传感器单元101以及图像采集单元102，用于根据激光传感器单元101感测数据并触发图像采集单元102采集图像。

由于激光传感器单元101检测区域覆盖格口所在区域，所以用户在伸手拿取货物时，会被激光传感器单元101感测到数据，此时，该无人售货机可以通过被激光传感器单元101来确定用户是否有拿取货物的动作，并在用户有拿取货物的动作时，结合图像采集单元102采集的图像，进一步识别用户所拿取的货物，进而可以根据用户拿取货物的情况以及用户的付款情况，对用户的信用进行管理，从而减少开放式无人售货机的货损情况。

图像采集单元102可以使用摄像头，也可以采用其它具有图像采集功能的设备。

处理器103可以具体采用mcu(microcontrollerunit，微控制器)。

进一步，如图3所示，激光传感器单元101可以包括激光射线发射装置1011和激光射线接收装置1012，激光射线发射装置1011发射的激光射线设置在无人售货机的前部或前方，并平行无人售货机的柜门。

如图3所示，激光射线发射装置1011和激光射线接收装置1012所设置的位置，尽量使得激光射线覆盖的面积更广，例如，可以每行货架设置一组激光射线发射装置1011和激光射线接收装置1022，或者激光射线发射装置1011和激光射线接收装置1012纵向设置，一者在下，另一者在上，使得激光射线垂直地面，每隔一段距离设置一组激光射线发射装置1011和激光射线接收装置1012，使得激光射线排布较密集，从而更好的识别用户是否有拿取货物的动作。

为了节省激光射线发射装置1011和激光射线接收装置1012的设置成本，如图4和图5所示，可以在一个无人售货机上，仅设置一组或两组激光射线发射装置1011和激光射线接收装置1012，通过反射器104对激光射线进行反射，从而通过较少的激光射线发射装置1011和激光射线接收装置1012，使激光射线获得更大的覆盖面积。

此时，该无人售货机中还包括至少一个用于改变激光射线光路的反射器104，反射器104设置在激光射线发射装置1011和激光射线接收装置1012之间。

如图4所示，反射器104沿柜体两侧的边梁设置，激光射线发射装置1011设置在无人售货机上部，激光射线接收装置1012设置在无人售货机下部；或者，

如图5所示，反射器104沿柜体两侧的边梁及柜体下横梁设置，激光射线发射装置1011和激光射线接收装置1012分别设置在无人售货机上部两角落处。

反射器104可以设置在无人售货机的整个侧壁上，也可以在每个需要反射的点设置一个反射器104。

更进一步，反射器104可以采用镜面，通过镜面反射来反射激光射线，例如，可以采用玻璃镜面或者镜面涂层，本领域技术人员也可以采用其它类型的反射器104实现对激光射线的反射。

当激光射线发射装置1011发出的激光射线射入激光射线接收装置1012时，激光射线接收装置1012输出相应电平信号，当有物体阻挡(如人手)激光射线发射装置1011发射的激光射线时，激光射线接收装置1012收不到激光射线，就会输出相反的电平信号，由于当激光射线发射装置1011和激光射线接收装置1012价格较高，为减低成本和功耗，可以采用反射方式，每台无人售货机只需要装一组(如图5所示)或者两组激光模块(如图4所示)，此时，需要在无人售货机侧壁安装平面镜反射激光射线。当然激光射线发射装置1011和激光射线接收装置1012的数量和放置位置，以及激光反射模式不局限于图4和图5中的两种模式，比如可以上下对射，网状反射，各种各样的模式都满足需求，具体可根据安装便捷性与成本等实际情况而定，只需保证客户伸手拿物品时产生触发信号。

进一步，如图6所示，为节省电量，可以在无人售货机上设置用于感测无人售货机外围环境并向处理器传送感测信号的红外感应模块105，该红外感应模块105连接处理器103，此时，处理器103可以在红外感应模块105感应到有物体进入感应区域时，触发激光传感器单元101以及图像采集单元102工作；在红外感应模块105感应到物体离开感应区域时，触发激光传感器单元101以及图像采集单元102休眠。

具体的，处理器103在红外感应模块105感应到有物体进入感应区域时，触发激光传感器单元101以及图像采集单元102工作；在红外感应模块105感应到物体离开感应区域时，触发激光传感器单元101以及图像采集单元102休眠，具体包括：

处理器103在红外感应模块105感应到有物体进入感应区域时，触发图像采集单元102采集图像，并在根据图像确定有人进入感应区域时，触发激光传感器单元101工作；

处理器103在红外感应模块105感应到物体离开感应区域时，触发激光传感器单元101以及图像采集单元102休眠。

当无人售货机包括实体柜门时，可以通过柜门的开启和关闭，来触发激光传感器单元101以及图像采集单元102的工作和休眠，此时，无人售货机还包括：

设置在格口的柜门，处理器103与柜门连接，柜门包括开启的第一位置及关闭的第二位置，在第一位置时触发激光传感器单元101及图像采集单元102的工作；在第二位置时触发激光传感器单元101及图像采集单元102的待机。

进一步，该无人售货机还包括通信单元，连接处理器103并用于与服务器进行通信。从而实现联网售卖以及联网的用户信用管理，更好的对无人售货机进行管理，避免信用不良用户分别在不同的无人售货机盗窃商品。

该无人售货机可以通过处理器103来确定用户拿取货物的情况，还可以进一步根据用户付款的情况，对用户进行诚信管理。

该无人售货机也可以将采集的图片发送给服务器，由服务器确定该用户拿取货物的情况，并根据用户付款的情况，对用户进行诚信管理。

该无人售货机也可以通过处理器103来确定用户拿取货物的情况，并将用户拿取货物的情况发送给服务器，由服务器根据用户付款的情况，对用户进行诚信管理。

该无人售货机中，可以采用bms(batterymanagementsystem，电源管理系统)进行电源管理，该系统管理及维护设备各个电池单元，不间断供电，防止电池出现过充电和过放电，延长电池的使用寿命，监控电池的状态。

mcu完成摄像头驱动、人脸识别算法以及激光模块的控制工作，可采用stm32系列，arm系列，dsp系列等微控制器。

逻辑判断、订单管理、图像算法运行、故障诊断、建立黑白名单数据库等任务可以由mcu进行，也可以通过通信模块将相关数据发送给server(服务器)，由服务器进行，此时，服务器可通过无线网络与各个无人售货机建立通信

摄像头用于采集图像、人脸识别以及客户购物记录等，摄像头视场角根据货架尺寸、现场环境信息确定，确保能覆盖客户购买区域。

如图3-图5所示的无人售货机，客户购买商品时，直接拉开柜门把手，随意对商品进行对比、挑选，可以选择购买或者放弃，无任何约束，挑选完商品后扫货架上的二维码完成付款然后离开，此种购物模式具有良好的购物体验。

本发明实施例还相应提供一种无人售货机管理装置，如图7所示，包括：

获取模块701，用于获取激光传感器单元的感测信号数据及图像采集单元的采集图像，激光传感器单元的感测区域至少覆盖无人售货机的格口；

判断模块702，用于基于感测信号数据及采集图像，判断用户是否存在取货操作；

管理模块703，用于在存在取货操作时，基于采集图像计算客户拿取商品对应的付款款额，并基于实付款额进行诚信管理。

进一步，判断模块702还用于：

在基于感测信号数据及采集图像，判断用户是否存在取货操作之前，基于采集图像，调取预存失信人员名单并进行对比，若判断为失信人员，则升级监控策略。

更进一步，判断模块702升级监控策略，包括：

调整图像采集单元工作模式，对失信人员进行持续图像信息采集。

进一步，管理模块703具体用于：

基于采集图像计算客户拿取商品对应的付款款额，判断付款款额中应付款额与实付款额是否一致，并基于判断结果对客户进行诚信管理。

进一步，管理模块703基于采集图像计算客户拿取商品对应的付款款额，包括

对拿取商品的数量进行提取统计；

对拿取商品的特征进行提取并计算应付款额。

进一步，获取模块701还用于：

判断是否有客户进入无人售货机区域，若进入则唤醒激光传感器单元；和/或，

判断客户是否离开无人售货机区域，若离开则令激光传感器单元进入待机。

更进一步，获取模块701判断是否有客户进入无人售货机区域，包括：

获取红外感应单元感测无人售货机外围的感测数据；

基于感测数据，获取图像采集单元采集的进入图像采集区域的物体图像，判断是否有客户进入无人售货机区域。

应当理解，该装置中记载的诸单元或模块与参考图1描述的方法中的各个步骤相对应。由此，上文针对方法描述的操作和特征同样适用于该装置及其中包含的单元，在此不再赘述。该装置可以预先实现在电子设备的浏览器或其他安全应用中，也可以通过下载等方式而加载到电子设备的浏览器或其安全应用中。该装置中的相应单元可以与电子设备中的单元相互配合以实现本申请实施例的方案。

下面参考图8，其示出了适于用来实现本申请实施例的终端设备或服务器的计算机系统的结构示意图。

如图8所示，计算机系统包括中央处理单元(cpu)801，其可以根据存储在只读存储器(rom)802中的程序或者从存储部分808加载到随机访问存储器(ram)803中的程序而执行各种适当的动作和处理。在ram803中，还存储有系统操作所需的各种程序和数据。cpu801、rom802以及ram803通过总线804彼此相连。输入/输出(i/o)接口805也连接至总线804。

以下部件连接至i/o接口805：包括键盘、鼠标等的输入部分806；包括诸如阴极射线管(crt)、液晶显示器(lcd)等以及扬声器等的输出部分807；包括硬盘等的存储部分808；以及包括诸如lan卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至i/o接口805。可拆卸介质811，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器810上，以便于从其上读出的计算机程序根据需要被安装入存储部分808。

特别地，根据本公开的实施例，上文参考图1描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括有形地包含在机器可读介质上的计算机程序，所述计算机程序包含用于执行图1的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分809从网络上被下载和安装，和/或从可拆卸介质811被安装。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，所述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本申请实施例中所涉及到的单元或模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中，例如，可以描述为：一种处理器包括xx单元、yy单元以及zz单元。其中，这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定，例如，xx单元还可以被描述为“用于xx的单元”。

作为另一方面，本申请还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中所述装置中所包含的计算机可读存储介质；也可以是单独存在，未装配入设备中的计算机可读存储介质。计算机可读存储介质存储有一个或者一个以上程序，所述程序被一个或者一个以上的处理器用来执行描述于本申请的公式输入方法。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离所述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。