物品处理方法、装置、介质及自动售货机与流程

本公开涉及互联网技术领域，具体地，涉及一种物品处理方法、装置、介质及自动售货机。

背景技术：

随着互联网技术的发展，自动售货机得到越来越广泛的应用。自动售货机可24小时营业，不受时间的限制，用户可随时自主选购需要的物品。自动售货机一般无人值守，用户可通过扫码、人脸识别等方式打开自动售货机的门体，取走自己想要购买的物品，自动售货机可识别用户取走的物品，并进行价格结算。由于自动售货机无人值守，即没有工作人员对其中的物品进行特别维护，因此，如何保证其中物品的正常展示和陈列是重要问题。

技术实现要素：

本公开的目的是提供一种物品处理方法、装置、介质及自动售货机，可以在自动售货机无人值守的情况下，保证自动售货机内物品的正常展示和陈列。

为了实现上述目的，第一方面，本公开提供一种物品处理方法，所述方法包括：

获取自动售货机的内部环境的第一图像；

根据所述第一图像，识别所述自动售货机内是否存在状态异常的异常物品，其中，所述状态异常包括污损或者摆放倾斜；

在识别出存在所述异常物品的情况下，输出第一提示信息，以使用户对所述异常物品进行处理。

可选地，在识别出存在所述异常物品的情况下，所述方法还包括：

获取所述自动售货机的外部环境的第二图像；

根据所述第二图像进行人脸检测；

在检测到人脸的情况下，再输出所述第一提示信息。

可选地，在输出所述第一提示信息之后，所述方法还包括：

响应于针对所述自动售货机的门体的关闭指令，获取所述自动售货机的内部环境的第三图像；

根据所述第三图像，识别所述异常物品的状态是否已恢复正常；

在识别出所述异常物品的状态已恢复正常的情况下，输出第二提示信息和/或更新最近一次打开所述门体的用户的用户属性信息。

可选地，所述第一提示信息还包括所述异常物品在所述自动售货机中的位置信息。

可选地，所述提示信息为语音提示信息。

第二方面，本公开提供一种物品处理装置，所述装置包括：

第一图像获取模块，被配置成用于获取自动售货机的内部环境的第一图像；

异常物品识别模块，被配置成用于根据所述第一图像，识别所述自动售货机内是否存在状态异常的异常物品，其中，所述状态异常包括污损或者摆放倾斜；

提示信息输出模块，被配置成用于在所述异常物品识别模块识别出存在所述异常物品的情况下，输出第一提示信息，以使用户对所述异常物品进行处理。

可选地，所述装置还包括：

第二图像获取模块，被配置成用于在所述异常物品识别模块识别出存在所述异常物品的情况下，获取所述自动售货机的外部环境的第二图像；

检测模块，被配置成用于根据所述第二图像进行人脸检测；

所述提示信息输出模块被配置成用于在所述检测模块检测到人脸的情况下，再输出所述第一提示信息。

可选地，所述装置还包括：

第三图像获取模块，被配置成用于在所述提示信息输出模块输出所述第一提示信息之后，响应于针对所述自动售货机的门体的关闭指令，获取所述自动售货机的内部环境的第三图像；

物品状态识别模块，被配置成用于根据所述第三图像，识别所述异常物品的状态是否已恢复正常；

执行模块，被配置成用于在所述物品状态识别模块识别出所述异常物品的状态已恢复正常的情况下，输出第二提示信息和/或更新最近一次打开所述门体的用户的用户属性信息。

第三方面，本公开提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本公开第一方面提供的所述方法的步骤。

第四方面，本公开提供一种自动售货机，包括：存储器，其上存储有计算机程序；处理器，用于执行所述存储器中的所述计算机程序，以实现本公开第一方面提供的所述方法的步骤。

通过上述技术方案，根据自动售货机的内部环境的第一图像，可识别自动售货机内是否存在状态异常的异常物品，其中，状态异常可包括污损或者摆放倾斜。如果识别出存在异常物品，可输出第一提示信息，该第一提示信息可用于提示用户自动售货机内存在被污损或摆放倾斜的异常物品，以使用户对异常物品进行处理。如此，在自动售货机内存在异常物品的情况下，可及时提示用户，使得用户参与对自动售货机内异常物品的处理。这样，即使自动售货机无人值守，即没有工作人员对其中的物品进行特别维护，通过用户的参与也能保证对异常物品的及时有效处理，从而保证自动售货机内物品的正常展示和陈列。

本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。

附图说明

附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：

图1是根据一示例性实施例示出的一种物品处理方法的流程图。

图2是根据另一示例性实施例示出的一种物品处理方法的流程图。

图3是根据一示例性实施例示出的一种物品处理装置的框图。

图4是根据一示例性实施例示出的一种自动售货机的框图。

具体实施方式

以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本公开，并不用于限制本公开。

图1是根据一示例性实施例示出的一种物品处理方法的流程图，该方法可应用于自动售货机、智能货柜、无人售货机等终端设备。如图1所示，该方法可包括s101～s103。

在s101中，获取自动售货机的内部环境的第一图像。

自动售货机内可设置有图像采集装置(如摄像头)，该图像采集装置可以采集自动售货机的内部环境的第一图像。其中，自动售货机内可陈列有供用户选购的各种各样的物品，该第一图像即为包含自动售货机内多个物品的图像。示例地，第一图像中可包括自动售货机内所有物品的图像。

在一可选实施方式中，图像采集装置可以每隔预设时长采集一次该第一图像，预设时长可预先设置，例如30min。

在s102中，根据第一图像，识别自动售货机内是否存在状态异常的异常物品。

用户在自主选取物品时，可能会出现将物品碰倒、弄脏等情况。该步骤中，通过对第一图像进行识别，可识别自动售货机内是否存在状态异常的异常物品。其中，状态异常可包括污损或者摆放倾斜。

示例地，如果识别出第一图像中某一区域有污迹，则该区域对应的物品则为存在污损的异常物品。示例地，自动售货机内物品一般为竖直摆放，如果识别出某一或某些物品不为竖直摆放，则可识别该物品为摆放倾斜的异常物品。

在s103中，在识别出存在异常物品的情况下，输出第一提示信息，以使用户对异常物品进行处理。

自动售货机一般无人值守，即没有工作人员特别维护自动售货机内的物品。如果识别出自动售货机内存在异常物品，为了及时对异常物品进行处理，可以输出第一提示信息。该第一提示信息可用于提示用户自动售货机内存在被污损或摆放倾斜的异常物品，以使用户对异常物品进行处理。

在一可选实施方式中，第一提示信息还可包括异常物品在自动售货机中的位置信息，该位置信息可以是异常物品在自动售货机内的陈列位置，例如在自动售货机内第几排第几列。

示例地，自动售货机中可集成有语音输出模块，如扬声器。第一提示信息可以是语音提示信息，该第一提示信息可通过自动售货机中的语音输出模块进行输出。用户在听到该第一提示信息后，可对自动售货机内的异常物品进行处理。

又示例地，自动售货机的外表面可集成有显示装置，如显示屏。第一提示信息可通过显示装置显示的方式进行输出。用户看到该第一提示信息后，可对自动售货机内的异常物品进行处理。

当然，也可同时通过显示装置和语音输出装置输出该第一提示信息，以使用户及时注意到该第一提示信息，从而及时对异常物品进行处理。

通过上述技术方案，根据自动售货机的内部环境的第一图像，可识别自动售货机内是否存在状态异常的异常物品，其中，状态异常可包括污损或者摆放倾斜。如果识别出存在异常物品，可输出第一提示信息，该第一提示信息可用于提示用户自动售货机内存在被污损或摆放倾斜的异常物品，以使用户对异常物品进行处理。如此，在自动售货机内存在异常物品的情况下，可及时提示用户，使得用户参与对自动售货机内异常物品的处理。这样，即使自动售货机无人值守，即没有工作人员对其中的物品进行特别维护，通过用户的参与也能保证对异常物品的及时有效处理，从而保证自动售货机内物品的正常展示和陈列。

图2是根据另一示例性实施例示出的一种物品处理方法的流程图，如图2所示，该方法可包括s201～s209。

在s201(101)中，获取自动售货机的内部环境的第一图像。

在s202(102)中，根据第一图像，识别自动售货机内是否存在状态异常的异常物品。在识别出存在异常物品的情况下，执行s203；在识别出不存在异常物品的情况下，返回s201。

在s203中，获取自动售货机的外部环境的第二图像。

自动售货机外部也可设置有图像采集装置，该图像采集装置可用于采集自动售货机的外部环境的第二图像，外部环境可包括自动售货机四周的环境。

在s204中，根据第二图像进行人脸检测。

本公开中，考虑到如果自动售货机周围没有用户经过，即使输出第一提示信息，可能也没有用户注意到该提示信息，因此，可选地，在识别出存在异常物品的情况下，可首先获取自动售货机的外部环境的第二图像，之后根据该第二图像进行人脸检测。

人脸检测的方式可参照本领域中人脸识别、图像识别等相关技术。该步骤中，可对第二图像进行图像识别，以检测第二图像中是否有人脸。

在s205中，判断是否检测到人脸。在是的情况下，执行s206；在否的情况下，返回s203。

在s206(103)，输出第一提示信息。

如果检测到人脸，表明自动售货机周围有用户经过，此时输出第一提示信息，周围的用户可注意到该第一提示信息，以使用户及时对异常物品进行处理。

如果未检测到人脸，表明自动售货机周围没有用户经过，即使输出第一提示信息，可能也没有用户听到或看到该提示信息，此时可暂不输出该第一提示信息，可继续获取自动售货机的外部环境的第二图像，并对第二图像进行人脸检测，在检测到人脸的情况下，再输出该第一提示信息。

在s207中，响应于针对自动售货机的门体的关闭指令，获取自动售货机的内部环境的第三图像。

在输出第一提示信息后，如果有用户听到或看到该第一提示信息，用户可能会对自动售货机内的异常物品进行处理。用户首先需要开启自动售货机的门体，示例地，用户可通过扫码或人脸识别等方式开启自动售货机的门体。在自动售货机的门体开启之后，用户可对其中的异常物品进行处理。并且，由于第一提示信息可包括异常物品在自动售货机中的位置信息，因此用户可通过该位置信息直接定位出异常物品的位置，使得用户更方便快捷地对异常物品进行处理。

用户对异常物品处理完成之后，可关闭自动售货机的门体，在响应于针对自动售货机的门体的关闭指令的情况下，自动售货机内设置的图像采集装置可采集自动售货机的内部环境的第三图像。该第三图像可包括自动售货机内所有物品的图像，或者，也可只包括异常物品的图像，本公开对此不做具体限制。

在s208中，根据第三图像，识别异常物品的状态是否已恢复正常。在是的情况下，执行s209；在否的情况下，返回s203。

第三图像中至少包括异常物品的图像，通过对第三图像进行识别，可识别异常物品的状态是否已恢复正常。示例地，如果异常物品之前存在污损，则可识别异常物品是否已不存在污损，即异常物品在第三图像中对应的区域是否已不存在污迹。如果已不存在污损，可表明异常物品的状态已恢复正常；如果仍然存在污损，可表明异常物品的状态未恢复正常，用户未对异常物品进行有效处理。

示例地，如果异常物品之前摆放倾斜，可识别异常物品的摆放角度是否已恢复正常，例如是否已竖直摆放。如果摆放角度正常，可表明异常物品的状态已恢复正常；如果仍然摆放倾斜，则异常物品的状态未恢复正常，用户并未对异常物品进行有效处理。

如果识别出异常物品的状态未恢复正常，可返回s203，获取外部环境的第二图像，之后，在检测到人脸的情况下，继续输出第一提示信息，以提示用户对异常物品进行再次处理。

在s209中，输出第二提示信息和/或更新最近一次打开门体的用户的用户属性信息。

在识别出异常物品的状态已恢复正常的情况下，可输出第二提示信息和/或更新最近一次打开门体的用户的用户属性信息。

其中，第二提示信息可用于提示用户已对异常物品进行有效处理。与第一提示信息类似，该第二提示信息可以为语音提示信息，也可通过显示装置进行显示，或者也可同时通过语音和显示装置显示的方式进行提示。

其中，最近一次打开门体的用户即为对异常物品进行处理的用户，更新该用户的用户属性信息，可以是增加该用户的账户积分等，以提高用户对异常物品处理的积极性，使得用户主动对异常物品进行有效处理，从而保证自动售货机内物品的正常展示和陈列。

如果识别出异常物品的状态已恢复正常，可输出第二提示信息和更新用户的用户属性信息中的一者或两者。当同时包括这两者时，第二提示信息中还可包括对更新用户属性信息的提示。

通过上述技术方案，在识别出自动售货机内存在异常物品的情况下，可首先获取自动售货机的外部环境的第二图像，之后根据该第二图像进行人脸检测。在检测到人脸的情况下，表明自动售货机周围有用户经过，此时再输出第一提示信息，可以使得自动售货机周围的用户及时注意到该第一提示信息，以使用户及时对异常物品进行处理。并且，在接收到针对自动售货机的门体的关闭指令后，可通过自动售货机的内部环境的第三图像，识别异常物品的状态是否已恢复正常，即识别用户是否已对异常物品进行有效处理。在识别出异常物品的状态已恢复正常的情况下，可输出用于提示用户已对异常物品进行有效处理的第二提示信息，和/或更新最近一次打开门体的用户的用户属性信息。

基于同一发明构思，本公开还提供一种物品处理装置，图3是根据一示例性实施例示出的一种物品处理装置的框图，如图3所示，该装置300可包括：

第一图像获取模块301，被配置成用于获取自动售货机的内部环境的第一图像；

异常物品识别模块302，被配置成用于根据所述第一图像，识别所述自动售货机内是否存在状态异常的异常物品，其中，所述状态异常包括污损或者摆放倾斜；

提示信息输出模块303，被配置成用于在所述异常物品识别模块302识别出存在所述异常物品的情况下，输出第一提示信息，以使用户对所述异常物品进行处理。

通过上述技术方案，根据自动售货机的内部环境的第一图像，可识别自动售货机内是否存在状态异常的异常物品，其中，状态异常可包括污损或者摆放倾斜。如果识别出存在异常物品，可输出第一提示信息，该第一提示信息可用于提示用户自动售货机内存在被污损或摆放倾斜的异常物品，以使用户对异常物品进行处理。如此，在自动售货机内存在异常物品的情况下，可及时提示用户，使得用户参与对自动售货机内异常物品的处理。这样，即使自动售货机无人值守，即没有工作人员对其中的物品进行特别维护，通过用户的参与也能保证对异常物品的及时有效处理，从而保证自动售货机内物品的正常展示和陈列。

可选地，所述装置300还可包括：

第二图像获取模块，被配置成用于在所述异常物品识别模块302识别出存在所述异常物品的情况下，获取所述自动售货机的外部环境的第二图像；

检测模块，被配置成用于根据所述第二图像进行人脸检测；

所述提示信息输出模块303被配置成用于在所述检测模块检测到人脸的情况下，再输出所述第一提示信息。

可选地，所述装置300还可包括：

第三图像获取模块，被配置成用于在所述提示信息输出模块303输出所述第一提示信息之后，响应于针对所述自动售货机的门体的关闭指令，获取所述自动售货机的内部环境的第三图像；

物品状态识别模块，被配置成用于根据所述第三图像，识别所述异常物品的状态是否已恢复正常；

执行模块，被配置成用于在所述物品状态识别模块识别出所述异常物品的状态已恢复正常的情况下，输出第二提示信息和/或更新最近一次打开所述门体的用户的用户属性信息。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图4是根据一示例性实施例示出的一种自动售货机400的框图。如图4所示，该自动售货机400可以包括：处理器401，存储器402。该自动售货机400还可以包括多媒体组件403，输入/输出(i/o)接口404，以及通信组件405中的一者或多者。

其中，处理器401用于控制该自动售货机400的整体操作，以完成上述的物品处理方法中的全部或部分步骤。存储器402用于存储各种类型的数据以支持在该自动售货机400的操作，这些数据例如可以包括用于在该自动售货机400上操作的任何应用程序或方法的指令，以及应用程序相关的数据，例如联系人数据、收发的消息、图片、音频、视频等等。该存储器402可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，例如静态随机存取存储器(staticrandomaccessmemory，简称sram)，电可擦除可编程只读存储器(electricallyerasableprogrammableread-onlymemory，简称eeprom)，可擦除可编程只读存储器(erasableprogrammableread-onlymemory，简称eprom)，可编程只读存储器(programmableread-onlymemory，简称prom)，只读存储器(read-onlymemory，简称rom)，磁存储器，快闪存储器，磁盘或光盘。多媒体组件403可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏，音频组件用于输出和/或输入音频信号。例如，音频组件可以包括一个麦克风，麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器402或通过通信组件405发送。音频组件还包括至少一个扬声器，用于输出音频信号。i/o接口404为处理器401和其他接口模块之间提供接口，上述其他接口模块可以是键盘，鼠标，按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件405用于该自动售货机400与其他设备之间进行有线或无线通信。无线通信，例如wi-fi，蓝牙，近场通信(nearfieldcommunication，简称nfc)，2g、3g、4g、nb-iot、emtc、或其他5g等等，或它们中的一种或几种的组合，在此不做限定。因此相应的该通信组件405可以包括：wi-fi模块，蓝牙模块，nfc模块等等。

在一示例性实施例中，自动售货机400可以被一个或多个应用专用集成电路(applicationspecificintegratedcircuit，简称asic)、数字信号处理器(digitalsignalprocessor，简称dsp)、数字信号处理设备(digitalsignalprocessingdevice，简称dspd)、可编程逻辑器件(programmablelogicdevice，简称pld)、现场可编程门阵列(fieldprogrammablegatearray，简称fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述的物品处理方法。

在另一示例性实施例中，还提供了一种包括程序指令的计算机可读存储介质，该程序指令被处理器执行时实现上述的物品处理方法的步骤。例如，该计算机可读存储介质可以为上述包括程序指令的存储器402，上述程序指令可由自动售货机400的处理器401执行以完成上述的物品处理方法。

在另一示例性实施例中，还提供一种计算机程序产品，该计算机程序产品包含能够由可编程的装置执行的计算机程序，该计算机程序具有当由该可编程的装置执行时用于执行上述的物品处理方法的代码部分。

以上结合附图详细描述了本公开的优选实施方式，但是，本公开并不限于上述实施方式中的具体细节，在本公开的技术构思范围内，可以对本公开的技术方案进行多种简单变型，这些简单变型均属于本公开的保护范围。

另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合，为了避免不必要的重复，本公开对各种可能的组合方式不再另行说明。

此外，本公开的各种不同的实施方式之间也可以进行任意组合，只要其不违背本公开的思想，其同样应当视为本公开所公开的内容。