本申请涉及网络领域，尤其涉及一种购物关联方法、服务器及系统。
背景技术：
无人售货店的出现引起了社会的广泛关注，其既为消费者省去了排队买单的麻烦，带来了更好的购物体验；又能为商家削减人力成本。但是目前来说，无人售货便利店技术尚不成熟，并且技术和运营成本高昂，难以和普通便利店竞争。传统的无人售货机技术虽然成熟，但是所能提供的商品种类有限，而且购物过程繁琐，使用体验有待提高。
技术实现要素：
针对当前技术中存在的问题，本申请提供了一种关联方法，包括：响应于扫描商品的标识或者响应于实施支付操作，摄取使用者的第一图像；以及将使用者的第一图像与使用者的支付信息相关联。
根据本发明的另一个方面，提出一种服务器，包括：输入设备，其经配置以接收扫描商品标识或者响应于实施支付操作时使用者的第一图像；以及处理器，其经配置以将使用者的第一图像与使用者的支付信息相关联。
根据本发明的另一个方面，提出一种系统，包括：服务器，其经配置以接收扫描商品标识或者响应于实施支付操作时使用者的第一图像；以及摄像装置，其经配置以摄取使用者的第二图像；其中第二图像包括照片或视频；其中，所述服务器经配置以比较第一图像和第二图像。
通过实施本申请中的技术方案，为用户提供了无人售货的系统和方法，既包括用于人员组成简单的环境的方案以实现购物的便捷性，也包括用于人员组成复杂的环境的方案以在实现高效购物流程的同时为商家提供了更高的商品安全性。
附图说明
参考附图示出并阐明实施例。这些附图用于阐明基本原理，从而仅仅示出了对于理解基本原理必要的方面。这些附图不是按比例的。在附图中，相同的附图标记表示相似的特征。
图1所示为根据本申请一个实施例的无人售货购物方法流程图。
图2a-2d所示为根据本申请一个实施例的无人售货购物方法中用户应用界面示意图。
图3a-3c所示为根据本申请另一个实施例的无人售货购物方法中用户应用界面示意图。
图4所示为根据本申请另一个实施例的无人售货方法流程图。
图5所示为根据本申请一个实施例的无人售货系统的架构示意图。
具体实施方式
以下将参照附图来详细描述本申请的各示例性实施例。应注意的是，除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本申请的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的，而不是作为对本申请及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它例子可以具有不同的值。
应注意的是，相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
本发明提出了一种基于无人货架的全新购物系统和购物方法，既不像无人售货便利店需要较高的技术门槛和运营成本，也不像传统的无人售货机仅能提供的很少种类商品和服务。而且，本发明的购物系统和购物方法方便快捷，用户体验极佳。
图1为根据本申请一个实施例的购物方法流程图。图2a-图2d以及图3a-图3c所示为示例性购物应用的界面示意图。如图所示，购物方法100包括如下步骤：
在步骤102，利用用户设备的扫描装置扫描货架上商品的标识。在图1所示的实例中，商品被摆放在了货架上。本文所称的货架，包括搁物架、置物台、储物柜、冷藏柜、冰箱等能够允许物品摆放或存储的物品。本发明的货架可以是封闭式，例如具有带锁的门；也可以是开放式的，允许任何人直接接触商品。
根据本发明的一种实施方式，无人售货的开放货架被放置在一个人流固定的环境中；例如，一个企业中，或者一所学校里。由于这样的环境人员组成相对简单，并且有统一的管理，即使采用无人售货的开放货架风险性也相对较低。
根据本发明一个实施例，商品的标识可以是条形码或者二维码或者其他包含例如商品名称和商品价格等信息的标识。由于很多商品在出厂时已经印刷有条形码或者二维码，即商品编码，根据本发明的一种实施方式，在步骤102中扫描商品的商品编码。商品上也可以额外粘贴、印刷、喷涂销售者的编码或类似用途的编码，即销售者编码。根据本发明的另一种实施方式，在步骤102中扫描商品的销售者编码。无论是扫描商品编码或者销售者编码都可以获得商品的信息，例如商品的名称和价格。
相比于扫描商品编码，扫描销售者编码更具优势。由于商品编码容易损坏、模糊或者褶皱，商品表面不平整，或者其他原因，扫描商品编码易于出现失败的情况。而销售者编码一般在销售之前才附加在商品上，不容易出现损坏等情况；而且销售者编码可以人为地附加在商品的平整处，而且可以做出特殊的应对不平整表面的处理，从而使得扫描的成功率大大增加。另一个扫描销售者编码的优势在于，便于与销售者的应用相关联，而使得整个购物流程更为顺畅。
根据本发明的一个实施例，用户设备可以包括手机、平板电脑、智能可穿戴设备等包括扫描装置的处理设备。扫描装置包括摄像头、扫描枪、手持扫描仪等装置。处理设备包括处理装置，例如处理器；通信装置，例如采用4G/LTE、3G、GRPS、WiFi、蓝牙通信方式的装置；以及，显示装置，例如液晶屏、OLED屏等显示装置。
根据本发明的一个实施例，用户设备上可以预先安装了用于该无人售货系统的购物应用。用户可以利用该购物应用中的扫描功能来对商品标识进行扫描，如图2a所示。在扫描商品标识后，商品名称、商品价格等相关信息会呈现在用户设备的例如显示模块上。
根据本发明的另一个实施例，可选择的，利用可获得销售者购物应用的应用扫描商品标识。举例来说，用户可以用微信、支付宝、淘宝等其他应用的扫一扫功能来扫描商品标识。在扫描后销售者的购物应用被获得并调取。图3a示出了使用微信扫一扫后调取销售者的无人售货购物应用。
在使用其他应用的情况下，扫描商品编码可能无法关联到销售者的购物应用。在销售商品之前，销售者需要在商品编码的信息库中加入自己的信息以使得扫描商品编码的时候能够关联到自己的购物应用。
根据本发明的一个实施例，本发明提出了一种将商品编码与销售者购物应用关联的方法。根据本发明的一种实施方式，在其他应用(例如微信小程序)中展示所有销售者的购物应用的列表，由用户根据货架上或其他位置提供的指示，选择商品销售者的购物应用。多个销售者购物应用可以安装如下规则中的一种或其组合展示给用户：
(1)根据购物应用销售的该种商品的销量或所有商品的总销量；
(2)根据购物应用销售的该种商品的频度或所有商品的总频度；
(3)根据货架位置附近购物应用的使用量；以及
(4)根据用户的购买历史。
根据本发明的另一种实施方式，在其他应用(例如微信)中获得用户设备的位置；将用户设备的位置与来自多个购物应用的货架的位置进行匹配；根据匹配的结果，对多个购物应用进行排序或者直接调取匹配度最高的购物应用，或者如果匹配度等于或超过预定的阈值则直接调取匹配度最高的购物应用，如果匹配度小于预定的阈值则根据匹配结果展示多个购物应用的列表以供用户选择。
在步骤104，响应于用户输入将商品的标识对应的商品加入购物车。用户设备可以接收用户输入。用户输入可以是用户在用户设备上的操作，例如点击屏幕、在屏幕上滑动、摇动用户设备等；也可以是用户发出的语音、用户的手势、用户眨眼等动作。例如，用户设备的处理模块可以根据用户输入，在销售者的购物应用中，将商品编码或者销售者编码对应的商品条目加入到购物车中。如图2(b)或图3(b)所示，用户可以点击屏幕上的“加入购物车”按钮，从而将该商品条目加入购物车中。在将商品加入购物车之后，用户可以继续选购其他商品，例如利用用户设备扫描其他商品的标识。在用户希望结束购物后，可以点击屏幕上的“前往购物车”按钮，浏览购物车中的商品清单，确认并完成支付。
在步骤106，响应于用户输入完成支付操作。用户输入的定义与步骤104相同。在扫描商品的标识后，在用户设备上向用户展示的界面“加入购物车”的按键，也包括“立即支付”的按键。如果用户不希望购买其他商品，则可以直接点击“立即支付”完成支付操作。或者，在购物车界面，用户可以点击“立即支付”，完成支付操作。
如图2(c)-(d)和图3(c)所示，用户可以点击“立即支付”按钮支付，并且可以选择支付方式。支付方式可以包括当前流行的支付宝、微信、银行卡、信用卡支付方式，也可以针对特定的单位，例如可以绑定企业或学校的饭卡，或者记账到单位，以及月结等等方式进行支付。
根据本发明的一个实施例，用户设备的处理模块接收用户的支付操作，并将支付相关的数据通过网络传输到服务器端。服务器端完成相应的支付，将支付结果返回到用户设备。由此，完成了整个购物流程。
相比于无人便利店，本发明的购物方法技术门槛不高，而且运营成本不高。相比于无人售货机，本发明的货架所能提供的商品品种多样，而且购物体验极佳。
防止商品丢失是本发明的购物方法的一个难题。针对这一问题，本发明提出了如下的一些解决方案。这些方案都可以并入本发明的上述购物方法中，从而成为本发明的方法的一部分。
根据本发明的一个实施例，获得使用者的图像并将使用者的图像与支付信息相关联。具体而言，支付信息包括使用者的账户信息、交易信息、信用信息等相关信息。根据本发明的一种实施方式，在使用者扫描商品标识的时候，利用用户设备的摄像模块可以摄取使用者的图像。使用者在扫描商品的标识后，销售者购物应用会获得商品信息，也会获得使用者的支付信息。根据使用者后续在销售者购物应用的操作，就可以知道使用者是否支付了购买商品的费用以及支付的金额。将使用者图像与销售者购物应用中获得的支付信息相关联。这种关联是识别使用者身份的基础。根据本发明的另一种实施方式，在用户进行支付操作的过程中，例如点击“立即支付”时，利用用户设备上的摄像模块摄取用户的图像。同样可以将使用者图像与销售者购物应用中获得的支付信息相关联。摄取的使用者图像可以是面部照片、全身或半身照片、或者二者。摄取的使用者图像也可以利用用户设备上的扫描设备获得的用户部分身体的三维特征，例如Face ID。用户设备摄取的使用者图像将以加密的方式发送到销售者的服务器。为了保护隐私，在服务器端用户设备摄取的使用者图像仅在无法匹配的情况下才被允许访问。
进一步地，利用购物区域的摄像装置摄取使用者的图像。根据本发明的一个实施例，货架可以被放置在一个配置有门禁装置的购物区域中。该购物区域可以是一个用户可以步入的空间，例如一个房间或者区域，也可以是一个仅用于容纳商品的容器。可选择的，利用用户设备可以扫描购物区域的标识，例如设在购物区域外、门禁装置附近的条形码或者二维码，或者用户可以在设在购物区域外的例如指纹扫描仪输入指纹信息，或接受设在图像拍摄区域中的拍摄装置为其拍照等，来提供用户身份识别信息。在通过用户身份验证以后，用户可以访问购物区域。这里所说的访问包括例如用户进入购物区域或者接触到购物区域的商品。根据本发明的一种实施方式，在用户提供识别信息时，摄取用户的图像。例如，在用户设备扫描模块扫描购物区域标识时，启动用户设备的拍摄模块(例如手机的摄像头)摄取使用者的图像，例如面部照片、全身或半身照片、或者两者。
根据本发明的另一个实施例，货架上或者附近可以设有感应装置，例如红外传感器，或者体感感应器等。当感应装置感应到有使用者进入预定的购物区域，例如进入商品摆放的区域；打开或通过商品摆放区域的通道；打开存放商品的容器；或者与商品承载装置的距离小于预定距离，例如0.5米。当使用者进入了购物区域，货架上或者附近的拍摄装置就会被启动从而摄取使用者的图像。
根据本发明的一个实施例，使用者的图像可以为使用者的面部照片、全身或半身照片、或者两者；使用者的图像也可以为一段视频，例如对用户在接下来的一段时间，例如5-10分钟的行为进行拍摄。
虽然可以通过摄像装置拍摄使用者的图像可以获取所有接近货架的人的图像，但是如何识别出未购物的人仍是困难的，尽管这更有利于找出未付款而拿走商品的人。
根据本发明的另一个实施例，在货架上安装有商品探测器。商品探测器能够探测商品位置的改变。例如，商品探测器可以是感测商品的红外探测器、激光探测器、感应探测器。一旦商品的位置被改变，例如被拿起或者放下，商品位置探测器就可以向外发出信号。或者商品探测器能够探测接近商品的物体。例如，商品探测器可以是在货架、商品或者其附近空间的红外探测器、激光探测器、感应探测器。一旦有使用者的手伸入这些空间或者区域，商品探测器就可以向外发出信号。根据本发明的另一种实施方式，商品探测器是朝向货架或者商品的摄像装置。摄像装置利用人工智能识别货架上的商品，并且响应于所拍摄图像中商品位置的改变，例如商品拿起或放下；或者，物体进入商品附近的空间，例如使用者的手伸向商品，向外发出信号。响应于商品探测器发出的信号，摄像装置就会被启动从而摄取使用者的图像。根据本发明的一个实施方式，从商品探测器发出信号到拍摄使用者图像之间的响应时间小于1秒，0.5秒，或0.3秒。由于短的响应时间，商品位置的改变和使用者的图像可以相互关联。
根据本发明的一个实施例，使用者的图像可以为使用者的面部照片、全身或半身照片、或者两者；使用者的图像也可以为一段视频，例如对用户在接下来的一段时间，例如5-10分钟的行为进行拍摄。
根据本发明的一种实施方式，货架上或者购物区域中可以包括多个摄像装置。与使用者的位置最为相关的摄像装置启动器摄取使用者的图像。
进一步地，通过比较使用者支付信息关联的图像与购物区域获得的使用者图像即可以帮助识别出未付款的用户。具体而言，如果二者匹配，则可以认为使用者实施了支付。进一步地，还可以将使用者拿到的商品与支付信息进行比较，从而确认用户是否正确实施了支配。
以下通过一些具体的实例说明本发明的方案。使用者通过扫描门禁上的二维码被允许进入购物区域，在扫描二维码时，购物区域的摄像装置摄取了使用者的图像。使用者在支付时，通过用户设备也获得使用者图像。将二者匹配就能够了解哪些被允许进入购物区域的使用者未进行支付。利用人工智能对购物空间的视频进行分析，可以找出哪些使用者未拿取商品。这样就可以确定为支付的使用者。再一个例子，使用者打开存放商品的容器时，购物区域的摄像装置摄取了使用者的图像。通过与使用者支付时图像的比较，也可以了解哪些打开容器的使用者未进行支付。再一个例子，在用户拿起商品时，响应于商品探测器摄取了用户的图像。商品探测器并未检测到商品被放下。通过与使用者支付时图像的比较，也可以了解哪些使用者拿取了商品未进行支付。进一步地，将使用者拿取的商品与使用者的支付信息比较久可以了解使用者是否正确实施了支付。本领域技术人员应当理解，以上仅仅是通过一些实例来说明本发明的方案，其他与此类似的方式也同样在本发明的范围之内。
可选择的，当用户设备与无人售货系统之间的距离大于预设数值的时候，用户设备通信模块从服务器接收提醒信息，提醒用户及时支付货款。可选择的，在用户没有实施支付的情况下，用户设备的例如通信模块将用户设备的位置发送给无人售货系统服务器。在有些时候，用户可能会在扫描了商品并获取了商品以后忘记付款，上述步骤可以提醒用户付款。如果开放货架是设置在特定的单位，如果用户最终没有付款，无人售货系统可以将该笔货款直接计入该单位的名下，可以在预定的时间统一与该单位结清账款。
根据本发明的一个实施例，上述方法可以结合以提供更好的识别结果。图4所示是根据本发明的一个实施例的使用者识别方法的流程图。如图所示，使用者识别方法包括如下步骤：在步骤402，响应于使用者进入货架的购物区域，例如距离货架小于0.5米，利用货架或其附近的摄像装置摄取使用者的图像。摄取使用者的图像包括面部图像和/或全身或半身图像。在步骤404，响应于商品位置的改变，利用货架或其附近的摄像装置摄取使用者的图像。例如，商品探测器发现商品位置的改变，则利用货架上的摄像装置摄取使用者的图像。在步骤406，响应于用户的支付操作，利用用户设备摄取用户的图像。例如，在用户完成支付的过程中或者用户完成支付操作后，摄取用户的面部和/或全身或半身图像。在步骤408，比较来自用户设备和货架及其附近的摄像装置所摄取的图像。根据比较的结果，识别未付款的使用者。
图5所示为根据本申请一个实施例的无人售货系统的架构示意图。图5所示的系统可以用来实施以上的购物方法。根据本发明的一个实施例，该系统可以包括货架501，包括搁物架、置物台、储物箱或者冰箱等。该系统还可以包括服务器502，其可以与用户设备通信。
根据本发明的一个实施例，服务器包括输入设备和处理器。输入设备接收扫描商品标识或者响应于实施支付操作时使用者的图像。处理器用来将使用者的第一图像与使用者的支付信息相关联。如上所述，支付信息包括使用者的账户信息、交易信息、信用信息。
根据本发明的一个实施例，该系统还可以包括配有门禁装置的购物区域，例如房屋、箱体等等。根据本发明的一个实施例，该系统还可以包括设置在购物区域或其附近的一个或多个摄像装置。购物区域的一个或多个摄像装置用于摄取使用者的图像，其包括照片或视频。进一步地，服务器(或处理器)用来比较来自用户设备的使用者图像和来自购物区域摄像装置的使用者图像，帮助识别出未付款的用户。具体而言，如果二者匹配，则可以认为使用者实施了支付。进一步地，还可以将使用者拿到的商品与支付信息进行比较，从而确认用户是否正确实施了支配。
根据本发明的一个实施例，该系统还可以包括销售者标识。使用者扫描该标识以提供使用者信息。或者，该系统还可以包括指纹输入装置，用来接收使用者输入的指纹。或者，该系统还可以包括语音输入装置，用来接收使用者输入的语音。利用指纹输入装置和语音输入装置，也可以提供使用者的信息。响应于使用者提供使用者信息，购物区域的摄像装置可以摄取使用者的图像。
根据本发明的一个实施例，该系统还可以包括设置在货架501上或者附近的一个或多个感应装置503，例如红外传感器，或者体感传感器等。感应装置503用来探测图像拍摄区域内是否有使用者；使用者是否靠近商品摆放区域；使用者是否打开门进入或通过商品摆放空间的通道；或者使用者打开存放商品的容器，例如货柜。感应装置503可以被配置为检测货架501附近一定区域中，例如货架周围0.5米左右的区域中是否有用户。
根据本发明的另一个实施例，在货架上安装有商品探测器504。商品探测器504能够探测商品位置的改变或者物体进入货架或商品附近空间。例如，商品探测器504可以是感测商品的红外探测器、激光探测器、感应探测器。一旦商品的位置被改变，例如被拿起或者放下，商品位置探测器504就可以向外发出信号。或者商品探测器504能够探测接近商品的物体。例如，商品探测器可以是在货架、商品或者其附近空间的红外探测器、激光探测器、感应探测器。一旦有使用者的手伸入这些空间或者区域，商品探测器就可以向外发出信号。根据本发明的另一种实施方式，商品探测器504是朝向货架或者商品的摄像装置。摄像装置利用人工智能识别货架上的商品，并且响应于所拍摄图像中商品位置的改变，例如商品拿起或放下；或者，物体进入商品附近的空间，例如使用者的手伸向商品，向外发出信号。响应于商品探测器发出的信号，摄像装置就会被启动从而摄取使用者的图像。
进一步地，服务器(处理器)可以根据比较的结果识别使用者是否实施了支付或者使用者是否实施正确实施了支付。响应于使用者未支付或为正确支付，服务器(处理器)可以发出指令，向使用者发送提示信息。可选择的，在用户没有实施支付的情况下，用户设备的例如通信模块将用户设备的位置发送给无人售货系统服务器。服务器的输入装置接收未支付或未正确支付的使用者的用户设备位置信息。
以上应用了具体示例对本申请进行阐述，只是用于帮助理解本申请，并不用以限制本申请。对于本申请所属技术领域的技术人员，依据本申请的思想，还可以做出若干简单推演、变形或替换。