一种无人超市货架监控系统及其控制方法与流程

文档序号:17628735发布日期:2019-05-10 23:56阅读:539来源:国知局
一种无人超市货架监控系统及其控制方法与流程

本发明涉及自动售货领域,更具体地说,它涉及一种无人超市货架监控系统及其控制方法。



背景技术:

随着技术上的革新及人民消费方式的不断升级,市场上逐渐产生了多种多样的无人售货方式。比如,无人货架指用一个货架,放一些吃的喝的东西,贴上二维码,先付钱再出货,全凭自觉,无人自售。这无人货架并不是最新概念,在很早之前就已经问世的自动售卖机,常见于地铁站,办公室,学校等地方,其实就是无人售货。无营业员超市,又称为无人超市。负责收钱的不是营业员,而是一个保险箱或者投币盒。顾客选购商品后,按照上面的标价把钱投到保险箱或者投币盒,一笔生意就完成了。

在公告号为cn207895532u的中国专利中公开了一种具有报警功能的无人货架,无人货架包括货架本体及控制系统;控制系统包括压力传感器、报警装置及控制中心,货架本体的正面设有至少一货架排,货架排上设有至少一货物放置区,每个货物放置区的前方设有与相关货物相对应的待扫描码,每个货物放置区的底部设有对应的压力传感器,控制中心上设有与移动终端通信连接的无线接收端,控制中心分别与压力传感器及报警装置电连接;当未经移动终端扫描待扫描码付款而直接拿走货物时,压力传感器检测到这一信号并传送至控制中心,控制中心启动报警装置进行报警动作。该实用新型提供了一种具有报警功能的无人货架,能够基本解决商品盗损率的问题,从而给无人货架的市场推广带来便利。某种程度上也可以起到监控剩余物品数量的作用。但因为每个货物放置区的底部都要设有对应的压力传感器布设,使其面临着电路布设复杂、成本大的技术问题。



技术实现要素:

针对现有技术存在的不足,本发明的目的一在于提供一种无人超市货架监控系统的控制方法,可以实现对货架上剩余物品数量进行精准的数量监控,并能及时地向管理员发起补货提醒,且布设简单、成本较低。

为实现上述目的一,本发明提供了如下技术方案:

一种无人超市货架监控系统的控制方法,所述方法包括:

所述拍摄装置开机后执行预设的拍照程序,进行照片拍摄并将其拍摄的照片上传至与其通信连接的一后台服务器,所述拍摄装置在校验到上传照片成功后自动关机;

所述后台服务器对所述拍摄装置拍摄的照片进行存储;

所述后台服务器对存储的最新的一张照片进行图像识别,当识别出货架上的物品数量少于预设数量后,所述后台服务器向与其通信连接的一管理终端发送补货提醒信息;

所述拍摄装置内置的一rtc闹钟每间隔一预设待机时间间隔后重新唤醒所述拍摄装置,所述无人超市货架监控系统再按上述顺序重复上述方法步骤。

通过采用上述技术方案,实现了超低功耗的货架物品数量监控,并具有补货提醒功能;平时的时候拍摄装置是关机状态的,不耗电,只有rtc闹钟用单独的纽扣电池来供电保持运转,功耗很低,当到达预设待机时间间隔后rtc闹钟唤醒拍摄装置开机,拍摄装置按预设的程序进行拍照并上传,通过后台服务器来识别数量,生成相应的数量报表,而当对应类别的物品数量低于预设值时再发送给管理终端,提醒管理员来及时补货,实现物联网监控化、精准识别;在布设拍摄装置的时候,只需将其安装在货架的对面并朝向货架即可,不需额外的货架布线,非常便捷且节约成本。拍摄装置的外壳只有一个普通手机大小,并通过锂电池供电,定时充电即可。

进一步的,在对所述拍摄装置设置启动设置时,所述方法还包括:

所述拍摄装置发出热点,在用户终端连接所述热点后,通过用户终端的终端界面设置所述启动设置;

通过用户终端的终端界面输入的wifi账号、密码和所述预设待机时间间隔的启动设置,并经用户终端连接的热点传输给拍摄装置;

拍摄装置根据接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器的网络连接;

拍摄装置根据接收到的所述预设待机时间间隔设定到所述rtc闹钟内,所述rtc闹钟通过每间隔所述预设待机时间间隔便唤醒所述拍摄装置开机。

通过采用上述技术方案,在拍摄装置初次使用、或者在恢复出厂设置后打开的时候,需要对其进行设置调试,通过用户终端与其用热点连接后,用户终端通过app即可对拍摄装置的参数进行设定,一个是选择一个合理的间隔时间,时间越长越节能,但就不能及时地更新货架物品数量,一般可以选择20分钟或1个小时的间隔,在拍摄装置拍摄完后就进行关机,等待rtc闹钟下一次唤醒开机。

进一步的,在所述拍摄装置开机后执行预设的拍照程序之前,所述方法还包括:

所述拍摄装置上设置的一红外传感器感应其前方是否有人体遮挡,当所述红外传感器检测到前方有人体遮挡时,所述拍摄装置暂停拍摄照片的程序,等到所述红外传感器检测到前方没有人体遮挡时,再继续执行预设的拍照程序。

通过采用上述技术方案,避免了在有人站在货架前会遮挡住摄像头的镜头,导致拍摄的照片是无效的,识别出无效的货物数量,引起报表数据的错误,所以通过上述技术的设置,只要有人在的时候先暂停,等人走后再拍摄,能准确拍摄到货架完整的原貌,使得货物数量识别更加准确。避免误报的问题。

进一步的,在所述拍摄装置开机后执行预设的拍照程序之前,所述方法还包括:

所述拍摄装置上设置的一超声波传感器感应其前方是否有人体遮挡,当所述超声波传感器检测到前方有人体遮挡时,所述拍摄装置暂停拍摄照片的程序,等到所述超声波传感器检测到前方没有人体遮挡时,再继续执行预设的拍照程序。

通过采用上述技术方案,避免了在有人站在货架前会遮挡住摄像头的镜头,导致拍摄的照片是无效的,识别出无效的货物数量,引起报表数据的错误,所以通过上述技术的设置,只要有人在的时候先暂停,等人走后再拍摄,能准确拍摄到货架完整的原貌,使得货物数量识别更加准确。避免误报的问题。

进一步的,在所述拍摄装置将其拍摄的照片上传至与其通信连接的一后台服务器时,所述方法还包括:

所述拍摄装置同时将其设备号与所述照片相绑定一起发送至所述后台服务器,所述设备号与所述拍摄装置所在地理位置、货架号信息相绑定;

在后台服务器对存储的最新的一张照片图像识别出货架上的物品的类别及对应类别物品的剩余数量,当其中一类或多类物品剩余数量少于预设数量后,该类的物品处于缺货状态,后台服务器读取与该张照片相绑定的拍摄装置的设备号,并根据所述设备号搜索出在后台服务器内部存储的与该设备号相绑定的所述拍摄装置所在地理位置、货架号信息,后台服务器将所述拍摄装置所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量打包成所述补货提醒信息,后台服务器再将所述补货提醒信息发送至所述管理终端处。

通过采用上述技术方案,管理员通过打包发送来的所述拍摄装置所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量的补货提醒信息,即可快速知道缺货的物品及数量,做好准备,且在送货、补货的时候可以准确补充到对应的货架,方便送货,这个对于连锁型的营业点来说补货提醒就非常便捷、精准,方便查看。

进一步的,所述拍摄装置上设置有独立供电的红外传感器,在所述拍摄装置关机的状态下,所述方法还包括:

所述拍摄装置上设置的红外传感器实时监测其前方是否有人体遮挡,当所述红外传感器检测到前方有人体遮挡时,并在等到所述红外传感器检测到前方再次没有人体遮挡时唤醒所述拍摄装置开机,执行预设的拍照程序。

通过采用上述技术方案,这个是应对货架使用频次高或销售量大的场所,货物上的货物容易快速销售完,另外还有那种某个时间段集中消费人群来的情景,比如早中晚饭的1个小时内,会突然后大量的人来消费,就需要更加快速、准确的识别货物有没有缺,还有多少,及时提醒管理员来完成补货,为后面的销售更加顺畅,提高消费者的体验,所以我们一般预设货物剩余数量可能不是0的时候,可能是5个的时候就发补货提醒;为了应对这种需求,我们抓住一个特征,货物之所以减少是人们来货架前消费,人来货架前遮挡住红外传感器后一般离开后就完成了消费,货物会减少,所以我们一方面设置有个较长周期的预设待机时间间隔来定时拍照,比如3个小时,然后在此基础上,当有人来货架前遮挡住红外传感器、再离开后,就触发并唤醒拍摄装置对货架进行抓拍,及时了解到货物的剩余数量。管理员也可以更加及时地了解到货架的剩余数量,且也实现了较大程度上的节能。人少的时候不用还是按着很短的间隔去拍照,所以起到了较大的节能效果。

针对现有技术存在的不足,本发明的目的二在于提供一种无人超市货架监控系统,可以实现对货架上剩余物品数量进行精准的数量监控,并能及时地向管理员发起补货提醒,且布设简单、成本较低。

为实现上述目的二,本发明提供了如下技术方案:

一种无人超市货架监控系统,包括拍摄装置、后台服务器和管理终端;

所述拍摄装置包括处理模块一以及与所述处理模块一相耦接的拍摄单元、rtc闹钟、通信模块一;

所述后台服务器包括处理模块二以及与所述处理模块二相耦接的通信模块二、存储模块、图像识别模块;

所述管理终端包括处理模块三以及与所述处理模块三相耦接的显示单元、通信模块三;

通信模块二与通信模块一、通信模块三相通信连接;

所述拍摄装置开机后,处理模块一执行预设的拍照程序,以控制拍摄单元进行照片拍摄,处理模块一将拍摄单元拍摄的照片通过通信模块一与通信模块二之间的通信连接发送至所述后台服务器处,并经处理模块二将通信模块二接收到的照片存储在与其耦接的存储模块;

图像识别模块再通过对存储模块存储的最新的一张照片进行图像识别,当识别出货架上的物品数量少于预设数量后,所述处理模块二通过通信模块二与通信模块三之间的通信连接向管理终端发送补货提醒信息;

通信模块三在接收到补货提醒信息后,所述管理终端的处理模块三将补货提醒信息传输显示于所述显示单元上;

而所述拍摄装置的处理模块一在校验到上传照片成功后自动关机;

所述拍摄装置内置的rtc闹钟每间隔一预设待机时间间隔后重新唤醒所述拍摄装置,所述无人超市货架监控系统再按上述顺序重复上述方法步骤。

通过采用上述技术方案,实现了超低功耗的货架物品数量监控,并具有补货提醒功能;其中后台服务器将接收到的照片先存到存储模块再调用现有技术中成熟的图像识别功能完成数量、种类识别,容易对接。

进一步的,输送系统还包括一用户终端,所述通信模块一为与所述处理模块一相耦接的wifi模块;

在对所述拍摄装置设置启动设置时,处理模块一控制所述wifi模块发出热点,在用户终端连接所述热点后,通过用户终端的终端界面设置所述启动设置;

通过用户终端的终端界面输入的wifi账号、密码和所述预设待机时间间隔的启动设置,并经用户终端连接的热点传输给所述wifi模块;

拍摄装置根据所述wifi模块接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器的网络连接;

拍摄装置的处理模块一根据所述wifi模块接收到的所述预设待机时间间隔设定到所述rtc闹钟内,所述rtc闹钟通过每间隔所述预设待机时间间隔便唤醒所述拍摄装置开机。

通过采用上述技术方案,现在使用的移动终端最多的就是手机了,而手机接收wifi和使用热点都需经过wifi模块,相当于无线网卡;通过这种途径,可以通过用户终端告知拍摄装置需要连接的网络的wifi账号、密码,完成网络的连接,数据上网,同时热点数据传输这种便捷传输的途径可以,方便快捷的在用户终端的终端界面上完成所述启动设置的配置。

进一步的,所述拍摄装置还包括一正对着所述拍摄单元前方的红外传感器,

所述拍摄装置开机后,所述处理模块一在执行预设的拍照程序之前,所述红外传感器先感应其前方是否有人体遮挡,当所述红外传感器检测到前方有人体遮挡时,所述处理模块一暂停拍摄照片的程序,等到所述红外传感器检测到前方没有人体遮挡时,再继续执行预设的拍照程序。

通过采用上述技术方案,避免了在有人站在货架前会遮挡住摄像头的镜头,导致拍摄的照片是无效的,识别出无效的货物数量,引起报表数据的错误,所以通过上述技术的设置,只要有人在的时候先暂停,等人走后再拍摄,能准确拍摄到货架完整的原貌,使得货物数量识别更加准确。避免误报的问题。

进一步的,在所述拍摄装置将其拍摄的照片上传至与其通信连接的一后台服务器时,所述处理模块一同时将其设备号与所述照片相绑定一起发送至所述后台服务器,所述设备号与所述拍摄装置所在地理位置、货架号信息相绑定;

在后台服务器对存储的最新的一张照片图像识别出货架上的物品的类别及对应类别物品的剩余数量,当其中一类或多类物品剩余数量少于预设数量后,该类的物品处于缺货状态,后台服务器的处理模块二读取与该张照片相绑定的拍摄装置的设备号,并根据所述设备号搜索出在存储模块存储的与该设备号相绑定的所述拍摄装置所在地理位置、货架号信息,处理模块二将所述拍摄装置所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量打包成所述补货提醒信息,后台服务器的通信模块二再将所述补货提醒信息发送至所述管理终端处。

通过采用上述技术方案,管理员通过打包发送来的所述拍摄装置所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量的补货提醒信息,即可快速知道缺货的物品及数量,做好准备,且在送货、补货的时候可以准确补充到对应的货架,方便送货,这个对于连锁型的营业点来说补货提醒就非常便捷、精准,方便查看。

与现有技术相比,本发明的优点是:

(1)通过拍摄装置拍照、上传及后台服务器的分析、以及rtc闹钟的定时唤醒拍摄装置,实现了超低功耗的货架物品数量监控,并具有补货提醒功能,实现物联网监控化、精准识别;在布设拍摄装置的时候,只需将其安装在货架的对面并朝向货架即可,非常便捷且节约成本;

(2)当所述红外传感器检测到前方有人体遮挡时,所述拍摄装置暂停拍摄照片的程序,等到所述红外传感器检测到前方没有人体遮挡时,再继续执行预设的拍照程序,能准确拍摄到货架完整的原貌,使得货物数量识别更加准确,避免误报的问题。

附图说明

图1为实施例的无人超市货架监控系统的连接示意图;

图2为实施例的处理模块一的电路连接简图;

图3为实施例四的拨码开关、p沟道mos管q3、p沟道mos管q2、npn三极管q1之间连接的电路图;

图4为实施例四的rtc闹钟的电路图;

图5为实施例四的dc-dc同步降压转换器的电路图;

图6为实施例四的处理器的电路图。

附图标记:1、拍摄装置;11、处理模块一;12、拍摄单元;13、rtc闹钟;14、通信模块一;15、红外传感器;2、后台服务器;21、处理模块二;22、通信模块二;23、存储模块;24、图像识别模块;3、管理终端;31、处理模块三;32、显示单元;33、通信模块三;4、用户终端;5、处理器;6、dc-dc同步降压转换器;7、延迟电路。

具体实施方式

下面结合附图和实施例,对本发明进行详细描述。

应理解,可以硬件、软件、固件、中间件、微码或其任何组合来实施本文中所描述的实施例。对于硬件实施方案来说,处理器可实施于以下各项内:一个或一个以上专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理装置(dspd)、可编程逻辑装置(pld)、现场可编程门阵列(fpga)、处理器、控制器、微控制器、微处理器、经设计以执行本文中所描述的功能的其它电子单元,或其组合。

当实施例是以软件、固件、中间件或微码、程序代码或码段实施时,其可存储于例如存储组件的机器可读媒体中。码段可表示过程、函数、子程序、程序、例程、子例程、模块、软件包、类,或指令、数据结构或程序语句的任何组合。可通过传递及/或接收信息、数据、自变量、参数或存储器内容而将一码段耦合到另一码段或硬件电路。可使用任何合适方式(包括存储器共享、消息传递、令牌传递、网络发射,等等)而传递、转发或发射信息、自变量、参数、数据,等等。

对于软件实施方案来说,本文中所描述的技术可使用执行本文中所描述的功能的模块(例如,程序、函数,等等)来实施。软件代码可存储于存储器单元中且由处理器执行。存储器单元可实施于处理器内或处理器外部,在后一状况下,存储器单元可经由此项技术中已知的各种方式而通信地耦合到处理器。

实施例一,如图1所示,一种无人超市货架监控系统的控制方法,所述方法包括:

步骤一,在初次使用或恢复出厂设置时,需要对拍摄装置1设置启动设置,拍摄装置1开机后自动发出热点,在用户终端4连接热点后,通过用户终端4的终端界面设置启动设置;

通过用户终端4的终端界面输入的wifi账号、密码和预设待机时间间隔的启动设置,并经用户终端4连接的热点传输给拍摄装置1;

拍摄装置1根据接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器2的网络连接;

拍摄装置1根据接收到的预设待机时间间隔设定到rtc闹钟13内;

步骤二,rtc闹钟13在设定好预设待机时间间隔后持续运行,并每间隔预设待机时间间隔便唤醒拍摄装置1开机;

步骤三,在设置过拍摄装置1的启动设置后,后续只要拍摄装置1被激活开机后就自动执行预设的拍照程序;

步骤四,在拍摄装置1拍照之前,拍摄装置1上设置的一红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,拍摄装置1暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序;

步骤五,拍摄装置1拍摄好照片后将其设备号与照片相绑定,再将绑定有设备号的照片上传至与其通信连接的一后台服务器2,拍摄装置1在校验到上传照片成功后自动关机,等待下次被rtc闹钟13,然后重复步骤二到步骤五;

步骤六,后台服务器2对通过公网传输来的拍摄装置1拍摄的照片进行存储;

步骤七,在后台服务器2对存储的最新的一张照片进行图像识别,识别出照片中货架上的物品的类别及对应类别物品的剩余数量,当其中一类或多类物品剩余数量少于预设数量后,该类的物品处于缺货状态;

步骤八,对于处于缺货状态的物品类别,后台服务器2读取与该张照片相绑定的拍摄装置1的设备号,后台服务器2内存储有所有拍摄装置1的所在地理位置、货架号信息并与其设备号相对应,后台服务器2根据缺货的设备号搜索出对应的拍摄装置1所在地理位置、货架号信息,后台服务器2将拍摄装置1所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量打包成补货提醒信息,后台服务器2再将补货提醒信息发送至管理终端3处;

步骤九,管理员在通过管理终端3查看到后台服务器2发送来的打包的补货提醒信息,根据所述补货提醒信息中缺货类别的物品的剩余数量准备相应数量的货品,并及时到补货提醒信息中对应的货架将货品补充上去。

上述设备号与照片的绑定方法可以为:将所述设备号直接命名在所述照片的名称里。

通过采用上述方法步骤,实现了超低功耗的货架物品数量监控,并具有补货提醒功能。平时的时候拍摄装置1是关机状态的,不耗电,只有rtc闹钟13用单独的纽扣电池来供电保持运转,功耗很低。当到达预设待机时间间隔后rtc闹钟13唤醒拍摄装置1开机,拍摄装置1按预设的程序进行拍照并上传,通过后台服务器2来识别数量,生成相应的数量报表,而当对应类别的物品数量低于预设值时再发送给管理终端3,提醒管理员来及时补货,实现物联网监控化、精准识别;在布设拍摄装置1的时候,只需将其安装在货架的对面并朝向货架即可,不需额外的货架布线,非常便捷且节约成本。拍摄装置1的外壳只有一个普通手机大小,并通过锂电池供电,定时充电即可。

在拍摄装置1初次使用、或者在恢复出厂设置后打开的时候,需要对其进行设置调试,通过用户终端4与其用热点连接后,用户终端4通过app即可对拍摄装置1的参数进行设定,一个是选择一个合理的间隔时间,时间越长越节能,但就不能及时地更新货架物品数量,一般可以选择20分钟或1个小时的间隔,在拍摄装置1拍摄完后就进行关机,等待rtc闹钟13下一次唤醒开机。

为了避免在有人站在货架前会遮挡住摄像头的镜头,导致拍摄的照片是无效的,识别出无效的货物数量,引起报表数据的错误,所以通过上述红外传感器15的感应技术的设置,只要有人在的时候先暂停,等人走后再拍摄,能准确拍摄到货架完整的原貌,使得货物数量识别更加准确。避免误报的问题。

实施例二,一种无人超市货架监控系统的控制方法,与所述实施例一的方法区别在于:通过超声波传感器代替红外传感器15来感应人体靠近货架。步骤四变为:在拍摄装置1拍照之前,拍摄装置1上设置的一超声波传感器先感应其前方是否有人体遮挡,当超声波传感器检测到前方有人体遮挡时,拍摄装置1暂停拍摄照片的程序,等到超声波传感器检测到前方没有人体遮挡时,再继续执行预设的拍照程序。

实施例三,如图1所示,一种无人超市货架监控系统的控制方法,所述方法包括:

步骤一,在初次使用或恢复出厂设置时,需要对拍摄装置1设置启动设置,拍摄装置1开机后自动发出热点,在用户终端4连接热点后,通过用户终端4的终端界面设置启动设置;

通过用户终端4的终端界面输入的wifi账号、密码和预设待机时间间隔的启动设置,并经用户终端4连接的热点传输给拍摄装置1;

拍摄装置1根据接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器2的网络连接;

拍摄装置1根据接收到的预设待机时间间隔设定到rtc闹钟13内;

步骤二,rtc闹钟13在设定好预设待机时间间隔后持续运行,并每间隔预设待机时间间隔便唤醒拍摄装置1开机;

同时,拍摄装置1上设置有独立供电的红外传感器15,在拍摄装置1关机的状态下,红外传感器15实时监测其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,并在等到红外传感器15检测到前方再次没有人体遮挡时,红外传感器15通过其耦接的一精准唤醒电路唤醒拍摄装置1开机;

步骤三,在设置过拍摄装置1的启动设置后,后续只要拍摄装置1被激活开机后就自动执行预设的拍照程序;

步骤四,在拍摄装置1拍照之前,同时与拍摄装置1相耦接的所述红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,拍摄装置1暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序;

步骤五,拍摄装置1拍摄好照片后将其设备号与照片相绑定,再将绑定有设备号的照片上传至与其通信连接的一后台服务器2,拍摄装置1在校验到上传照片成功后自动关机,等待下次被rtc闹钟13或红外传感器15耦接的精准唤醒电路唤醒,然后重复步骤二到步骤五;

步骤六,后台服务器2对通过公网传输来的拍摄装置1拍摄的照片进行存储;

步骤七,在后台服务器2对存储的最新的一张照片进行图像识别,识别出照片中货架上的物品的类别及对应类别物品的剩余数量,当其中一类或多类物品剩余数量少于预设数量后,该类的物品处于缺货状态;

步骤八,对于处于缺货状态的物品类别,后台服务器2读取与该张照片相绑定的拍摄装置1的设备号,后台服务器2内存储有所有拍摄装置1的所在地理位置、货架号信息并与其设备号相对应,后台服务器2根据缺货的设备号搜索出对应的拍摄装置1所在地理位置、货架号信息,后台服务器2将拍摄装置1所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量打包成补货提醒信息,后台服务器2再将补货提醒信息发送至管理终端3处;

步骤九,管理员在通过管理终端3查看到后台服务器2发送来的打包的补货提醒信息,根据所述补货提醒信息中缺货类别的物品的剩余数量准备相应数量的货品,并及时到补货提醒信息中对应的货架将货品补充上去。

上述方案中,通过红外传感器15耦接的精准唤醒电路唤醒拍摄装置1的方法,这个是应对货架使用频次高或销售量大的场所,货物上的货物容易快速销售完,另外还有那种某个时间段集中消费人群来的情景,比如早中晚饭的1个小时内,会突然后大量的人来消费,就需要更加快速、准确的识别货物有没有缺,还有多少,及时提醒管理员来完成补货,为后面的销售更加顺畅,提高消费者的体验,所以我们一般预设货物剩余数量可能不是0的时候,可能是5个的时候就发补货提醒;为了应对这种需求,我们抓住一个特征,货物之所以减少是人们来货架前消费,人来货架前遮挡住红外传感器15后一般离开后就完成了消费,货物会减少,所以我们一方面设置有个较长周期的预设待机时间间隔来定时拍照,比如3个小时,然后在此基础上,当有人来货架前遮挡住红外传感器15、再离开后,就触发并唤醒拍摄装置1对货架进行抓拍,及时了解到货物的剩余数量。管理员也可以更加及时地了解到货架的剩余数量,且也实现了较大程度上的节能。人少的时候不用还是按着很短的间隔去拍照,所以起到了较大的节能效果。

实施例四,如图1所示,一种无人超市货架监控系统,包括用户终端4、拍摄装置1、后台服务器2和管理终端3;

拍摄装置1包括处理模块一11以及与处理模块一11相耦接的拍摄单元12、rtc闹钟13、通信模块一14;

后台服务器2包括处理模块二21以及与处理模块二21相耦接的通信模块二22、存储模块23、图像识别模块24;

管理终端3包括处理模块三31以及与处理模块三31相耦接的显示单元32、通信模块三33;

通信模块二22与通信模块一14、通信模块三33相通信连接;

拍摄装置1开机后,处理模块一11执行预设的拍照程序,以控制拍摄单元12进行照片拍摄,处理模块一11将拍摄单元12拍摄的照片通过通信模块一14与通信模块二22之间的通信连接发送至后台服务器2处,拍摄装置1的处理模块一11在校验到上传照片成功后自动关机;

并经处理模块二21将通信模块二22接收到的照片存储在与其耦接的存储模块23;

图像识别模块24再通过对存储模块23存储的最新的一张照片进行图像识别,当识别出货架上的物品数量少于预设数量后,处理模块二21通过通信模块二22与通信模块三33之间的通信连接向管理终端3发送补货提醒信息;

通信模块三33在接收到补货提醒信息后,管理终端3的处理模块三31将补货提醒信息传输显示于显示单元32上;

拍摄装置1内置的rtc闹钟13每间隔一预设待机时间间隔后重新唤醒拍摄装置1,无人超市货架监控系统再按上述顺序重复上述方法步骤。

管理终端3可以为智能手机或pc端。管理终端3可以为连接有因特网的pc端,方便大量信息的查看,所述补货提醒信息可以在显示单元32上查看,即屏幕上看,所述补货提醒信息可以从电脑的右下角的弹窗弹出,起到提醒作用。亦可以为现在广泛使用的智能手机,所述补货提醒信息可以在智能手机的app中提醒、查看。所述补货提醒信息可以在通知栏作为通知信息弹出提醒管理员及时进行补货。智能手机形式还具有便于维护人员在外的及时查看的优点。管理终端3电运行后通信模块三33注册到因特网后,通过因特网与后台服务器2建立socket连接,后台服务器2作为socket的服务端,管理终端3是socket连接的客户端,在建立连接后,后台服务器2和管理终端3就可以通过因特网进行双向数据传输。拍摄装置1同理,作为后台服务器2socket连接的客户端,在通信模块一14电运行后注册到因特网,与后台服务器2建立socket连接,实现通过因特网进行双向数据传输。后台服务器2与管理终端3、拍摄装置1之间通过tcp/ip协议进行数据传输。tcp/ip定义了电子设备如何连入因特网,以及数据如何在它们之间传输的标准。协议采用了4层的层级结构,每一层都呼叫它的下一层所提供的协议来完成自己的需求。

上述的存储模块23可采用非易失性存储器(nonvolatilememory),不用定期地刷新存储器内容,在断电后其内容仍能保持。

图像的边缘能直接反应物体的轮廓和拓扑结构信息。上述图像识别模块24可采用现有的边缘检测技术来进行物体识别、分类、计数。边缘检测技术是数字图像处理、模式识别、计算机视觉的重要基础之一,可以满足此实施例的实施。

通过采用上述方法步骤,实现了超低功耗的货架物品数量监控,并具有补货提醒功能;其中后台服务器2将接收到的照片先存到存储模块23再调用现有技术中成熟的图像识别功能完成数量、种类识别,容易对接。

所述系统还包括一用户终端4,通信模块一14具体为一个与处理模块一11相耦接的wifi模块;

在对拍摄装置1设置启动设置时,处理模块一11控制wifi模块发出热点,在用户终端4连接热点后,通过用户终端4的终端界面设置启动设置;

通过用户终端4的终端界面输入的wifi账号、密码和预设待机时间间隔的启动设置,并经用户终端4连接的热点传输给wifi模块;

拍摄装置1根据wifi模块接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器2的网络连接;

拍摄装置1的处理模块一11根据wifi模块接收到的预设待机时间间隔设定到rtc闹钟13内,rtc闹钟13通过每间隔预设待机时间间隔便唤醒拍摄装置1开机。

所述用户终端4可以为智能手机,而智能手机接收wifi和使用热点都需经过wifi模块,相当于无线网卡,可以将其耦接在处理模块一11的接口端,产生热点和连接wifi。通过这种途径,可以通过用户终端4告知拍摄装置1需要连接的网络的wifi账号、密码,完成网络的连接,数据上网,同时热点数据传输这种便捷传输的途径可以方便快捷的在用户终端4的终端界面上完成启动设置的配置。

拍摄装置1还包括一正对着拍摄单元12前方的红外传感器15,

拍摄装置1开机后,处理模块一11在执行预设的拍照程序之前,红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,处理模块一11暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序。能准确拍摄到货架完整的原貌,使得货物数量识别更加准确。避免误报的问题。

红外传感器15独立供电,在拍摄装置1关机的状态下,拍摄装置1上设置的红外传感器15实时监测其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,并在等到红外传感器15检测到前方再次没有人体遮挡时唤醒拍摄装置1开机,执行预设的拍照程序。

在拍摄装置1将其拍摄的照片上传至与其通信连接的一后台服务器2时,处理模块一11同时将其设备号与照片相绑定一起发送至后台服务器2,设备号与拍摄装置1所在地理位置、货架号信息相绑定;

在后台服务器2对存储的最新的一张照片图像识别出货架上的物品的类别及对应类别物品的剩余数量,当其中一类或多类物品剩余数量少于预设数量后,该类的物品处于缺货状态,后台服务器2的处理模块二21读取与该张照片相绑定的拍摄装置1的设备号,并根据设备号搜索出在存储模块23存储的与该设备号相绑定的拍摄装置1所在地理位置、货架号信息,处理模块二21将拍摄装置1所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量打包成补货提醒信息,后台服务器2的通信模块二22再将补货提醒信息发送至管理终端3处。

管理员通过打包发送来的拍摄装置1所在地理位置、货架号信息、处于缺货状态的物品类别、及对应缺货类别的物品的剩余数量的补货提醒信息,即可快速知道缺货的物品及数量,做好准备,且在送货、补货的时候可以准确补充到对应的货架,方便送货,这个对于连锁型的营业点来说补货提醒就非常便捷、精准,方便查看。

所述拍摄单元12为用于拍摄所述无人超市货架监控装置前方货架图像的摄像头。

下面再对处理模块一11进行详细公开,如图2和图3所示,上述处理模块一11包括:

处理器5,与所述摄像头相耦接实现二者信号连接,用于控制所述摄像头的拍照,并在摄像头拍摄到图像后将所述图像上传至与其通信连接的后台服务器2;

通信模块一14,与所述处理器5相耦接,用于建立处理器5对外的通信连接;

拨码开关k2,具有一个输入端和一个输出端,其输入端耦接于直流电vin,其输出端依次串接一电感r19、一电容c6后接地;

p沟道mos管q2,其栅极g耦接于电感r19和电容c6之间,其源极s耦接于直流电vin;

如图2和图5所示,dc-dc同步降压转换器6,具有控制端en1、电源输入端u18、电源输出端sw1、电源输出端sw2,其控制端en1耦接于所述拨码开关k2的输出端,其电源输入端u18耦接于所述p沟道mos管q2的漏极d,其电源输出端sw1、电源输出端sw2用于输出降压后的不同供电电源并耦接于所述处理器5;

如图2和图3所示,npn三极管q1,其发射极e接地,其集电极c耦接于所述p沟道mos管q2的栅极g,其基极b串接一电阻r1后耦接于所述处理器5的电源控关端pwr_hold,在所述处理器5导通后其导通基极b,用于在处理器5导通基极b时保持导通p沟道mos管q2;

如图2和图4所示,rtc闹钟13芯片,具有唤醒输出端fout、串行时钟线端i2c1_scl、串行数据线端i2c1_sda,串行时钟线端i2c1_scl、串行数据线端i2c1_sda用于设定闹钟和双向传输数据并耦接于所述处理器5,其唤醒输出端fout耦接于所述p沟道mos管q2的栅极g。

如图1和图2所示,所述处理器5耦接着红外传感器15,当所述红外传感器15检测到前方有人体遮挡时向所述处理器5输出一高电平信号;

所述无人超市货架监控装置开机后,所述处理器5在执行预设的拍照程序之前,所述红外传感器15先感应其前方是否有人体遮挡,当所述红外传感器15检测到前方有人体遮挡时,所述处理器5暂停拍摄照片的程序,等到所述红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序。

如图3所示,拨码开关k2的输入端串接一tvs管r13后接地。当tvs管两端经受瞬间的高能量冲击时,它能以极高的速度(最高达1*10^-12秒)使其阻抗骤然降低,同时吸收一个大电流,将其两端间的电压箝位在一个预定的数值上,从而确保后面的电路元件免受瞬态高能量的冲击而损坏。

如图4所示,rtc闹钟13芯片还具有电源输入端vdd,电源输入端vdd串接一电阻r26、纽扣电池b2后接地,同时电源输入端vdd串接一电容c2后接地。通过纽扣电池b2作为独立用电电源,可靠性高,且实现与处理器5借用的锂电池电源隔开,比较节能,且可以准确激活处理器5唤醒工作。

如图1和图2所示,处理模块一11的初次开机及设置出厂设置的电路原理为:

第一次使用时,在拨码开关k2拨至导通状态后,拨码开关k2的输出端输出高电平,dc-dc同步降压转换器6的控制端en1输入高电平,同时在电感r19和电容c6组成的振荡电路的作用下产生1s的超过p沟道mos管q2开启电压的高电压,导通p沟道mos管q2,dc-dc同步降压转换器6的电源输入端u18输入高电平,dc-dc同步降压转换器6导通工作,处理器5cpu得电运作,同时处理器5的电源控关端pwr_hold导通,维持与其耦接的npn三极管q1的开启状态,使得p沟道mos管q2保持导通状态;

处理器5导通后,对处理器5和rtc闹钟13设置启动设置,处理器5控制wifi模块发出热点,在用户终端4连接热点后,通过用户终端4的终端界面设置启动设置;通过用户终端4的终端界面输入的wifi账号、密码和预设待机时间间隔的启动设置,并经用户终端4连接的热点传输给wifi模块;处理器5根据wifi模块接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器2的网络连接;处理器5根据wifi模块接收到的预设待机时间间隔设定到rtc闹钟13内,rtc闹钟13通过每间隔预设待机时间间隔便唤醒处理器5开机;然后处理器5执行预设的拍照程序;

在处理器5执行拍照程序之前,同时与拍摄装置1相耦接的所述红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,处理器5暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序;

处理器5拍摄好照片后将其设备号与照片相绑定,再将绑定有设备号的照片上传至与其通信连接的后台服务器2,处理器5在校验到上传照片成功后,处理器5断开其电源控关端pwr_hold,与电源控关端pwr_hold耦接的p沟道mos管q2的栅极g断路,p沟道mos管关断,然后dc-dc同步降压转换器6断电,处理器5进而断电关机,等待下次被rtc闹钟13唤醒。

通过rtc闹钟13芯片后续定时唤醒处理模块一11,通过处理模块一11开机拍照的电路原理为:

rtc闹钟13到达定时的间隔时间后,rtc闹钟13的唤醒输出端fout导通,在电感r19和电容c6组成的振荡电路的作用下产生1s的超过p沟道mos管q2开启电压的高电压,导通p沟道mos管q2,dc-dc同步降压转换器6的电源输入端u18输入高电平,dc-dc同步降压转换器6导通工作,处理器5cpu得电运作,同时处理器5的电源控关端pwr_hold导通,维持与其耦接的npn三极管q1的开启状态,使得p沟道mos管q2保持导通状态;

处理器5导通后,对处理器5和rtc闹钟13设置启动设置,处理器5控制wifi模块发出热点,在用户终端4连接热点后,通过用户终端4的终端界面设置启动设置;通过用户终端4的终端界面输入的wifi账号、密码和预设待机时间间隔的启动设置,并经用户终端4连接的热点传输给wifi模块;处理器5根据wifi模块接收到的wifi账号、密码连接所在区域内的wifi网络,实现与后台服务器2的网络连接;处理器5根据wifi模块接收到的预设待机时间间隔设定到rtc闹钟13内,rtc闹钟13通过每间隔预设待机时间间隔便唤醒处理器5开机;然后处理器5执行预设的拍照程序;

在处理器5执行拍照程序之前,同时与拍摄装置1相耦接的所述红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,处理器5暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序;

处理器5拍摄好照片后将其设备号与照片相绑定,再将绑定有设备号的照片上传至与其通信连接的后台服务器2,处理器5在校验到上传照片成功后,处理器5断开其电源控关端pwr_hold,与电源控关端pwr_hold耦接的p沟道mos管q2的栅极g断路,p沟道mos管关断,然后dc-dc同步降压转换器6断电,处理器5进而断电关机,等待下次被rtc闹钟13唤醒。

如图6所示,所述处理器5的处理芯片为hi3516ev100型号的海思芯片。

如图4所示,所述rtc闹钟13芯片为isl1208型号的时钟芯片。isl1208型号的时钟芯片能够很好的适配hi3516ev100型号的海思芯片,实现闹钟设定。

如图2所示,处理器5可通过i2c总线与rtc闹钟13芯片、红外传感器15相耦接。i2c总线是由philips公司开发的一种简单、双向二线制同步串行总线。它只需要两根线即可在连接于总线上的器件之间传送信息。

sda(串行数据线)和scl(串行时钟线)都是双向i/o线,接口电路为开漏输出。需通过上拉电阻接电源vcc。当总线空闲时。两根线都是高电平,连接总线的外同器件都是cmos器件,输出级也是开漏电路。在总线上消耗的电流很小,因此,总线上扩展的器件数量主要由电容负载来决定,因为每个器件的总线接口都有一定的等效电容。

如图5所示,dc-dc同步降压转换器6为mp2122型号的同步直流对直流降压转换器。

mp2122型号的同步直流对直流降压转换器,在2.7v~6v之输入电压范围可提供最低0.608v可调输出电压及最大2a电流输出,内部同步低导通阻抗电源开关提升效能并免除簘特基二极管外部组件。以及具有180°相移操作(180°phase-shiftedoperation)、100%占空比操作(100%duty-cycleoperation)、cycle-by-cycle过电流保护、短路保护及过温保护的产品特性。

如图2和图3所示,当所述红外传感器15检测到前方有人体遮挡时其信号输出端s_out输出一高电平信号;

延迟电路7,其输入端耦接于红外传感器15的信号输出端s_out,用于延迟红外传感器15的信号输出端s_out输出的信号,并在其输出端输出一延迟信号;

非门not,其输入端耦接于红外传感器15的信号输出端s_out;

与门and,其具有两个输入端和一个输出端,其两个输入端分别耦接于延迟电路7、非门not的输出端;

p沟道mos管q3,其栅极g耦接于与门and的输出端,其源极s耦接于直流电vin,其漏极d耦接于dc-dc同步降压转换器6的电源输入端u18。p沟道mos管q3的栅极导通电压比p沟道mos管q2要低,通过与门and过来的高电平即可导通。

通过红外传感器15后续定时唤醒处理模块一11,通过处理模块一11开机拍照的电路原理为:

红外传感器15通过单独电源供电,可直接与直流电vin耦接,即内置的锂电池来供电;当红外传感器15检测到前方有人后,红外传感器15的输出端输出高电平,由于延迟电路7的延迟信号的功能,延迟电路7的输出端还输出低电平,与门and的输出端保持输出低电平;当人在货架前走后,红外传感器15输出端转为输出低电平,非门not的输出端输出高电平,在延迟电路7的延迟信号的时间到达一个周期后,延迟电路7的输出端输出高电平,则与门and的输出端转为输出高电平,导通p沟道mos管q3,从而经p沟道mos管q3给dc-dc同步降压转换器6供电导通,处理器5导通执行预设的拍照程序,在延迟电路7的信号延时时间到达后,延迟电路7恢复低电平输出,与门and就会断开p沟道mos管q3,在此之前,处理器5使其电源控关端pwr_hold导通,维持与其耦接的npn三极管q1的开启状态,使得p沟道mos管q2保持导通状态,dc-dc同步降压转换器6和处理器5持续导通;

然后处理器5执行预设的拍照程序;在处理器5执行拍照程序之前,同时与拍摄装置1相耦接的所述红外传感器15先感应其前方是否有人体遮挡,当红外传感器15检测到前方有人体遮挡时,处理器5暂停拍摄照片的程序,等到红外传感器15检测到前方没有人体遮挡时,再继续执行预设的拍照程序;

处理器5拍摄好照片后将其设备号与照片相绑定,再将绑定有设备号的照片上传至与其通信连接的后台服务器2,处理器5在校验到上传照片成功后,处理器5断开其电源控关端pwr_hold,与电源控关端pwr_hold耦接的p沟道mos管q2的栅极g断路,p沟道mos管关断,然后dc-dc同步降压转换器6断电,处理器5进而断电关机,等待下次被红外传感器15唤醒。

技术人员将进一步了解,结合本文中所揭示的实施例而描述的各种说明性逻辑块、配置、模块、电路和算法步骤可实施为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件与软件的此互换性,上文已依据其功能性大体上描述了各种说明性组件、块、配置、模块、电路和步骤。将此功能性实施为硬件还是软件取决于特定应用和强加于整个系统的设计约束。对于每一特定应用,熟练的技术人员可以不同的方式实施所描述的功能性,但不应将此类实施决策解释为导致脱离本发明的范围。

可使用以下各项来实施或执行结合本文所揭示的实施例而描述的各种说明性逻辑、逻辑块、模块及电路:通用处理器、数字信号处理器(dsp)、专用集成电路(asic)、现场可编程门阵列(fpga)或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件,或其经设计以执行本文所描述的功能的任何组合。通用处理器可为微处理器,但在替代方案中,处理器可为任何常规处理器、控制器、微控制器或状态机。处理器也可实施为计算装置的组合,例如,dsp与微处理器的组合、多个微处理器、结合dsp核心的一个或一个以上微处理器,或任何其它此配置。另外,至少一个处理器可包含可操作以执行上文中所描述的步骤及/或动作中的一者或一者以上的一个或一个以上模块。

另外,结合本文中所揭示的方面而描述的方法或算法的步骤及/或动作可直接以硬件、以由处理器执行的软件模块或以两者的组合来实施。软件模块可驻留于ram存储器、快闪存储器、rom存储器、eprom存储器、eeprom存储器、寄存器、硬盘、可装卸盘、cd-rom或此项技术中已知的任何其它形式的存储媒体中。示范性存储媒体可耦合到处理器,使得处理器可从存储媒体读取信息及向存储媒体写入信息。在替代方案中,存储媒体可与处理器成一体式。另外,在一些方面中,处理器及存储媒体可驻留于asic中。另外,asic可驻留于用户终端中。在替代方案中,处理器及存储媒体可作为离散组件而驻留于用户终端中。另外,在一些方面中,方法或算法的步骤及/或动作可作为代码及/或指令中的一者或其任何组合或集合而驻留于机器可读媒体及/或计算机可读媒体上,机器可读媒体及/或计算机可读媒体可并入计算机程序产品中。

以上所述仅是本发明的优选实施方式,本发明的保护范围并不仅局限于上述实施例,凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理前提下的若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。此外,就术语“包括”用于具体实施方式或权利要求书中的程度来说,此术语希望以类似于术语“包含”在“包含”作为过渡词用于权利要求中时被解释的方式而为包括性的。此外,尽管所描述方面及/或实施例的元件可能是以单数形式描述或主张,但除非明确声明限于单数形式,否则也涵盖复数形式。另外,除非另有声明,否则任何方面及/或实施例的全部或一部分可与任何其它方面及/或实施例的全部或一部分一起被利用。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1