一种双目视觉智能检测方法和系统

1.本发明涉及图像监测领域，具体涉及一种双目视觉智能检测方法和系统。


背景技术：

2.在规模化生猪、牛羊等动物养殖过程中，除了要监测养殖环境和动物生理参数之外，动物异常行为监测、异常体温监测、养殖环境消毒防疫等日常预防工作也是动物健康生长的保障，现有技术中通常采用机器视觉监测动物行为如饮水行为评估动物的健康状况，然而仅仅监测动物单一行为是很难确定动物的健康情况的，而且通常只能通过单一的拍摄到的行为确定，并不能实现持续跟踪和与历史数据结合来判断，导致判断处理的结果错误率太高。或者，通过在动物体内植入监测模块或者体表以耳标的方式实现生理参数的监测，然而这种方式需要在每个动物身上均设置监测模块，代价较高，如果要监测多个生理参数，监测装置的体积很难控制到很小的水平，植入或者打标到体表难度也随之增加。
3.而且，在采用机器视觉进行监测时由于监测角度或者监测位置固定，很难实现每个个体动物的监测或者对特定个体的追踪监测，同时，也无法根据动物情况实现针对性的消毒、降温等自动化措施。


技术实现要素：

4.本发明提供一种双目视觉智能检测方法和系统，能够解决现有技术中存在的视觉监测行为或者参数单一、难以实现个体追踪监测和针对性自动化措施等问题。为解决上述技术问题，本发明采用的一个技术方案是：提供一种双目视觉智能检测方法，包括如下步骤：
5.采集对象的可见光图像和红外图像；
6.根据机器学习结果，识别可见光图像中的异常行为；
7.对识别出的异常行为的可见光图像对应的红外图像根据进行温度行为分析，进而得出异常行为是否为问题行为。
8.进一步的，采集对象的可见光图像和红外图像之前，还存在以下步骤：
9.根据拍摄的可见光图像识别出多个对象；
10.读取所述多个对象的id信息，调取多个id信息对应的多个对象的历史数据；
11.根据所述历史数据和读取多个对象id信息时的定位数据实现多个对象的id信息对应。
12.进一步的，读取多个对象的id信息实现的具体步骤如下：
13.根据拍摄的可见光图像确定拍摄区域；
14.读取所述区域内的对象id信息。
15.进一步的，对所述对象所属区域内的id信息进行分区域存储，即将同区域内的id信息相对应。
16.进一步的，根据机器学习结果，识别可见光图像中的异常行为的具体实现方式为：
17.将多个对象的可见光图像和历史数据输入预先建立的对象异常行为模型；
18.所述对象异常行为模型分别输出多个对象是否存在异常行为。
19.所述异常行为模型能够实现对采食行为、群居行为、性行为、排泄行为和一些异常行为(如咬耳、咬尾及食仔现象等)的分析。
20.进一步的，所述温度行为分析具体为：
21.根据对象的行为类型、历史行为数据所对应的温度数据判断异常行为的温度是否合理。
22.进一步的，识别出可见光图像中的异常行为之后，对所述异常行为进行持续观测直至得出异常行为是否为问题行为的结论。所述问题行为是指属于需要干预的行为。
23.进一步的，得出异常行为是否为问题行为之后，还有以下操作：
24.如果是问题行为，则根据问题行为类型将数据反馈给服务器，并控制执行至少一项以下操作：消毒、降温、制止和补水。
25.如果异常行为不是问题行为，则根据异常行为类型，判断是否需要控制执行至少一项以下操作：消毒、降温、制止和补水，如果需要则执行，如果不需要则不执行。
26.进一步的，所述双目视觉智能检测方法如果并未获得异常行为或者确定异常行为不是问题行为时，则进行下一区域的检测，直至所有待检测区域均被检测完，则开启新一轮的检测。
27.进一步的，在进行下一区域检测之前，将检测到的多个对象的按照id信息存储的图像数据上传至远程服务器，并根据id信息归类到相应存储区域中的存储区域以便于数据读写。
28.本发明还提供一种双目视觉智能检测系统，包括：
29.双目视觉模块，采集对象的可见光图像和红外图像；
30.处理器，根据机器学习结果，识别可见光图像中的异常行为，并对识别出的异常行为的可见光图像对应的红外图像根据进行温度行为分析，进而得出异常行为是否为问题行为。
31.进一步的，所述处理器还根据拍摄的可见光图像识别出多个对象，读取所述多个对象的id信息，调取多个id信息对应的多个对象的历史数据，根据所述历史数据和读取多个对象id信息时的定位数据实现多个对象的id信息对应。
32.所述处理器还用于实现：根据拍摄的可见光图像识别出多个对象，读取所述多个对象的id信息，调取多个id信息对应的多个对象的历史数据，根据所述历史数据和读取多个对象id信息时的定位数据实现多个对象的id信息对应。
33.进一步的，所述处理器根据拍摄的可见光图像确定拍摄区域，读取所述区域内的对象id信息。
34.所述双目视觉智能检测系统还包括远程服务器，所述远程服务器用于存储多个区域内多个对象的历史数据；对所述对象所属区域内的id信息进行分区域存储。
35.所述处理器将多个对象的可见光图像和历史数据输入预先建立的对象异常行为模型；所述对象异常行为模型分别输出多个对象是否存在异常行为。
36.进一步的，所述异常行为模型能够实现对采食行为、群居行为、性行为、排泄行为和一些异常行为(如咬耳、咬尾及食仔现象等)的分析。
37.进一步的，所述处理器根据对象的行为类型、历史行为数据所对应的温度数据判断异常行为的温度是否合理。
38.进一步的，所述处理器识别出可见光图像中的异常行为之后，对所述异常行为进行持续观测直至得出异常行为是否为问题行为的结论。
39.进一步的，所述处理器得出异常行为是否为问题行为之后，还有以下操作：
40.如果是问题行为，则根据问题行为类型将数据反馈给远程服务器，并控制执行至少一项以下操作：消毒、降温、制止和补水。
41.如果异常行为不是问题行为，则根据异常行为类型，判断是否需要控制执行至少一项以下操作：消毒、降温、制止和补水，如果需要则执行，如果不需要则不执行。
42.进一步的，所述处理器所述双目视觉智能检测方法如果并未获得异常行为或者确定异常行为不是问题行为时，则进行下一区域的检测，直至所有待检测区域均被检测完，则开启新一轮的检测。
43.进一步的，所述处理器在进行下一区域检测之前，将检测到的多个对象的按照id信息存储的图像数据上传至远程服务器，并根据id信息归类到相应存储区域中的存储区域以便于数据读写。
44.进一步的，所述双目视觉模块包括可见光图像获取模块和红外图像获取模块。
45.进一步的，双目视觉智能检测系统还包括轨道机器人，所述轨道机器人上设置射频读取模块，所述射频读取模块用于读取设置在对象上的射频模块中的id信息。
46.进一步的，所述射频模块优选为耳标，所述耳标存储有对象的id信息。
47.进一步的，所述轨道机器人上还包括消毒设备、语音提醒装置以及喷水设备。所述消毒设备用于对对象所在区域执行消毒操作。所述消毒设备可以为喷雾装置，内装有84消毒液或者漂白水；所述消毒设备也可以为抛洒装置，内装有石灰粉，所述消毒设备也可以为紫外光产生装置，用于实现紫外消毒。
48.进一步的，所述轨道设置在养殖对象场地上方，所述轨道机器人在轨道上滑行，所述滑行受处理器的指令控制。
49.本发明通过研究基于可见光图像与红外图像智能感知技术，一方面实现对养殖对象的采食行为、群居行为、性行为、排泄行为和一些异常行为(如咬耳、咬尾及食仔现象等)的监测，通过掌握上述猪的一些行为，可以科学地利用、训练或改造这些特性，以便科学地制定或改变猪的饲养方法和管理技术，为猪创造更适宜的环境条件，提高猪的生产性能；另一方面可以实现基于红外图像融合技术下的对象体温监控，结合耳标确定单个动物的历史数据并根据耳标id归类，聚焦该对象行为，根据历史数据机器学习各种行为，分类后将各类数据进行融合，可见光ccd和红外ccd双目结合，进行图像的深度融合，将行为与体温数据相结合判断生理数据是否异常，可根据动物个体生理数据调节观测时间，自动控制轨道机器人的移动。根据监测情况，实现智能防疫轨道机器人的精准移动，并达到对消毒装置等执行设备的有效控制。
附图说明
50.图1为一种双目视觉智能检测方法流程图；
51.图2为采集对象的可见光图像和红外图像之前的方法的流程图；
52.图3为读取多个对象的id信息的具体实现方法的流程图；
53.图4识别可见光图像中的异常行为的具体实现方法流程图；
54.图5为一种双目视觉智能检测系统框图。
具体实施方式
55.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
56.实施例1
57.本实施例提供一种双目视觉智能检测方法，如图1所示，所述方法包括如下步骤：
58.s100.采集对象的可见光图像和红外图像；
59.s200.根据机器学习结果，识别可见光图像中的异常行为；
60.s300.对识别出的异常行为的可见光图像对应的红外图像根据进行温度行为分析，进而得出异常行为是否为问题行为。
61.作为一种优选的实施方式，如图2所示，采集对象的可见光图像和红外图像之前，还存在以下步骤：
62.s10.根据拍摄的可见光图像识别出多个对象；
63.s20.读取所述多个对象的id信息，调取多个id信息对应的多个对象的历史数据；
64.s30.根据所述历史数据和读取多个对象id信息时的定位数据实现多个对象的id信息对应。
65.作为一种优选的实施方式，如图3所示，读取多个对象的id信息实现的具体步骤如下：
66.s21.根据拍摄的可见光图像确定拍摄区域；
67.s22.读取所述区域内的对象id信息；
68.s23.对所述对象所属区域内的id信息进行分区域存储，即将同区域内的id信息相对应。
69.作为一种优选的实施方式，如图4所示，根据机器学习结果，识别可见光图像中的异常行为的具体实现方式为：
70.s201.将多个对象的可见光图像和历史数据输入预先建立的对象异常行为模型；
71.s202.所述对象异常行为模型分别输出多个对象是否存在异常行为。
72.所述异常行为模型能够实现对采食行为、群居行为、性行为、排泄行为和一些异常行为(如咬耳、咬尾及食仔现象等)的分析。
73.所述温度行为分析具体为：根据对象的行为类型、历史行为数据所对应的温度数据判断异常行为的温度是否合理。
74.s203.识别出可见光图像中的异常行为之后，对所述异常行为进行持续观测直至得出异常行为是否为问题行为的结论。所述问题行为是指属于需要干预的行为。
75.作为一种优选的实施方式，得出异常行为是否为问题行为之后，还有以下操作：
76.s400.如果异常行为是问题行为，则根据问题行为类型将数据反馈给服务器，并控
制执行至少一项以下操作：消毒、降温、制止和补水；
77.s500.如果异常行为不是问题行为，则根据异常行为类型，判断是否需要控制执行至少一项以下操作：消毒、降温、制止和补水，如果需要则执行，如果不需要则不执行。
78.s600.在进行下一区域检测之前，将检测到的多个对象的按照id信息存储的图像数据上传至远程服务器2，并根据id信息归类到相应存储区域中的存储区域以便于数据读写。
79.所述双目视觉智能检测方法如果并未获得异常行为或者确定异常行为不是问题行为时，则进行下一区域的检测，直至所有待检测区域均被检测完，则开启新一轮的检测。
80.实施例2
81.本实施例还提供一种双目视觉智能检测系统，如图5所示，所述系统包括：
82.双目视觉模块3，采集对象的可见光图像和红外图像；
83.处理器1，根据机器学习结果，识别可见光图像中的异常行为，并对识别出的异常行为的可见光图像对应的红外图像根据进行温度行为分析，进而得出异常行为是否为问题行为。
84.所述处理器1还根据拍摄的可见光图像识别出多个对象，读取所述多个对象的id信息，调取多个id信息对应的多个对象的历史数据，根据所述历史数据和读取多个对象id信息时的定位数据实现多个对象的id信息对应。
85.所述处理器1根据拍摄的可见光图像确定拍摄区域，读取所述区域内的对象id信息。
86.所述双目视觉智能检测系统还包括远程服务器2，所述远程服务器2用于存储多个区域内多个对象的历史数据；对所述对象所属区域内的id信息进行分区域存储。
87.所述处理器1将多个对象的可见光图像和历史数据输入预先建立的对象异常行为模型；所述对象异常行为模型分别输出多个对象是否存在异常行为。
88.所述异常行为模型能够实现对采食行为、群居行为、性行为、排泄行为和一些异常行为(如咬耳、咬尾及食仔现象等)的分析。
89.所述处理器1根据对象的行为类型、历史行为数据所对应的温度数据判断异常行为的温度是否合理。
90.所述处理器1识别出可见光图像中的异常行为之后，对所述异常行为进行持续观测直至得出异常行为是否为问题行为的结论。
91.所述处理器1得出异常行为是否为问题行为之后，还有以下操作：
92.如果是问题行为，则根据问题行为类型将数据反馈给远程服务器2，并控制执行至少一项以下操作：消毒、降温、制止和补水。
93.如果异常行为不是问题行为，则根据异常行为类型，判断是否需要控制执行至少一项以下操作：消毒、降温、制止和补水，如果需要则执行，如果不需要则不执行。
94.如果并未获得异常行为或者确定异常行为不是问题行为时，则进行下一区域的检测，直至所有待检测区域均被检测完，则开启新一轮的检测。
95.所述处理器1在进行下一区域检测之前，将检测到的多个对象的按照id信息存储的图像数据上传至远程服务器2，并根据id信息归类到相应存储区域中的存储区域以便于数据读写。
96.所述双目视觉模块3包括可见光图像获取模块3
‑
1和红外图像获取模块3
‑
2。
97.双目视觉智能检测系统还包括轨道机器人4，所述轨道机器人4上设置射频读取模块，所述射频读取模块用于读取设置在对象上的射频模块中的id信息。
98.所述射频模块优选为耳标，所述耳标存储有对象的id信息。
99.所述轨道机器人4上还包括消毒设备5、语音提醒装置6以及喷水设备7。所述消毒设备5用于对对象所在区域执行消毒操作。所述消毒设备5可以为喷雾装置，内装有84消毒液或者漂白水；所述消毒设备5也可以为抛洒装置，内装有石灰粉，所述消毒设备5也可以为紫外光产生装置，用于实现紫外消毒。
100.所述轨道设置在养殖对象场地上方，所述轨道机器人4在轨道上滑行，所述滑行受处理器1的控制。
101.尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。