基于图像自动判读的尖轨伸缩位移监测方法及系统的制作方法
【专利摘要】本发明公开了基于图像自动判读的尖轨伸缩位移监测方法，该方法的步骤包括：实时获取现场尖轨伸缩位移图像S1；基于空间支撑的深度卷积神经网络刻度尺定位方法，对刻度尺进行鲁棒性全天候的检测及定位S2；基于特征色度分量积分的刻度尺精确区域提取S3；结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读S4。本发明进一步公开了一种基于图像自动判读的尖轨伸缩位移监测系统。本方案适用于尖轨伸缩位移的实时监测，可以进一步推广应用至如道岔心轨、钢轨伸缩调节器基本轨等其他关键结构部件的位移检测中，为保障铁路的运营安全提供快速、准确、可靠的理论技术支持。
【专利说明】
基于图像自动判读的尖轨伸缩位移监测方法及系统
技术领域
[0001] 本发明涉及计算机视觉技术领域，特别是涉及一种基于图像自动判读的尖轨伸缩 位移监测方法及系统。
【背景技术】
[0002] 尖轨是道岔的关键部件之一，其服役状态直接影响列车的行车安全。当气温发生 剧变时，因热胀冷缩，尖轨与基本轨间会产生明显的伸缩位移。尖轨位移严重时可引起道岔 卡阻，严重影响列车运行。因此，为了保证行车安全，必须实施对尖轨伸缩位移的实时监测， 并严格管控其量值。
[0003] 当前，尖轨伸缩位移一般是由布于尖轨侧面的摄像机进行现场采集图像，并通过 网络实时传送至服务器，以实现非接触式的监测。目前国内外对于尖轨伸缩位移图像仍采 用人工判读的方法，由于人工判读的众多不确定因素，加之判读耗费的大量时间，无法满足 实时监测及预警的现场需求，不利于行车安全保障。
[0004] 在实际工程应用中，当前基于计算机视觉技术的图像自动判读大多用于仪表盘、 标尺以及数字电气表的读数。在尖轨伸缩位移图像中，包含钢轨、尖轨及刻度尺等主要目标 在尺度上不同目标的差异很大，且判读目标刻度尺在整幅图像中只占5%左右；同时，尖轨 伸缩位移图像为全天候户外采集，采集的图像受到复杂因素如光照、天气、各类噪声的影响 较大，如日间采集为彩色图像，夜间采集为黑白图像。此外，受到户外因素的影响，图像传感 器可能会出现对焦错误及镜头倾斜的情况，从而导致图像模糊及图像错误。加之受采集设 备成本的限制，图像本身分辨率较低。因此，传统的判读方法难以实现尖轨伸缩位移图像的 判读。
【发明内容】
[0005] 本发明要解决的技术问题是提供一种基于图像自动判读的尖轨伸缩位移监测方 法及系统，以解决现有技术中由于人工判读尖轨伸缩位移图像导致无法满足尖轨伸缩位移 实时监测及预警的现场需求，以及受外界因素导致的图像退化致使传统的判读方法无法准 确对尖轨伸缩位移进行判读的问题。
[0006] 为解决上述技术问题，本发明采用下述技术方案：
[0007] 基于图像自动判读的尖轨伸缩位移监测方法，该方法的步骤包括：
[0008] Sl、实时获取现场尖轨伸缩位移图像；
[0009] S2、基于空间支撑的深度卷积神经网络刻度尺定位方法，对刻度尺进行鲁棒性全 天候的检测及定位；
[0010] S3、基于特征色度分量积分的刻度尺精确区域提取方法，对已定位的刻度尺区域 进行精确提取；
[0011] S4、结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读。
[0012] 优选地，所述步骤Sl中实时获取的现场尖轨伸缩位移图像可以存储在存储设备当 中，或上传至服务器上，待后续设备调取使用。
[0013] 优选地，所述步骤S2包括：
[0014] S21、基于获取的尖轨伸缩位移图像，构建用于训练的尖轨伸缩位移图像数据集；
[0015] S22、基于深度卷积神经网络算法对数据集进行训练学习，分别生成刻度尺区域及 其空间支撑区域的检测及定位模型，并构建基于空间支撑的刻度尺检测及定位计算模型；
[0016] S23、基于空间支撑的刻度尺检测及定位计算模型，对所述尖轨伸缩位移图像中的 刻度尺进行检测及定位。
[0017] 优选地，所述步骤S22包括：
[0018] S221、基于待训练的尖轨伸缩位移图像数据集，标注并获取待训练图像中的刻度 尺区域和其空间支撑区域的Ground Truth数据;所述空间支撑区域为刻度尺区域上方的尖 轨部分；
[0019] S222、基于特征色度分量积分的方法，提取可能包含刻度尺区域及其空间支撑区 域的若干个推荐区域；
[0020] S223、针对刻度尺区域和其空间支撑区域，利用S221中的Ground Truth数据和 S222中的推荐区域，基于深度卷积神经网络算法进行训练，分别生成刻度尺区域和其空间 支撑区域的检测及定位模型；
[0021] S224、分别利用刻度尺区域和其空间支撑区域的检测及定位模型，获得二者的检 测及定位结果并进行融合，利用该融合结果构建刻度尺检测及定位计算模型。
[0022]优选地，所述步骤S3包括：
[0023] S31、利用特征色度分量积分的方法，在近水平方向上提取左右两个变化显著的局 部极值点，对应刻度尺的水平边界位置；
[0024] S32、利用特征色度分量积分的方法，在近垂直方向上选取第一个和最后一个变化 显著的特征色度分量积分极值点，对应刻度尺的垂直边界位置；
[0025] S33、利用S31、S32获得的水平及垂直边界位置，提取刻度尺精确区域的图像。
[0026] 优选地，所述步骤S4包括：
[0027] S41、利用特征色度分量积分法确定刻度尺中心线的像素长度；
[0028] S42、基于数字匹配法，对单位刻度的像素长度进行提取；
[0029] S43、利用刻度尺中心线的像素长度和单位刻度的像素长度计算尖轨伸缩位移测 量值。
[0030] 优选地，所述步骤S42包括：
[0031] S421、在待搜索图像区域图像中计算刻度数字的相似度，并将该相似度校验值进 行比较;若大于校验值，则认为该图像中存在该刻度数字，并获取其当前位置;否则，认为该 图像中不存在该刻度数字；
[0032] S422、基于步骤S421，逐步缩小待搜索图像区域的范围，直至获得需要刻度的所有 位置；
[0033] S423、根据获得的所需刻度的所有位置，进行数字匹配的校验，并计算单位刻度的 像素长度。
[0034] 优选地，该方法进一步包括:对尖轨伸缩位移图像自动判读的结果进行可信度检 验。
[0035] 优选地，所述可信度校验的步骤包括：
[0036] 利用判别条件：Is1-S^l <ss，对所述数字匹配的可信度进行校验，其中，SnSt1分 别表示连续的两个数字i和数字i-ι所匹配的位置，心为可信度阈值，如满足条件，则认为数 字匹配正确，否则转为用户人工验证；
[0037] 利用判别条件：
，对t时刻的尖轨位移判断结果进行 可信度校验，其中,R1表示在时刻i时尖轨位移自动判读的结果，k为时间窗参数，可信度 阈值，如满足该条件则认为t时刻的判读结果Rt是准确可靠的，否则，转为用户人工验证。
[0038] 基于图像自动判读的尖轨伸缩位移监测系统，该系统包括：
[0039]图像获取单元，用于实时获取现场尖轨伸缩位移图像；
[0040] 检测及定位单元，基于空间支撑的深度卷积神经网络刻度尺算法，对刻度尺进行 鲁棒性全天候的检测及定位；
[0041] 提取单元，基于特征色度分量积分方法提取包含刻度尺区域以及其空间支撑区域 的若干个推荐区域，以及在刻度尺定位的基础上，进一步提取刻度尺的精确区域；
[0042] 自动判断单元，结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读。
[0043] 优选地，该系统进一步包括：
[0044]可信度校验单元，利用判别条件：I S1-Sh I <δ3，对所述数字匹配的可信度进行校验， 其中，H1分别表示连续的两个数字i和数字i-Ι所匹配的位置A为可信度阈值，如满足条件，则 认为数字匹配正确，否则转为用户人工验证;利用判别条件
对t时刻的尖轨位移判断结果进行可信度校验，其中，Ri表示在时刻i时尖轨位移自动判读 的结果，k为时间窗参数，δκ为可信度阈值，如满足该条件则认为t时刻的判读结果Rt是准确 可靠的，否则，转为用户人工验证。
[0045] 本发明的有益效果如下：
[0046] 本发明所述技术方案基于尖轨伸缩位移实时监测系统获取的尖轨伸缩位移图像， 能够精确高效地对其进行自动判读。该技术适用于尖轨伸缩位移的实时监测，可以进一步 推广应用至如道岔心轨、钢轨伸缩调节器基本轨等其他关键结构部件的位移检测中，为保 障铁路的运营安全提供快速、准确、可靠的理论技术支持。
【附图说明】
[0047] 下面结合附图对本发明的【具体实施方式】作进一步详细的说明；
[0048] 图1示出本发明所述尖轨伸缩位移实时监测系统示意图。
[0049]图2示出本发明所述检测系统的尖轨伸缩位移日间图像图示。
[0050]图3示出本发明所述检测系统的尖轨伸缩位移夜间图像图示。
[0051]图4示出本发明所述检测系统的尖轨伸缩位移模糊图像图示。
[0052]图5示出本发明所述检测系统的尖轨伸缩位移错误图像图示。
[0053]图6示出本发明所述尖轨伸缩位移监测方法的流程图。
[0054]图7示出本发明所述基于空间支撑的深度卷积神经网络刻度尺定位方法的流程 图。
[0055] 图8示出本发明所述基于特征色度分量积分的刻度尺精确区域提取方法流程图。
[0056] 图9示出本发明所述基于特征色度分量积分的刻度尺中心线像素长度提取方法流 程图。
[0057] 图10示出本发明所述基于数字匹配的单位刻度像素长度提取流程图。图11示出本 发明所述尖轨伸缩位移图像单张判读结果图示。
[0058] 图12示出本发明所述尖轨伸缩位移图像批量判读结果图示。
【具体实施方式】
[0059] 为了更清楚地说明本发明，下面结合优选实施例和附图对本发明做进一步的说 明。附图中相似的部件以相同的附图标记进行表示。本领域技术人员应当理解，下面所具体 描述的内容是说明性的而非限制性的，不应以此限制本发明的保护范围。
[0060] 如图6所示，本发明公开了基于图像自动判读的尖轨伸缩位移监测方法，该方法的 步骤包括：
[0061] Sl、利用尖轨伸缩位移实时监测系统对尖轨进行实时图像检测，并将实时获取现 场尖轨伸缩位移图像存储在存储设备当中，或上传至服务器上，待后续设备调取使用；
[0062] S2、基于空间支撑的深度卷积神经网络刻度尺定位方法，对刻度尺进行鲁棒性全 天候的检测及定位。具体的：S21、基于获取的尖轨伸缩位移图像，构建用于训练的尖轨伸缩 位移图像数据集;S22、基于深度卷积神经网络算法对数据集进行训练学习，分别生成刻度 尺区域及其空间支撑区域的检测及定位模型，并构建基于空间支撑的刻度尺检测及定位计 算模型；S23、基于空间支撑的刻度尺检测及定位计算模型，对所述尖轨伸缩位移图像中的 刻度尺进行检测及定位。本方案中，所述步骤S22的步骤具体包括:S221、基于待训练的尖轨 伸缩位移图像数据集，标注并获取待训练图像中的刻度尺区域和其空间支撑区域的Ground Truth数据;所述空间支撑区域为刻度尺区域上方的尖轨部分;S222、基于特征色度分量积 分的方法，提取可能包含刻度尺区域及其空间支撑区域的若干个推荐区域;S223、针对刻度 尺区域和其空间支撑区域，利用步骤S221中的Ground Truth数据和步骤S222中的推荐区 域，基于深度卷积神经网络算法进行训练，分别生成刻度尺区域和其空间支撑区域的检测 及定位模型;S224、分别利用刻度尺区域和其空间支撑区域的检测及定位模型，获得二者的 检测及定位结果并进行融合，利用该融合结果构建刻度尺检测及定位计算模型。
[0063] S3、基于特征色度分量积分的刻度尺精确区域提取方法，对已定位的刻度尺区域 进行精确提取。具体的：S31、利用特征色度分量积分的方法，在近水平方向上提取左右两个 变化显著的局部极值点，对应刻度尺的水平边界位置;S32、利用特征色度分量积分的方法， 在近垂直方向上选取第一个和最后一个变化显著的特征色度分量积分极值点，对应刻度尺 的垂直边界位置;S33、利用步骤S31、S32获得的水平及垂直边界位置，提取刻度尺精确区域 的图像。
[0064] S4、结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读。具体的：S41、 利用特征色度分量积分法确定刻度尺中心线的像素长度;S42、基于数字匹配法，对单位刻 度的像素长度进行提取;S43、利用刻度尺中心线的像素长度和单位刻度的像素长度计算尖 轨伸缩位移测量值。本方案中，所述步骤S42的步骤具体包括:S421、在待搜索图像区域图像 中计算刻度数字的相似度，并将该相似度校验值进行比较;若大于校验值，则认为该图像中 存在该刻度数字，并获取其当前位置;否则，认为该图像中不存在该刻度数字;S422、基于步 骤S421，逐步缩小待搜索图像区域的范围，直至获得需要刻度的所有位置;S423、根据获得 的所需刻度的所有位置，进行数字匹配的校验，并计算单位刻度的像素长度。
[0065] 为确保本方法自动判读的精确度，该方法进一步包括:对尖轨伸缩位移图像自动 判读的结果进行可信度检验。对于所述可信度校验的步骤包括：
[0066] 利用判别条件：IS1-ShI <δ3，对所述数字匹配的可信度进行校验，其中，SnS1^1分 别表示连续的两个数字i和数字i-Ι所匹配的位置，心为可信度阈值，如满足条件，则认为数 字匹配正确，否则转为用户人工验证；
[0067] 利用判别条件
对t时刻的尖轨位移判断结果进行 可信度校验，其中,R1表示在时刻i时尖轨位移自动判读的结果，k为时间窗参数，可信度 阈值，如满足该条件则认为t时刻的判读结果Rt是准确可靠的，否则，转为用户人工验证。
[0068] 本发明进一步公开了一种基于图像自动判读的尖轨伸缩位移监测系统，该系统包 括：用于实时获取现场尖轨伸缩位移图像的图像获取单元、基于空间支撑的深度卷积神经 网络刻度尺定位算法，对刻度尺进行鲁棒性全天候的检测及定位单元、基于特征色度分量 积分的刻度尺区域及其空间支撑区域推荐区域提取和刻度尺精确区域提取的提取单元，以 及结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读的自动判断单元。该系统 进一步包括:用于对尖轨伸缩位移图像自动判读的结果进行可信度检验可信度校验单元； 该单元利用判别条件：I S1-Sh I <Ss，对所述数字匹配的可信度进行校验，其中，S1、Sh分别 表示连续的两个数字i和数字i-Ι所匹配的位置，心为可信度阈值，如满足条件，则认为数字 匹配正确，否则转为用户人工验证;利用判别条
：，对丨时刻 的尖轨位移判断结果进行可信度校验，其中，R1表示在时刻i时尖轨位移自动判读的结果，k 为时间窗参数，SR为可信度阈值，如满足该条件则认为t时刻的判读结果Rt是准确可靠的，否 贝IJ，转为用户人工验证。
[0069] 下面通过一组实施例对本发明做进一步说明：
[0070] 本方案提供一种基于图像自动判读的尖轨伸缩位移监测方法。本方案针对尖轨位 移全天候实时监测的需要，利用尖轨伸缩位移实时监测系统对尖轨伸缩位移图像进行监 测，并利用本方案所述自判读方法对尖轨伸缩位移进行自判读。本方案能够保证高精确、高 效地对尖轨伸缩位移进行自动判读。
[0071 ]本方案所述尖轨伸缩位移实时监测系统，由固定于尖轨轨面的白底红字刻度尺作 为测量依据，由布于尖轨侧面的工业摄像机作为现场采集设备，并通过网络实时传送到服 务器。本方案所述自动判读方法首先采用基于深度学习的方法，对刻度尺进行鲁棒全天候 的检测及定位，克服图像噪声和不相关信息的干扰。以深度学习定位结果为指导，结合特征 色度分量积分的方法，提取图像中的有效区域。根据数字匹配与特征色度分量积分方法，精 确定位刻度特征点，结合可信度检验，最终实现尖轨伸缩位移的自动判读。
[0072]本方案的具体如下：
[0073] 一、尖轨伸缩位移实时监测系统
[0074]如图1至5所示，尖轨伸缩位移实时监测系统，由固定于尖轨轨面的白底红字刻度 尺作为测量依据，由布于尖轨侧面的工业摄像机作为现场采集设备，并通过网络实时传送 到服务器。用作测量尖轨伸缩位移的刻度尺为白底红字、最小刻度为mm的长方形刻度尺，使 用白色胶水水平固定于尖轨轨面上。用作现场采集设备的工业摄像机固定于尖轨侧面，正 对尖轨的正上方位置，全天候实时采集图像并通过网络实时传送到服务器。
[0075] 二、基于空间支撑的深度卷积神经网络刻度尺定位方法
[0076] 上传至服务器的图像由于受天气、光照、噪声等复杂因素的影响较大，且判读目 标，即刻度尺在图像中所占比例较小，刻度尺位置变化较大，传统目标定位方法无法对刻度 尺准确定位。
[0077] 本方案针对全天候复杂条件下采集的尖轨伸缩位移图像，采用基于空间支撑的深 度卷积神经网络刻度尺定位算法对刻度尺进行定位，如图7所示。其中，深度学习的实践平 台采用了 Caf fe，Caf fe是基于C++架构的深度学习框架，其支持命令行、Python和MATLAB接 口，具体实施方法如下：
[0078] (1)基于获取的尖轨伸缩位移图像，构建用于训练的尖轨伸缩位移图像数据集。数 据集图像来源于监测系统连续上传的10000张尖轨伸缩位移图像。
[0079] (2)基于深度卷积神经网络算法对数据集进行训练学习，分别生成刻度尺区域及 其空间支撑区域的检测及定位模型，并构建基于空间支撑的刻度尺检测及定位计算模型。 根据上述构建的数据集，基于Caffe平台，利用深度学习对数据集进行训练学习，生成用于 检测和定位刻度尺的CaffeModel文件。其中，CaffeModel文件是基于Caffe平台训练生成的 独有文件，支持命令行、Python和MATLAB接口，可方便的进行调用，输出检测和定位结果。
[0080] 由于尖轨伸缩位移图像中，刻度尺区域与尖轨部分区域有着固定的空间位置关 系，因此这种空间位置关系可以进一步确保刻度尺定位的准确性。为了保证定位结果的正 确和高效，在训练学习阶段，提出一种基于空间支撑的深度卷积神经网络刻度尺定位方法， 主要步骤如下：
[0081] 1)基于待训练的尖轨伸缩位移图像数据集，标注并获取待训练图像中的刻度尺区 域和其空间支撑区域的Ground Truth数据;所述空间支撑区域为刻度尺区域上方的尖轨部 分。其中，Ground Truth数据中包含图像路径及文件名，刻度尺区域及其空间支撑区域的个 数以及相应地坐标位置数据，用于深度学习的训练；
[0082] 2)基于特征色度分量积分的方法，提取可能包含刻度尺区域及其空间支撑区域的 若干个推荐区域。其中，特征色度分量积分的方法为:在原始图像的灰度空间中，分别按行、 列对图像灰度进行积分，并求其梯度，得到的结果即为特征色度分量积分。利用特征色度分 量积分，在行、列方向上可分别确定若干个极值点，利用这些极值点可组成可能包含刻度尺 区域及其空间支撑区域的若干个推荐区域。
[0083] 3)针对刻度尺区域和其空间支撑区域，利用上述的Ground Truth数据和推荐区 域，基于深度卷积神经网络算法进行训练，分别生成刻度尺区域和其空间支撑区域的检测 及定位模型。具体地，训练阶段采用Fast RCNN方法，分别训练产生刻度尺区域和其空间支 撑区域检测定位的CaffeModel文件，使用该文件可对刻度尺区域以及其空间支撑区域进行 检测及定位，即判断一副图像中是否存在刻度尺和其空间支撑区域，输出相应的存在性评 分及对应坐标位置。
[0084] 4)分别利用刻度尺区域和其空间支撑区域的检测及定位模型，获得二者的检测及 定位结果并进行融合，利用该融合结果构建刻度尺检测及定位计算模型。其中，由于刻度尺 区域和其空间支撑区域存在特定地空间位置关系，由空间位置关系先验，将二者的检测结 果进行融合，构建刻度尺检测及定位计算模型；
[0085] (3)基于空间支撑的刻度尺检测及定位计算模型，对所述尖轨伸缩位移图像中的 刻度尺进行检测及定位。上述步骤中采用了包含各类复杂情况的10000张图像的数据集进 行训练，最终得到的刻度尺检测及定位计算模型具有鲁棒性及高效性，针对尖轨伸缩位移 图像的自动判读，利用该计算模型可得到刻度尺区域的坐标位置，获得刻度尺区域图像。 [0086]以下是本方案所述方法与SURF特征匹配方法针对尖轨伸缩位移图像数据集刻度 尺定位准确率的比较：
[0088] 刻磨F?宙仿钴里袖施的评价标袖为：
[0089] (1)
[0090] 其中，Aobj、Agt分别表示刻度尺定位结果区域及其Ground Truth区域。
[0091 ]三、基于特征色度分量积分的刻度尺区域精确提取方法
[0092] 由于刻度尺的中心有一个近似矩形区域，称其为刻度尺中心线，在色度空间上，该 区域与其邻域具有显著差异。如图8所示，根据获得的刻度尺区域图像，采用基于特征色度 分量积分的方法对刻度尺区域进行精确提取，分别获取刻度尺的精确行列边界位置，获得 刻度尺的精确区域图像。具体实施方法如下：
[0093] (1)采用特征色度分量积分的方法，在近水平方向上，可以确定位于中部的两个局 部极值点，对应刻度尺中心线的水平起止位置;而刻度尺内部区域与外部的钢轨区域在色 度空间上也具有显著差异，可采用特征色度分量积分的方法，在近水平方向提取左右两个 变化显著的局部极值点，对应刻度尺的水平边界位置；
[0094] (2)同理，在近垂直方向上选取第一个和最后一个变化显著的特征色度分量积分 极值点，对应刻度尺的垂直边界位置。
[0095] (3)由（1)、（2)获得的水平及垂直边界位置，提取刻度尺精确区域的图像。
[0096] 四、特征色度分量积分与数字匹配相结合的尖轨伸缩位移判读方法
[0097] 尖轨伸缩位移即尖轨边界在刻度尺中的位置刻度，由于尖轨遮挡的刻度尺部分不 可见，按照一般读数规则，从刻度尺的零点开始判读并不可行。分析获得的刻度尺精确区域 图像，发现其包含一条近似矩形的刻度尺中心线以及上下对称且均匀分布的刻度线及数 字。因此，通过获得刻度尺中心线的像素长度以及单位刻度的像素长度，经过数学计算，即 可完成尖轨伸缩位移图像的判读。具体实施方法如下：
[0098] (1)利用特征色度分量积分法确定刻度尺中心线的像素长度，如图9所示。
[0099] (2)基于数字匹配法，对单位刻度的像素长度进行提取。计算单位刻度像素长度的 关键在于精确定位各个刻度特征点的位置。由于细小刻度线可能会受噪声影响，而上下对 称分布的刻度数字特征显著且唯一。因此采用基于灰度数字模板的特征匹配方法提取刻度 线位置，具体采用了具有良好抗噪性、抗不均匀光照性的归一化的相关系数匹配法。如图10 所示，具体的提取步骤如下：
[0100] 1)首先在待搜索图像区域即刻度尺精确区域图像中计算刻度数字"4"的相似度， 如相似度量最大值大于可信度检验值则认为中存在刻度数字"4"，获取并返回其位置S4,否 则认为中不存在刻度数字"4"，即刻度尺读数已超过4cm，已达到预警值，返回预警提示；
[0101] 2)由于刻度数字处于同一水平位置上，根据已获取的刻度数字"4"匹配位置进一 步缩小待搜索图像区域，依次在缩小后的待搜索图像区域中，搜索并匹配刻度数字"3"、 "2"、"Γ……依次获取并返回其位置S3、S2、Sl……；
[0102] 3)根据获取的S4、S3、S2、S1……位置，结合数字匹配可信度检验，计算单位刻度的 像素长度。
[0103] 由于刻度尺刻度是均匀分布的，因此在刻度计算中，上述方法只需获取任意两个 匹配数字的位置即可进行计算。上述算法中的可信度检验值根据不同匹配数字进行设定， 防止出现误匹配及漏匹配情况。考虑到计算准确性的需要，在实际计算过程中，分别匹配每 对上下对称的数字区域，取其列方向位置的均值为该数字的列方向位置，据此计算单位刻 度的像素长度。
[0104] (3)利用刻度尺中心线的像素长度和单位刻度的像素长度计算尖轨伸缩位移测量 值。由获得的刻度尺中心线的像素长度以及单位刻度的像素长度，经过数学计算，结合判读 结果可信度检验，即得到尖轨伸缩位移测量值。
[0105] 五、尖轨伸缩位移图像自动判读可信度检验方法
[0106] 为保证监测结果的准确可靠，需要对尖轨伸缩位移图像自动判读进行可信度检 验。具体如下：
[0107] (1)数字匹配可信度检验。通过数字可信度检验保证各个数字匹配的准确性以及 单位刻度的像素长度的正确性，具体如下：
[0108] Si-Si-i I <δ8 (2)
[0109] 其中，SnSp1分别表示连续的两个数字i和数字i-1所匹配的位置Js为可信度阈 值，如满足条件，则认为数字匹配正确，否则转为用户人工验证。
[0110] (2)判读结果可信度检验。根据尖轨伸缩位移的先验知识，尖轨伸缩位移的变化是 随时间逐步产生的，在一定采集时间内，尖轨伸缩位移的波动不会超过工程阈值，如超过阈 值则提示判读结果存在误差，应进行人工核对。由此，对判读结果进行可信度检验，具体如 下：
[mu] C3)
[0112] 其中，R1表示在时刻i时尖轨位移自动判读的结果，k为时间窗参数，δκ为可信度阈 值，如满足该条件则认为t时刻的判读结果R t是准确可靠的，否则，转为用户人工验证。
[0113] 由于尖轨伸缩位移监测受到各种因素的影响，可信度阈值δ3、δκ，根据不同尖轨伸 缩位移监测地点、监测时间及监测天气等因素进行设定。
[0114] 如图11和图12所示，为尖轨伸缩位移图像自动判读方法针对单张图片及批量图片 得到的判读结果。如图11所示，单张图片的自动判读结果显示了图片的采集时间及其相应 的尖轨位移自动判读结果，其判读结果精确到小数点后四位，单位为cm。将该自动判读结果 与其人工判读结果进行比较，其误差在0.1cm之内；如图12所示，批量图片判读结果显示了 本方案可判读并通过可信度检验的158幅图片自动判读结果，将自动判读结果与人工判读 结果进行比较，150幅图片的结果误差在0.1cm之内，另外8幅图片的结果误差在0.1cm至 0.2cm之间。
[0115]显然，本发明的上述实施例仅仅是为清楚地说明本发明所作的举例，而并非是对 本发明的实施方式的限定，对于所属领域的普通技术人员来说，在上述说明的基础上还可 以做出其它不同形式的变化或变动，这里无法对所有的实施方式予以穷举，凡是属于本发 明的技术方案所引伸出的显而易见的变化或变动仍处于本发明的保护范围之列。
【主权项】
1. 基于图像自动判读的尖轨伸缩位移监测方法，其特征在于，该方法的步骤包括： 51、 实时获取现场尖轨伸缩位移图像； 52、 基于空间支撑的深度卷积神经网络刻度尺定位方法，对刻度尺进行鲁棒性全天候 的检测及定位； 53、 基于特征色度分量积分的刻度尺精确区域提取方法，对已定位的刻度尺区域进行 精确提取； 54、 结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读。2. 根据权利要求1所述的尖轨伸缩位移监测方法，其特征在于，所述步骤S2包括： 521、 基于获取的尖轨伸缩位移图像，构建用于训练的尖轨伸缩位移图像数据集； 522、 基于深度卷积神经网络算法对数据集进行训练学习，分别生成刻度尺区域及其空 间支撑区域的检测及定位模型，并构建基于空间支撑的刻度尺检测及定位计算模型； 523、 基于空间支撑的刻度尺检测及定位计算模型，对所述尖轨伸缩位移图像中的刻度 尺进行检测及定位。3. 根据权利要求2所述的尖轨伸缩位移监测方法，其特征在于，所述步骤S22包括： 5221、 基于待训练的尖轨伸缩位移图像数据集，标注并获取待训练图像中的刻度尺区 域和其空间支撑区域的Ground Truth数据;所述空间支撑区域为刻度尺区域上方的尖轨部 分； 5222、 基于特征色度分量积分的方法，提取可能包含刻度尺区域及其空间支撑区域的 若干个推荐区域； 5223、 针对刻度尺区域和其空间支撑区域，利用S221中的Ground Truth数据和S222中 的推荐区域，基于深度卷积神经网络算法进行训练，分别生成刻度尺区域和其空间支撑区 域的检测及定位模型； 5224、 分别利用刻度尺区域和其空间支撑区域的检测及定位模型，获得二者的检测及 定位结果并进行融合，利用该融合结果构建刻度尺检测及定位计算模型。4. 根据权利要求1所述的尖轨伸缩位移监测方法，其特征在于，所述步骤S3包括： 531、 利用特征色度分量积分的方法，在近水平方向上提取左右两个变化显著的局部极 值点，对应刻度尺的水平边界位置； 532、 利用特征色度分量积分的方法，在近垂直方向上选取第一个和最后一个变化显著 的特征色度分量积分极值点，对应刻度尺的垂直边界位置； 533、 利用S31和S32获得的水平与垂直边界位置，提取刻度尺精确区域的图像。5. 根据权利要求1所述的尖轨伸缩位移监测方法，其特征在于，所述步骤S4包括： 541、 利用特征色度分量积分法确定刻度尺中屯、线的像素长度； 542、 基于数字匹配法，对单位刻度的像素长度进行提取； 543、 利用刻度尺中屯、线的像素长度和单位刻度的像素长度计算尖轨伸缩位移测量值。6. 根据权利要求5所述的尖轨伸缩位移监测方法，其特征在于，所述步骤S42包括： 5421、 在待捜索图像区域图像中计算刻度数字的相似度，并将该相似度校验值进行比 较;若大于校验值，则认为该图像中存在该刻度数字，并获取其当前位置;否则，认为该图像 中不存在该刻度数字； 5422、 基于步骤S421，逐步缩小待捜索图像区域的范围，直至获得需要刻度的所有位 置； S423、根据获得的所需刻度的所有位置，进行数字匹配的校验，并计算单位刻度的像素 长度。7. 根据权利要求1所述的尖轨伸缩位移监测方法，其特征在于，该方法进一步包括:对 尖轨伸缩位移图像自动判读的结果进行可信度检验。8. 根据权利要求7所述的尖轨伸缩位移监测方法，其特征在于，所述可信度校验的步骤 包括： 利用判别条件：|Si-Si-l|<Ss，对所述数字匹配的可信度进行校验，其中，Si、Si-l分别表 示连续的两个数字i和数字i-1所匹配的位置，Ss为可信度阔值，如满足条件，则认为数字匹 配正确，否则转为用户人工验证； 利用判别条件对t时刻的尖轨位移判断结果进行可信 度校验，其中，Ri表示在时刻i时尖轨位移自动判读的结果，k为时间窗参数，δκ为可信度阔 值，如满足该条件则认为t时刻的判读结果Rt是准确可靠的，否则，转为用户人工验证。9. 基于图像自动判读的尖轨伸缩位移监测系统，其特征在于，该系统包括： 图像获取单元，用于实时获取现场尖轨伸缩位移图像； 检测及定位单元，基于空间支撑的深度卷积神经网络刻度尺定位算法，对刻度尺进行 鲁棒性全天候的检测及定位； 提取单元，基于特征色度分量积分方法提取包含刻度尺区域W及其空间支撑区域的若 干个推荐区域，并在刻度尺定位的基础上，提取刻度尺的精确区域； 自动判断单元，结合特征色度分量积分与数字匹配，对尖轨伸缩位移进行判读。10. 根据权利要求9所述的尖轨伸缩位移监测方法，其特征在于，该系统进一步包括： 可信度校验单元，利用判别条件：I Si-Si-i I <Ss，对所述数字匹配的可信度进行校验，其 中，Si、Si-汾别表示连续的两个数字巧日数字i-1所匹配的位置，Ss为可信度阔值，如满足条 件，则认为数字匹配正确，否则转为用户人工验证； 利用判别条件：对t时刻的尖轨位移判断结果进行可信 度校验，其中，Ri表示在时刻i时尖轨位移自动判读的结果，k为时间窗参数，δκ为可信度阔 值，如满足该条件则认为t时刻的判读结果Rt是准确可靠的，否则，转为用户人工验证。
【文档编号】G06K9/32GK105938554SQ201610232538
【公开日】2016年9月14日
【申请日】2016年4月14日
【发明人】尹辉, 黄华, 高亮, 刘文才
【申请人】北京交通大学