基于数字孪生的无人机自主起降巡航方法

1.本发明涉及数字孪生技术，具体涉及一种基于数字孪生的无人机自主起降巡航方法。


背景技术：

2.随着时代的进步，科技的发展，无人机被广泛应用于各个领域，同时新兴的数字孪生技术也逐渐充斥着人们的生活，数字孪生是充分利用物理模型、传感器更新、运行历史等数据，集成多学科、多物理量、多尺度、多概率的仿真过程，在虚拟空间中完成映射从而反映相对应的实体装备的全生命周期过程。数字孪生是一种超越现实的概念，可以被视为一个或多个重要的、彼此依赖的装备系统的数字映射系统。数字孪生是个普遍适应的理论技术体系，可以在众多领域应用，目前在产品设计、产品制造、医学分析、工程建设等领域应用较多。目前在国内应用最深入的是工程建设领域，关注度最高、研究最热的是智能制造领域。在工业，物流服务行业往往需要远程无人机自主完成任务，这是一项艰巨的任务，常规的无人机操控流程如下：
3.(1)首先，控制端针对控制任务，设计飞行路线，发送命令并传输给无人机。(2)其次，无人机接收到控制端传来的信号，执行飞行任务。(3)再者，无人机传不间断的传输信息至终端。(4)最后，终端把信息反馈给控制端，控制端进行对比，再次进行命令传输至无人机，形成负反馈。
4.目前随着控制技术的发展，很多优秀的算法应用于无人机自主起降上，在实验验证中取得了非常好的效果，但是这些都是在现实的环境下进行的无人机自主起降巡航，虽然大大降低了人力物力的需要，但是针对复杂的地形，恶劣的天气仍然不能满足当下的需要，其安全、效率方面存在很大的隐患，针对一些相对于狭小，复杂的地理环境难以利用跟踪检测算法进行自校正，自学习。
5.其次就是虽然近些年算法的进一步发展，slam技术的应用，鲁棒控制滤波的发展，使得无人机在控制方面效果显著提高，但是针对于环境应变，物体辨识，以及无人机承受大量的计算，其在进行自主起降，定点巡航方面存在很大的问题。


技术实现要素：

6.本发明的目的是提供一种基于数字孪生的无人机自主起降巡航方法，利用数字孪生技术完成云平台搭建并在云端操控无人机群远程进行自主起飞、降落及巡航。
7.为了实现上述任务，本发明采用以下技术方案：
8.一种基于数字孪生的无人机自主起降巡航方法，包括以下步骤：
9.步骤1，搭建无人机3d模型以及场景。
10.使用模拟端建立3d无人机模型、传感器模型以及室内室外场景模型，将建立的无人机模型进行标注，并且设置无人机模型以及室内室外场景的建筑物的3d刚体、角色控制器以及对所有的场景设置位置，着色背景，针对无人机模型加碰撞器，设置旋翼，对无人机
模型进行位置布控以及无人机模型局部渲染和贴图；
11.步骤2，设计无人机起飞降落
12.针对建立的无人机模型设计起飞降落，编写script脚本对无人机模型进行控制，根据之前的无人机模型标注，按照标注编写script脚本，在脚本中定义键盘按键，鼠标聚焦，从而更方便地控制无人机的航线，完成虚拟漫游程序实现虚拟视野在所建立场景中的移动与切换；
13.步骤3，模拟端下的传感器模拟
14.在模拟端中，利用红外传感器进行红外避障，信息传递；利用超声波传感器进行超声波避障；利用普通相机传感器模拟机器视觉；利用深度相机传感器和激光雷达传感器，获取环境深度信息，进行自主定位导航；利用imu传感器进行无人机姿态信息以及无人机运行信息获取；利用高度传感器获取无人机的高度信息及速度信息；利用接触式传感器获得无人机的感知范围，从而通过步骤1至步骤3完成数字孪生模型的构建；
15.步骤4，无人机模型的自组网络通信
16.基于现有的移动自组网体系结构，进行自组网络通信；无人机路径的偏差采用梯度下降法进行误差消除，将当前的位置与所规划的路径之间的差值进行梯度下降，使得无人机位置更加贴近于所规划的路径；
17.步骤5，利用数字孪生技术进行实时交互
18.采用三维建模的方法加上模拟端中渲染引擎技术对现实生活的场景进行建模，建立高精度模型也就是高沉浸式场景；同时，利用现有的4g、5g模块以及阿里云服务，网络通信技术实现云端远程对实际场景中的无人机发布指令，同时与模拟端场景进行对接，实现虚拟现实同步；利用大数据云平台，对实际场景中无人机数据进行采集，优化模拟端中的无人机模型；将实际场景中的无人机与物联网平台结合，加以虚拟地理环境和多源数据融合以及模拟仿真实现可视智能化监测，提升信息资源配置运行效率和价值，全面升级和优化云平台发布检测水平，达到更好的控制效果；
19.步骤6，在电脑网页启动云命令，通过执行linux命令来对阿里云的资源进行管理，远程对实际场景中的无人机发布命令；
20.步骤7，利用云平台对实际场景中的无人机进行自组网络通信，以进行现实虚拟同步：先在模拟端进行无人机模型的自主起降巡航，实际的无人机同样实现无人自主起降巡航，实现同步。
21.进一步地，从多领域模型构建以及“几何
‑
物理
‑
行为
‑
规则”多维模型构建两方面进行数字孪生模型的构建；
22.数字孪生模型涵盖多维度和多领域模型，从而实现对物理对象的全面真实刻画与描述，当模型构建对象相对复杂的时候，需构建模型的层次关系并明确模型的组装顺序，以避免出现难以组装的情况，并且需要构建与添加零部件之间的角度约束、接触约束、偏移约束等约束关系，其次进行模型融合，模型融合是针对一些系统级孪生模型构建，控件维度的模型组装不能满足物理对象的刻画要求，还需进一步进行的融合，即实现不同学科不同领域之间的融合；最后还需要对模型进行验证，在模型构建、组装、融合后，需要对模型进行验证，以确保模型的正确性和有效性，模型验证时针对不同需求，检验模型的输出与物理对象的输出是否一致。
23.进一步地，通过设置认知平面用于无人机通信网络动态信息的认知推理、控制和配置无人机网络相应动态参数，引导、测量和修复数据平面，将较为复杂的动态信息认知和主要的管理控制从单一平面分离，保证数据平面高效实时传输数据。
24.进一步地，在认知平面移动测量提供已知条件下，无人机间的直接链路状态和路径权重计算方法如下式：
[0025][0026]
式中为i到其直接邻居的链路权重；ρ
maci
∈[0,1]为mac占空比，反映信道忙闲，本地mac统计由信标传出；γ
i
为接收机阈值；
[0027]
f
map
(sinr
i,i+1
)为相对映射函数：
[0028][0029]
式中p
rxi
为i最大接收功率；d0为远场距离，d为两无人机间距，γ的取值为2
‑
6，表示对节点j干扰的源功率，n
o
为噪声功率；
[0030]
链路聚合为路径，端对端的权重定义为：
[0031][0032]
因此，单一链路失效回导致整个源路径失效，需要改径并重新计算权重。
[0033]
进一步地，所述模拟端采用unity平台。
[0034]
与现有技术相比，本发明具有以下技术特点：
[0035]
1.通过使用数字孪生技术，进一步提升无人机任务的执行效率，在一些复杂的地理环境，恶劣的天气下以及降落的运动的载体上，传统的无人机起降定位不能很好的满足实际的要求，不能完成准确的起降，采用数字孪生进行的虚拟现实交互进行无人机起降，只要进行的高精度模型仿真可以达到指标，现实中对应的无人机亦可以达到。
[0036]
2.多传感器融合达到更加真实的虚拟现实交互，实现精确交互，仿真与现实对应，结合目前主流的联合卡尔曼滤波技术，在gps/视觉多传感器融合定位算法基础上，增加超宽带uwb无线定位技术，弥补gps和视觉传感器无法提供有效位置数据的不足。为保证多传感器融合算法的容错性和鲁棒性，采用基于卡尔曼滤波测量值与预测值间马氏距离的卡方检验对传感器数据进行有效性检验。
[0037]
3.通过数字孪生技术搭建大数据云平台，深度渲染现实场景，进行模型优化和渲染，利用4g、5g模块进行数据远程传输，将虚拟端的无人机内核与现实的无人机飞控集合，使用网络通信unity
‑
unity、unity
‑
ros、unity
‑
all等完美对接ubuntu系统实现云平台远程发布ros指令传输下达命令，将无人机航空遥感及遥感影像自动处理技术、倾斜摄影三维建模、地理信息系统技术(gis)、建筑信息模型(bim)和大数据应用等交叉学科进行深度融合，构建了空地一体，集数据采集、处理、决策辅助分析的完善体系，使得无人机变得精准、高效和高性价。
附图说明
[0038]
图1为无人机3d模型以及场景示意图；
[0039]
图2为unity平台传感器模拟示意图；
[0040]
图3为本发明模型体系框架结构示意图；
[0041]
图4为unity仿真实现自主起降；
[0042]
图5为现实中无人机的自主降落示意图；
[0043]
图6为现实中无人机自主巡航示意图。
具体实施方式
[0044]
参见附图，本发明提供了一种基于数字孪生的无人机自主起降巡航方法，包括以下步骤：
[0045]
步骤1，搭建无人机3d模型以及场景。
[0046]
仿真中的无人机3d模型以及场景如图1所示，使用模拟端unity建立3d无人机模型、传感器模型以及室内室外场景模型，将建立的无人机模型进行标注，并且设置无人机模型以及室内室外场景的建筑物的3d刚体rigidbody、角色控制器character controller以及对所有的场景设置位置，着色背景，针对无人机模型加碰撞器，设置旋翼，对无人机模型进行位置布控以及无人机模型局部渲染和贴图，使之更加具有科技感、真实感，达到unity场景美观，并且接近真实的场景。
[0047]
步骤2，设计无人机起飞降落。
[0048]
针对步骤1中建立的无人机模型设计起飞降落，由于建立的无人机模型是在unity 3d场景中，因此在project下编写基于c#的script脚本，对无人机模型进行控制，通常在场景中链接场景中模型，根据之前的无人机模型标注，按照标注编写script脚本，script脚本运行在visual studio下，此外还可以在脚本中定义键盘按键，鼠标聚焦，从而更方便地控制无人机的航线，完成虚拟漫游程序实现虚拟视野在所建立场景中的移动与切换。
[0049]
步骤3，模拟端下的传感器模拟。
[0050]
在该步骤中，例如可以使用模拟端unity平台实现传感器模拟，如图3所示：在模拟端中，利用红外传感器进行红外避障，信息传递；利用超声波传感器进行超声波避障；利用普通相机传感器模拟机器视觉；利用深度相机传感器和激光雷达传感器，获取环境深度信息，进行自主定位导航；利用imu传感器进行无人机姿态信息以及无人机运行信息获取；利用高度传感器获取无人机的高度信息及速度信息；利用接触式传感器获得无人机的感知范围，从而通过步骤1至步骤3完成数字孪生模型的构建，如图3所示。
[0051]
模型构建是指针对物理对象，构建其基本单元的模型，可从多领域模型构建以及“几何
‑
物理
‑
行为
‑
规则”多维模型构建两方面进行数字孪生模型的构建，数字孪生模型应涵盖多维度和多领域模型，从而实现对物理对象的全面真实刻画与描述，当模型构建对象相对复杂的时候，需构建模型的层次关系并明确模型的组装顺序，以避免出现难以组装的情况，并且需要构建与添加零部件之间的角度约束、接触约束、偏移约束等约束关系，其次进行模型融合，模型融合是针对一些系统级或复杂系统级孪生模型构建，控件维度的模型组装不能满足物理对象的刻画要求，还需进一步进行的融合，即实现不同学科不同领域之间的融合。最后还需要对模型进行验证，在模型构建、组装、融合后，需要对模型进行验证，
以确保模型的正确性和有效性，模型验证时针对不同需求，检验模型的输出与物理对象的输出是否一致。
[0052]
步骤4，无人机模型的自组网络通信
[0053]
现有的移动自组网(maents)tcp/ip五层体系结构，结合无人机自组网新型通信体系结构，进行自组网络通信。internet最重要的tcp/ip五层体系最大的成功在于模块化协议分层和网络透明性带来的多方面的灵活性，设置认知平面用于无人机通信网络动态信息的认知推理、控制和配置无人机网络相应动态参数，引导、测量和修复数据平面，将较为复杂的动态信息认知和主要的管理控制从单一平面分离，保证数据平面高效实时传输数据，认知平面最重要的是发现引导协议，其在认知平面移动测量提供已知条件下，无人机间的直接链路状态和路径权重计算方法如下式：
[0054][0055]
式中为i到其直接邻居的链路权重；ρ
maci
∈[0,1]为mac占空比，反映信道忙闲，本地mac统计由信标传出；γ
i
为接收机阈值。
[0056]
f
map
(sinr
i,i+1
)为相对映射函数，并且经过推导得到：
[0057][0058]
式中p
rxi
为i最大接收功率；d0为远场距离，d为两无人机间距，γ的取值为2
‑
6，表示对j干扰的源功率，n
o
为噪声功率。
[0059]
链路聚合为路径，端对端的权重定义为：
[0060][0061]
上式表明，单一链路失效回导致整个源路径失效，需要改径并重新计算权重，链路质量取决于链路两端节点的选高管参数“比较”，即：信号干燥噪声比(sinr)(最大值相当于即时接收最大速率)、最大发送速率、接受阈值(可靠传输考虑双向性)、信道接入忙闲等。
[0062]
继而在上述的基础上，针对无人机路径的偏差采用梯度下降法进行误差消除，将当前的位置与所规划的路径之间的差值进行梯度下降，使得无人机位置更加贴近于所规划的路径。
[0063]
步骤5，利用数字孪生技术进行实时交互。
[0064]
此步骤旨在完成虚拟现实的交互，采用三维建模的方法加上模拟端unity中渲染引擎技术对现实生活的场景进行建模，建立高精度模型也就是高沉浸式场景；同时，利用现有的4g，5g模块以及阿里云服务，网络通信技术实现云端远程对飞机发布指令，这是高实时双向交互的数据实时传输，同时与模拟端unity场景进行对接，实现虚拟现实同步，加上现在机器学习，深度学习的发展，利用大数据云平台，对实际场景中无人机数据进行采集，优化模拟端中的无人机模型。将实际场景中的无人机与物联网平台结合，加以虚拟地理环境和多源数据融合以及模拟仿真实现可视智能化监测，提升信息资源配置运行效率和价值，全面升级和优化云平台发布检测水平，达到更好的控制效果。
[0065]
步骤6，在电脑网页启动云命令，通过执行linux命令来对阿里云的资源进行管理，
远程对实际场景中的无人机发布命令。
[0066]
步骤7，利用云平台对实际场景中的无人机进行自组网络通信，以进行现实虚拟同步：先在模拟端unity平台进行无人机模型的自主起降巡航，实际的无人机同样实现无人自主起降巡航，实现同步，完成数据传输，数据采集。
[0067]
本发明设计基于数字孪生技术的无人机自主起降巡航，实现现实虚拟交互，达到现实虚拟，实现数字版的克隆体，将其创建在信息化平台上，从而使无人机在无法实现检测定位的情况下完成自主起降；引入大数据云平台对已经建立的场景模型进行在线优化，针对服务在线升级，引入物联网，实现现实中的无人机信息与虚拟场景中无人机进行实时高效实时交互，解决了无人机中信息化程度较低、数据采集具有延滞性、过于依赖操控手的飞行经验进行决策等现象是推动无人机向智能化发展的核心问题。实现高精度的人机交互，实现多传感器融合进行信息处理，达到远程高精度处理无人机信息，减少无人机本身的计算量，使得无人机更加安全、高效。
[0068]
以上实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的精神和范围，均应包含在本技术的保护范围之内。