一种基于室内定位与电子罗盘的增强现实与远程控制方法
【专利摘要】本发明公开了一种基于室内定位与电子罗盘的增强现实与远程控制方法，以增强现实的方式，为用户提供一种便捷高效地智能家居设备的控制体验。在智能家居环境中，提前建立起三维坐标系并将智能设备标定在三维坐标上作为识别目标点，本发明基于普通智能家居中的无线与有线混合控制，无需考虑移动智能端与被控设备之间是否存在障碍物，利用增强现实技术，仍可在智能端的显示设备上成像，显示被控设备的位置，方便控制。其优点包括：无需购买额外硬件设备与房屋三维虚拟结构图；操作界面不单一，按钮搜索快速，操作简单；无需记忆复杂的目录结构，不易误触；操作界面融合现实场景，直观性与灵活性强。
【专利说明】-种基于室内定位与电子罗盘的增强现实与远程控制方法
【技术领域】
[0001] 本发明涉及智能家居，特别涉及一种基于室内定位与电子罗盘的增强现实与远程 控制方法。
【背景技术】
[0002] 智能家居是以住宅为平台，利用各种物联网技术（如无线网络通信技术、射频识 别技术等），构建高效的住宅设施与家庭日程事务的管理系统，提升家居安全性、便利性、舒 适性、艺术性，并实现环保节能的居住环境。
[0003] 智能家居是今后家居领域发展的必然趋势，虽然市场推广才刚刚开始，但行业的 竞争已经很激烈。根据《中国智能家居设备行业发展环境与市场需求预测分析报告前瞻》分 析，目前我国智能家居产品与技术的百花齐放，市场开始明显出现低、中、高不同产品档次 的分水岭，行业进入快速成长期。面对中国庞大的需求市场，预计该行业将以年均19. 8%的 速率增长，在2015年产值达1240亿元。
[0004] 增强现实技术是一种同时包括虚拟世界和真实世界的环境（如Google眼镜），其 目的是将真实世界中蕴含的信息数据，与人们目视的场景实时融合，以增强对真实世界的 认识。现在该技术广泛应用于电影行业、地图导航、泛在测绘等领域，但是还未在智能家居 领域应用。
[0005] 为了提高智能家居的便捷性，很多智能家居系统利用移动智能设备（如智能手 机、平板电脑、智能面板等）进行互动式控制智能家居的方式。但是由于智能家居设备过 多、协议不同、信息量大而复杂与控制方式多样，传统控制应用具有两大缺点：①界面按钮 过多，操作繁琐，容易误触；②目录结构层次多而复杂，不易记忆，搜索效率低。这带来较大 的不便利，使得用户体验极度降低，严重影响智能家居的便捷性。
[0006] 现有技术方案：
[0007] 专利一：一种互动式控制智能家居设备的方法及家庭网络系统
[0008] 专利号：CN2〇10101666〇9· 8
[0009] 内容：本发明实施例公开了一种互动式控制智能家居设备的方法，包括：通过手 持终端设备下发命令给集中控制设备获取家庭网络中智能家居设备的相关参数；根据所 述智能家居设备的相关参数向集中控制设备发送控制指令；集中控制设备在收到控制指令 后，分析所述控制指令中所关联的智能家居设备信息，并将所述智能家居设备信息和所关 联的控制指令下发到家庭网关中；家庭网关根据集中控制设备下发的控制指令向所关联的 智能家居设备发送控制指令，使智能家居设备根据所述控制指令完成相应的受控功能。本 发明实施例还公开了一种系统，通过本发明实施例，能够方便用户使用各种智能家居设备， 使得各种家电在更高的意义上实现家电的自动化。该专利需要中间设备较多，且不根据不 同设备的协议转换控制指令。
[0010] 专利二：一种基于移动终端的智能家居遥控系统
[0011] 专利号：CN201210156434. 1
[0012] 内容：本发明公开了一种基于移动终端的智能家居遥控系统。所述系统包括具有 网络通信功能的移动终端和服务器，所述移动终端进一步包括：控制指令获取模块，用于根 据需要控制的家居电器的型号，通过网络从所述服务器上获取该家居电器的控制方式、控 制码以及该家居电器控制面板的信息；连接建立模块，用于根据获得的家居电器的控制码 以对应的控制方式与该家居电器进行控制指令的匹配和链接，建立所述移动终端与该家居 电器的远程连接；远程控制模块，通过按下相应的按键图标发出控制指令来远程控制该需 要控制的家居电器。通过该系统就可以实现多个家居电器以移动终端来进行控制，并与网 络进行连接，获得更加丰富的信息，且操作简单方便。该专利仅罗列了所有受控设备对应的 按钮图标，若设备较多，用户不易寻找目标按钮，且容易误触。
[0013] 专利三：一种智能家居控制系统中的万能遥控器
[0014] 专利号：CN2〇〇92〇l65542· 9
[0015] 内容：本实用新型公开了一种智能家居控制系统中的具有学习功能的遥控器，用 以为智能家居控制系统的整体控制提供可能。一种智能家居控制系统中的万能遥控器，包 括：显示模块，用于显示智能家居控制系统的操作控制界面；近距离无线通信模块，用于实 现近距离无线通信；红外信号接收模块，用于接收智能家居设备的遥控器发出不同控制功 能的红外编码信号并转发；第一嵌入式微处理器，通过IXD数据总线连接所述显示单元，学 习并还原红外编码信号；第二嵌入式微处理器，分别通过串行接口连接在所述第一嵌入式 微处理器和近距离无线通信模块单元之间，用于接收所述第一嵌入式微处理器输出的控制 指令并通过近距离无线通信模块发送。该专利外的设备（遥控器），且与现实场景毫无联 系。
[0016] 专利四：一种智能家居控制装置用户操作界面的组建方法
[0017] 专利号：CN200910042078. 9
[0018] 本发明公开了一种能家居控制装置用户操作界面的组建方法，包括如下步骤：（1) 从图库中调用与住所格局一致的房屋三维结构图及可方便辨认的表示住所中受控设备的 图标；(2)按照住所的装修结构，将对应受控设备的图标放置在房屋三维结构图中的相应 位置；（3)建立对应受控设备的图标与住所中实际的受控设备的控制链接。此方法可实现 三维立体智能家居操作，增强操作界面的直观性和灵活性。该专利需要构建完整的房屋虚 拟三维结构图，需要一定的存储空间与计算时间；虽然与现实场景有一定联系，且把设备图 表标注在对应位置；但是如果房屋结构复杂，且设备分布杂乱；用户寻找某个设备时，操作 较繁琐且容易误触。
【发明内容】
[0019] 为克服上述现有技术的缺陷与不足，本发明提供一种基于室内定位与电子罗盘的 增强现实与远程控制方法。
[0020] 本发明的技术方案是：
[0021] 1. 一种基于室内定位与电子罗盘的增强现实与远程控制方法，其特征在于，包括 步骤：
[0022] 1)定位，在三维坐标系中利用室内定位技术定位移动智能端坐标A(x, y, z);
[0023] 2)确定朝向，利用移动智能端的传感器确定水平方向和倾斜角度而组成朝向向量 a ；
[0024] 3)捕获点，当移动智能端A到识别目标B的向量5，与朝向向量α之间的夹角β小 于阈值K时，则将识别目标捕获，否则丢弃识别目标；
[0025] 4)读取捕获点信息，通过网络连接服务器数据库，读取被捕获识别目标的全部或 局部信息，包括状态信息与控制信息，使用显示增强的方式，添加在后置摄像头拍摄的实景 上；若没有找到需要的目标点，可直接移动位置或更新朝向后，返回步骤1);
[0026] 5)选择控制点，用户点击所需的识别目标，进入步骤6 ;
[0027] 6)点控制，移动智能端将控制信息发送至服务器，服务器发送相关控制指令至相 应的智能家居设备，智能家居设备根据控制指令完成相应控制操作；控制完成后，可退回步 骤5选择其他已捕获对象进行控制，或直接移动位置或更新朝向后，返回步骤1。
[0028] 优选的，步骤1所述的定位的步骤为：
[0029] 101)在建筑物中装备至少3个无线路由器，并在三维坐标系上标定坐标，令为 P (xp, yp, zp), Q (xq, yq, zq), R (xr, yr, zr)；
[0030] 102)检测各无线路由器接收的信号强度指示值RSSI ;
[0031] 103)通过各无线路由器接收到的信号强弱，测定移动智能端（令为A)与各无线路 由器的距离AP、AQ、AR;在已建立的三维坐标系中，根据各无线路由的已知坐标与移动智能 端与各无线路由的距离，根据公式（1)，计算得移动智能端A的定位坐标（x a，ya，za)。
【权利要求】
1. 一种基于室内定位与电子罗盘的增强现实与远程控制方法，其特征在于，包括步 骤： 1) 定位，在三维坐标系中利用室内定位技术定位移动智能端坐标点A(x，y，z); 2) 确定朝向，利用移动智能端的传感器确定水平方向与倾斜角度而组成朝向向量5;; 3) 捕获点，当A到识别目标B的向量?，与朝向向量5之间的夹角小于阈值时，则将识 别目标捕获，否则丢弃识别目标； 4) 读取捕获点信息，通过网络连接服务器数据库，读取被捕获识别目标的全部或局部 信息，包括状态信息与控制信息，使用显示增强的方式，添加在后置摄像头拍摄的实景上； 若没有找到需要的目标点，则直接移动位置或更新朝向后，返回步骤1); 5) 选择控制点，用户点击所需的识别目标，进入步骤6 ; 6) 点控制，移动智能端将控制信息发送至服务器，服务器发送相关控制指令至相应的 智能家居设备，智能家居设备根据控制指令完成相应控制操作；控制完成后，则退回步骤5 选择其它已捕获对象进行控制，或直接移动位置或更新移动智能端朝向后，返回步骤1。
2. 根据权利要求1所述的基于室内定位与电子罗盘的增强现实与远程控制方法，其特 征在于，步骤1所述的定位的步骤为： 101) 在建筑物中装备至少3个无线路由器，并在三维坐标系上标定坐标，令为 P(xp,yp,zp),Q(xq,yq,zq),R(xr,yr,zr)； 102) 检测各无线路由器接收的信号强度指示值RSSI; 103) 基于各无线路由器接收到的信号强弱，测定移动智能端（令为A)与各无线路由器 的距离AP、AQ、AR;在已建立的三维坐标系中，根据各无线路由的已知坐标与移动智能端与 各无线路由的距离，根据公式（1)，计算得移动智能端A的定位坐标（xa，ya，za)。
3. 根据权利要求2所述的基于室内定位与电子罗盘的增强现实与远程控制方法，其特 征在于，步骤2所述的确定朝向有如下具体步骤： 201) 确定水平方向，通过电子罗盘确定移动智能端的水平方向； 202) 确定倾斜角度，通过加速度计确定移动智能端的垂直方向上的倾斜角度，即垂直 于移动智能端屏幕直线与水平面之间的角度。
4. 根据权利要求3所述的基于室内定位与电子罗盘的增强现实与远程控制方法， 其特征在于，所述步骤201具体为：通过电子罗盘确定移动智能端的水平方向，用单位 向量？（X(I，yci，〇)表示；所述步骤202具体为：通过加速度计确定移动智能端的垂直方向上 的倾斜角度β，即垂直于移动智能端屏幕直线与水平面之间的角度；最后根据公式（2)，利 用倾斜角度β与水平向量？计算得朝向向量5 (xs,ys,Zs)。
5.根据权利要求2所述的基于室内定位与电子罗盘的增强现实与远程控制方法，其特 征在于，步骤6所述的点控制有如下具体步骤： 601) 获取当前状态，首先获取当前的控制信息与状态信息，并添加在后置摄像头拍摄 的实景上； 602) 用户操作，用户通过相应控制界面，对智能家居设备进行相应控制操作； 603) 控制信息发送至服务器，根据用户的操作，移动智能端将设备坐标与控制操作，组 成控制信息发送至服务器； 604) 服务器通过控制指令控制设备，服务器接收到控制信息后，根据设备坐标，获取设 备的相关协议及相关信息，再根据设备协议与控制操作编译成相应控制指令，最后发送相 应控制指令至设备，完成相应控制操作，并更新状态，返回步骤601。
【文档编号】G05B15/02GK104460330SQ201410613632
【公开日】2015年3月25日 申请日期:2014年11月4日 优先权日:2014年11月4日
【发明者】鲍淑娣, 王春岩, 卢阳, 张永平 申请人:宁波工程学院