和第一操 作位置信息，所述第一操作位置信息包括所述演示屏幕画面上的被操作的第一像素点集合 的信息； 根据用户对所述演示屏幕画面的操作信息，以及所述映射关系，操控所述终端，包括： 根据所述第一像素点集合的信息，以及所述映射关系，获得所述第一像素点集合对应 在所述终端的显示屏幕上第二像素点集合的信息； 根据所述第二像素点集合的信息和所述操作动作信息，操控所述终端。3. 如权利要求1所述的方法，其特征在于，所述操作信息包括第一操作位置信息，所述 第一操作位置信息包括所述演示屏幕画面上的被操作的第一像素点集合的信息； 根据用户对所述演示屏幕画面的操作信息，以及所述映射关系，操控所述终端，包括： 根据所述第一像素点集合的信息，以及所述映射关系，获得所述第一像素点集合对应 在所述终端的显示屏幕上第二像素点集合的信息； 在所述终端的显示屏幕上，将轨迹图标移动至所述第二像素点集合的位置处。4. 如权利要求1至3任一项所述的方法，其特征在于，所述演示屏幕画面的参数信息包 括以下信息中的至少一项：演示屏幕画面的宽度值、所述演示屏幕画面的高度值以及所述 演示屏幕画面上的参考像素点在所述演示图像中的坐标值，所述屏幕参数信息包括所述终 端的屏幕分辨率； 根据所述演示屏幕画面的参数信息和所述终端的屏幕参数信息，确定所述演示屏幕画 面上的像素点与所述终端的显示屏幕上的像素点之间的映射关系，包括： 根据所述演示屏幕画面的宽度值、所述演示屏幕画面的高度值、所述演示屏幕画面上 的参考像素点在所述演示图像中的坐标值、以及所述终端的屏幕分辨率，确定所述演示屏 幕画面上的像素点与所述显示屏幕上的像素点之间的映射关系。5. 如权利要求4所述的方法，其特征在于，根据以下公式确定所述演示屏幕画面上的 像素点与所述终端的显示屏幕上的像素点之间的映射关系：其中，（X，Y)为所述演示屏幕画面上的像素点的坐标值，（Gx，Gy)为与（X，Y)对应的所 述显示屏幕上的像素点的坐标值，TrX为所述显示屏幕的宽度值，TrY为所述显示屏幕的高 度值，CW为所述演示屏幕画面的宽度值，CH为所述演示屏幕画面的高度值，（PtX，PtY)为所 述参考像素点在所述演示图像中的坐标值，所述参考像素点对应于所述显示屏幕上的坐标 原点。6. 如权利要求1至3任一项所述的方法，其特征在于，所述终端的屏幕参数信息包括所 述终端的放置状态信息、所述终端的屏幕分辨率，所述演示屏幕画面的参数信息包括演示 屏幕画面的宽度值、所述演示屏幕画面的高度值、和所述演示屏幕画面上的参考像素点在 所述演示图像中的坐标值； 根据所述演示屏幕画面的参数信息和所述终端的屏幕参数信息，确定所述演示屏幕画 面上的像素点与所述终端的显示屏幕上的像素点之间的映射关系，包括： 根据所述演示屏幕画面的宽度值、所述演示屏幕画面的高度值、所述参考像素点在所 述演示图像中的坐标值、所述终端的屏幕分辨率、以及所述终端的放置状态信息，确定所述 演示屏幕画面上的像素点与所述显示屏幕上的像素点之间的映射关系。7. 如权利要求6所述的方法，其特征在于，所述放置状态信息包括所述终端的放置状 态相对参考状态的倾斜角，其中，所述倾斜角为在所述演示图像上，所述终端的放置状态相 对参考状态沿逆时针方向旋转的角度；在所述终端的放置状态为所述参考状态时，所述显 示屏幕的顶边所在的方向为水平方向，所述显示屏幕的侧边所在的方向为垂直方向；根据 以下公式确定所述演示屏幕画面上的像素点与所述终端的显示屏幕上的像素点之间的映 射关系：其中，（X，Y)为所述演示屏幕画面上的像素点的坐标值，（Gx，Gy)为与（X，Y)对应的所 述显示屏幕上的像素点的坐标值，TrX所述显示屏幕的宽度值，TrY为所述显示屏幕的高度 值，CW为所述演示屏幕画面的宽度值，CH为所述演示屏幕画面的高度值，（PtX，PtY)为所 述参考像素点在所述演示图像中的坐标值，所述参考像素点对应于所述显示屏幕上的坐标 原点，Θ为基于所述倾斜角的角度值β确定的角度值，Θ为像素点（X，Y)与参考像素点 (PtX，PtY)之间的连线与所述显示屏幕的顶边所在的方向之间的第一锐角夹角的角度值。8. 如权利要求7所述的方法，其特征在于，基于所述倾斜角的角度值β确定所述第一 锐角夹角的角度值Θ，包括： 当所述倾斜角的角度值β为〇时，确定所述第一锐角夹角的角度值Θ为α，其中，α 为像素点（X，Υ)与参考像素点（PtX，PtY)之间的连线与水平方向的第二锐角夹角的角度 值；或者 当所述倾斜角的角度值β大于〇、且所述倾斜角的角度值β小于π时，确定所述第一 锐角夹角的角度值Θ为所述倾斜角的角度值β减去角度值α后的差值；或者 当所述倾斜角的角度值β大于或等于π、且所述倾斜角的角度值β小于3 π/2时， 确定所述第一锐角夹角的角度值Θ为所述倾斜角的角度值β与角度值α相加、再减去π 后的值；或者 当所述倾斜角的角度值β大于或等于3 π/2、且所述倾斜角的角度值β小于2 π时， 确定所述第一锐角夹角的角度值Θ为所述倾斜角的角度值β减去角度值α、再减去π后 的值。9. 如权利要求1至8任一项所述的方法，其特征在于，所述根据终端的检测参数信息， 在所述演示图像中检测演示屏幕画面，包括： 在所述演示图像中检测所有具有四边形轮廓的物体； 在检测到的所述所有具有四边形轮廓的物体中，查找出具有终端四边形轮廓的所述演 示屏幕画面，所述终端四边形轮廓与所述终端的检测参数信息匹配。10. 如权利要求9所述的方法，其特征在于，在所述演示图像中检测所有具有四边形轮 廓的物体，包括： 在所述演示图像的确定的图像检测范围内检测所有具有四边形轮廓的物体。11. 如权利要求10所述的方法，其特征在于，根据包括以下信息中的至少一种确定所 述图像检测范围：所述演示屏幕画面的在所述演示图像中的移动信息、所述演示图像中的 演示所述终端操作的演示者手部位置信息、预设的区域范围信息。12. -种远程操控装置，其特征在于，该装置包括： 获取模块，用于获得演示图像，所述演示图像为用于演示终端操作的图像； 检测模块，用于根据终端的检测参数信息，在所述获取模块获取到的所述演示图像中 检测演示屏幕画面，所述演示屏幕画面为所述演示图像中所述终端的屏幕画面； 确定模块，用于根据所述检测模块检测出的所述演示屏幕画面的参数信息和所述终端 的屏幕参数信息，确定所述演示屏幕画面上的像素点与所述终端的显示屏幕上的像素点之 间的映射关系； 操控模块，用于根据用户对所述演示屏幕画面的操作信息，以及所述确定模块确定的 所述映射关系，操控所述终端。13. 如权利要求12所述的装置，其特征在于，所述操作信息包括操作动作信息和第一 操作位置信息，所述第一操作位置信息包括所述演示屏幕画面上的被操作的第一像素点集 合的信息； 所述操控模块具体用于： 根据所述第一像素点集合的信息，以及所述映射关系，获得所述第一像素点集合对应 在所述终端的显示屏幕上第二像素点集合的信息；根据所述第二像素点集合的信息和所述 操作动作信息，操控所述终端。14. 如权利要求12所述的装置，其特征在于，所述操作信息包括第一操作位置信息，所 述第一操作位置信息包括所述演示屏幕画面上的被操作的第一像素点集合的信息； 所述操控模块具体用于： 根据所述第一像素点集合的信息，以及所述映射关系，获得所述第一像素点集合对应 在所述终端的显示屏幕上第二像素点集合的信息；在所述终端的显示屏幕上，将轨迹图标 移动至所述第二像素点集合的位置处。15. 如权利要求12至14任一项所述的装置，其特征在于，所述演示屏幕画面的参数信 息包括以下信息中的至少一项：演示屏幕画面的宽度值、所述演示屏幕画面的高度值以及 所述演示屏幕画面上的参考像素点在所述演示图像中的坐标值，所述屏幕参数信息包括所 述终端的屏幕分辨率； 所述确定模块具体用于： 根据所述演示屏幕画面的宽度值、所述演示屏幕画面的高度值、所述演示屏幕画面上 的参考像素点在所述演示图像中的坐标值、以及所述终端的屏幕分辨率，确定所述演示屏 幕画面上的像素点与所述显示屏幕上的像素点之间的映射关系。16. 如权利要求15所述的装置，其特征在于，所述确定模块具体用于根据以下公式确 定所述演示屏幕画面上的像素点与所述终端的显示屏幕上的像素点之间的映射关系：其中，（X，Y)为所述演示屏幕画面上的像素点的坐标值，（Gx，Gy)为与（X，Y)对应的所 述显示屏幕上的像素点的坐标值，TrX所述显示屏幕的宽度值，TrY为所述显示屏幕的高度 值，CW为所述演示屏幕画面的宽度值，CH为所述演示屏幕画面的高度值，（PtX，PtY)为所述 参考像素点在所述演示图像中的坐标值，所述参考像素点对应于所述显示屏幕上的坐标原 点。17. 如权利要求12至14任一项所述的装置，其特征在于，所述终端的屏幕参数信息包 括所述终端的放置状态信息、所述终端的屏幕分辨率，所述演示屏幕画面的参数信息包括 演示屏幕画面的宽度值、所述演示屏幕画面的高度值、和所述演示屏幕画面上的参考像素 点在所述演示图像中的坐标值； 所述确定模块具体用于： 根据所述演示屏幕画面的宽度值、所述演示屏幕画面的高度值、所述参考像素点在所 述演示图像中的坐标值、所述终端的屏幕分辨率、以及所述终端的放置状态信息，确定所述 演示屏幕画面上的像素点与所述显示屏幕上的像素点之间的映射关系。18. 如权利要求17所述的装置，其特征在于，所述放置状态信息包括所述终端的放置 状态相对参考状态的倾斜角，其中，所述倾斜角为在所述演示图像上，所述终端的放置状态 相对参考状态沿逆时针方向旋转的角度；在所述终端的放置状态为所述参考状态时，所述 显示屏幕的顶边所在的方向为水平方向，所述显示屏幕的侧边所在的方向为垂直方向；所 述确定模块具体用于根据以下公式确定所述演示屏幕画面上的像素点与所述终端的显示 屏幕上的像素点之间的映射关系：其中，（Χ，γ)为所述演示屏幕画面上的像素点的坐标值，（Gx，Gy)为与（X，Y)对应的所 述显示屏幕上的像素点的坐标值，TrX所述显示屏幕的宽度值，TrY为所述显示屏幕的高度 值，CW为所述演示屏幕画面的宽度值，CH为所述演示屏幕画面的高度值，（PtX，PtY)为所 述参考像素点在所述演示图像中的坐标值，所述参考像素点对应于所述显示屏幕上的坐标 原点，Θ为基于所述倾斜角的角度值β确定的角度值，Θ为像素点（X，Y)与参考像素点 (PtX，PtY)之间的连线与所述显示屏幕的顶边所在的方向之间的第一锐角夹角的角度值。19. 如权利要求18所述的装置，其特征在于，所述确定模块具体用于： 当所述倾斜角的角度值β为〇时，确定所述第一锐角夹角的角度值Θ为α，其中，α 为像素点（X，Υ)与参考像素点（PtX，PtY)之间的连线与水平方向的第二锐角夹角的角度 值；或者 当所述倾斜角的角度值β大于〇、且所述倾斜角的角度值β小于π时，确定所述第一 锐角夹角的角度值Θ为所述倾斜角的角度值β减去角度值α后的差值；或者 当所述倾斜角的角度值β大于或等于π、且所述倾斜角的角度值β小于3 π/2时， 确定所述第一锐角夹角的角度值Θ为所述倾斜角的角度值β与角度值α相加、再减去π 后的值；或者 当所述倾斜角的角度值β大于或等于3 π/2、且所述倾斜角的角度值β小于2 π时， 确定所述第一锐角夹角的角度值Θ为所述倾斜角的角度值β减去角度值α、再减去π后 的值。20. 如权利要求12至19任一项所述的装置，其特征在于，所述检测模块具体用于： 在所述演示图像中检测所有具有四边形轮廓的物体；在检测到的所述所有具有四边形 轮廓的物体中，查找出具有终端四边形轮廓的所述演示屏幕画面，所述终端四边形轮廓与 所述终端的检测参数信息匹配。21. 如权利要求20所述的装置，其特征在于，所述检测模块具体用于： 在所述演示图像的确定的图像检测范围内检测所有具有四边形轮廓的物体。22. 如权利要求21所述的装置，其特征在于，所述检测模块具体用于根据包括以下信 息中的至少一种确定所述图像检测范围：所述演示屏幕画面的在所述演示图像中的移动信 息、所述演示图像中的演示所述终端操作的演示者手部位置信息、预设的区域范围信息。
【专利摘要】本发明涉及控制技术领域，尤其涉及一种远程操控方法及装置，用以在能够呈现终端的除屏幕内容之外的信息及演示者演示内容的情况下，实现对终端的远程操控。本发明实施例提供一种远程操控方法包括：获得演示图像，所述演示图像为用于演示终端操作的图像；根据终端的检测参数信息，在所述演示图像中检测演示屏幕画面，所述演示屏幕画面为所述演示图像中所述终端的屏幕画面；根据所述演示屏幕画面的参数信息和所述终端的屏幕参数信息，确定所述演示屏幕画面上的像素点与所述终端的显示屏幕上的像素点之间的映射关系；根据用户对演示屏幕画面的操作信息，以及所述映射关系，操控终端。
【IPC分类】G06F17/50
【公开号】CN104899361
【申请号】CN201510257853
【发明人】宋星光, 廉士国
【申请人】华为技术有限公司
【公开日】2015年9月9日
【申请日】2015年5月19日