专利名称：视觉跟踪智能控制方法
技术领域：
本发明涉及的是以计算机模式识别方法实时跟踪眼睛视点移动变化的视觉跟踪控制的实现方法。
背景技术：
随着计算机模式识别技术的大力发展，以计算机控制方式实现人机指令信息智能交互一直是人们的企望。但如何根据眼睛视觉观察移动的特点，实现计算机实时跟踪眼睛视点变化、以达到由眼睛转动变化来直接控制计算机在眼睛注视点位置完成所需指令操作的目的，仍是人机交互技术的一大空白和难题。
发明内容
为弥补计算机在视觉感知方面存在的以模式识别技术实现实时跟踪眼睛视觉注视点变化的技术空白，本发明专利申请提供了一套以计算机控制来实现视觉跟踪智能控制方法的整体技术方案，该技术方案的主要技术内容是①、从头部图像中提取已设定为主观测眼的眼睛部件，确定其眼角膜几何中心；②、将眼角膜几何中心与其被视范围几何中心相对应，确定此时的眼角膜几何中心的位置，再以偏离该被视范围几何中心最大距离的各边界点与眼角膜几何中心对应偏转量之间形成确定关系，从而构成眼角膜几何中心的视角边界数据比例模型；③、将主观测眼部件的眼角膜几何中心的视觉注视点偏移量与视角边界数据比例模型按比例对应比较，以获取在被视范围内的实际视觉注视点；④、由计算机在该视点位置进行所需指令处理。
本发明专利申请提供的计算机智能化视觉跟踪控制方法，改变了现有计算机通过键盘、鼠标等指令输入设备使计算机被动地取得指令的技术现状，而是通过对眼睛在被视范围内的注视点的实时跟踪，就可确定其真实的眼睛视觉观察点(简称视点)的位置，从而实现了计算机主动感知方式自动获取人对机指令信息，达到真正的人机交互使用的目的。本技术的应用为人们计算机使用提供了很多方便，使用者可以省去一些鼠标等类似操作，转转眼睛就可实现电脑操作的目的，如由计算机自动将其指针光标随眼睛视觉注视点的变化而移动控制使用，对正常人、特别是对部分残疾人都能够真正简单地操纵使用计算机，本技术还可应用于如由眼睛注视点来自动锁定实际操作目标来实现在该锁定目标所需的指令控制操作等，所以其应用范围非常广阔。
具体实施例方式
本发明专利申请技术所公开的视点跟踪智能控制方法，其具体实现过程是1、首先确定使用者的主观测眼，再由摄像机来获得计算机所需的头部图像，由图像处理技术，包括有图像增强、平滑、边缘锐化、分割、特征抽取等方法，从头部图像中提取已设定为主观测眼的眼睛部件，确定其眼角膜几何中心。事实上以模式识别来完成上述过程的方法非常多，在此仅通过几个实例起到举一反三的作用。在该过程中，可通过图像的灰度简化方法，在简化后的图像中分割提取主观测眼部件，然后由人眼部件的二维图像中按几何图形近似处理方法，确定该眼部件的两三角形眼白的三角形顶点位置及两顶点间的距离、眼角膜两侧圆弧边缘，由两圆弧边缘来计算确定眼角膜的几何中心。
2、眼角膜几何中心即可视为瞳孔中心，由该瞳孔的变化来确定注视点的变化。使眼角膜几何中心注视被视范围的几何中心，以便确定此时眼角膜几何中心在摄取图像中的位置。事实上，眼角膜几何中心是随头部移动而移动的，可在计算机上作二维坐标按比例移动，从而消除其移动误差。
其次，由眼角膜几何中心注视该被视范围偏离其几何中心四周最大距离的各边界点，测定眼角膜几何中心的各偏转量与其被视范围的对应关系，确定眼角膜几何中心的偏转量数据在摄取图像中的边界框，从而构成眼角膜几何中心的视角边界数据比例模型。该视角边界数据比例模型则作为计算机跟踪眼睛注视点的一份数据标本，是作为实现实时注视点跟踪提供的媒介。
3、将主观测眼部件的眼角膜几何中心的视觉注视点偏移量与视角边界数据比例模型按方向、比例对应比较，从而获取注视点在被视范围内的对应点，即实际观测点。
4、由计算机在该视点位置进行所需指令处理。
根据本发明提供的控制方法，不同的使用者，还可将第1步所形成的主观测眼部件的特征图像及与其对应的视角边界数据比例模型保留起来，建立特征数据库，以便在今后的使用中将使用者的主观测眼部件与数据库中的各个眼部件进行比较，找出相同或最为近似的，然后按该相同或最为近似眼部件直接调取对应的视角边界数据比例模型，从而提高计算机的运算速度。
权利要求
1.一种视觉跟踪智能控制方法，其特征在于该方法为①、从头部图像中提取已设定为主观测眼的眼睛部件，确定其眼角膜几何中心；②、将眼角膜几何中心与其被视范围几何中心相对应，确定此时的眼角膜几何中心的位置，再以偏离该被视范围几何中心最大距离的各边界点与眼角膜几何中心对应偏转量之间形成确定关系，从而构成眼角膜几何中心的视角边界数据比例模型；③、将主观测眼部件的眼角膜几何中心的视觉注视点偏移量与视角边界数据比例模型按比例对应比较，以获取在被视范围内的实际视觉注视点；④、由计算机在该视点位置进行所需指令处理。
2.根据权利要求1所述的控制方法，其特征在于以计算机二维坐标移动消除眼角膜几何中心随头部移动而移动的移动误差。
3.根据权利要求1所述的控制方法，其特征在于将第①步所形成的主观测眼部件的特征图像及第②步对应构成的视角边界数据比例模型保留起来，建立特征数据库，此后将每次使用者的主观测眼部件与数据库中的各眼部件进行比较，找出相同或最为近似的，然后直接调取该相同或最为近似眼部件的视角边界数据比例模型。
全文摘要
本发明通过计算机模式识别方法来实现实时跟踪眼睛视点移动变化的视觉跟踪控制方法。本方法主要是通过建立视角边界数据比例模型作为数据模仿标本，来实现眼睛注视点跟踪。本技术实现了计算机以主动感知方式来自动获取人对机指令信息，达到真正的人机交互使用的目的。使用者通过转转眼睛就可实现电脑操作的目的，因而本技术具有广阔的应用范围。
文档编号G06T5/00GK1570949SQ0313376
公开日2005年1月26日 申请日期2003年7月18日 优先权日2003年7月18日
发明者万众一 申请人:万众一