专利名称：网页浏览控制系统及方法
技术领域：
本发明涉及ー种网页浏览控制系统及方法。
背景技术：
目前，用户在利用电子装置，例如手机，计算机等，浏览网页的过程中，一般是通过键盘或触控屏幕操作网页，例如上下拉动网页，翻页，关闭网页等操作。由于键盘或触控屏幕灵敏度的限制，常常会出现执行简单的网页操作却费时又费カ的情况，或是频繁操作导致键盘磨损或触控屏幕出现划痕。
发明内容
鉴于以上内容，有必要提出一种网页浏览控制系统及方法，可以摆脱在利用电子 装置浏览网页的过程中操作网页时对键盘或触控屏幕的依赖。一种网页浏览控制方法，该方法包括(A)设置电子装置的存储器存储的标准唇语视频影像与网页操作指令之间的关联；(B)在电子装置的显示器上显示网页供用户浏览，利用摄像装置撷取用户的视频影像，并将该视频影像存储于所述存储器；(C)识别该视频影像的各帧影像中的人脸区域；(D)识别各帧影像中人脸区域中的唇部区域及唇部轮廓；(E)将每帧影像中的唇部轮廓结合每帧影像对应的时间信息组成用户的唇动视频影像；(F)提取存储器存储的各段标准唇语视频影像唇部轮廓变化的特征矩阵，及提取唇动视频影像中唇部轮廓变化的特征矩阵，井根据所述特征矩阵查找与该唇动视频影像相匹配的标准唇语视频影像；及(G)从存储器中获取与该标准唇语视频影像相关联的网页操作指令，执行该网页操作指令对网页进行相应控制。一种网页浏览控制系统，应用于电子装置。该电子装置的存储器存储有标准唇形视频影像数据及网页操作指令集。该系统包括关联设置模块、人脸识别模块、唇部轮廓识别模块、唇形变化追踪模块、唇语匹配模块及指令执行模块。关联设置模块设置电子装置的存储器存储的标准唇语视频影像与网页操作指令之间的关联。电子装置的显示器上显示网页供用户浏览时，摄像装置撷取用户的视频影像，并将该视频影像存储于所述存储器。人脸识别模块识别该视频影像的各帧影像中的人脸区域。唇部轮廓识别模块识别各帧影像中人脸区域中的唇部区域及唇部轮廓。唇形变化追踪模块将每帧影像中的唇部轮廓结合每帧影像对应的时间信息组成用户的唇动视频影像。唇语匹配模块提取存储器存储的各段标准唇语视频影像唇部轮廓变化的特征矩阵，及提取唇动视频影像中唇部轮廓变化的特征矩阵，并根据所述特征矩阵查找与该唇动视频影像相匹配的标准唇语视频影像。指令执行模块从存储器中获取与该标准唇语视频影像相关联的网页操作指令，执行该网页操作指令对网页进行相应控制。相较于现有技术，本发明所提供之网页浏览控制系统及方法利用唇语控制网页操作，用户不需要键盘或触控屏幕操作网页，既方便用户浏览网页，又可以避免因频繁操作导致键盘磨损或触控屏幕出现划痕的问题。
图I是本发明网页浏览控制系统较佳实施方式的功能模块图。图2是本发明网页浏览控制方法较佳实施方式的流程图。图3是确定影像中唇部位置的示意图。主要元件符号说明
权利要求
1.一种网页浏览控制方法，其特征在于，该方法包括 关联设置步骤设置电子装置的存储器存储的标准唇语视频影像与网页操作指令之间的关联； 视频影像撷取步骤在电子装置的显示器上显示网页供用户浏览，利用摄像装置撷取用户的视频影像，并将该视频影像存储于所述存储器； 人脸识别步骤识别该视频影像的各帧影像中的人脸区域； 唇部轮廓识别步骤识别各帧影像中人脸区域中的唇部区域及唇部轮廓； 唇形变化追踪步骤将每帧影像中的唇部轮廓结合每帧影像对应的时间信息组成用户的唇动视频影像； 唇语匹配步骤提取各段标准唇语视频影像唇部轮廓变化的特征矩阵，及提取唇动视频影像中唇部轮廓变化的特征矩阵，井根据所述特征矩阵查找与该唇动视频影像相匹配的标准唇语视频影像；及 指令执行步骤从存储器中获取与该标准唇语视频影像相关联的网页操作指令，执行该网页操作指令对网页进行相应控制。
2.如权利要求I所述的网页浏览控制方法，其特征在于，每帧影像中人脸区域的下1/3区域为唇部区域。
3.如权利要求I所述的网页浏览控制方法，其特征在于，所述唇部轮廓识别步骤包括对每帧影像中的唇部区域进行影像增强后，提取唇部区域的特征点的坐标组成该帧影像中的唇部轮廓。
4.如权利要求3所述的网页浏览控制方法，其特征在于，所述唇动视频影像中唇部轮廓变化的特征矩阵是基于该唇动视频影像的各帧影像中唇部轮廓的特征点的坐标变化构建而成。
5.一种网页浏览控制系统，其特征在干，该系统包括 关联设置模块，用于设置电子装置的存储器存储的标准唇语视频影像与网页操作指令之间的关联； 视频影像撷取模块，用于当电子装置的显示器上显示网页供用户浏览时，利用摄像装置撷取用户的视频影像，并将该视频影像存储于所述存储器； 人脸识别模块，用于识别该视频影像的各帧影像中的人脸区域； 唇部轮廓识别模块，用于识别各帧影像中人脸区域中的唇部区域及唇部轮廓； 唇形变化追踪模块，用于将每帧影像中的唇部轮廓结合每帧影像对应的时间信息组成用户的唇动视频影像； 唇语匹配模块，用于提取各段标准唇语视频影像唇部轮廓变化的特征矩阵，及提取唇动视频影像中唇部轮廓变化的特征矩阵，井根据所述特征矩阵查找与该唇动视频影像相匹配的标准唇语视频影像；及 指令执行模块，用于从存储器中获取与该标准唇语视频影像相关联的网页操作指令，执行该网页操作指令对网页进行相应控制。
6.如权利要求5所述的网页浏览控制系统，其特征在于，每帧影像中人脸区域的下1/3区域为唇部区域。
7.如权利要求5所述的网页浏览控制系统，其特征在于，所述唇部轮廓识别模块是对每帧影像中的唇部区域进行影像增强后，提取唇部区域的特征点的坐标组成该帧影像中的唇部轮廓。
8.如权利要求5所述的网页浏览控制系统，其特征在于，所述唇动视频影像中唇部轮廓变化的特征矩阵是基于该唇动视频影像的各帧影像中唇部轮廓的特征点的坐标变化构建而成。
全文摘要
本发明提供一种网页浏览控制系统，应用于电子装置。该系统设置电子装置存储的标准唇语视频影像与网页操作指令之间的关联。当电子装置显示网页供用户浏览时，摄像装置撷取用户的视频影像。该系统识别各帧影像中的唇部轮廓，并根据每帧影像中的唇部轮廓组成用户的唇动视频影像。之后，该系统提取各段标准唇语视频影像及唇动视频影像中唇部轮廓变化的特征矩阵，根据特征矩阵查找与该唇动视频影像相匹配的标准唇语视频影像，并执行与该标准唇语视频影像相关联的网页操作指令对网页进行相应控制。本发明还提供一种网页浏览控制方法。
文档编号G06K9/00GK102841676SQ20111017103
公开日2012年12月26日 申请日期2011年6月23日 优先权日2011年6月23日
发明者汪卓浩 申请人:鸿富锦精密工业(深圳)有限公司, 鸿海精密工业股份有限公司