一种视频图像的获取方法及装置的制造方法
【技术领域】
[0001]本发明涉及图像处理技术领域，尤其涉及一种视频图像的获取方法及装置。
【背景技术】
[0002]随着互联网技术的不断发展，基本的语音功能已经不能满足用户日益增长的通话需求，用户更多时候可能需要进行视频通话，如进行视频会议等等，该视频通话的方式可通过摄像头、话筒等设备实时传输画面和声音，使得用户之间能够更好地交流。
[0003]在人与人面对面进行交流时，交流者之间可以进行目光接触，从而更好地掌握当前的交流状态以取得较好的沟通效果。然而，在视频会议过程中，由于摄像头和用户注视屏幕的视线之间有一定的夹角，用户在视频时视线一般指向视频显示屏幕，使得视频显示屏幕中用户的眼部图像无法聚焦，即用户之间无法进行目光接触，导致不能取得良好的沟通效果。
[0004]目前，可通过将摄像头安置于屏幕的正后方，使得用户在看屏幕时就正好盯住了摄像头，该屏幕分为屏幕显示和屏幕透明两个交替周期(两个交替周期的时间较短)，处于屏幕显示的周期时，摄像头关闭，即不采集用户图像；屏幕透明的周期，摄像头捕捉当前用户图像并传输给视频对方，从而解决视频时用户之间无法进行目光接触的问题。然而，该设计需要安装专用的硬件，实现复杂，且成本较高。
【发明内容】
[0005]本发明实施例所要解决的技术问题在于，提供一种视频图像的获取方法及装置，可通过将视频图像中的眼部图像替换为用户视线指向摄像头的眼部替换图像来实现用户之间的目光接触。
[0006]第一方面，本发明实施例提供了一种视频图像的获取方法，包括:
[0007]当用户进行视频时，从包含所述用户的视频图像中获取眼部图像；
[0008]将所述眼部图像与预置的眼部参考图像集合中的眼部参考图像进行对比，从所述眼部参考图像集合中筛选出与所述眼部图像的图像相似度大于预设相似度阈值的眼部参考图像作为目标参考图像，所述眼部参考图像为所述用户的视线指向视频显示屏幕时的眼部图像；
[0009]获取与所述目标参考图像相关联的眼部替换图像，并将所述眼部替换图像作为所述视频图像的眼部图像，所述眼部替换图像为所述用户的视线指向摄像头时的眼部图像，所述摄像头用于采集所述视频图像。
[0010]结合第一方面，在第一种可能的实现方式中，在所述当用户进行视频时，从包含所述用户的视频图像中获取眼部图像之前，所述方法还包括:
[0011]采集用户在不同位置时视线指向视频显示屏幕的第一用户图像以及视线指向摄像头的第二用户图像，所述第一用户图像以及所述第二用户图像包含所述用户的眼部图像；
[0012]通过预设的分类器对所述第一用户图像以及所述第二用户图像进行训练，获得所述第一用户图像对应的第一眼部图像以及所述第二用户图像对应的第二眼部图像，并将所述第一眼部图像作为眼部参考图像，将所述第二眼部图像作为眼部替换图像。
[0013]结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中，所述通过预设的分类器对所述第一用户图像以及所述第二用户图像进行训练，获得所述第一用户图像对应的第一眼部图像以及所述第二用户图像对应的第二眼部图像，包括:
[0014]分别从所述第一用户图像中提取出所述用户的第一脸部图像以及从所述第二用户图像中提取出所述用户的第二脸部图像；
[0015]通过预设的分类器对所述第一脸部图像以及所述第二脸部图像进行训练，获得所述第一脸部图像中的第一眼部图像以及所述第二脸部图像中的第二眼部图像。
[0016]结合第一方面的第一种可能的实现方式，或者第一方面的第二种可能的实现方式，在第三种可能的实现方式中，还包括:
[0017]获取所述第一用户图像中所述用户所处的第一位置，以及获取所述第二用户图像中所述用户所处的第二位置；
[0018]检测所述第一位置和所述第二位置是否为同一个位置，若是，则将所述第一用户图像对应的第一眼部图像和所述第二用户图像对应的第二眼部图像相关联。
[0019]结合第一方面，在第四种可能的实现方式中，所述图像相似度包括像素均方差；所述将所述眼部图像与预置的眼部参考图像集合中的眼部参考图像进行对比，从所述眼部参考图像集合中筛选出与所述眼部图像的图像相似度大于预设相似度阈值的眼部参考图像作为目标参考图像，包括:
[0020]计算预置的眼部参考图像集合中的眼部参考图像与所述眼部图像之间的像素均方差，并检测所述像素均方差是否低于预设的像素差阈值；
[0021]若低于所述像素差阈值，则将所述眼部参考图像确定为目标参考图像。
[0022]结合第一方面的第四种可能的实现方式，在第五种可能的实现方式中，在所述计算预置的眼部参考图像集合中的眼部参考图像与所述眼部图像之间的像素均方差之前，还包括:
[0023]对所述眼部图像进行分块处理得到图像分块；
[0024]通过将所述图像分块向各个预设方向移动后确定的新的图像，对所述眼部图像进行更新。
[0025]第二方面，本发明实施例还提供了一种视频图像的获取装置，包括:
[0026]第一获取模块，用于当用户进行视频时，从包含所述用户的视频图像中获取眼部图像；
[0027]筛选模块，用于将所述第一获取模块获取的眼部图像与预置的眼部参考图像集合中的眼部参考图像进行对比，从所述眼部参考图像集合中筛选出与所述眼部图像的图像相似度大于预设相似度阈值的眼部参考图像作为目标参考图像，所述眼部参考图像为所述用户的视线指向视频显示屏幕时的眼部图像；
[0028]第二获取模块，用于获取与所述筛选模块筛选出的目标参考图像相关联的眼部替换图像，并将所述眼部替换图像作为所述视频图像的眼部图像，所述眼部替换图像为所述用户的视线指向摄像头时的眼部图像，所述摄像头用于采集所述视频图像。
[0029]结合第二方面，在第一种可能的实现方式中，所述装置还包括:
[0030]采集模块，用于采集用户在不同位置时视线指向视频显示屏幕的第一用户图像以及视线指向摄像头的第二用户图像，所述第一用户图像以及所述第二用户图像包含所述用户的眼部图像；
[0031]训练模块，用于通过预设的分类器对所述采集模块采集到的所述第一用户图像以及所述第二用户图像进行训练，获得所述第一用户图像对应的第一眼部图像以及所述第二用户图像对应的第二眼部图像，并将所述第一眼部图像作为眼部参考图像，将所述第二眼部图像作为眼部替换图像。
[0032]结合第二方面的第一种可能的实现方式，在第二种可能的实现方式中，所述训练模块包括:
[0033]提取单元，用于分别从所述第一用户图像中提取出所述用户的第一脸部图像以及从所述第二用户图像中提取出所述用户的第二脸部图像；
[0034]图像获取单元，用于通过预设的分类器对所述提取单元提取出的所述第一脸部图像以及所述第二脸部图像进行训练，获得所述第一脸部图像中的第一眼部图像以及所述第二脸部图像中的第二眼部图像。
[0035]结合第二方面的第一种可能的实现方式，或者第二方面的第二种可能的实现方式，在第三种可能的实现方式中，所述装置还包括:
[0036]第三获取模块，用于获取所述第一用户图像中所述用户所处的第一位置，以及获取所述第二用户图像中所述用户所处的第二位置；
[0037]关联模块，用于检测所述第三获取模块获取的所述第一位置和所述第二位置是否为同一个位置，并在检测到为同一个位置时，将所述第一用户图像对应的第一眼部图像和所述第二用户图像对应的第二眼部图像相关联。
[0038]结合第二方面，在第四种可能的实现方式中，所述图像相似度包括像素均方差；所述筛选模块包括:
[0039]计算单元，用于计算预置的眼部参考图像集合中的眼部参考图像与所述眼部图像之间的像素均方差，并检测所述像素均方差是否低于预设的像素差阈值；
[0040]确定单元，用于在所述计算单元检测到所述像素均方差低于所述像素差阈值时，将所述眼部参考图像确定为目标参考图像。
[0041]结合第二方面的第四种可能的实现方式，在第五种可能的实现方式中，其特征在于，所述装置还包括:
[0042]分块模块，用于对所述眼部图像进行分块处理得到图像分块；
[0043]更新模块，用于通过将所述分块模块得到的图像分块向各个预设方向移动后确定的新的图像，对所述眼部图像进行更新。
[0044]本发明实施例可通过从用户进行视频时采集到的视频图像中获取该用户的眼部图像，并从预置的眼部参考图像集合中筛选出与所述眼部图像的图像相似度大于预设相似度阈值的眼部参考图像作为目标参考图像，从而将与该目标参考图像相关联的用户视线指向摄像头的眼部替换图像作为该视频图像的眼部图像，使得视频显示屏幕中用户的眼部图像能够聚焦，从而实现视频用户之间的目光接触，且实现成本较低。
【附图说