专利名称：摄像控制方法及控制装置的制作方法
技术领域：
本发明涉及控制技术，特别涉及一种摄像控制方法、以及一种摄像控制装置。
背景技术：
在摄像过程中，通常需要被拍摄对象调整其头部姿态、以使双眼基本正对摄像头的镜头。然而，在包括多人的群体场景中，被拍摄对象可能会由于相互间的不断交谈而相应 改变自身的头部姿态，从而难以达到尽可能多的被拍摄对象的人头注意方向都正对摄像头 的镜头。如此一来，就不得不通过手动调整摄像头镜头的方向，以捕捉可基本正对所有被 拍摄对象双眼的角度，从而造成拍摄的效率和准确度较低。
发明内容
有鉴于此，本发明提供了一种摄像控制方法、以及一种摄像控制装置，能够依据群 体头部姿态自动调节摄像角度、以提高拍摄调节的效率和准确度。本发明提供的一种摄像控制方法，在多人群体场景中设置主摄像头、以及与拍摄 方向与主摄像头呈预定角度的辅助摄像头，并预先保存不同的三维人脸模版，且该摄像控 制方法包括a、从主摄像头拍摄到的画面图像中检测到若干二维人脸图像；b、定位每个二维人脸图像中的双眼和鼻尖位置；C、利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像头拍摄到的人脸深 度信息，确定每个二维人脸图像所匹配的三维人脸模版；d、利用匹配的三维人脸模版，分别建立表征多人群体场景中对应人体头部姿态的 重构三维人脸；e、计算各重构三维人脸的注意Gaze方向，所述Gaze方向为重构三维人脸的双目 及鼻尖所构成平面的法线方向的量化；f、依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方向和/或焦距。所述步骤e包括el、分别利用第i个重构三维人脸在主摄像机焦平面中的位置(xui，yui)、以及主 摄像机的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵<formula>formula see original document page 4</formula>，其中，<formula>formula see original document page 4</formula>e2、分别计算表示第i个重构三维人脸的姿势矩阵<formula>formula see original document page 4</formula>表示第 i个重构三维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化，其中， <formula>formula see original document page 4</formula>为主摄像机坐 标系在世界坐标系中的旋转矩阵，<formula>formula see original document page 4</formula>为当前帧中第i个重构三维人脸相比 于前一帧中第i个重构三维人脸在世界坐标系中的旋转矩阵。
所述步骤f包括fll、计算各重构三维人脸的姿势矩阵Rp。se」所表示的偏移角度量化的方差；fl2、利用所述方差表示的方向调节主摄像机的拍摄方向；或者，所述步骤f包括f21、计算各重构三维人脸的姿势矩阵Rp_」所表示的偏移角度量化的均值；f22、利用所述均值表示的方向调节主摄像机的拍摄方向； 再或者，所述步骤f包括f31、从各重构三维人脸的姿势矩阵Rp_ ,中所表示的偏移角度量化随机选择一 个；f32、利用选择的姿势矩阵Rp_」所表示的偏移角度量化调节主摄像机的拍摄方 向。所述步骤a之前，进一步产生可引起多人群体汇聚注意方向的信号。所述信号为音频信号。本发明提供的一种摄像控制装置，包括人脸检测单元，用于从主摄像头拍摄到的画面图像中检测到若干二维人脸图像， 所述主摄像头设置在多人群体场景中；区域定位单元，用于定位每个二维人脸图像中的双眼和鼻尖位置；模版匹配单元，用于利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像 头拍摄到的人脸深度信息，确定每个二维人脸图像所匹配的三维人脸模版，所述辅助摄像 头与所述主摄像头呈预定角度；三维重构单元，用于利用匹配的三维人脸模版，分别建立表征多人群体场景中对 应人体头部姿态的重构三维人脸； 方向计算单元，用于计算各重构三维人脸的注意Gaze方向，所述Gaze方向为重构 三维人脸的双目及鼻尖所构成平面的法线方向的量化；旋转控制单元，用于依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方向 和/或焦距。所述方向计算单元包括第一计算子单元，别利用第i个重构三维人脸在主摄像机焦平面中的位置(xui， yui)、以及主摄像机的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵
<formula>formula see original document page 5</formula>其中，<formula>formula see original document page 5</formula>第二计算子单元，分别计算表示第i个重构三维人脸的姿势矩阵Rp。se i，Rpose i 表示第i个重构三维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化，其中， Rpose.,小c，—'(Μ，《P <)RH，t，ΨJ ,『Ο。，Φ。，Vc)为主摄像机 坐标系在世界坐标系中的旋转矩阵，R-1Owi, Φ￥ , vwi)为当前帧中第i个重构三维人脸相 比于前一帧中第i个重构三维人脸在世界坐标系中的旋转矩阵。所述旋转控制单元包括方差计算子单元，计算各重构三维人脸的姿势矩阵Rp。se」所表示的偏移角度量化 的方差；
第一执行子单元，利用所述方差表示的方向调节主摄像机的拍摄方向；或者，所述旋转控制单元包括均值计算子单元，计算各重构三维人脸的姿势矩阵Rpose_i所表示的偏移角度量化的均值；第二执行子单元，利用所述均值表示的方向调节主摄像机的拍摄方向；再或者，所述旋转控制单元包括随机选择子单元，从各重构三维人脸的姿势矩阵Rpose_i中随机选择一个；第三执行子单元，利用选择的姿势矩阵Rpose_i所表示的偏移角度量化调节主摄像 机的拍摄方向。进一步包括信号发生单元，用于在人脸检测单元接收主摄像头拍摄到的画面图像 之前，产生可引起多人群体汇聚注意方向的信号。所述信号发生单元为音频发生器。由上述技术方案可见，本发明设置主摄像头、以及与拍摄方向与主摄像头呈预定 角度的辅助摄像头，先从主摄像头拍摄到的画面图像中检测到若干二维人脸图像、并定位 每个二维人脸图像中的双眼和鼻尖位置，然后利用每个二维人脸图像中的双眼和鼻尖位 置、以及辅助摄像头拍摄到的人脸深度信息确定每个二维人脸图像所匹配的三维人脸模 版，再利用匹配的三维人脸模版分别建立表征多人群体场景中对应人体头部姿态的重构三 维人脸，最后计算各重构三维人脸的Gaze方向的量化，从而实现人头姿态估计；利用人头 姿态估计得到的各重构三维人脸的Gaze方向，即可自动调节主摄像机的拍摄方向和/或焦 距，从而提高拍摄调节的效率和准确度。
图1为本发明实施例中摄像控制方法的示例性流程示意图；图2为本发明实施例中主摄像机坐标系下旋转矩阵各角度的示意图；图3为本发明实施例中摄像控制装置的示例性结构示意图。
具体实施例方式为使本发明的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对 本发明进一步详细说明。本实施例中，主要是先通过二维人脸图像估计出各人头姿态的注意(Gaze)方向， 然后利用各人头姿态的Gaze方向自动调节摄像机的拍摄角度。图1为本发明实施例中的摄像控制方法的示例性流程示意图。如图1所示，本实 施例中的摄像控制方法，在多人群体场景中设置主摄像头、以及与拍摄方向与主摄像头呈 预定角度的辅助摄像头，其中，多人群体场景中具有世界坐标系、主摄像头和辅助摄像头还 分别具有各自的坐标系，且该摄像控制方法包括步骤101，从主摄像头拍摄到的画面图像中检测到若干二维人脸图像。实际应用中，本步骤可以利用自适应增强(AdaBoost)等现有人脸检测技术，如 果利用AdaBoost实现二维人脸图像的检测，则提取的人脸特征可以采用局部二值模式 (Local Byte Pattern)，此类人脸特征概括了局部灰度级结构，利用相应的算子分别将各像素与其邻域像素比较，即可得到每个像素的二进制取值，即LBP(xc,yc)=∑2isign+(pi-pc)其中，LBP (χ。，yc)表示像素c的局部二值模式灰度值，Pc表示像素c的实际灰度 值，Pi表示像素c的第i个邻域像素的实际灰度值，sign为符号函数。步骤102，定位每个二维人脸图像中的双眼和鼻尖位置。实际应用中，本步骤中可以依据人脸结构的经验值识别出双眼和鼻尖位置，其中， 考虑到人脸的鼻尖对光照和其邻域的皮肤纹理差别较小，因而可以先确定包含有鼻尖及其 邻域的区域，然后在该区域内确定鼻尖位置。步骤103，利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像头拍摄到的 人脸深度信息，在预先保存的所有三维人脸模版中，确定每个二维人脸图像最为匹配的三 维人脸模版。步骤104，利用匹配的三维人脸模版，分别建立表征多人群体场景中对应人体头部 姿态的重构三维人脸。实际应用中，本步骤中的处理过程实际上是将匹配的三维人脸模版按照二维人脸 图像的姿态还原至世界坐标系中。步骤105，计算各重构三维人脸的Gaze方向，Gaze方向表示重构三维人脸的双目 及鼻尖所构成平面的法线方向在世界坐标系中的量化。实际应用中，如何确定Gaze方向可以采用多种现有方式来实现，而除了现有的多 种方式之外，参见图2，本步骤中又提供了一种新的方式并具体包括如下处理过程a、分别利用第i个重构三维人脸在主摄像机焦平面中的位置(xui，yui)、以及主 摄像机的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵!^(ΦχΛ Φ,Λ
Λ h、甘 dnyUi Φ二= _arctan~p=^=、
Φζ )，其中，φχ 二 arctanf、”Φ^=0；b、分别计算表示第i个重构三维人脸的姿势矩阵Rp。se」，Rpose i表示第i个重构三 维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化，其中，Rpose,=R-1(《，Φ。’ψ。\R-1 (θ。，Φ。，Ψ。)为主摄像机坐标系在世界坐标系中的旋转矩阵、该旋转矩阵可以 依据主摄像机坐标系预先设置的标定值来得到，对于利用坐标系标定值获取坐标系旋转矩 阵的过程，本领域技术人员可以参照现有方式来实现，在此不再赘述；R-1Owi, ，为 当前帧中第i个重构三维人脸相比于前一帧中第i个重构三维人脸在世界坐标系中的旋转 矩阵，对于利用连续两帧中同一人头获取旋转矩阵的过程，本领域技术人员可以参照现有 方式来实现，在此不再赘述。步骤106，依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方向和/或焦距， 以使多人群体场景中尽可能多的人头注意方向正对摄像头的镜头。当然，如果主摄像机的 拍摄方向调整，则可以随之调整辅助摄像机，以使辅助摄像机拍摄角度与主摄像机所呈的 角度固定不变。实际应用中，本步骤中调节主摄像机拍摄方向可以依据不同的实际需求任意设 定，本实施例给出了如下的几种可选方式
方差方式，计算各重构三维人脸的姿势矩阵Rp_」所表示的偏移角度量化的方差， 并利用所述方差表示的方向调节主摄像机的拍摄方向；均值方式，计算各重构三维人脸的姿势矩阵Rp_」所表示的偏移角度量化的均值， 并利用所述均值表示的方向调节主摄像机的拍摄方向；随机方式，从各重构三维人脸的姿势矩阵Rp_ i中所表示的偏移角度量化随机选 择一个，并利用选择的姿势矩阵i所表示的偏移角度量化调节主摄像机的拍摄方向。需要说明的是，本实施例中的摄像控制方法，主要关注的是利用Gaze方向作为摄像头调节的控制条件、以及如何获取该Gaze方向，至于如何实施对摄像头拍摄方向和/或 焦距的调整，本领域技术人员可依据实际需要任意设定，例如，参照概率学、几何图形学等 各类计算方式设定其他的调节方式，在此不再一一赘述。此外，考虑到多人群体场景中，各人头姿态的Gaze方向有可能是离散的，那么此 时，无论采用哪一种调节方式均不能够最佳地将主摄像头拍摄方向对准所有人头姿态的 Gaze方向，因此，在执行步骤101之前，可以产生例如音频信号等能够引起多人群体汇聚注 意方向的信号，然后再执行上述步骤101至106的流程；最佳状态下，多人群体的注意方向 可存在汇聚点，此式调整主摄像机的拍摄方向和/或焦距、使汇聚点位于焦平面内即可。至此，上述循环执行的流程结束。以上，是对本实施例中摄像控制方法的详细说明，下面，再对本实施例中的摄像控 制装置进行说明。图3为本发明实施例中摄像控制装置的示例性结构示意图。如图3所示，本实施 例中的摄像控制装置包括人脸检测单元301，用于从主摄像头拍摄到的画面图像中检测到若干二维人脸图 像，所述主摄像头设置在具有世界坐标系的多人群体场景中，且主摄像头具有自身的摄像 坐标系；实际应用中，人脸检测单元301可以利用AdaBoost等现有人脸检测技术，如果利用 AdaBoost实现二维人脸图像的检测，则提取的人脸特征可以采用局部二值模式，此类人脸 特征概括了局部灰度级结构，利用相应的算子分别将各像素与其邻域像素比较，即可得到
每个像素的二进制取值，即LBP(x。,ye)=^2iSign(Pi-Pe)，LBP (x。，y。)表示像素c的局部二值
—0
模式灰度值，P。表示像素C的实际灰度值，Pi表示像素C的第i个邻域像素的实际灰度值， sign为符号函数。区域定位单元302，用于定位每个二维人脸图像中的双眼和鼻尖位置；实际应用 中，区域定位单元302可以依据人脸结构的经验值识别出双眼和鼻尖位置，其中，考虑到人 脸的鼻尖对光照和其邻域的皮肤纹理差别较小，因而可以先确定包含有鼻尖及其邻域的区 域，然后在该区域内确定鼻尖位置。模版匹配单元303，用于利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄 像头拍摄到的人脸深度信息，在预先保存的所有三维人脸模版中，确定每个二维人脸图像 所匹配的三维人脸模版，所述辅助摄像头与前述主摄像头呈预定角度，且辅助摄像头也具 有自身的摄像坐标系。三维重构单元304，用于利用匹配的三维人脸模版，分别建立表征多人群体场景中 对应人体头部姿态的重构三维人脸；实际应用中，可以看作是三维重构单元304将匹配的三维人脸模版按照二维人脸图像的姿态还原至世界坐标系中。方向计算单元305，用于计算各重构三维人脸的Gaze方向，所述Gaze方向为重构 三维人脸的双目及鼻尖所构成平面的法线方向的量化；实际应用中，如何确定Gaze方向可 以采用多种现有方式来实现，而除了现有的多种方式之外，方向计算单元305可以采用一 种新的方式并具体包括第一计算子单元和第二计算子单元(图3中均未示出)，其中，第一计算子单元，分别利用第i个重构三维人脸在主摄像机焦平面中的位置 (xui, yui)、以及主摄像机的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵
<formula>formula see original document page 9</formula>其中，< = arctan’5 =—arctan^j、<=0;第二计算子单元，分别计算表示第i个重构三维人脸的姿势矩阵Rp。se—i，Rp。se— i表示第i个重构三维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化， Rpose t，K)RK，《,，的)RK，^wi-Φ。，为主摄像机坐 标系在世界坐标系中的旋转矩阵、该旋转矩阵可以依据主摄像机坐标系预先设置的标定值 来得到，对于利用坐标系标定值获取坐标系旋转矩阵的过程，本领域技术人员可以参照现 有方式来实现，在此不再赘述；R-1Owi, 为当前帧中第i个重构三维人脸相比于 前一帧中第i个重构三维人脸在世界坐标系中的旋转矩阵，对于利用连续两帧中同一人头 获取旋转矩阵的过程，本领域技术人员可以参照现有方式来实现，在此不再赘述。旋转控制单元306，用于依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方 向和/或焦距，以使多人群体场景中尽可能多的人头注意方向正对摄像头的镜头，当然，如 果主摄像机的拍摄方向调整，则可以随之调整辅助摄像机，以使辅助摄像机拍摄角度与主 摄像机所呈的角度固定不变；实际应用中，旋转控制单元306调节主摄像机拍摄方向可以 依据不同的实际需求任意设定，本实施例给出了方差方式、均值方式、随机方式，其中，如果采用方差方式，则旋转控制单元306可以包括(图3中未示出)方差计算子 单元，计算各重构三维人脸的姿势矩阵i所表示的偏移角度量化的方差；第一执行子单 元，利用所述方差表示的方向调节主摄像机的拍摄方向；如果采用均值方式，则旋转控制单元306可以包括(图3中未示出)均值计算子 单元，计算各重构三维人脸的姿势矩阵i所表示的偏移角度量化的均值；第二执行子单 元，利用所述均值表示的方向调节主摄像机的拍摄方向；如果采用随机方式，则旋转控制单元306可以包括(图3中未示出)随机选择子 单元，从各重构三维人脸的姿势矩阵Rp。sei中随机选择一个；第三执行子单元，利用选择的 姿势矩阵i所表示的偏移角度量化调节主摄像机的拍摄方向。需要说明的是，本实施例中的摄像控制装置，主要关注的是利用Gaze方向作为摄 像头调节的控制条件、以及如何获取该Gaze方向，至于旋转控制单元306如何实施对摄像 头拍摄方向和/或焦距的调整，本领域技术人员可依据实际需要任意设定，例如，参照概率 学、几何图形学等各类计算方式设定其他的调节方式，在此不再一一赘述。此外，考虑到多人群体场景中，各人头姿态的Gaze方向有可能是离散的，那么此 时，无论采用哪一种调节方式均不能够最佳地将主摄像头拍摄方向对准所有人头姿态的 Gaze方向，因此，如图3所示的装置中还可以进一步包括如虚线框所示的信号发生单元 307，用于在人脸检测单元301接收主摄像头拍摄到的画面图像之前，产生可引起多人群体汇聚注意方向的信号；最佳状态下，多人群体的注意方向可存在汇聚点，此式调整主摄像机 的拍摄方向和/或焦距、使汇聚点位于焦平面内即可。实际应用中，信号发生单元307可以 选用音频发生器。如上可见，本实施例设置主摄像头、以及与拍摄方向与主摄像头呈预定角度的辅 助摄像头，先从主摄像头拍摄到的画面图像中检测到若干二维人脸图像、并定位每个二维 人脸图像中的双眼和鼻尖位置，然后利用每个二维人脸图像中的双眼和鼻尖位置、以及辅 助摄像头拍摄到的人脸深度信息确定每个二维人脸图像所匹配的三维人脸模版，再利用匹 配的三维人脸模版分别建立表征多人群体场景中对应人体头部姿态的重构三维人脸，最后 计算各重构三维人脸的Gaze方向的量化，从而实现人头姿态估计；利用人头姿态估计得到 的各重构三维人脸的Gaze方向，即可自动调节主摄像机的拍摄方向，从而提高拍摄调节的 效率和准确度。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在 本发明的精神和原则之内，所作的任何修改、等同替换以及改进等，均应包含在本发明的保 护范围之内。
权利要求
一种摄像控制方法，其特征在于，在多人群体场景中设置主摄像头、以及与拍摄方向与主摄像头呈预定角度的辅助摄像头，并预先保存不同的三维人脸模版，且该摄像控制方法包括a、从主摄像头拍摄到的画面图像中检测到若干二维人脸图像；b、定位每个二维人脸图像中的双眼和鼻尖位置；c、利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像头拍摄到的人脸深度信息，确定每个二维人脸图像所匹配的三维人脸模版；d、利用匹配的三维人脸模版，分别建立表征多人群体场景中对应人体头部姿态的重构三维人脸；e、计算各重构三维人脸的注意Gaze方向，所述Gaze方向为重构三维人脸的双目及鼻尖所构成平面的法线方向的量化；f、依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方向和/或焦距。
2.如权利要求1所述的摄像控制方法，其特征在于，所述步骤e包括el、分别利用第i个重构三维人脸在主摄像机焦平面中的位置(xui，yui)、以及主摄像机 的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵R-1 ( Φxih，Φ,Λ Φζ。，其<formula>formula see original document page 2</formula>Φ:,=0;e2、分别计算表示第i个重构三维人脸的姿势矩阵Rp。se—i，Rp。se—i表示第i个重构三维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化，其中，Rpose_i=R-1(θc,Φc, φc)R-1(θhxi,Φhxi, φhxi)R1(θwi,Φwi, φwi),R-1(θc,Φc, φc)为主摄像机坐标系在世界坐标系中的旋转矩阵，R-1(θc,Φc, φc)为当前帧中第i个重构三维人脸相比于前一帧中第i个重构三维人脸在世界坐标系中的旋转矩阵。
3.如权利要求2所述的摄像控制方法，其特征在于， 所述步骤f包括fll、计算各重构三维人脸的姿势矩阵Rpose_i所表示的偏移角度量化的方差； fl2、利用所述方差表示的方向调节主摄像I几的拍摄方向； 或者，所述步骤f包括f21、计算各重构三维人脸的姿势矩阵Rpose_i所表示的偏移角度量化的均值； f22、利用所述均值表示的方向调节主摄像I几的拍摄方向； 再或者，所述步骤f包括f31、从各重构三维人脸的姿势矩阵Rpose_i中所表示的偏移角度量化随机选择一个； f32、利用选择的姿势矩阵Rpose_i所表示的偏移角度量化调节主摄像机的拍摄方向。
4.如权利要求1至3中任一项所述的摄像控制方法，其特征在于，所述步骤a之前，进 一步产生可引起多人群体汇聚注意方向的信号。
5.如权利要求4所述的摄像控制方法，其特征在于，所述信号为音频信号。
6.一种摄像控制装置，其特征在于，包括人脸检测单元，用于从主摄像头拍摄到的画面图像中检测到若干二维人脸图像，所述 主摄像头设置在多人群体场景中；区域定位单元，用于定位每个二维人脸图像中的双眼和鼻尖位置；模版匹配单元，用于利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像头拍 摄到的人脸深度信息，确定每个二维人脸图像所匹配的三维人脸模版，所述辅助摄像头与 所述主摄像头呈预定角度；三维重构单元，用于利用匹配的三维人脸模版，分别建立表征多人群体场景中对应人 体头部姿态的重构三维人脸；方向计算单元，用于计算各重构三维人脸的注意Gaze方向，所述Gaze方向为重构三维 人脸的双目及鼻尖所构成平面的法线方向的量化；旋转控制单元，用于依据各重构三维人脸的Gaze方向调节主摄像机的拍摄方向和/或 焦距。
7.如权利要求6所述的摄像控制装置，其特征在于，所述方向计算单元包括 第一计算子单元，别利用第i个重构三维人脸在主摄像机焦平面中的位置(xui，yui)、以及主摄像机的焦距f，计算每个重构三维人脸在主摄像机坐标系下的旋转矩阵<formula>formula see original document page 3</formula>)，其中，<formula>formula see original document page 3</formula>第二计算子单元，分别计算表示第i个重构三维人脸的姿势矩阵Rp。Sd，Rp。&表 示第i个重构三维人脸的Gaze方向相对于主摄像机拍摄方向偏移角度的量化，其中， Rp。se」=R—(《，K)RK，《丨，Φ',)R"1 (^wi, Φ^, ΨJ ,『(θ。，Φ。，Vc)为主摄像机坐 标系在世界坐标系中的旋转矩阵，R1Owi, Φ￥ , vwi)为当前帧中第i个重构三维人脸相比 于前一帧中第i个重构三维人脸在世界坐标系中的旋转矩阵。
8.如权利要求7所述的摄像控制装置，其特征在于， 所述旋转控制单元包括方差计算子单元，计算各重构三维人脸的姿势矩阵Rp_ i所表示的偏移角度量化的方差；第一执行子单元，利用所述方差表示的方向调节主摄像机的拍摄方向； 或者，所述旋转控制单元包括均值计算子单元，计算各重构三维人脸的姿势矩阵Rp_ i所表示的偏移角度量化的均值；第二执行子单元，利用所述均值表示的方向调节主摄像机的拍摄方向； 再或者，所述旋转控制单元包括随机选择子单元，从各重构三维人脸的姿势矩阵i中随机选择一个； 第三执行子单元，利用选择的姿势矩阵i所表示的偏移角度量化调节主摄像机的 拍摄方向。
9.如权利要求6至8中任一项所述的摄像控制装置，其特征在于，进一步包括信号发生 单元，用于在人脸检测单元接收主摄像头拍摄到的画面图像之前，产生可引起多人群体汇 聚注意方向的信号。
10.如权利要求9所述的摄像控制方法，其特征在于，所述信号发生单元为音频发生ο
全文摘要
本发明公开了一种摄像控制方法及装置。本发明设置主摄像头、以及与拍摄方向与主摄像头呈预定角度的辅助摄像头，先从主摄像头拍摄到的画面图像中检测到若干二维人脸图像、并定位每个二维人脸图像中的双眼和鼻尖位置，然后利用每个二维人脸图像中的双眼和鼻尖位置、以及辅助摄像头拍摄到的人脸深度信息确定每个二维人脸图像所匹配的三维人脸模版，再利用匹配的三维人脸模版分别建立表征多人群体场景中对应人体头部姿态的重构三维人脸，最后计算各重构三维人脸的注意方向的量化，从而实现人头姿态估计；利用人头姿态估计得到的各重构三维人脸的注意方向，即可自动调节主摄像机的拍摄方向和/或焦距，从而提高拍摄调节的效率和准确度。
文档编号H04N5/232GK101815174SQ20101003387
公开日2010年8月25日 申请日期2010年1月11日 优先权日2010年1月11日
发明者崔国勤 申请人:北京中星微电子有限公司