专利名称：用于测量立体运动画面的潜在眼睛疲劳的系统和方法
技术领域：
本公开一般地涉及计算机图形处理和显示系统，并且更具体地涉及一种用于测量由观看三维(3D)呈现(例如，立体运动画面)的观众感受到的潜在眼睛疲劳的系统和 方法。
背景技术：
立体成像是在视觉上组合一个场景的从稍微不同的视点取得的至少两个图像以 便产生三维深度的错觉的处理。该技术依赖于如下事实人眼分隔一定距离，并且因此 没有观看完全相同的场景。通过为每只眼睛提供来自不同观察点(perspective)的图像， 欺骗观看者的眼睛感觉到深度。典型地，在提供两个有区别的观察点的情况下，分别将 组成图像称为“左”和“右”图像，也分别将其已知为基准图像和补充图像。然而， 本领域技术人员将认识到，可以组合多于两个视点来形成立体图像。在3D后期制作、VFX工作流程和3D呈现应用中，一项重要的处理是从由左 眼视像和右眼视像组成的立体图像中推断深度图，以便创建立体运动画面。例 如，最近商业化的自动立体3D显示器要求图像加深度图(image-plus-depth-map)输入格 式，使得该显示器可以生成不同的3D视图来支持多个视角。从立体图像对推断深度图的处理在计算机视觉研究的领域中被称为立体匹配， 因为使用像素或块匹配以发现左眼和右眼视像中的对应点。从与场景中的相同点对 应的各图像中的两个像素之间的相对距离推断深度值。在许多计算机视觉应用(诸如，例如用于计算机辅助绘图(CAD)的快速对 象建模和成型、用于人机交互(HCI)的对象分割和检测、视频压缩和视觉监控(visual surveillance))中广泛使用数字图像的立体匹配，以便提供三维(3D)深度信息。立体匹 配从场景中位于不同位置和朝向的两个或多个相机获得场景的图像。在大约相同的时间 从每个相机获得这些数字图像，并且对应于空间中的3D点匹配每个图像中的点。通常， 通过搜索一部分图像和使用约束(诸如外极线约束)来匹配来自不同图像的点，以便使一 个图像中的点与另一图像中的点相关联。然后可以采用匹配后的图像和深度图来创建立 体3D运动画面。当前立体3D运动画面的主要问题之一是观众可能在观看运动画面一定时间之后 感受到眼睛疲劳。因此，当导演制作3D影片时，他们不得不考虑如何以可以使由观众感 受到的眼睛疲劳最小化的方式拍摄场景或剪辑影片，。这是制作3D运动画面比制作传统 的2D运动画面更加复杂和耗时的部分原因。制作3D运动画面的挑战在于导演和剪辑师非常难以在视觉上估计由观众感受到 的潜在眼睛疲劳。存在促成该困难的若干因素。首先，因为眼睛疲劳是随着观看运动画 面的过程的累计效果，所以导演或剪辑师不得不观看3D运动画面足够长以感受到眼睛疲 劳。因为少量片段通常不导致眼睛疲劳。第二，眼睛疲劳还可能由两个片段之间的突 然深度变化导致。当剪辑师在剪辑期间连接片段时，他们难以测量由突然深度变化导致的潜在眼睛疲劳。他们将需要使用耗时的反复试验(trial-and-error)过程来连接不同的片 段，并且“感受”由深度转换导致的潜在眼睛疲劳。因此，存在对于可以在观看诸如立体运动画面的3D呈现的同时测量感受到的潜在眼睛疲劳的技术的需要。此外，存在对于可以在剪辑3D运动画面的过程期间测量潜在 眼睛疲劳的自动系统和方法的需要。
发明内容
提供一种用于测量在观看3D呈现(例如，立体运动画面)时由观众感受到的潜 在眼睛疲劳的系统和方法。本公开的系统和方法考虑观看3D呈现时眼睛的会聚点和焦 点之间的距离与所聚焦的对象的深度紧密相关，所聚焦的对象的深度也与对象的像素的 视差相关。本公开的眼睛疲劳测量系统和方法基于3D呈现的立体图像的视差(或深度) 和视差转换的测量。本公开的技术对于导演和剪辑师有效地制作舒适的3D电影是有用 的。根据本公开的一个方面，提供一种测量在观看三维(3D)呈现时感受到的潜在眼 睛疲劳的方法，所述方法包括从第一片段获取第一图像和第二图像；估计第一图像中的 至少一个点与第二图像中的至少一个对应点的视差；估计第一和第二图像的序列的视差 转换；以及基于视差以及第一和第二图像的序列的视差转换确定在观看3D呈现时感受到 的潜在眼睛疲劳。在另一方面中，估计视差转换步骤包括估计之前片段的最后帧的视差；估计 第一片段的第一帧的视差；以及确定之前片段的最后帧的视差和第一片段的第一帧的视 差之间的差。在一个方面中，估计视差转换步骤包括估计第一片段的多个帧的每个帧内的 视差；以及确定第一片段的每个帧的视差之间的差。在另一方面中，确定潜在眼睛疲劳步骤还包括确定用于第一和第二图像的序列 的每个帧的即时眼睛疲劳函数。在另一方面中，确定潜在眼睛疲劳步骤还包括将衰减因子应用到用于第一和第 二图像的序列的每个帧的即时眼睛疲劳函数。在另一方面中，确定潜在眼睛疲劳步骤还包括在预定的时间段上累积衰减后的 用于第一和第二图像的序列的每个帧的即时眼睛疲劳函数。在另一方面中，确定潜在眼睛疲劳步骤还包括使在第一和第二图像的序列上累 积的眼睛疲劳函数饱和。在另一方面中，本方法还包括确定潜在眼睛疲劳是否可接受；以及如果潜在 眼睛疲劳不可接受，则校正第一和第二图像的视差。根据本公开的另一方面，提供一种用于测量在观看三维(3D)呈现时感受到的 潜在眼睛疲劳的系统。所述系统包括用于从第一片段获取第一图像和第二图像的部 件；视差估计器，用于估计第一图像中的至少一个点与第二图像中的至少一个对应点的 视差；视差转换估计器，用于估计第一和第二图像的序列的视差转换；以及眼睛疲劳估 计器，用于基于视差以及第一和第二图像的序列的视差转换确定在观看3D呈现时感受到 的潜在眼睛疲劳。
根据本公开的另一方面，提供一种可由机器读取的程序存储设备，所述程序存 储设备确实地体现可由机器执行的、用于执行用以测量在观看三维(3D)呈现时的潜在 眼睛疲劳的方法步骤的指令的程序，所述方法包括从第一片段获取第一图像和第二图 像；估计第一图像中的至少一个点与第二图像中的至少一个对应点的视差；估计第一和 第二图像的序列的视差转换；以及基于视差以及第一和第二图像的序列的视差转换确定 在观看3D呈现时感受到的潜在眼睛疲劳。
将描述本公开的这些和其它方面、特征和优点，或者本公开的这些和其它方 面、特征和优点将从优选实施例的以下详细描述变得明显，结合附图阅读优选实施例的 以下详细描述。在附图中，其中贯穿各附图相同的参考标号表示类似的元件图1图示在观看三维(3D)呈现的同时由观看者或者观众的成员体验的会聚点和 隹占.图2图示当会聚点在用于显示3D呈现的屏幕的前面时，会聚距离、所感知的深 度、视差和会聚角度的关系；图3图示当会聚点在屏幕后面时，会聚距离、所感知的深度、视差和会聚角度 的关系；图4是根据本公开的一个方面的、用于测量在观看三维(3D)呈现时感受到的眼 睛疲劳的系统的示例性图示；图5是根据本公开的一个方面的、用于测量在观看三维(3D)呈现时感受到的眼 睛疲劳的示例性方法的流程图；图6图示用于对眼睛疲劳感觉的饱和建模的S形函数；图7图示根据本公开的一个方面的随着时间的眼睛疲劳测量方程式；以及图8图示根据本公开的一个方面的即时眼睛疲劳函数和总体眼睛疲劳测量。应该理解的是(各)附图是用于图示本公开的构思的目的，并且不必是用于图 示本公开的唯一可能配置。
具体实施例方式应该理解的是附图中示出的各元件可以以硬件、软件和其组合的各种形式实 现。优选地，这些元件以硬件和在可以包括处理器、存储器和输入/输出接口的一个或 多个适当地编程的通用设备上的软件的组合实现。
本描述说明本公开的原理。因此，将认识到本领域技术人员将能够设计出实 施本公开的原理并被包括在本原理的精神和范围内的各种布置，尽管在这里没有明确地 描述或示出所述布置。在此叙述的所有示例和条件性语言意欲用于教学的目的以便帮助读者理解本公 开的原理以及由本发明人贡献以促进现有技术的构思，并且应该被解释为不限制于这种 具体叙述的示例和条件。另外，在这里叙述本公开的原理、方面和实施例及其特定示例的所有陈述意欲包括其结构和功能等效物。另外，意图是这样的等效物包括当前已知的等效物以及将 来开发的等效物二者，即所开发的执行相同功能的任何元件，而不论其结构如何。 因此，例如，本领域技术人员将认识到在此呈现的框图表示实施本原理的说 明性电路的概念性视图。类似地，将认识到任何流程图示(flowchart)、流程图(flow diagram),状态转换图、伪代码等表示实质上可以表示在计算机可读介质中并因此由计 算机或处理器执行的各种处理，而不管是否明确地示出这样的计算机或处理器。可以通过使用专用硬件以及与适当的软件相关联的能够执行软件的硬件来提供 图中示出的各种元件的功能。当利用处理器来提供所述功能时，可以利用单个专用处理 器、利用单个共享处理器、或者利用其中一些可被共享的多个独立处理器来提供所述功 能。另外，术语“处理器”或“控制器”的明确使用不应该被解释为排他性地指代能 够执行软件的硬件，而是可以隐含地无限制地包括数字信号处理器(“DSP” )硬件、用 于存储软件的只读存储器(“ROM”)、随机存取存储器(“RAM”)、和非易失性存 储器。还可以包括其它传统的和/或定制的硬件。类似地，图中示出的任何开关只是 概念性的。它们的功能可以通过程序逻辑的运行、通过专用逻辑、通过程序控制和专用 逻辑的交互、或者甚至手动地来执行，如从上下文更具体地理解的那样，可以由实施者 选择具体技术。在其权利要求中，被表示为用于执行指定功能的部件的任何元件意欲包含执行 那个功能的任何方式，例如包括a)执行那个功能的电路元件的组合或者b)与适当电路 相组合的任何形式的软件，所述软件因此包括固件或微代码等，所述适当电路用于执行 该软件以执行所述功能。由这种权利要求限定的本公开在于如下事实，即，以权利要求 所要求的方式将由各种所叙述的部件提供的功能组合和集合到一起。因此认为可以提供 那些功能的任何部件与在此示出的那些部件等效。通常，立体运动画面由左眼和右眼画面序列组成。对于电影院应用，观众通常 不得不佩戴3D眼镜(例如，偏振或快门眼镜)观看3D呈现。对于不用眼镜的显示器， 尽管3D显示的机制不同，但是3D感知的原理是相同的。也就是说，3D系统将使左眼 观看左眼图像，而右眼仅观看右眼图像。人脑能够将这两个图像组合到一起，以便正确 感知3D场景。然而，该系统可能潜在地导致眼睛肌肉的疲劳和眼睛疲劳，因为以下两个 原因1.眼睛的会聚点和焦点是不同的。当我们观看真实3D场景时，我们眼睛的焦 点与会聚点大致相同。然而，当我们观看3D影片时，我们眼睛的焦点10不得不总是在 屏幕12上，而我们眼睛的会聚点14不得不在屏幕12的前面或后面，以便感知正确的3D 场景，如图1所示。该差异是促进眼睛肌肉的疲劳因此导致眼睛疲劳的主要因素。2.3D运动画面中对象的深度改变。当对象的深度改变时，我们的眼睛不得不调 整会聚点以感知正确的3D效果，同时保持焦点在屏幕上。如果深度改变是频繁和突然 的，则我们的眼睛不得不频繁改变会聚点，导致眼睛肌肉的疲惫。所以，简而言之，眼睛疲劳主要由两个原因导致1)眼睛的会聚点和焦点之间 的距离(即，如图1所示的会聚距离16)；以及2)会聚点14的改变。因此，测量眼睛 疲劳需要考虑上面两个因素。
本公开提供了一种用于测量在观看3D呈现(例如，立体运动画面)时由观众感 受到的潜在眼睛疲劳的系统和方法。本公开的眼睛疲劳测量系统和方法基于视差(或深 度)和视差转换的测量。本解决方案对于导演和剪辑师有效地制作好的和舒适的3D电影 是有用的。本公开的系统和方法考虑观看者的眼睛的会聚点和焦点之间的距离与3D呈现中所聚焦的对象的深度紧密相关，3D呈现中所聚焦的对象的深度也与对象的像素的视差 有关。图2示出了观看3D呈现中涉及的变量的关系。可以看到给定会聚距离(Cd) 16、 所感知的深度(Dp) 18、观众距离(Ad) 20、会聚角度(Ca) 22、眼睛距离(Ed) 24和视差 (Ds) 26,存在以下关系。l.Cd、Dp 和 Ad 的关系Ad = Cd+Dp2.Cd、Ds、Ad 禾Π Ed 的关系Cd(l/Ds+1/Ed) = Ad/Ed3.Ca、Ed、Ad 和 Cd 的关系Cd = 2atan (Ed/ (2 (Ad-Cd)))当会聚点如图3所示在屏幕后面时，这些关系保持正确，只要允许负视差和负 会聚距离即可。对于特定观众，眼睛距离(Ed) 24和观众距离(Ad) 20在呈现期间是恒定 的，而会聚距离(Cd) 16、所感知的深度(Dp) 18、会聚角度(Ca) 22和视差(Ds) 26在运动 画面期间变化。基于这些关系，会聚点的计算可以简化为深度或视差的估计。这导致更 简单的估计算法。因为存在许多视差估计算法，所以传统的视差测量可以用于眼睛疲劳 估计。现在参照图4，示出了根据本公开的实施例的示例性系统组件。可以提供扫描设 备103，用于将影片印件(filmprint) 104(例如，相机原始底片(filmnegative))扫描为数字 格式(例如Cineon格式或SMPTE DPX文件)。扫描设备103可以包括例如将从影片生 成视频输出的电视电影或任何设备(诸如，例如具有视频输出的Arri LocPro )。可替代 地，可以直接使用来自后期制作过程或数字电影的文件106(例如，已经处于计算机可读 形式的文件)。计算机可读文件的潜在来源是AVID 剪辑器、DPX文件、D5磁带。所扫描的影片印件被输入到后期处理设备102 (例如，计算机)。在具有以下硬 件的各种已知计算机平台的任何计算机平台上实现该计算机，所述硬件诸如一个或多个 中央处理单元(CPU)、诸如随机存取存储器(RAM)和/或只读存储器(ROM)的存储器 110、以及诸如键盘和指针控制设备(例如，鼠标或操纵杆)和显示设备的(多个)输入 /输出(I/O)用户接口 112。计算机平台还包括操作系统和微指令代码。在此描述的各 种处理和功能可以是经由操作系统执行的微指令代码的一部分或软件应用程序的一部分 (或其组合)。在一个实施例中，软件应用程序确实地体现在程序存储设备上，其可以上 载到任何合适的机器(诸如后期处理设备102)并且被执行。此外，各种其它外围设备可 以通过各种接口和总线结构(诸如并行端口、串行端口或通用串行总线(USB))连接到计 算机平台。其它外围设备可以包括额外的存储设备124和印片机(printer) 128。印片机 128可以用于冲印影片的修改版本126(例如，影片的立体版本)，其中作为下面描述的技 术的结果，可能已经使用3D建模的对象变更或替代场景或多个场景。可替代地，已经处于计算机可读形式(例如，可以存储在外部硬盘驱动器124上 的数字电影)文件/影片印件106可以直接输入到计算机102中。注意到，在此使用的 术语“影片(film)”可以指影片印件或数字电影。
软件程序包括在存储器110中存储的眼睛疲劳测量和降低模块114，用于测量在 观看3D呈现时由观众或观看者感受到的潜在眼睛疲劳。眼睛疲劳测量和降低模块114包括视差估计器116，被配置用于估计第一图像 中的至少一个点与第二图像中的至少一个对应点的视差(第一和第二图像产生立体图像 对)，并且用于对于第一图像中的至少一个点与第二图像中的至少一个对应点的每一个从 所估计的视差生成视差图。视差估计器116包括被配置为匹配第一和第二图像中的像素 的像素匹配成本函数132，以及用于将平滑约束应用到视差估计的平滑成本函数134。视 差估计器116还包括用于最小化所估计的视差的置信传播算法或函数136、以及动态程序 设计算法或函数138，该动态程序设计算法或函数138利用应用于第一和第二图像的确定 匹配函数的结果来初始化置信传播函数136以便加速置信传播函数136。要理解的是，置 信传播和动态程序设计仅是用于确定视差的两个示例性方法，并且可以由视差估计器116 采用其它视差估计方法和算法。提供视差转换估计器118，用于确定立体图像的视差的转换或改变。提供眼睛疲 劳估计器120，用于基于来自视差估计器116的视差图和来自视差转换估计器118的相关 联图像的视差转换，估计潜在眼睛疲劳。眼睛疲劳测量和降低模块114还包括视差校正器122，用于调整第一和第二图像 之间的视差以降低潜在眼睛疲劳。还提供深度图生成器123，用于通过反转(invert)视差 图的视差值而将视差图转换为深度图。在一个实施例中，深度图生成器123与用于降低 潜在眼睛疲劳的视差校正器122协同工作，如下面将描述的。图5是根据本公开的一个方面的示例性方法的流程图，该示例性方法用于测量 至少两个二维(2D)图像的潜在眼睛疲劳。最初，后期处理设备102获取至少两个二维 (2D)图像，例如具有左眼和右眼视图的立体图像对(步骤202)。后期处理设备102可以 通过获得处于计算机可读格式的数字标准图像文件(digital master image file)来获取至少 两个2D图像。可以通过用数字相机捕获运动图像的时间序列来获取数字视频文件。可 替代地，可以通过传统的胶片型相机捕获视频序列。在该方案中，经由扫描设备103扫 描影片。要理解的是，不管是扫描影片还是影片已经处于数字格式，影片的数字文件将 包括关于各帧的位置的指示或信息，例如，帧号、从影片开始起的时间等。数字图像文 件的每个帧将包括一个图像，例如，l·、I2>…In。
可以通过具有相同设置的两个相机拍摄立体图像。相机的任一个被标定为具 有相同的焦距、焦点高度和平行焦平面；或者必须基于已知的相机参数来偏转(warp) 图像，好像它们由具有平行焦平面的相机拍摄。该偏转过程包括相机标定(camera calibration)和相机调校(camera rectification)。标定和调校过程调整立体图像的外极线， 使得外极线精确地为图像的水平扫描线。因为对应点发现沿着外极线发生，所以调校过 程将对应搜索简化为仅沿着扫描线搜索，这大大降低了计算成本。对应点是对应于图像 中相同场景点的像素。接下来，在步骤204，经由视差估计器116对于场景(例如，帧)中的每个点 估计视差图。用于每个场景点的视差被计算为左眼和右眼图像中的匹配点的相对距离， 艮口，发现左和右图像中的对应于相同场景点的像素。例如，如果左眼图像中一个点的水平坐标是X，并且右眼图像中其对应点的水平坐标是X’，则视差d = x’ -X。在估计视差的一个实施例中，最初，获取立体图像对。计算视差成本函数，包 括计算像素匹配成本函数132和计算平滑成本函数134。执行低成本立体匹配优化(例 如，动态程序设计函数138)，以便得到立体匹配两个图像的初始确定结果。然后低成本 优化的结果用于初始化置信传播函数136，以便加速置信传播函数以最小化视差成本函 数。要理解的是，在本领域中已知用于视差估计的其它方法，并且可以由本公开的系统 和方法采用所述其它方法。在步骤206，确定视差转换。基本存在两个类型的视差转换影片片段(例如， 场景、镜头等)之间的可能是突然的视差转换，以及影片片段(例如，场景、镜头等)内 的通常连续的视差转换。如下所讨论的，片段意味着包含相同内容的帧的序列。片段之间的视差转换通常是不连续和突然的。所以为了测量视差转换，首先估 计之前片段的最后帧和当前片段的开始帧的视差图。换句话说，假设在第i片段的末尾处 的视差图是D1,并且在第(i+Ι)片段的开始处的视差图是D1+1，那么视差差是δ D = Dw-D1(1) 为了测量深度改变的幅度，使用绝对视差差I δ D| = IDw-D1! (2)为了得到总体视差改变，使用最大视差转换，其是^max(3)或者使用平均视差转换，其是SDcner(4)
Wtl (x,y)其中W和H是视差图的宽度和高度。对于片段中的画面，视差转换通常是连续的，但是少量时间中的大视差转换也 将促进观众的眼睛疲劳。类似于片段之间的视差改变，可以将视差差用作测量，即，δ = Dw-Dlt5然而，将在每个帧而不仅仅在片段的边界执行该测量。这里，确定一帧内部 的像素上的平均视差值而不是跨越各帧的像素上的平均视差值，然后计算每个连续帧之 间的差。由大视差和/或视差改变导致眼睛疲劳。因此，在步骤208，基于视差图和视差 转换估计眼睛疲劳。本公开的系统和方法利用非常粗略的眼睛疲劳模型。该系统和方法 假设存在将眼睛疲劳与在每帧处的视差和视差改变相关的函数，并且眼睛疲劳感跨越各 帧得到累积，但是随着时间指数衰减。首先，假设存在“即时眼睛疲劳函数” g(￡>L,，^^vJ，其将由视差导致的眼睛疲 劳与平均视差^L·和视差转换^Zt ■相关。然后，如果在第i帧之后视差保持为零，则眼 睛疲劳测量可以表示为衰减模型，如下ES1 (0 = g{D'aver，SDimer) exp(-A0( 5 )其中是建模视差对眼睛疲劳的即时影响的函数。入是衰减系数。 该模型假设如果在屏幕上不再存在视差(即，会聚点变为焦点)，则眼睛疲劳将快速渐弱。注意到因为在各片段之间可能存在视差的突然改变，因此函数对于 片段内的帧和各片段之间的帧可能是不同的，这是它们在上面被不同地处理的原因。函 数
权利要求
1.一种测量在观看三维(3D)呈现时的潜在眼睛疲劳的方法，所述方法包括 从第一片段获取第一图像和第二图像(202)；估计第一图像中的至少一个点与第二图像中的至少一个对应点的视差(204)； 估计第一和第二图像的序列的视差转换(206)；以及基于视差以及第一和第二图像的序列的视差转换确定在观看3D呈现时的潜在眼睛疲 劳(208)。
2.如权利要求1所述的方法，其中估计视差转换步骤(206)还包括 估计之前片段的最后帧的视差；估计第一片段的第一帧的视差；以及确定之前片段的最后帧的视差和第一片段的第一帧的视差之间的差。
3.如权利要求1所述的方法，其中估计视差转换步骤(206)还包括 估计第一片段的多个帧的每个帧内的视差；以及确定第一片段的每个帧的视差之间的差。
4.如权利要求1所述的方法，其中确定潜在眼睛疲劳步骤(208)还包括确定用于第一 和第二图像的序列的每个帧的即时眼睛疲劳函数。
5.如权利要求4所述的方法，其中确定潜在眼睛疲劳步骤(208)还包括将衰减因子应 用到用于第一和第二图像的序列的每个帧的即时眼睛疲劳函数。
6.如权利要求5所述的方法，其中确定潜在眼睛疲劳步骤(208)还包括在预定的时间 段上累积衰减后的用于第一和第二图像的序列的每个帧的即时眼睛疲劳函数。
7.如权利要求6所述的方法，其中确定潜在眼睛疲劳步骤(208)还包括使在第一和第 二图像的序列上累积的眼睛疲劳函数饱和。
8.如权利要求1所述的方法，还包括确定潜在眼睛疲劳是否可接受(210)；以及 如果潜在眼睛疲劳不可接受，则校正第一和第二图像的视差(212)。
9.如权利要求8所述的方法，其中校正步骤(212)还包括偏移第一和第二图像的至少 一个，以便调整观看者的眼睛相对于第一和第二图像的会聚点。
10.如权利要求8所述的方法，其中校正步骤(212)还包括合成第一片段的具有减小 的视差的新视图。
11.一种用于测量在观看三维(3D)呈现时的潜在眼睛疲劳的系统(100)，所述系统包括用于从第一片段获取第一图像和第二图像的部件；视差估计器(116)，用于估计第一图像中的至少一个点与第二图像中的至少一个对应 点的视差；视差转换估计器(118)，用于估计第一和第二图像的序列的视差转换；以及 眼睛疲劳估计器(120)，用于基于视差以及第一和第二图像的序列的视差转换确定在 观看3D呈现时的潜在眼睛疲劳。
12.如权利要求11所述的系统(100)，其中视差转换估计器(118)操作来估计之前片 段的最后帧的视差，估计第一片段的第一帧的视差，以及确定之前片段的最后帧的视差 和第一片段的第一帧的视差之间的差。
13.如权利要求11所述的系统(100)，其中视差转换估计器(118)操作来估计第一片 段的多个帧的每个帧内的视差，以及确定第一片段的每个帧的视差之间的差。
14.如权利要求11所述的系统(100)，其中眼睛疲劳估计器(120)操作来确定用于第 一和第二图像的序列的每个帧的即时眼睛疲劳函数。
15.如权利要求14所述的系统(100)，其中眼睛疲劳估计器(120)操作来将衰减因子 应用到用于第一和第二图像的序列的每个帧的即时眼睛疲劳函数。
16.如权利要求15所述的系统(100)，其中眼睛疲劳估计器(120)操作来在预定的时 间段上累积衰减后的用于第一和第二图像的序列的每个帧的即时眼睛疲劳函数。
17.如权利要求16所述的系统(100)，其中眼睛疲劳估计器(120)操作来使在第一和 第二图像的序列上累积的眼睛疲劳函数饱和。
18.如权利要求11所述的系统(100)，还包括视差校正器(122)，如果眼睛疲劳估计 器(120)确定潜在眼睛疲劳不可接受，则视差校正器(122)操作来校正第一和第二图像的 视差。
19.如权利要求18所述的系统(100)，其中视差校正器(122)操作来偏移第一和第二 图像的至少一个，以便调整观看者的眼睛相对于第一和第二图像的会聚点。
20.如权利要求18所述的系统(100)，其中视差校正器(122)操作来合成第一片段的 具有减小的视差的新视图。
21.一种可由机器读取的程序存储设备，所述程序存储设备确实地体现可由机器执行 的、用于执行用以测量在观看三维(3D)呈现时的潜在眼睛疲劳的方法步骤的指令的程 序，所述方法包括从第一片段获取第一图像和第二图像(202)；估计第一图像中的至少一个点与第二图像中的至少一个对应点的视差(204)；估计第一和第二图像的序列的视差转换(206)；以及基于视差以及第一和第二图像的序列的视差转换确定在观看3D呈现时的潜在眼睛疲 劳(208)。
22.如权利要求21所述的程序存储设备，其中所述方法还包括确定潜在眼睛疲劳是否可接受(210)；以及如果潜在眼睛疲劳不可接受，则校正第一和第二图像的视差(212)。
全文摘要
提供一种用于测量在观看3D呈现(例如，立体运动画面)时由观众感受到的潜在眼睛疲劳的系统和方法。本公开的眼睛疲劳测量系统和方法基于3D呈现的立体图像的视差(或深度)和视差转换的测量。本公开的系统和方法规定从第一片段获取第一图像和第二图像(202)，估计第一图像中的至少一个点与第二图像中的至少一个对应点的视差(204)，估计第一和第二图像的序列的视差转换(206)，以及基于视差以及第一和第二图像的序列的视差转换确定在观看3D呈现时感受到的潜在眼睛疲劳(208)。
文档编号H04N13/00GK102027752SQ200880129158
公开日2011年4月20日 申请日期2008年5月12日 优先权日2008年5月12日
发明者安娜·B·班尼特兹, 张冬青 申请人:汤姆森特许公司