专利名称：3d图像处理设备及其执行方法
技术领域：
与示例性实施例一致的设备和方法涉及一种三维(3D)图像处理设备及其执行方法、和其计算机可读存储介质，更具体地讲，涉及这样一种3D图像处理设备及其执行方法、和其计算机可读存储介质，该3D图像处理设备能够将二维(2D)输入图像转换为3D图像。
背景技术：
在能够将包含多个帧的2D图像转换为3D图像的现有技术的图像处理设备中，用户仅在针对所有的多个帧的3D转换完成之后，才可通过显示单元来确定转换完成后的图像是否是3D图像。然而，当2D图像被转换为3D图像时，如果相应于多个帧中的一些帧而产生的图像足以确定2D图像是否被正确地转换为3D图像，则更加方便。
发明内容
一个或更多示例性实施例提供了一种3D图像处理设备、及其执行方法、和其计算机可读存储介质，其中，当2D图像被转换为3D图像时，与多个帧中的一些帧对应地产生的图像足以确定2D图像是否被正确地转换为3D图像。根据示例性实施例的一方面，提供了一种三维(3D)图像处理设备，包括显示单元；图像转换器，产生关于包括多个帧的输入图像的3D图像转换信息，并通过基于产生的3D图像转换信息进行渲染来将输入图像转换为3D图像；控制器，控制图像转换器通过针对所述多个帧中产生了 3D图像转换信息的一些帧执行渲染来渲染3D图像的预览图像，并控制显示单元显示该预览图像。3D图像处理设备可还包括用户输入单元，其中，如果通过用户输入单元输入了对预览模式的选择，则控制器控制图像转换器从在输入对预览模式的选择之前产生了 3D图像转换信息的所述一些帧渲染预览。3D图像处理设备可还包括用户界面(UI)产生器，产生用于选择预览显示状态的第一 UI，其中，如果输入了对预览模式的选择，则控制器控制显示单元以由用户通过第一UI选择的预览显示状态显示预览图像。用于选择预览显示状态的第一 Π可包括以下子Π中的至少一个第一子UI，用于选择产生的3D图像的2D显示或3D显示；第二子UI，用于选择在显示单元中还是在外部显示设备中显示产生的3D图像；第三子UI，用于在与产生的3D图像对应的多个帧中选择将被显示的至少一个帧。3D图像处理设备可还包括连接单元，其中，外部显示设备与连接单元连接，其中，如果通过第二子Π选择了外部显示设备，则控制器接收外部显示设备的显示识别信息，根据接收的显示识别信息来处理产生的3D图像，并将处理的3D图像发送给外部显示设备。3D图像处理设备可还包括Π产生器，产生用于在显示的3D图像中指定预定区域的第二 Π ;存储单元，其中，控制器控制存储单元存储关于通过第二 Π指定的3D图像的区域的信息。如果输入了对用于3D图像转换信息的修改模式的选择，则控制器可控制Π产生器基于存储的关于指定的区域的信息来针对输入图像产生并显示用于用户识别和3D图像转换信息修改的第三Π。如果通过第三Π修改了 3D图像转换信息，则控制器可控制图像转换器基于修改的3D图像转换信息来转换输入图像。3D图像转换信息可包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取息和深度息。
根据示例性实施例的一方面，提供了一种三维(3D)图像处理设备的执行方法，该方法包括产生关于包括多个帧的输入图像的3D图像转换信息，通过基于产生的3D图像转换信息进行渲染来将输入图像转换为3D图像；通过针对所述多个帧中产生了 3D图像转换信息的一些帧执行渲染来渲染3D图像的预览图像；显示预览图像。渲染步骤可包括从在输入对预览模式的选择之前产生了 3D图像转换信息的所述一些帧渲染预览。该方法可还包括产生用于选择预览显示状态的第一 UI，其中，显示步骤包括以由用户通过第一 Π选择的预览显示状态显示预览图像。用于选择预览显示状态的第一 Π包括以下子Π中的至少一个第一子UI，用于选择产生的3D图像的2D显示或3D显示；第二子UI，用于选择在显示单元中还是在外部显示设备中显示产生的3D图像；第三子UI，用于在与产生的3D图像对应的多个帧中选择将被显示的至少一个帧。该方法可还包括如果通过第二子Π选择了外部显示设备，则接收外部显示设备的显示识别信息，根据接收的显示识别信息来处理产生的3D图像，并将处理的3D图像发送给外部显示设备。该方法可还包括产生并显示用于在显示的3D图像中指定预定区域的第二Π ;存储关于通过第二 UI指定的3D图像的区域的信息。该方法可还包括如果输入了对用于3D图像转换信息的修改模式的选择，则基于存储的关于指定的区域的信息来针对输入图像产生并显示用于用户识别和3D图像转换信息修改的第三Π。转换步骤可包括如果通过第三UI修改了 3D图像转换信息，则基于修改的3D图像转换信息来转换输入图像。3D图像转换信息可包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取息和深度息。根据示例性实施例的一方面，提供了一种用于存储用于执行三维(3D)图像处理方法的程序的存储介质。
通过下面结合附图对示例性实施例进行的描述，上述和/或其他方面将会变得更加清楚和更易于理解，其中图I是根据示例性实施例的包括3D图像处理设备的系统的示意图；图2是根据示例性实施例的3D图像处理设备的控制框图；图3示出根据示例性实施例的由3D图像处理设备100的UI产生器140产生的用户界面(UI)；图4示出根据示例性实施例的在3D图像处理设备100中的预览图像的显示；图5示出根据示例性实施例的由3D图像处理设备100的UI产生器140产生的UI ；
图6是根据示例性实施例的在3D图像处理设备100中的控制操作的流程图。
具体实施例方式以下，将参照附图来对示例性实施例进行详细描述以便由本领域的普通技术人员来容易地实现。可以以不限于这里阐述的示例性实施例的各种形式来实施示例性实施例。为了清楚，省略对公知部分的描述，并且相同的标号始终是指相同的元件。图I是根据示例性实施例的包括3D图像处理设备的系统的示意图。3D图像处理设备100可从外部源提供设备(未显示)或存储介质(未显示)接收单眼输入图像，并将该单眼输入图像转换为双眼图像。单眼图像包括2D图像，并且单眼图像和2D图像可彼此混合地被使用。双眼图像包括三维图像(或3D图像或立体图像)，并且双眼图像和三维图像(或3D图像或立体图像)可彼此交换。3D图像处理设备100产生关于输入图像的3D图像转换信息，并且基于产生的3D图像转换信息来执行渲染，从而将2D图像转换为3D图像。如果在将包含多个帧的输入图像转换为3D图像的同时，3D图像处理设备100接收到关于预览模式的选择的用户输入，则3D图像处理设备100针对多个帧中产生了 3D图像转换信息的一些帧执行渲染，并且将输入图像转换为3D图像以便被显示在显示单元120上。这里，显示单元120包括能够显示3D图像的显示器。另外，3D图像处理设备100可将经过渲染的3D图像发送给外部显示设备200。外部显示设备200可包括，例如，包括大尺寸显示器的3D TV 200-1、具有大尺寸屏幕的能够显示3D图像的放映机200-2等。因此，用户可在通过大尺寸显示器观看一些转换完成后的3D图像的同时，检测在3D图像转换期间可发生的差错、错误等。为了纠正检测的差错和错误，用户可修改由3D图像处理设备100产生的3D图像转换信息。因此，3D图像处理设备100可基于修改的3D图像转换信息来将输入图像转换为3D图像。这里，用户包括通过3D图像处理设备100将输入图像转换为3D图像的艺术家。以下，将参照图2对3D图像处理设备进行更加详细地描述。如图2所示，3D图像处理设备100包括图像转换器110、显示单元120、用户输入单元130、UI产生器140、存储单元150、连接单元160、和控制3D图像处理设备100的操作的控制器170。3D图像处理设备100可包括任何类型的能够将单眼输入图像转换为双眼图像的电子设备。另外，3D图像处理设备100可包括包含用于将单眼图像转换为双眼图像的程序的任何电子设备。这种电子设备可包括显示设备，例如，个人计算机(PC)等。3D图像处理设备100可通过接口(诸如，以太网接口(未显示))从外部源提供设备(未显示)接收包含多个帧的输入图像(可以是二维(2D)图像)。3D图像处理设备100可通过预定有线或无线网络与外部源提供设备(未显示)进行通信。此外，3D图像处理设备100可从外部存储介质(未显示)(诸如，通用串行总线(USB)存储器、压缩盘(⑶)、蓝光盘(BD)等)接收包含多个帧的输入图像。通过3D图像处理设备100从输入图像转换的3D图像可通过3D图像处理设备100被输出为基于快门眼镜方案的3D图像或者基于偏振眼镜方案的3D图像。快门眼镜方案使用快门眼镜来实现3D图像，其中，显示设备通过分别地打开左眼镜和右眼镜来单独地显示左图像和右图像，并且左图像和右图像被识别，从而提供立体效果。偏振眼镜方案使用偏振眼镜来实现3D图像，其中，显示设备包括偏振滤波器，如果通过具有与滤波器相同偏振的 偏振眼镜观看左图像和右图像，则左图像和右图像分别地输入到左眼和右眼，从而给出立体效果。3D图像处理设备100的图像转换器110产生关于输入图像的3D图像转换信息，基 于产生的3D图像转换信息执行渲染，将输入图像的格式转换为与快门眼镜方案和偏振眼镜方案之一对应的格式，从而基于快门眼镜方案或偏振眼镜方案来产生3D图像。图像转换器110产生关于包含多个帧的输入图像的3D图像转换信息，并且基于产生的3D图像转换信息来执行渲染，从而将输入图像转换为3D图像。3D图像转换信息包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取信息和深度信息。图像属性信息包括图像的亮度、颜色和对比度、关于与包含在图像中的预定对象对应的像素的位置信息等。关键帧信息包括构成输入图像的多个帧中的场景改变帧、重要对象第一次出现的帧、对象的运动很大的帧等。对象提取信息包括对象的可选信息，其中，向所述对象分配深度值以将立体效果给予包含在将被转换的帧中的至少一个对象。深度信息包括深度值以具有立体效果。如果通过用户输入单元130接收到关于预览模式的选择的输入，则图像转换器110在控制器170的控制下，针对多个帧中产生了 3D图像转换信息的一些帧(即，少于所有的多个帧)执行用于预览的渲染。如果接收到关于预览模式的选择的输入，则图像转换器110针对多个帧中当输入预览模式的选择时产生了 3D图像转换信息的一些帧执行用于预览的渲染。通过执行渲染，基本上与一些输入图像对应地产生左眼图像和右眼图像。图像转换器110可以以能够基本上用作前述图像转换器的预定图像转换程序的形式来实现。如果图像转换器110以预定图像转换程序的形式来实现，则图像转换程序被存储在将被稍后描述的存储单元150中，并且在控制器170的控制下被执行以被加载到存储器(例如，RAM、ROM等(未显示))。显示单元120显示3D图像，该3D图像与通过图像转换器110完成渲染的一些帧对应。当通过用户输入单元130接收到关于预览模式的选择的输入时，显示单元120在控制器170的控制下，立体地显示与由图像转换器110完成渲染的一些帧对应的3D图像(以下，前述3D图像和“预览图像”也可被彼此混合使用)，或者二维地显示单独的左眼图像和右眼图像。另外，显示单元120显示由稍后将被描述的UI产生器140产生的UI。显示单元120可由各种显示器类型(诸如，液晶、等离子、发光二极管、有机发光二极管、表面传导电子发射器、碳纳米管、纳米晶等)来实现，但不限于所述各种显示器类型。用户输入单元130用作用户接口以接收关于3D图像处理设备100的功能或操作的用户的选择。因此，3D图像处理设备100可通过用户输入单元130来接收关于预览模式的选择的输入或者关于显示在显示单元120上的UI中的选择的输入。用户输入单元130可包括至少一个键按钮，并且可通过设置在3D图像处理设备100中的控制或触摸面板来实现。另外，用户输入单元130可以以有线或无线连接到3D图像处理设备100的遥控器、键盘、鼠标或类似指示装置等的形式来实现。如果在控制器170的控制下通过用户输入单元130来接收关于预览模式的选择的输入，则n产生器140产生用于选择预览显示状态的第一 ui，并将用于选择预览显示装置的n显示在显示单元120上。用于选择预览显示状态的第一 n包括以下子n中的至少一个用于选择产生的3D图像的2D显示或3D显示的第一子n、用于选择在显示单元中还 是在外部显示设备中显示产生的3D图像的第二子UI、以及用于在与产生的3D图像对应的帧中选择将被显示的至少一个帧的第三子UI。另外，如果响应于预览模式的选择，预览图像被显示在显示单元120上，则在控制器170的控制下，UI产生器140产生用于指定显示的预览图像的预定区域的第二 UI，并将第二 UI显示在显示单元120上。此外，如果通过用户输入单元130输入用于3D图像转换信息的修改模式的选择，则UI产生器140基于关于通过第二 UI指定的区域的信息，针对输入图像产生用于用户识别以及3D图像转换信息修改的第三n，并将第三UI显示在显示单元120上。可以以显示在显示单元120上的图形用户界面(⑶I)的形式来产生由n产生器140产生的所有n。存储单元150存储关于通过由UI产生器140产生的第二 UI指定的预览图像的预定区域的信息。关于指定的区域的信息可包括，例如，关于与相应帧中的指定的区域对应的像素位置的信息。如果以图像转换程序的形式来提供图像转换器110，则存储单元150可存储图像转换程序。3D图像处理设备100可通过连接单元160与外部显示设备200连接。因此，3D图像处理设备100和外部显示设备200可通过预定有线或无线网络通信，或者可彼此本地连接。如果3D图像处理设备100通过连接单元160与外部显示设备200连接，则在控制器170的控制下，3D图像处理设备100接收外部显示设备200的显示识别信息，根据接收的显示识别信息来处理产生的3D图像(或预览图像)，并将产生的3D图像(或预览图像)发送给外部显示设备200。3D图像转换设备100可通过连接单元160与多个外部显示设备200-1、200-2......连接。可控制上述元件的控制器170可以以中央处理单元(CPU)的形式设置在3D图像处理设备100中。以下，将对前述元件和控制器170的操作进行更加详细地描述。图3示出根据示例性实施例的由3D图像处理设备100的UI产生器140产生的用户界面(UI)。如果在输入图像被转换为3D图像的同时，通过用户输入单元130输入关于预览模式的选择的输入，则控制器170控制UI产生器140产生用于选择预览显示状态的第一 UI141并将第一 UI 141显示在显示单元120上。用于选择预览显示状态的第一 UI 141包括以下子UI中的至少一个用于选择产生的3D图像(或预览图像)的2D或3D显示的第一子n 143、用于选择在显示单元中还是在外部显示设备中显示产生的3D图像的第二子瓜145、以及用于从与产生的3D图像对应的多个帧中选择将被显示的至少一个帧的第三子UI 147。在第一子n 143中，用户(或艺术家)可通过用户输入单元130选择2D或3D显示。参照图4, 2D或3D显示如下。图4示出根据示例性实施例的在3D图像处理设备100中的预览图像的显示。如果用户在第一子UI 143中选择2D显示，则控制器170可将3D图像·(或预览图像)分离并显示为左眼图像和右眼图像(参见图4的A)，所述3D图像(或预览图像)与当输入预览模式的选择时产生3D图像转换信息的一些帧对应。预览图像的2D显示提供这样的优点用户可容易地在由图像转换器110产生的3D图像转换信息中检测到差错。例如，3D图像转换信息中的差错可包括左眼图像和右眼图像之间的失配。失配可包括例如，左眼图像和右眼图像之间的预定区域中的图像属性信息(诸如颜色、对比度、亮度等)的失配。图像属性信息的这种失配可以是左眼图像的区域和右眼图像的对应区域在颜色、对比度或亮度上彼此不同。失配的另一示例可以是在左眼图像的区域和右眼图像的对应区域之间存在预定移动像素。在图像转换器110提取对象的同时，可由像素提取差错来引起像素位置不同的这种情况。失配的另一示例可以是左眼图像的区域和右眼图像的对应区域在深度信息上不同。为了确定深度信息的失配，用户通过用户输入单元130输入预定键，从而在控制器170的控制下，由图像转换器110产生的相应帧的深度图可被显示在显示单元120上。深度图还可被显示为被分割为用于左眼图像的深度图以及用于右眼图像的深度图。深度图根据深度值被表示为黑色和白色的深度，从而具有失配的深度值的区域可被容易确定。如果用户在第一子UI 143中选择3D显示，则控制器170可将3D图像(或预览图像)显示为立体图像(参照图4的B)，该3D图像(或预览图像)与当预览模式的选择被选择时产生的3D图像转换信息的一些帧对应。预览图像的3D显示提供这样的优点用户可容易地确定深度信息是否被正确地分配在由图像转换器110产生的3D图像转换信息中。图像转换器110提取将分配有分配的深度值的对象，并将该深度值分配给提取的对象。通过显示为3D图像的预览图像，能够确定深度值是否正确地被分配给对象。通过如图3所示的包括在用于选择预览显示状态的第一 n 141中的第二子n145，用户可选择预览图像将在内部显示单元120中显示还是在外部显示设备200中显示。如果用户在第二子n 145中通过用户输入单元130选择将通过内部显示单元120来显示预览图像，则控制器170可控制显示单元120显示与3D图像(或预览图像)，其中，所述3D图像(或预览图像)与当预览模式的选择被输入时产生3D图像转换信息的一些帧对应。另一方面，如果用户在第二子n 145中通过用户输入单元130选择将通过外部显示设备200来显示预览图像，则控制器170可将预览图像发送给外部显示设备200，从而可由外部显示设备200显示3D图像(或预览图像)，其中，所述3D图像(或预览图像)与当预览模式的选择被输入时产生3D图像转换信息的一些帧对应。当在第二子n 145中选择外部显示设备200用于显示时，控制器170从与连接单元160连接的外部显示设备200接收显示识别信息，根据接收的显示识别信息来处理预览图像，并且将处理的预览图像发送给外部显示设备200。显示识别信息可包括外部显示设备200的显示信息，例如，扩展显示标识数据(EDID)或诸如此类。如果3D图像处理设备100经由连接单元160与多个外部显示设备连接，则控制器170控制UI产生器140产生用于与多个外部显示设备连接的预定UI (未显示)，并将预览图像发送给由用户通过用户输入单元130选择的外部显示设备。此外，如果3D图像处理设备100经由连接单元160与多个外部显示设备连接并且预览图像被选择显示为2D图像，则控制器170可根据用户的选择来将与预览图像对应的左眼图像和右眼图像分别发送给不同的外部显示设备(参见图4的C)。例如，控制器170可根据用户的选择来分别将左眼图像发送给经由连接单元160连接的第一外部显示设备 200-1，将右眼图像发送给第二外部显示设备200-2。因此，左眼图像被显示在第一外部显示设备200-1的显示器上，右眼图像被显示在第二外部显示设备200-2的显示器上。发送到外部显示设备200的预览图像包括由n产生器130在控制器170的控制下产生的所有n。也就是，可显示在内部显示单元120中的预览图像(即，包含n的图像)被发送到外部显示设备200。因此，用户可使用包含显示在显示设备200并可由用户选择的项的n。此时，用户可通过连接到外部显示设备200的输入装置(诸如，指示装置、遥控器等)在UI上输入选择。通过如图3所示的包含在用于选择预览显示状态的第一 n 141中的第三子n147，可在与预览图像对应的多个帧中选择将显示在显示单元120中或外部显示设备200中的至少一个帧。通过第三子n 147，用户可在与预览图像对应的多个帧中选择与预定部分对应的至少一个帧。例如，用户可通过第三子n 147来选择与一个场景对应的至少一个帧。图5示出根据示例性实施例的由3D图像处理设备100的UI产生器140产生的UIo根据使用第一 n 141的用户选择，控制器170在显示单元120或外部显示设备200上显示预览图像，并控制UI产生器140产生用于将预定区域指定给显示的预览图像的第二 ui，并将第二 n显示在预览图像。通过第二 n 145，用户可指定在3D图像转换信息中存在差错的区域，或指定深度信息必须被修改的区域。指定的区域可被以自由曲线的形式被指定，其中，第二n 145可被实现以便于通过指示装置(诸如鼠标或诸如此类)指定不确定区域(参照图5的A)。如果通过第二 UI 145在预览图像上指定预定区域，则控制器170将关于指定的区域的信息存储在存储单元150中。因此，控制器170将关于与指定的区域对应的像素位置的信息存储在存储单元150中。同时，如果通过用户输入单元130输入对用于3D图像转换信息的修改模式的选择，则控制器170控制用于产生与输入图像对应的3D图像转换信息的处理图像，被显示在3D图像处理设备100的显示单元120上(见图5的B)。在用于3D图像转换信息的修改模式的情况下，显示单元120的一个区域显示2D输入图像，其他区域显示用于产生3D图像转换信息的处理图像。控制器170控制UI产生器140通过使用由用户存储在存储单元150中的关于预定区域的信息，产生将用于关于与指定的区域对应的区域的用户识别n 145a和3D图像转换信息修改的第三n 146，并将第三n 146显示在处理区域上。随后，用户可选择显示了用户识别UI 145a的帧，同时用例如设置在用户输入单元130中的滚轮或左按钮和右按钮来移动该帧。图5中的(B)示出深度信息可被修改的第三n的示例。如果通过用户输入单元130选择了用户识别UI 145a，则深度信息可被修改的第三n 146被显示，因此用户可通过第三UI 146来修改分配到对应区域的深度值。图5中显示的第三n 146作为允许通过箭
头的移动来修改深度值的示例，但是第三n不限于此。可选择地，深度值可被直接输入。因此，第三n 146可包括用于接收用户的选择的任何n。尽管图5的(B)仅显示了对深度信息的修改，但是第三n 146可还包括子UI，该子n用于修改能够纠正3D图像转换信息中的差错的所有项。例如，第三n 146可还包括子UI，该子n用于修改指定区域中的颜色、对比度、亮度、像素位置等。如果通过第三n 146修改了 3D图像转换信息，则控制器170控制图像转换器110，使得可基于修改的3D图像转换信息来转换输入图像。因此，示例性实施例提供了以下优点在从输入图像转换为3D图像期间，用户可通过预览模式确定输入图像是否被转换为最佳3D图像，并且通过修改模式来修改3D图像转换信息，并且获得反映该修改的3D图像。图6是根据示例性实施例的在3D图像处理设备100中的控制操作的流程图。开始从包含多个帧的输入图像到3D图像的转换(S301)，并且如果在完成输入图像的转换之前，输入了关于预览模式的选择的输入(S302)，则对多个帧中产生了 3D图像转换信息的一些帧执行用于预览的渲染(S303)。随后，通过用于预览的渲染产生的3D图像被显示(S304)。由根据示例性实施例的3D图像处理设备执行的方法可以以可由各种计算机执行并被存储在计算机可读存储介质中的程序的形式来实现。计算机可读存储介质可包括单个程序命令、数据文件、数据结构等或者包括它们的组合。记录在存储介质中的程序命令可针对本示例性实施例专门设计和配置，并且可由计算机软件领域的技术人员使用。例如，计算机可读存储介质包括磁介质(诸如，硬盘、软盘和磁带)、光介质(诸如，压缩盘只读存储器(CD-ROM)和数字通用盘(DVD))、磁光介质(诸如，软磁盘)、以及专门配置以存储和执行程序命令的硬件装置(诸如，ROM、随机存取存储器(RAM)、闪存等)。例如，程序命令不仅包括由编译器产生的机器码，而且包括可由计算机使用解析器等执行的高级语言代码。硬件装置可被配置为操作为一个或多个用于执行根据示例性实施例的方法的软件模块，反之亦然。可选择地，示例性实施例可形成为计算机可读传输介质(诸如，载波)或用于通过网络(诸如，互联网)传输的信号。如上所述，提供了一种3D图像处理设备及其执行方法和其计算机可读存储介质，该3D图像处理设备可得到关于具有在将2D图像转换为3D图像的同时产生的3D图像转换信息的一些帧的3D图像的预览，基于预览结果来修改3D图像转换信息，并将2D图像转换为与修改的3D图像转换信息对应的3D图像。
尽管已经显示和描述了一些示例性实施例，但是本领域的技术人员应该理解，在不脱离本发明的精神和范围的情况下，可以对这些示例性实施例进行改变，其中，本发明的 范围被限定在权利要求及其等同物中。
权利要求
1.一种三维3D图像处理设备，包括 图像转换器，产生关于包括多个帧的输入图像的3D图像转换信息，并通过基于产生的3D图像转换信息进行渲染来将输入图像转换为3D图像； 控制器，控制图像转换器通过针对所述多个帧中产生了 3D图像转换信息的一些帧执行渲染来渲染3D图像的预览图像，并控制显示单元显示该预览图像。
2.如权利要求I所述的3D图像处理设备，还包括用户输入单元， 其中，如果通过用户输入单元输入了对预览模式的选择，则控制器控制图像转换器从在输入对预览模式的选择之前产生了 3D图像转换信息的所述一些帧渲染预览。
3.如权利要求2所述的3D图像处理设备，还包括用户界面Π产生器，产生用于选择预览显示状态的第一 Π， 其中，如果输入了对预览模式的选择，则控制器控制显示单元以由用户通过第一 Π选择的预览显示状态来显示预览图像。
4.如权利要求3所述的3D图像处理设备，其中，用于选择预览显示状态的第一Π包括以下子Π中的至少一个 第一子UI，用于选择产生的3D图像的2D显示或3D显示； 第二子UI，用于选择在显示单元中还是在外部显示设备中显示产生的3D图像； 第三子UI，用于在与产生的3D图像对应的多个帧中选择将被显示的至少一个帧。
5.如权利要求4所述的3D图像处理设备，还包括连接单元，其中，外部显示设备与连接单元连接， 其中，如果通过第二子UI选择了外部显示设备，则控制器接收外部显示设备的显示识别信息，根据接收的显示识别信息来处理产生的3D图像，并将处理的3D图像发送给外部显示设备。
6.如权利要求I所述的3D图像处理设备，还包括 Π产生器，产生用于在显示的3D图像中指定预定区域的第二 Π ； 存储单元， 其中，控制器控制存储单元存储关于通过第二 UI指定的3D图像的区域的信息。
7.如权利要求6所述的3D图像处理设备，其中，如果输入了对用于3D图像转换信息的修改模式的选择，则控制器控制UI产生器基于存储的关于指定的区域的信息来针对输入图像产生并显示用于用户识别和3D图像转换信息修改的第三Π。
8.如权利要求7所述的3D图像处理设备，其中，如果通过第三Π修改了3D图像转换信息，则控制器控制图像转换器基于修改的3D图像转换信息来转换输入图像。
9.如权利要求8所述的3D图像处理设备，其中，3D图像转换信息包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取信息和深度信息。
10.一种三维3D图像处理设备的执行方法，该方法包括 产生关于包括多个帧的输入图像的3D图像转换信息，通过基于产生的3D图像转换信息进行渲染来将输入图像转换为3D图像； 通过针对所述多个帧中产生了 3D图像转换信息的一些帧执行渲染来渲染3D图像的预览图像； 显示预览图像。
11.如权利要求10所述的方法，其中，渲染步骤包括从在输入对预览模式的选择之前产生了 3D图像转换信息的所述一些帧渲染预览。
12.如权利要求11所述的方法，还包括产生用于选择预览显示状态的第一UI， 其中，显示步骤包括以由用户通过第一 Π选择的预览显示状态来显示预览图像。
13.如权利要求12所述的方法，其中，用于选择预览显示状态的第一Π包括以下子Π中的至少一个 第一子UI，用于选择产生的3D图像的2D显示或3D显示； 第二子UI，用于选择在显示单元中还是在外部显示设备中显示产生的3D图像； 第三子UI，用于在与产生的3D图像对应的多个帧中选择将被显示的至少一个帧。
14.如权利要求13所述的方法，还包括如果通过第二子Π选择了外部显示设备，则接收外部显示设备的显示识别信息，根据接收的显示识别信息来处理产生的3D图像，并将处理的3D图像发送给外部显示设备。
15.如权利要求10所述的方法，还包括 产生并显示用于在显示的3D图像中指定预定区域的第二 UI ； 存储关于通过第二 UI指定的3D图像的区域的信息。
16.如权利要求15所述的方法，还包括如果输入了对用于3D图像转换信息的修改模式的选择，则基于存储的关于指定的区域的信息来针对输入图像产生并显示用于用户识别和3D图像转换信息修改的第三Π。
17.如权利要求16所述的方法，其中，转换步骤包括如果通过第三Π修改了3D图像转换信息，则基于修改的3D图像转换信息来转换输入图像。
18.如权利要求17所述的方法，其中，3D图像转换信息包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取信息和深度信息。
19.一种处理三维3D图像的方法，该方法包括 接收二维2D图像，2D图像包括多个帧； 将2D图像的所述多个帧中的2D图像的一帧转换为3D预览图像； 将3D预览图像显示为3D图像。
20.如权利要求19所述的方法，其中，所述转换步骤包括 产生用于将所述帧转换为3D预览图像的所述帧的图像转换信息； 基于产生的图像转换信息来渲染3D预览图像。
21.如权利要求20所述的方法，其中，图像转换信息包括以下信息中的至少一个图像属性信息、关键帧信息、对象提取信息和深度信息。
22.如权利要求21所述的方法，其中，图像属性信息包括以下信息中的至少一个2D图像的亮度、颜色和对比度、识别与在2D图像中的预定对象对应的像素的位置信息， 其中，关键帧信息包括以下帧中的至少一个场景改变帧、重要对象第一次出现的帧、对象的运动很大的帧， 其中，对象提取信息包括对象的可选信息，其中，向所述对象分配深度值以将立体效果给予包含在将被转换的帧中的至少一个对象， 其中，深度信息包括深度值以具有立体效果。
23.如权利要求19所述的方法，其中，所述帧包括2D图像的所述多个帧中的2D图像的两个或更多帧，所述两个或更多帧是少于2D图像的所有的所述多个帧的一些帧。
24.如权利要求23所述的方法，其中，所述转换步骤包括 产生用于将所述两个或更多帧转换为3D预览图像的所述两个或更多帧的图像转换信息； 基于产生的图像转换信息来渲染3D预览图像。
全文摘要
一种3D图像处理设备及其执行方法，其中，关于具有多个帧的输入图像的3D图像转换信息被产生，通过基于3D图像转换信息和输入图像的一些帧对3D图像的预览图像进行渲染来将输入图像转换为3D图像，其中，所述一些帧的3D图像转换信息被产生。
文档编号H04N13/04GK102868898SQ20121023068
公开日2013年1月9日 申请日期2012年7月4日 优先权日2011年7月5日
发明者权五允, 金裁彻, 许惠贤 申请人:三星电子株式会社