利用自适应频率提高来创建图像中的细节的制作方法
【技术领域】
[0001] -个或多个实施例一般涉及超高清晰度（UD)显示器，并且具体地，涉及利用自适 应频率提高来创建更低分辨率图像中的细节，以用于UD显示器或设备上的显示。
【背景技术】
[0002] UD用户，诸如UD电视机（UDTV)或其它UD显示设备必须在UD设备上观看更低分 辨率内容（例如，标准清晰度（SD)、高清晰度（HD)、全HD(FHD)等内容），直到UD视频变得 更加普遍。当在UD设备上观看更低分辨率帧时，其图像质量看起来降低了。常规的图像放 大（upscaling)或者插值不能提供充分的图像锐度和精细的细节来最小化图像质量降低。
【发明内容】
[0003] 技术方案
[0004] 一个或多个实施例涉及创建用于图像的图像细节。在一个实施例中，一种方法包 括：接收输入图像信息。在一个实施例中，处理器设备被用于基于输入图像信息的频率特性 和纹理信息来确定增强信息。在一个实施例中，将增强信息与输入图像信息混合来生成增 强图像。
[0005] 在一个实施例中，一种系统包括：纹理处理模块，其从输入图像获得纹理信息。在 一个实施例中，细节创建模块将处理器设备用于：接收输入图像信息；以及基于输入图像 信息的纹理信息和频率特性来确定增强信息。在一个实施例中，混合器模块将增强信息与 输入图像混合。
[0006] 在一个实施例中，一种具有指令的非瞬时性计算机可读介质，所述指令当在计算 机上被运行时，执行方法。在一个实施例中，所述方法包括接收输入图像信息。在一个实施 例中，基于输入图像信息的频率特性和纹理信息来确定增强信息。在一个实施例中，将增强 信息与输入图像信息混合来生成增强图像。
[0007] 参考以下描述、所附权利要求和附图，一个或多个实施例的这些和其它特征、方面 和优点将变得容易理解。
【附图说明】
[0008] 图1示出根据一个实施例的具有图像细节创建机制的电子系统。
[0009] 图2示出根据一个实施例的系统的示例高级框图。
[0010] 图3示出根据实施例的图像细节处理系统的框图。
[0011] 图4示出根据实施例的外部图像块和内部图像块之间的示例关系。
[0012] 图5示出根据实施例的示例的纹理自适应细节创建块。
[0013] 图6示出根据实施例的用于变换的周期的示例。
[0014] 图7示出根据实施例的示例变换移位操作。
[0015] 图8示出根据实施例的自适应频率提高块的框图。
[0016] 图9示出用于描述根据实施例的与频率分量有关的距离计算的示例图。
[0017] 图10示出根据实施例的用于频率提高的传递函数的示例图。
[0018] 图11示出根据实施例的另一个示例的纹理自适应细节创建块。
[0019] 图12示出用于描绘根据实施例的与频率分量有关的距离确定的示例图。
[0020] 图13示出根据实施例的用于细节创建过程的框图。
[0021] 图14是示出包括对于实施所公开的实施例有用的计算机系统的信息处理系统的 示范性高级框图。
【具体实施方式】
[0022] 以下描述是为了说明一个或多个实施例的一般原理的目的而做出，而不打算限制 在此要求保护的发明构思。此外，在此描述的特定特征可以与各种可能的组合和置换的每 一个中的其它的被描述的特征组合使用。除非在此另外明确地定义，否则所有术语要被赋 予它们的最广泛的可能解释，包括从说明书中暗示的含义以及本领域技术人员所理解的和 /或在词典、论文等等中定义的含义。
[0023] -个或多个实施例提供了创建用于图像的图像细节。在一个实施例中，一个方法 包括接收输入图像信息。在一个实施例中，处理器设备被用于基于输入图像信息的频率特 性和纹理信息来确定增强信息。在一个实施例中，将增强信息与输入图像信息混合来生成 增强的图像。
[0024] 本领域技术人员将理解，用于表示图像信息的格式对于一些实施例来说不是关键 的。例如，在一些实施例中，图像信息以（Χ，γ)的格式来呈现，其中X和Y是定义图像中的 像素的位置的两个坐标。三维图像信息由（x，Y，z)的格式来呈现，所述（Χ，Υ，Ζ)的格式具 有用于像素的颜色的相关信息。在一个实施例中，三维图像信息还包括强度或亮度元素。
[0025] 为了说明的目的，如这里使用的术语"水平"是指当查看如由图形代号一一 "图" 一一所指示的图形时所看见的水平方向。术语"垂直"是指垂直于如刚才定义的水平 的方向。诸如"在……之上"、"在……下面"、"底部"、"顶部"、"侧面"、"更高"、"更低"、"上 面的"、"在……上"和"在……下"的术语是相对于水平被定义，如图中所示。
[0026] 在此提及的术语"图像"可以包括二维图像、三维图像、视频帧、计算机文件表示、 来自相机的图像、或者它们的组合。例如，图像可以是机器可读数字文件、物理照片、数字照 片、运动图片帧、视频帧、X射线图像、扫描图像、或它们的组合。图像可以从按矩形阵列排 列的像素中生成。所述图像可以包括沿着行的方向的X轴和沿着列的方向的y轴。
[0027] 图像中的纹理可以定义为在一些规则的或者重复的图案（包括色彩图）中出现的 纹理元素（例如，纹理元（texel))的集合。纹理可以包括确定性（规则的）纹理和统计性 (不规则的）纹理。确定性纹理是通过重复固定的几何形状（诸如圆形或者矩形）来创建 的。确定性纹理的示例是有图案的墙纸和砖。纹理元是通过具体形状的形状参数来自然地 表示。统计性纹理是通过利用固定的统计性质（statistical property)改变图案来创建 的。大多数自然纹理，诸如木头或者石头，都是统计性的。统计性纹理典型地用空间频率性 质来表示。
[0028] 图1示出一个或多个实施例中的具有图像细节创建机制的电子系统50。电子系 统50包括连接到第二设备56 (诸如客户端或服务器）的第一设备52 (诸如客户端或服务 器）。第一设备52可以利用通信路径54(诸如无线或有线网络）与第二设备56通信。
[0029] 在一个示例中，第一设备52可以是各种超高清晰度（UD)显示设备的任何一种，诸 如UD电视机（UDTV)、平板设备、智能电话、个人数字助理（PDA)、笔记本计算机、液晶显示器 (LCD)系统、可穿戴设备、移动计算设备、或其它多功能显示器或娱乐设备。第一设备52可 以直接或间接地耦合到通信路径54以与第二设备56通信，或者可以是独立的设备。
[0030] 为了说明的目的，在描述电子系统50时将第一设备52作为显示设备，虽然应该理 解第一设备52可以是不同类型的设备。例如，第一设备52也可以是用于呈现图像或多媒 体呈现的设备。多媒体呈现可以是包括声音、流图像序列或视频馈送、或者其组合的呈现。 举例来说，第一设备52可以是UDTV，或者任何其它类型的UD显示设备（例如，监视器、视频 面板、HUD、智能电话、平板设备、视频设备、游戏设备等等）。
[0031] 第二设备56可以是各种集中式或分散式计算设备、图像或视频传输设备中的任 何一种。例如，第二设备56可以是多媒体计算机、平板、膝上型计算机、桌上型计算机、视频 游戏控制台、网格计算资源、虚拟化计算机资源、云计算资源、路由器、交换机、对等分布式 计算设备、媒体回放设备、数字视频盘（DVD)播放器、具备三维能力的DVD播放器、记录设备 (诸如相机或摄像机）、或者它们的组合。在另一个示例中，第二设备56可以是用于接收广 播或直播流信号的信号接收器，诸如电视机接收器、电缆接线盒、卫星天线接收器、或具备 web功能的设备。
[0032] 第二设备56可以集中在单个房间中、分布在不同的房间、分布在不同的地理位 置、嵌入在电信网络内。第二设备56可以具有用于与通信路径54耦合的装置以与第一设 备52通信。
[0033] 为了说明的目的，在描述电子系统50时将第二设备56作为计算设备，虽然应该理 解，第二设备56可以是不同类型的设备。同样地为了说明的目的，在示出电子系统50时将 第二设备56和第一设备52作为通信路径54的端点，虽然应该理解，电子系统50可以具有 在第一设备52、第二设备56和通信路径54之间的不同划分。例如，第一设备52、第二设备 56或者它们的组合也可以充当通信路径54的一部分。
[0034] 通信路径54可以是各种网络。例如，通信路径54可以包括无线通信、有线通信、 光、超声波或它们的组合。卫星通信、蜂窝通信、蓝牙、红外数据协会标准（IrDA)、无线保真 (WiFi)、和全球微波接入互联（WiMAX)是可以被包括在通信路径54中的无线通信的示例。 以太网、数字用户线（DSL)、光纤到户（FTTH)、高清晰度多媒体接口（HDMI)线缆、和普通老 式电话服务（POTS)是可以包括在通信路径54中的有线通信的示例。
[0035] 此外，通信路径54可以穿过许多网络拓扑和距离。例如，通信路径54可以包括直 接连接、个域网（PAN)、局域网（LAN)、城域网（MAN)、宽域网（WAN)或它们的组合。
[0036] 图2示出根据一个实施例的系统200的高级框图。在一个实施例中，系统200可 以使用图像细节处理系统300 (见图3)来处理在输入节点201处接收的来自输入源210的 输入视频图像，在输出节点240处输出视频图像，并且在输出源250 (或图1的设备52)上 显示图像。在一个实施例中，所述图像细节处理系统300接收输入图像信息。在一个实施 例中，图像细节处理系统300的处理器设备被用于基于输入图像信息的频率特性和纹理信 息来确定增强信息。在一个实施例中，接下来，将增强信息与输入图像信息混合来生成增强 的图像。在一个实施例中，用于输出源250(或52)的显示器可以是用于呈现图像或多媒体 呈现的物理设备。例如，所述显示器可以是屏幕，包括液晶显示器（IXD)面板、等离子屏幕、 投影屏幕、平视显示器（heads-up-display，HUD)等等。在其它实施例中，所述显示器可以 被投影在物体或反射设备上。
[0037] 在一个实施例中，输入视频图像可以从输入源210提供，所述输入源210可以无线 地或通过有线接口被发送/接收，并且可以包括未压