帧或者它们的任何组合中的至少一个来编码。
[0089]网格帧可包括来自诸如立体照相装置、飞行时间传感器、深度传感器、结构光照相装置、径向图像、经计算以创建多视图立体重构的图像的2D照相装置时间序列或者它们的任何组合之类的图像捕获机构的深度信息。纹理帧包括纹理坐标、纹理信息、图像纹理信息或者它们的任何组合中的至少一个。此外，变化帧包括部分网格帧信息、部分纹理帧信息或者它们的任何组合。指令还可包括将编码的多边形的3D网格和对应纹理与3D合成图形对象相组合，并且再现组合的多边形的3D网格和对应纹理与3D合成图形对象。另外，多边形的编码3D网格和对应纹理可采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变。编码网格和对应纹理也可按照任何CODEC格式、任何视频传输格式或者它们的任何组合来标准化。
[0090]示例 4
本文描述一种计算装置。该计算装置包括主处理器，其配置成运行所存储指令，其中主处理器使用照相装置串行接口与图像捕获机构进行接口。主处理器配置成采集深度信息和图像纹理信息。主处理器还配置成从深度信息来计算多边形的3D网格。此外，主处理器配置成从图像纹理信息来确定对应纹理，并且生成编码视频流，其经由网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来指定多边形的3D网格和对应纹理。照相装置串行接口包括数据传输接口，其是采用数据和时钟信号的单向差分串行接口。图像捕获机构还可包括深度传感器、图像传感器、红外传感器、X射线光子计数传感器、电荷耦合器件(CCD)图像传感器、互补金属氧化物半导体(CMOS)图像传感器、芯片上系统(SOC)图像传感器、具有光敏薄膜晶体管的图像传感器或者它们的任何组合。
[0091]示例5
本文描述一种在打印装置中打印使用多边形的3D网格和对应纹理所编码的图像的打印装置。该打印装置包括打印对象模块，其配置成检测使用多边形的3D网格和对应纹理所编码的图像，并且采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变图像。打印对象模块也可打印使用多边形的3D网格和对应纹理所编码的图像。此外，打印对象模块能够打印图像的多个视图。
[0092]要理解，上述示例中的具体细节可在一个或多个实施例中的任何位置使用。例如，上述计算装置的所有可选特征也可针对本文所述的方法或计算机可读介质的任一个来实现。此外，虽然本文中可使用流程图和/或状态图来描述实施例，但是，本发明并不局限于那些简图或者本文中的对应描述。例如，流程无需经过每个所示的框或状态，或者按照与本文所示和所述完全相同的顺序。
[0093]本发明并不局限于本文所示的具体细节。实际上，获益于本公开的本领域的技术人员会理解，在本发明的范围内可对以上描述和附图进行其它许多变更。相应地，以下包含对本发明的任何修正的权利要求书定义本发明的范围。
【主权项】
1.一种用于使用多边形的3D网格和对应纹理对图像进行编码的方法，包括: 得到深度信息和图像纹理信息； 从所述深度信息来计算多边形的所述3D网格； 使用所述图像纹理信息来确定所述对应纹理；以及 使用网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来对多边形的所述3D网格和所述对应纹理进行编码。
2.如权利要求1所述的方法，其中，所述网格帧包括来自诸如立体照相装置、飞行时间传感器、深度传感器、结构光照相装置、径向图像、经计算以创建多视图立体重构的图像的2D照相装置时间序列或者它们的任何组合之类的图像捕获机构的深度信息。
3.如权利要求1所述的方法，其中，所述纹理帧包括纹理坐标、纹理信息、图像纹理信息或者它们的任何组合中的至少一个。
4.如权利要求1所述的方法，其中，所述变化帧包括部分网格帧信息、部分纹理帧信息或者它们的任何组合。
5.如权利要求1所述的方法，还包括: 将多边形的所述编码3D网格和所述对应纹理与3D合成图形对象相组合；以及 再现所述组合的多边形的所述编码3D网格和所述对应纹理与所述3D合成图形对象。
6.如权利要求1所述的方法，其中，多边形的所述编码3D网格和所述对应纹理采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变。
7.如权利要求1所述的方法，其中，多边形的所述编码3D网格和所述对应纹理按照任何CODEC格式、任何视频传输格式或者它们的任何组合来标准化。
8.一种计算装置，包括: 中央处理单元(CPU)，配置成运行所存储指令； 存储装置，存储指令，所述存储装置包括在由所述CPU运行时配置成执行下列步骤的处理器可执行代码: 采集深度信息和图像纹理信息； 从所述深度信息来计算多边形的3D网格； 从所述图像纹理信息来确定对应纹理；以及 生成编码视频流，其经由网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来指定多边形的所述3D网格和所述对应纹理。
9.如权利要求8所述的计算装置，其中，所述网格帧包括来自诸如立体照相装置、飞行时间传感器、深度传感器、结构光照相装置、径向图像、经计算以创建多视图立体重构的图像的2D照相装置时间序列或者它们的任何组合之类的图像捕获机构的深度信息。
10.如权利要求8所述的计算装置，其中，所述纹理帧包括纹理坐标、纹理信息、图像纹理信息或者它们的任何组合中的至少一个。
11.如权利要求8所述的计算装置，其中，所述变化帧包括部分网格帧信息、部分纹理中贞信息或者它们的任何组合。
12.如权利要求8所述的计算装置，其中，所述中央处理单元或图形处理单元将所述编码视频流与3D合成图形对象相组合，并且再现所述编码视频流和所述3D合成图形对象的组合。
13.如权利要求8所述的计算装置，其中，所述中央处理单元或图形处理单元采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变所述编码视频流。
14.如权利要求8所述的计算装置，其中，所述编码视频流按照任何CODEC格式、任何视频传输格式或者它们的任何组合来标准化。
15.如权利要求8所述的计算装置，还包括无线电和显示器，所述无线电和显示器在通信上至少耦合到所述中央处理单元。
16.其中存储了指令的至少一个机器可读介质，所述指令响应运行于计算装置而使所述计算装置: 得到深度信息和图像纹理信息； 从所述深度信息来计算多边形的3D网格； 使用所述图像纹理信息来确定对应纹理；以及 使用网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来对多边形的所述3D网格和所述对应纹理进行编码。
17.如权利要求16所述的至少一个机器可读介质，其中，所述网格帧包括来自诸如立体照相装置、飞行时间传感器、深度传感器、结构光照相装置、径向图像、经计算以创建多视图立体重构的图像的2D照相装置时间序列或者它们的任何组合之类的图像捕获机构的深度?目息。
18.如权利要求16所述的至少一个机器可读介质，其中，所述纹理帧包括纹理坐标、纹理信息、图像纹理信息或者它们的任何组合中的至少一个。
19.如权利要求16所述的至少一个机器可读介质，其中，所述变化帧包括部分网格帧信息、部分纹理帧信息或者它们的任何组合。
20.如权利要求16所述的至少一个机器可读介质，还包括其中存储的指令，所述指令响应运行于所述计算装置而使所述计算装置: 将多边形的所述编码3D网格和所述对应纹理与3D合成图形对象相组合；以及 再现所述组合的多边形的所述3D网格和所述对应纹理与所述3D合成图形对象。
21.如权利要求16所述的至少一个机器可读介质，其中，多边形的所述编码3D网格和所述对应纹理采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变。
22.如权利要求16所述的至少一个机器可读介质，其中，多边形的所述编码3D网格和所述对应纹理按照任何CODEC格式、任何视频传输格式或者它们的任何组合来标准化。
23.一种计算装置，包括: 主处理器，配置成运行所存储指令，其中所述主处理器使用照相装置串行接口与图像捕获机构进行接口，并且配置成: 采集深度信息和图像纹理信息； 从所述深度信息来计算多边形的3D网格； 从所述图像纹理信息来确定对应纹理；以及 生成编码视频流，其经由网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来指定多边形的所述3D网格和所述对应纹理。
24.如权利要求23所述的计算装置，其中，所述照相装置串行接口包括数据传输接口，其是采用数据和时钟信号的单向差分串行接口。
25.如权利要求23所述的计算装置，其中，所述图像捕获机构包括深度传感器、图像传感器、红外传感器、X射线光子计数传感器、电荷耦合器件(CCD)图像传感器、互补金属氧化物半导体(CMOS)图像传感器、芯片上系统(SOC)图像传感器、具有光敏薄膜晶体管的图像传感器或者它们的任何组合。
26.一种在打印装置中打印使用多边形的3D网格和对应纹理所编码的图像的打印装置，包括配置成执行下列步骤的打印对象模块: 检测使用多边形的3D网格和对应纹理所编码的图像； 采用合成图像的添加、照明、遮蔽、对象置换、化身引入或者它们的任何组合中的至少一个来改变所述图像；以及 打印使用多边形的3D网格和对应纹理所编码的所述图像。
27.如权利要求26所述的打印装置，其中，所述打印对象模块打印所述图像的多个视图。
【专利摘要】本文公开用于使用多边形的3D网格和对应纹理对图像进行编码的方法和系统。可得到深度信息和图像纹理信息，并且可从深度信息来计算多边形的3D网格。对应纹理可使用图像纹理信息来确定，并且多边形的3D网格和对应纹理均可使用网格帧、纹理帧、变化帧或者它们的任何组合中的至少一个来编码。
【IPC分类】G06T15-04, G06T17-20
【公开号】CN104541308
【申请号】CN201380044833
【发明人】A. 克里 S.
【申请人】英特尔公司
【公开日】2015年4月22日
【申请日】2013年9月25日
【公告号】DE112013004778T5, US20140092439, WO2014052437A1