br>[0106] 深度模式选择
[0107] 在图层工具箱中选定某一深度图层后，可以对该图层进行深度模式的赋值，可选 的深度梯度模式包括以下五种：图像深度从左至右逐渐增加，图像深度从左下至右上逐渐 增加，图像深度从下至上逐渐增加，图像深度从右下至左上逐渐增加，图像深度从右至左逐 渐增加。
[0108] 立体视图渲染
[0109] 通过采用基于深度图的图像虚拟绘制技术，将原图像根据深度图的信息进行像素 移位，从而得到一个新的虚拟视图，将此虚拟视图与原输入图像按照不同的显示要求得到 不同的输出格式（主要为红-青立体式、左右并列式、上下排列式），作为双目立体视觉的立 体视图源输入。在此过程中，用户可以在参数调控工作箱中对渲染算法的渲染权值和零平 面参数进行调整。
[0110] 由以上步骤得到的深度视图和渲染出来的立体视图可以实时地在对应窗口中显 示出来，用户可以基于此进一步在源视图窗口中进行修改编辑，最终完成半自动平面转立 体的图像转换环节。
[0111] 另外，本发明实施例的立体视频制作方法、立体视图制作方法和制作系统的其它 构成以及作用对于本领域的技术人员而言都是已知的，为了减少冗余，不做赘述。
[0112] 在本说明书的描述中，参考术语"一个实施例"、"一些实施例"、"示例"、"具体示 例"、或"一些示例"等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特 点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不 一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何 的一个或多个实施例或示例中以合适的方式结合。
[0113] 尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不 脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本 发明的范围由权利要求及其等同限定。
【主权项】
1. 一种立体视频制作系统，其特征在于，包括： 显示模块，用于显示视频编辑信息和音频编辑信息； 加载输出模块，用于对视频或图片进行加载并输出； 视频播放编辑模块，所述视频播放编辑模块包括视频帧标记模块、视频帧导出模块和 视频播放模块，所述视频帧标记模块用于选取源视频中部分视频帧标记为关键帧，所述视 频帧导出模块用于导出选定的视频帧，所述视频播放模块用于播放视频； 深度图绘制模块，用于根据所述关键帧绘制相应的深度图； 视频帧传播模块，用于根据所述深度图传播给所述源视频中除所述关键帧之外的剩余 视频帧； 深度图查看添加模块，用于实时查看所述深度图，并将所述深度图添加到时间轴； 立体图查看添加模块，用于根据所述深度图进行立体渲染，并将立体渲染结果添加到 所述时间轴上，所述立体图查看添加模块还用于实时查看所述立体渲染结果；以及 结果输出模块，用于输出所述立体渲染结果和音频。2. 根据权利要求1所述的立体视频制作系统，其特征在于，所述视频编辑信息包括视 频名称、分辨率、时长、帧率和编码格式，所述音频编辑信息包括音频采样频率、比特数和声 道模式。3. 根据权利要求1所述的立体视频制作系统，其特征在于，所述时间轴包括： 源视频轨道，用于通过源视频轨道所述播放源视频； 深度视频轨道，用于通过所述深度视频轨道播放由所述深度图形成的深度视频； 立体视频轨道，用于通过所述深度视频轨道播放所述立体渲染结果；以及 音频轨道，用于通过所述音频轨道播放音频。4. 根据权利要求3所述的立体视频制作系统，其特征在于，所述源视频、所述深度视 频、所述立体视频和所述音频同步播放或单独播放。5. 根据权利要求1所述的立体视频制作系统，其特征在于，所述深度图绘制模块包括： 深度画笔绘制模块，用于在所述关键帧上选取局部区域绘制出局部深度图像； 深度画笔扩展模块，用于将所述局部深度图像扩散到整个所述关键帧形成所述深度 图；以及 深度模式选择模块，用于对所述深度图的图层进行深度模式的赋值，所述深度模式包 括：图像深度从左至右逐渐增加、图像深度从左下至右上逐渐增加、图像深度从下至上逐渐 增加、图像深度从右下至左上逐渐增加和图像深度从右至左逐渐增加。6. -种立体视频制作方法，其特征在于，包括以下步骤： 51 :选取源视频中部分视频帧作为关键帧； 52 :在所述关键帧中选取部分区域进行颜色深度调整，将进行颜色深度调整后的所述 区域的颜色深度信息转换为相对深度值； 53 :根据所述相对深度值将所述关键帧中未进行颜色深度调整的区域进行颜色深度扩 展形成深度视图，显示具有不同深度值的深度图层； 54 :对所述深度图层进行深度模式的赋值； S5:对所述源视频中除了所述关键帧之外的非关键帧进行深度传播，得到所述非关键 帧的深度视图； 56 :将所述关键帧和非关键帧的深度视图进行像素移位得到虚拟视图，根据所述关键 帧和非关键帧的虚拟视图与所述关键帧或非关键帧对应的原始图进行立体渲染得到立体 视图；以及 57 :将所述立体视图组合形成立体视频。7. 根据权利要求6所述的立体视频制作方法，其特征在于，所述在所述关键帧中选取 部分区域进行颜色深度调整进一步包括： 在所述关键帧中选取所述部分区域绘制具有颜色的笔画以表示所述部分区域像素在 所述关键帧中的相对深度； 对所述关键帧进行缩放或改变所述笔画线条的粗细。8. 根据权利要求6所述的立体视频制作方法，其特征在于，在步骤S3中，所述深度扩展 包括以下步骤： 5301 :逐行将所述关键帧的像素的位置信息和像素的RGB三个通道的值均变换为一维 信号，其中，变换后像素间距=变换前像素间距+权值*像素间RGB差距； 5302 :采用卷积运算对所述一维信号进行滤波； 5303 :逐行对所述关键帧的像素进行滤波后，进而对所述关键帧的像素进行逐列滤波， 如此迭代进行n次。9. 根据权利要求6所述的立体视频转换方法，其特征在于，所述深度模式包括：图像深 度从左至右逐渐增加、图像深度从左下至右上逐渐增加、图像深度从下至上逐渐增加、图像 深度从右下至左上逐渐增加和图像深度从右至左逐渐增加。10. -种立体视图制作方法，其特征在于，包括以下步骤： A :在源视图上选取部分区域绘制具有颜色的笔画，形成所述区域在源视图中的相对深 度，将所述区域的颜色深度信息转换为相对深度值； B :根据所述相对深度值将所述源视图中出所述区域外的其它区域进行颜色深度扩展 形成深度视图，显示具有不同深度值的深度图层； C :对所述深度图层进行深度模式的赋值；以及 D :将所述深度图层进行像素移位得到虚拟视图，将所述虚拟视图和所述源视图进行渲 染得到立体视图。11. 根据权利要求10所述的立体视图制作方法，其特征在于，所述深度模式包括：图像 深度从左至右逐渐增加、图像深度从左下至右上逐渐增加、图像深度从下至上逐渐增加、图 像深度从右下至左上逐渐增加和图像深度从右至左逐渐增加。
【专利摘要】本发明公开了一种立体视频制作方法、立体视图制作方法和制作系统，视频制作方法包括：选取源视频中部分视频帧作为关键帧；在关键帧中选取部分区域进行颜色深度调整；将关键帧中未进行颜色深度调整的区域进行颜色深度扩展形成深度视图；对源视频中除了关键帧之外的非关键帧进行深度传播，得到非关键帧的深度图层；将深度图层进行像素移位得到虚拟视图，根据虚拟视图与原始图进行立体渲染得到所有视频帧的立体视图；将立体视图组合形成立体视频。本发明具有如下优点：高效快速、可靠稳定，弥补了全自动平面转立体转换质量较差、适用范围小，和人工平面转立体成本过高的缺陷，具有广泛的市场需求和科学研究意义。
【IPC分类】H04N13/00, H04N13/04
【公开号】CN105100773
【申请号】CN201510428719
【发明人】戴琼海, 蔡雅雯, 索津莉, 刘烨斌
【申请人】清华大学
【公开日】2015年11月25日
【申请日】2015年7月20日