用于预测用于层间视频解码的视差矢量的方法以及编码方法和设备的制造方法_6

文档序号:9583883阅读:来源:国知局
11300来对从视频相机12300接收到的内容进行编码。通 过视频相机12300捕捉到的视频数据可经由计算机12100被发送到流服务器11300。 阳37引通过相机12600捕捉到的视频数据也可经由计算机12100被发送到流服务器 11300。与数码相机类似,相机12600是能够捕捉静止图像和视频图像两者的成像装置。可 使用相机12600或计算机12100对通过相机12600捕捉到的视频数据进行编码。可将对 视频执行编码和解码的软件存储在可由计算机12100访问的计算机可读记录介质(例如, CD-ROM盘、软盘、硬盘驱动器、SSD或存储卡)中。 阳379] 如果视频数据通过内置在移动电话12500中的相机被捕捉到,则可从移动电话 12500接收视频数据。 阳380] 还可通过安装在视频相机12300、移动电话12500或相机12600中的大规模集成电 路化SI)系统来对视频数据进行编码。 阳381] 内容供应系统1100可对由用户使用视频相机12300、相机12600、移动电话12500 或另一成像装置所记录的内容数据(例如,在音乐会期间记录的内容)进行编码,并将编码 后的内容数据发送到流服务器11300。流服务器11300可将编码后的内容数据W流传输内 容的类型发送到请求内容数据的其它客户端。 阳38引客户端是能够对编码后的内容数据进行解码的装置,例如,计算机12100、PDA12200、视频相机12300或移动电话12500。因此,内容供应系统11000允许客户端接收并再 现编码后的内容数据。此外,内容供应系统11000允许客户端实时接收编码后的内容数据 并对编码后的内容数据进行解码和再现,从而能够进行个人广播。 阳383] 包括在内容供应系统11000中的多个独立装置的编码和解码操作可类似于根据 一个或更多个实施例的视频编码设备和视频解码设备的编码和解码操作。 阳384] 现在将参照图24和图25更加详细地描述包括在根据一个或更多个实施例的内容 供应系统11000中的移动电话12500。 阳385] 图24示出根据一个或更多个实施例的应用了视频编码方法和视频解码方法的移 动电话12500的外部结构。移动电话12500可W是智能电话,其中,所述智能电话的功能不 受限,并且所述智能电话的大量功能可被改变或扩展。 阳386] 移动电话12500包括可与图21的无线基站12000交换射频(R巧信号的内部天 线12510,并包括用于显示由相机12530捕捉到的图像或经由天线12510接收到并被解码 的图像的显示屏12520(例如,液晶显示器化CD)或有机发光二极管(OLED)屏幕)。移动 电话12500包括包含有控制按钮和触摸面板的操作面板12540。如果显示屏12520是触摸 屏,则操作面板12540还包括显示屏12520的触摸感测面板。移动电话12500包括用于输 出语音和声音的扬声器12580或另一类型声音输出单元、W及用于输入语音和声音的麦克 风12550或另一类型声音输入单元。移动电话12500还包括用于捕捉视频和静止图像的相 机12530,诸如电荷禪合器件(CCD)相机。移动电话12500还可包括:存储介质12570,用于 存储通过相机12530捕捉到的、经由电子邮件接收到的、或根据各种方式获得的编码/解码 数据(例如,视频或静止图像);插槽12560,存储介质12570经由插槽12560被装入移动电 话12500中。存储介质12570可W是闪存,例如,包括在塑料壳中的安全数字(SD)卡或电 可擦除可编程只读存储器巧EPROM)。
[0387] 图25示出根据一个或更多个实施例的移动电话12500的内部结构。为了系统地控 制包括显示屏12520和操作面板12540的移动电话12500的部件,供电电路12700、操作输 入控制器12640、图像编码器12720、相机接口 12630、LCD控制器12620、图像解码器12690、 复用器/解复用器12680、记录器/读取器12670、调制器/解调器12660W及声音处理器 12650经由同步总线12730被连接到中央控制器12710。
[0388] 如果用户操作电源按钮,并从"电源关闭"状态设置为"电源开启"状态,则供电电 路12700从电池组向移动电话12500的所有部件供电,从而将移动电话12500设置为操作 模式。 阳389] 中央控制器12710包括中央处理器(CPU)、ROM和RAM。
[0390] 在移动电话12500将通信数据发送到外部的同时,在中央控制器12710的控制下, 数字信号被移动电话12500产生。例如,声音处理器12650可产生数字声音信号,图像编码 器12720可产生数字图像信号,并且消息的文本数据可经由操作面板12540和操作输入控 制器12640被产生。当在中央控制器12710的控制下数字信号被发送到调制器/解调器 12660时,调制器/解调器12660对数字信号的频带进行调制,并且通信电路12610对经过 频带调制数字声音信号执行数模转换值AC)和频率转换。从通信电路12610输出的发送信 号可经由天线12510被发送到语音通信基站或无线基站12000。 阳391] 例如,当移动电话12500处于会话模式时,在中央控制器12710的控制下,经由麦 克风12550获得的声音信号被声音处理器12650变换成数字声音信号。数字声音信号可经 由调制器/解调器12660和通信电路12610被变换成发送信号,并可经由天线12510被发 送。
[0392] 当文本消息(例如,电子邮件)在数据通信模式下被发送时,文本消息的文本数据 经由操作面板12540被输入,并经由操作输入控制器12640被发送到中央控制器12710。在 中央控制器12710的控制下,文本数据经由调制器/解调器元12660和通信电路12610被 变换成发送信号,并经由天线12510被发送到无线基站12000。
[0393] 为了在数据通信模式下发送图像数据,由相机12530捕捉到的图像数据经由相机 接口 12630被提供给图像编码器12720。捕捉到的图像数据可经由相机接口 12630和LCD 控制器12620被直接显示在显示屏12520上。 阳394] 图像编码器12720的结构可与W上描述的根据一个或更多个实施例的视频编码 设备的结构对应。图像编码器12720可根据基于W上描述的根据一个或更多个实施例的视 频编码方法,将从相机12530接收到的图像数据变换为压缩并被编码的图像数据,然后将 编码后的图像数据输出到复用器/解复用器12680。在相机12530的记录操作期间,由移动 电话12500的麦克风12550获得的声音信号可经由声音处理器12650被变换成数字声音数 据,并且数字声音数据可被发送到复用器/解复用器12680。 阳395] 复用器/解复用器12680对从图像编码器12720接收到的编码后的图像数据与从 声音处理器12650接收到的声音数据一起进行复用。对数据进行复用的结果可经由调制器 /解调器12660和通信电路12610被变换成发送信号,然后可经由天线12510被发送。 阳396] 当移动电话12500从外部接收通信数据时,可对经由天线12510接收到的信号执 行频率恢复和ADCW将信号变换成数字信号。调制器/解调器12660对数字信号的频带进 行调制。根据频带调制后的数字信号的类型将所述数字信号发送到视频解码单元12690、声 音处理器12650或LCD控制器12620。 阳397] 在会话模式下,移动电话12500对经由天线12510接收到的信号进行放大,并通过 对放大后的信号执行频率转换和ADC来获得数字声音信号。在中央控制器12710的控制下, 接收到的数字声音信号经由调制器/解调器12660和声音处理器12650被变换成模拟声音 信号,并且模拟声音信号经由扬声器12580被输出。 阳39引当在数据通信模式下时,接收在互联网网站上访问的视频文件的数据,经由器调 制/解调器12660将经由天线12510从无线基站12000接收到的信号输出为复用数据,并 将复用数据发送到复用器/解复用器12680。 阳399] 为了对经由天线12510接收到的复用数据进行解码,复用器/解复用器12680将 复用数据解复用成编码后的视频数据流和编码后的音频数据流。经由同步总线12730,编码 后的视频数据流和编码后的音频数据流分别被提供给视频解码单元12690和声音处理器 12650。
[0400] 图像解码器12690的结构可与W上描述的根据一个或更多个实施例的视频解码 设备的结构对应。图像解码器12690可通过使用W上描述的根据一个或更多个实施例的 视频解码方法,对编码后的视频数据进行解码来获得重构的视频数据,并经由LCD控制器 12620将重构的视频数据提供给显示屏12520。
[0401] 因此,可将在互联网网站上访问的视频文件的数据显示在显示屏12520上。同时, 声音处理器12650可将音频数据变换成模拟声音信号,并将模拟声音信号提供给扬声器 12580。因此,也可经由扬声器12580再现在互联网网站上访问的视频文件中包含的音频数 据。
[0402] 移动电话12500或另一类型的通信终端可W是包括根据一个或更多个实施例的 视频编码设备和视频解码设备两者的收发终端,可W是仅包括所述视频编码设备的收发终 端,或者可W是仅包括所述视频解码设备的收发终端。
[0403] 根据一个或更多个实施例的通信系统不限于W上参照图24描述的通信系统。例 如,图26示出根据一个或更多个实施例的采用通信系统的数字广播系统。图26的数字广 播系统可通过使用根据一个或更多个实施例的视频编码设备和视频解码设备来接收经由 卫星或地面网络发送的数字广播。
[0404] 具体地,广播站12890通过使用无线电波将视频数据流发送到通信卫星或广播卫 星12900。广播卫星12900发送广播信号,广播信号经由家用天线12860被发送到卫星广播 接收器。在每个房屋中,可通过TV接收器12810、机顶盒12870或另一装置对编码后的视频 流进行解码和再现。
[0405] 当根据一个或更多个实施例的视频解码设备被实现在再现设备12830中时,再现 设备12830可对记录在存储介质12820(诸如用于重构数字信号的盘或存储卡)上的编码 后的视频流进行解析和解码。因此,可在例如监视器12840上再现重构的视频信号。
[0406] 在被连接到用于卫星/地面广播的天线12860或用于接收有线电视(TV)广播的 电缆天线12850的机顶盒12870中,可安装根据一个或更多个实施例的视频解码设备。从 机顶盒12870输出的数据也可被再现在TV监视器12880上。
[0407] 作为另一示例,可将根据一个或更多个实施例的视频解码设备安装在TV接收器 12810中,而不是机顶盒12870中。 阳40引具有适当天线12910的汽车12920可接收从图21的卫星12900或无线基站11700 发送的信号。可在安装在汽车12920中的汽车导航系统12930的显示屏上再现解码后的视 频。
[0409] 视频信号可由根据一个或更多个实施例的视频编码设备来编码,然后可被存储在 存储介质中。具体地,可由DVD记录器将图像信号存储在DVD盘12960中,或可由硬盘记录 器12950将图像信号存储在硬盘中。作为另一示例,可将视频信号存储在SD卡12970中。 如果硬盘记录器12950包括根据一个或更多个实施例的视频解码设备,则记录在DVD盘 12960、SD卡12970或另一存储介质上的视频信号可被再现于TV监视器12880上。
[0410] 汽车导航系统12930可不包括图26的相机12530W及图26的相机接口 12630和 图像编码器12720。例如,计算机12100和TV接收器12810可不包括的相机12530、相机接 口 12630和图像编码器12720。
[0411] 图27是示出根据一个或更多个实施例的使用视频编码设备和视频解码设备的云 计算系统的网络结构的示图。
[0412] 云计算系统可包括云计算服务器14000、用户数据库值B) 14100、多个计算资源 14200和用户终端。
[0413] 响应于来自用户终端的请求,云计算系统经由数据通信网络(例如,互联网)提供 多个计算资源14200的点播外包服务。在云计算环境下,服务提供商通过使用虚拟化技术 组合位于不同的物理位置的数据中屯、处的计算资源,为用户提供想要的服务。服务用户不 必将计算资源(例如,应用、存储器、操作系统(0巧和安全)安装在他/她拥有的终端中W 使用它们,但可在想要的时间点在通过虚拟化技术产生的虚拟空间中从服务之中选择和使 用想要的服务。
[0414] 被指定的服务用户的用户终端经由包括互联网和移动通信网络的数据通信网络 被连接到云计算服务器14000。可从云计算服务器14000向用户终端提供云计算服务,特 别是视频再现服务。用户终端可W是能够被连接到互联网的各种类型的电子装置,例如,桌 上型PC14300、智能TV14400、智能电话14500、笔记本计算机14600、便携式多媒体播放器 (PMP) 14700、平板PC14800 等。
[0415] 云计算服务器14000可组合分布在云网络中的多个计算资源14200,并向用户终 端提供组合的结果。所述多个计算资源14200可包括各种数据服务,并可包括从用户终端 上传的数据。如上所描述的,云计算服务器14000可通过根据虚拟化技术组合分布在不同 区域中的视频数据库来向用户终端提供想要的服务。
[0416] 将关于已经订购云计算服务的用户的用户信息存储在用户DB14100中。用户信 息可包括用户的日志信息、地址、姓名和个人信用信息。用户信息还可包括视频的索引。运 里,所述索引可包括已经被再现的视频的列表、正在被再现的视频的列表、之前正被再现的 视频的暂停点等。
[0417] 可在用户装置之间共享存储在用户DB14100中的关于视频的信息。例如,当响应 于来自笔记本计算机14600的请求将视频服务提供给笔记本计算机14600时,视频服务的 再现历史被存储在用户DB14100中。当从智能电话14500接收到用于再现此视频服务的请 求时,云计算服务器14000基于用户DB14100捜索并再现此视频服务。当智能电话14500 从云计算服务器14000接收到视频数据流时,通过对视频数据流进行解码来再现视频的操 作与W上参照图24描述的移动电话12500的操作类似。 阳41引云计算服务器14000可参考存储在用户DB14100中的想要的视频服务的再现历 史。例如,云计算服务器14000从用户终端接收用于再现存储在用户DB14100中的视频 的请求。如果此视频之前被再现过,则由云计算服务器14100执行的对此视频进行流传输 的方法可根据来自用户终端的请求(即,根据是将从视频的起点还是视频的暂停点开始再 现此视频)而不同。例如,如果用户终端请求从视频的起点开始再现视频,则云计算服务器 14000将从视频的第一帖开始的视频的流数据发送到用户终端。如果用户终端请求从视频 的暂停点开始再现视频,则云计算服务器14000将从与暂停点对应的帖开始的视频的流数 据发送到用户终端。
[0419] 在此情况下,用户终端可包括如W上参照图Ia至图20描述的视频解码设备。如 另一示例,用户终端可包括如W上参照图Ia至图20描述的视频编码设备。可选地,用户终 端可包括如W上参照图Ia至图20描述的视频解码设备和视频编码设备两者。
[0420] W上已经参照图21至图27描述了W上参照图Ia至图20描述的根据一个或更多 个实施例的视频编码方法、视频解码方法、视频编码设备和视频解码设备的各种应用。然 而,根据各种实施例的将W上参照图Ia至图20描述的视频编码方法和视频解码方法存储 在存储介质中的方法,或者将视频编码设备和视频解码设备实现在装置中的方法不限于W 上参照图21至图27描述的实施例。
[0421] 应理解,在此描述的示例性实施例应被视为仅是描述性的意义,而不是为了限制 的目的。对每个实施例内的特征或方面的描述通常被认为可用于其它实施例中的其它类似 特征或方面。
[0422] 虽然已参照特征描述了本发明的一个或更多个实施例,但是本领域的普通技术人 员将理解,在不脱离由权利要求限定的本发明的精神和范围的情况下,可在其中进行形式 和细节上的各种改变。
【主权项】
1. 一种层间视频解码方法,包括: 基于从比特流获取的编码信息来重构第一层图像和第一层深度图; 确定视差矢量是否是使用第二层当前块的外围块可预测的; 当不使用所述外围块来预测视差矢量时,使用默认视差矢量和第一层深度图来确定第 二层当前块的视差矢量。2. 如权利要求1所述的层间视频解码方法,其中,确定第二层当前块的视差矢量的步 骤包括: 通过使用默认视差矢量和第一层深度图来确定所确定的视差矢量的水平分量值; 将所确定的视差矢量的垂直分量值确定为默认视差矢量的垂直分量值。3. 如权利要求1所述的层间视频解码方法,其中,确定视差矢量的步骤包括:将所确定 的视差矢量的水平分量值和垂直分量值之中的与第一层深度图无关的分量值设置为0。4. 如权利要求1所述的层间视频解码方法,其中,确定第二层当前块的视差矢量的步 骤包括: 获取第一层深度图之中的与默认视差矢量相应的参考块的角点深度值; 使用获取的角点深度值中的至少一个来确定第二层当前块的视差矢量。5. 如权利要求1所述的层间视频解码方法,其中,确定视差矢量是否是可预测的步骤 包括: 根据预定扫描顺序从所述外围块获取视差矢量; 当从所述外围块获取了视差矢量时,确定视差矢量是可预测的。6. 如权利要求1所述的层间视频解码方法,其中,确定视差矢量是否是可预测的步骤 包括: 当与第二层当前块相应的第二层深度图已被重构时,确定视差矢量是可预测的。7. 如权利要求1所述的层间视频解码方法,其中,确定视差矢量是否是可预测的步骤 包括:当从所述外围块获取的视差矢量以第二层当前块为基准指示第一层图像的外部时, 确定视差矢量是不可预测的。8. 如权利要求1所述的层间视频解码方法,其中,默认视差矢量是(0,0)。9. 如权利要求1所述的层间视频解码方法,其中,默认视差矢量是使用第一层深度图 确定的全局视差矢量。10. 如权利要求9所述的层间视频解码方法,其中,默认视差矢量是使用第一层深度图 的比特深度的中间值来确定的。11. 一种层间视频编码方法,包括: 产生包括通过对第一层图像和第一层深度图进行编码而产生的编码信息的比特流; 确定是否使用第二层当前块的外围块来预测视差矢量; 当不使用所述外围块来预测视差矢量时,通过使用默认视差矢量和第一层深度图来确 定第二层当前块的视差矢量。12. 如权利要求11所述的层间视频编码方法,其中,确定第二层当前块的视差矢量的 步骤包括:将所确定的视差矢量的水平分量值和垂直分量值之中的与第一层深度图无关的 分量值设置为0。13. -种层间视频解码设备,包括: 第一层解码器,用于基于从比特流获取的编码信息来重构第一层图像和第一层深度 图; 视差确定器,用于确定是否使用第二层当前块的外围块来预测视差矢量,并且当不使 用所述外围块来预测视差矢量时,使用默认视差矢量和第一层深度图来确定第二层当前块 的视差矢量。14. 一种其上记录有用于执行权利要求1的层间视频解码方法的计算机程序的非暂时 性计算机可读记录介质。
【专利摘要】根据实施例的一种层间视频解码方法包括:基于从比特流获取的编码信息来重构第一层图像和第一层深度图;确定是否可使用第二层当前块的外围块来预测视差矢量;当不使用所述外围块来预测视差矢量时,使用默认视差矢量和第一层深度图来确定第二层当前块的视差矢量。
【IPC分类】H04N19/51
【公开号】CN105340273
【申请号】CN201480032601
【发明人】朴慜祐, 李振荣, 尹载元, 崔秉斗, 魏浩千, 曹容振
【申请人】三星电子株式会社
【公开日】2016年2月17日
【申请日】2014年4月7日
【公告号】EP2981091A1, US20160073127, WO2014163459A1
当前第6页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1