再现装置及数据再现方法_2

文档序号:9333066阅读:来源:国知局
[0048]这时,优选使“画质、音质的维持(无中断)”、“图像和声音的同步(口型同步)”和“低延迟(降低数据处理造成的数据输出为止的延迟)”的三个条件同时成立,但一般地,因以下的理由,若实现三个条件之中的两个条件,则剩余的一个条件将恶化。
[0049]—般地,声音数据被看作其特性上连续的数据。S卩,从网络接收的数据产生延迟,即使瞬间声音数据消失,也被用户作为声音中断来认识,直接导致用户的不满。因此,为了消除声音中断,声音数据被缓冲。
[0050]另一方面,图像数据与声音数据相比能够作为非连续的数据来处理。即,即使接收来自网络的图像数据延迟,也仅是图像更新稍稍延迟,只要延迟的程度较小,则用户不能识别该情况。
[0051]使具有这样性质的声音数据和图像数据同步时,与声音数据的缓冲造成的延迟匹配,需要使图像的输出延迟。
[0052]如果声音数据缓冲,不缓冲图像数据,则能够实现维持画质和音质、低延迟,但图像和声音的同步恶化。如果不缓冲声音数据和图像数据,则能够实现图像和声音的同步、低延迟,但画质、音质恶化。
[0053]然而,根据使用状况,有介意延迟的情况和不介意延迟的情况。例如,相对于用户故意地不操作装置那样的、运动图像的再现时,介意口型同步而不介意延迟,在显示的菜单的操作时介意延迟,但不介意口型同步。
[0054]鉴于该状况,在本实施方式中,特别地在车载装置10解码的声音数据中检测到无声状态(或表示是无声的数据)的情况下,不进行图像和声音的同步处理,即,相比进行同步处理的情况,提前输出图像。
[0055]在上述以往的技术中,由于使图像(或视频)的数据和音频(声音)的数据同步是前提,所以在输出到显示装置等时产生延迟。
[0056]以下,说明车载装置10的动作。图2是表示实施方式I中的车载装置10的动作的流程图。
[0057]车载装置10从移动装置201接收编码的图像数据和编码的声音数据。图像解码单元113 (参照图1)将编码的图像数据解码。主控制单元118控制从图像输出控制单元115显示图像数据的定时。声音解码单元114将累积的声音数据(声音ES)解码,音量检测单元116对声音数据的每个帧检测解码的声音数据的音量电平。
[0058]如果检测到的音量电平比规定的阈值高或在规定的阈值以上,则检测到的音量电平不是无声而作为有声,音量检测单元116向主控制单元118输出有声检测信号(步骤S201)ο
[0059]从音量检测单元116接收有声检测信号时,主控制单元118将本装置的处理动作设定(切换)为使声音数据和图像数据同步的同步模式(步骤S202)。
[0060]被设定为同步模式时,主控制单元118使声音数据和图像数据从声音输出控制单元117和图像输出控制单元115同步地输出(步骤S203)。
[0061]在车载装置10以同步模式动作的情况下,进行保持口型同步的动作。具体地说,主控制单元118使声音输出控制单元117将声音数据缓冲,在使声音数据缓冲的期间,使图像输出控制单元115暂时地等待图像数据的输出。主控制单元118利用对声音数据和图像数据赋予的时戳进行该动作。
[0062]在音量检测单元116检测到的音量电平比规定的阈值低或在规定的阈值以下的情况下,检测到的音量为无声,音量检测单元116向主控制单元118输出无声检测信号(步骤 S204)ο
[0063]从音量检测单元116接收无声检测信号时,主控制单元118将本装置的处理动作设定(切换)为低延迟模式(步骤S205)。
[0064]然而,低延迟模式是使声音数据和图像数据不同步而输出各自的数据的模式。
[0065]被设定为低延迟模式时,主控制单元118控制声音输出控制单元117和图像输出控制单元115,以非同步方式输出声音数据和图像数据(步骤S206)。在步骤S206中,主控制单元118也可以控制声音输出控制单元117和图像输出控制单元115,使声音数据和图像数据非同步而输出图像数据,而不输出声音数据。即,在步骤S206中,主控制单元118控制声音输出控制单元117和图像输出控制单元115,使声音数据和图像数据非同步而至少输出图像数据。
[0066]在低延迟模式中,主控制单元118或声音输出控制单元117、图像输出控制单元115不是进行主动地使图像数据和声音数据不同步的控制,而是不进行上述同步模式那样的用于同步处理的声音数据的缓冲、使图像数据暂时等待的图像延迟处理。因此,作为结果,即使是低延迟模式,也有图像数据和声音数据同步的情况。
[0067]S卩,在低延迟模式中,主控制单元118可以使声音输出控制单元117缓冲或不缓冲声音数据,而且,在与声音数据的缓冲或时戳表示的时刻信息无关系的、成为显示单元203上能够扫描图像数据的状态的时刻,图像输出控制单元115依次输出图像数据。
[0068]同步模式时,与声音数据的缓冲相匹配,图像输出控制单元115缓冲图像数据。
[0069]在从同步模式转移到低延迟模式时,主控制单元118也可以一次清除最新的图像数据之外的该缓冲的图像数据。此外,主控制单元118也可以通过将更新图像的间隔提前,逐渐消除被缓冲的图像数据。如果是前者的方法,则运动图像再现瞬间跳到前方,如果是后者的情况,则为一定时间快进那样的显示。优选在无不协调感的程度上将更新图像的间隔设定得短。
[0070]音量检测单元116进行动作,以逐次检测声音解码单元114解码过的声音数据的音量电平,在检测上述低延迟模式中的动作中检测到的声音数据的音量电平为有声时(步骤S207),与步骤S201同样地将有声检测信号向主控制单元118输出,车载装置10的动作切换为同步模式(步骤S208)。
[0071]在步骤S208中切换为同步模式之后,与步骤S203同样地,主控制单元118使声音和图像从声音输出控制单元117和图像输出控制单元115同步地输出(步骤S209)。
[0072]作为同步模式的主要动作,有电影和音乐视频等的运动图像的视听时的动作。在这些动作中,图像和声音是取得同步而形成特定的意义的性质的图像和声音,所以即使产生了直至车载装置10显示移动装置201生成的图像为止的延迟,取得图像和声音的同步也使用户很少有不协调感。
[0073]该情况下,一般地,由于用户本人不操作车载装置10,所以与对操作的反应速度相比,介意口型同步。因此,在使声音和图像同步的同步模式中,使车载装置10动作比低延迟模式中的动作有用。
[0074]音量检测单元116检测解码的声音数据的音量电平。在检测到的音量电平是无声电平的情况下,输出单元1B也可以以非同步模式方式至少输出解码的图像数据。在检测到的音量电平不是无声电平的情况下,输出单元1B也可以以同步模式方式输出解码的图像数据和解码的声音数据。
[0075]如以上说明的,根据本实施方式,根据解码的声音数据的音量电平是有声还是无声,来切换使图像数据和声音数据同步的同步模式或非同步的低延迟模式。由于能够在声音数据被输出时切换模式,使图像和声音同步输出,所以能够无不协调感地实现用户视听运动图像的车载装置(再现装置)10。
[0076]同步模式中、由于声音数据和图像数据被缓冲地再现,所以能够防止起因于声音数据的接收和处理延迟的声音中断,能够对用户提供优质的运动图像再现。
[0077]再有,在上述说明中,为了使图像数据和声音数据同步,主控制单元118控制声音输出控制单元117和图像输出控制单元115而使它们同步,但也可以通过以下结构来进行该动作。
[0078]S卩,在计时单元119和声音解码单元114之间、计时单元119和图像输出控制单元115之间,分别收发时刻信息。而且,向图像输出控制单元115输入音量检测单元116输出的有声检测信号和无声检测信号。
[0079]在该结构中,向计时单元119逐次发送由声音解码单元114得到的时戳等的时刻信息。图像输出控制单元115确认声音数据中附带的时刻信息之中最新的时刻信息和其前一个时刻信息之差。由此,图像输出控制单元115能够检测声音数据的被解码的部分。
[0080]由此,图像输出控制单元115能够根据声音数据的解码的状况输出图像数据,即能够使图像数据与声音数据同步地输出。
[0081](实施方式2)
[0082]图3是表示实施方式2的再现系统1002的框图。在图3中,对与图1所示的实施方式I的再现系统1001相同的结构附加同一标号。再现系统1002由车载装置30和移动装置201构成。
[0083]与实施方式I的再现系统1001同样地,实施方式的再现系统1002利用了Miracast (注册商标)的技术。通过利用Miracast (注册商标)的技术,移动装置201的图像(视频)被显示在再现装置即车载装置10的显示单元上。
[0084]而且在Miracast (注册商标)中,作为用户操作再现装置即车载装置30的方式,使用触摸板203A。具体地说,用户通过触摸在再现装置(30)的显示单元上设置的触摸板203A,能够操作移动装置201(UIBC:User Input Back Channel (用户输入反向通道)功能)O
[0085]该情况下,车载装置30被请求操作移动装置201的感觉,特别地寻求图像输出的低延迟。
[0086]再现装置即车载装置30与移动装置201为利用无线通信或有线通信进行数据的收发的、可连接的结构。
[0087]此外,在车载装置30中,连接面向用户输出声音的扬声器202、输出图像(视频)的显示单元203。
[0088]车载装置30包括接收从移动装置201发送来的数据的接收单元310。在由普通的WiFi接收器等构成的接收单元310中,进行加密过的分组的解读和物理层报头的除去等处理。
[0089]接收单元310接
当前第2页1 2 3 4 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1