移动终端和操作移动终端的方法

文档序号:7999288阅读:121来源:国知局
移动终端和操作移动终端的方法
【专利摘要】本发明公开了一种移动终端和操作移动终端的方法。该操作移动终端的方法包括以下步骤:在移动终端上显示用于遥控图像显示装置的遥控画面,如果在显示所述遥控画面期间接收到无线音频接收模式开始信号,则进入无线音频接收模式,以及在所述移动终端上显示无线音频接收模式画面。因此,这可以改进用户便利性。
【专利说明】移动终端和操作移动终端的方法
【技术领域】
[0001]本发明的实施方式涉及移动终端和操作移动终端的方法,并且更具体地说,涉及能够改进用户便利性的移动终端和操作移动终端的方法。
【背景技术】
[0002]移动终端是具有话音和视频通信功能、信息输入/输出功能以及数据存储功能中的至少一种的便携式装置。这种移动终端具有复杂功能,如拍摄照片、捕捉运动图像、回放音乐文件或运动图像文件、接收游戏或广播,或者无线因特网,并且已经被实现为多媒体播放器,如同其功能已经被多样化。

【发明内容】

[0003]因此,鉴于上述问题而作出本发明,并且本发明的一目的是提供一种能够改进用户便利性的移动终端和操作移动终端的方法。
[0004]本发明的另一目的是,提供这样一种移动终端和操作移动终端的方法,S卩,其能够便利地按无线方式在图像显示装置与移动终端之间发送和回放音频数据。
[0005]根据本发明一方面,上述和其它目的可以通过提供一种操作移动终端的方法来实现,该方法包括以下步骤:在移动终端上显示用于遥控图像显示装置的遥控画面,如果在显示遥控画面期间接收到无线音频接收模式开始信号,则进入无线音频接收模式,以及在移动终端上显示无线音频接收模式画面。
[0006]根据本发明另一方面,提供了一种移动终端,该移动终端包括:音频输出模块;显示器,该显示器被设置成显示用于遥控图像显示装置的遥控画面;以及控制器,该控制器被设置成在显示遥控画面期间接收到无线音频接收模式开始信号的情况下控制进入无线音频接收模式,并且控制显示无线音频接收模式画面。
【专利附图】

【附图说明】
[0007]根据下面结合附图的详细描述,将更清楚地理解本发明的上述和其它目的、特征以及其它优点,附图中:
[0008]图1是示出根据本发明一实施方式的图像显示系统的构造的框图;
[0009]图2是示出用户利用图1的图像显示系统收听音频信号的实例的图;
[0010]图3是示出图1的图像显示装置的内部构造的框图;
[0011]图4是示出图3的控制器的示例的框图;
[0012]图5是示出图1的无线路由器的内部构造的框图;
[0013]图6是示出图1的移动终端的内部构造的框图;
[0014]图7是例示根据本发明一实施方式的操作图像显示装置的方法的流程图;
[0015]图8是例示根据本发明一实施方式的操作移动终端的方法的流程图;
[0016]图9是例示根据本发明一实施方式的图像显示系统的操作的流程图;[0017]图10至图14是涉及用于描述图7的操作图像显示装置的方法或图8的操作移动终端的方法的各种示例的视图;
[0018]图15A至图17C是涉及用于描述图8的操作移动终端的方法的各种示例的视图;
[0019]图18是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图;
[0020]图19是例示根据本发明另一实施方式的操作移动终端的方法的流程图;以及
[0021]图20至图22是涉及用于描述图18的操作图像显示装置的方法或图19的操作移动终端的方法的各种示例的视图。
【具体实施方式】
[0022]参照附图,对本发明的示例性实施方式进行描述。
[0023]为描述组件的名称所附的术语“模块”和“单元”在此被用于帮助理解这些组件,由此,它们不应被视为具有特定含义或任务。因此,术语“模块”和“单元”可以互换地使用。
[0024]图1是示出根据本发明一实施方式的图像显示系统的框图。
[0025]参照图1,根据本发明该实施方式的图像显示系统10可以包括:图像显示装置100、移动终端600 (例如,移动终端600a和600b)以及网络路由器500。
[0026]图像显示装置100可以接收内容。例如,图像显示装置可以经由天线接收广播信号,经由高清多媒体接口(HDMI)端子接收来自外部装置的外部输入信号,或者经由网络接收来自预定网络路由器500的流信号。
[0027]图像显示装置100可以处理所接收的广播信号、外部输入信号或流信号,在显示器180上显示视频以及输出音频。
[0028]在本发明该实施方式中,图像显示装置100按无线音频发送模式,向外部装置(例如,移动终端600)无线地发送音频数据。针对音频发送,图像显示装置100可以与移动终端执行直接或间接通信。
[0029]在图1中,经由网络路由器500在图像显示装置100与移动终端600之间交换数据。
[0030]图像显示装置100可以包括:TV、监视器、计算机、膝上型电脑、平板PC等,它们都能够显示广播内容。
[0031]网络路由器500提供网络,使得数据在图像显示装置100与移动终端600之间进行交换。
[0032]例如,如果网络路由器500是无线网络路由器,则可以在利用相同外部因特网协议(IP)地址的同时将多个虚拟IP地址分别内部地分配给图像显示装置100和移动终端600。无线信道可以与虚拟IP地址相对应地分配。
[0033]S卩,网络路由器500可以与第一虚拟IP地址相对应地向图像显示装置100分配第一无线信道,与第二虚拟IP地址相对应地向第一移动终端600a分配第二无线信道,以及与第三虚拟IP地址相对应地向第二移动终端600b分配第三无线信道。
[0034]网络路由器500经由分别分配给图像显示装置100与移动终端600a和600b的信道来控制图像显示装置100与移动终端600a和600b之间的数据交换。
[0035]如果能够执行无线数据通信的电子装置被添加至由网络路由器500提供的无线网络,则网络路由器500可以附加地向电子装置分配虚拟IP地址和无线信道,如上所述。[0036]网络路由器500可以提供分别对应于图像显示装置100和移动终端600a与600b
的无线信道的环境信息。例如,网络路由器可以提供无线信道的安全信息、信道名称信息、信号强度信息等。
[0037]由网络路由器500提供的无线网络可以是基于WiFi的无线网络。
[0038]移动终端600可以执行话音通信或数据通信,并且移动终端600的示例包括:移动电话、智能电话、膝上型电脑、平板PC等。
[0039]在本发明实施方式中,移动终端600可以按无线音频接收模式,从外部装置(例如,图像显示装置100)无线地接收音频数据。针对音频数据接收,移动终端600可以与图像显示装置100执行直接或间接通信。
[0040]在本发明实施方式中,如果执行无线音频发送/接收模式,则首先,利用第一无线通信方法同步图像显示装置100和移动终端600a与600b。即,控制数据可以从移动终端600a与600b发送至图像显示装置100,而与控制数据相对应的反馈数据可以从图像显示装置100发送至移动终端600a与600b。
[0041]控制数据可以包括以下信息中的至少一种:无线音频发送模式开始或结束信息、无线信道设置请求信息、无线信道改变请求信息、已分配无线信道信息、解码信息、无线信道环境信息或回放延迟信息(playback delay information)。反馈数据可以包括以下信息中的至少一种:有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息、回放时间点信息,或当前时间信息。
[0042]为了保证数据通信可靠性,第一无线通信方法是双向通信方法,并且可以是基于发送控制协议(TCP)的通信方法。
[0043]例如,如果无线音频接收模式开始信息作为TCP包数据经由无线路由器(或网络路由器)500从第一移动终端600a发送至图像显示装置100,则图像显示装置100可以针对无线音频发送模式,经由无线路由器500向第一移动终端600a发送有关由图像显示装置回放的多媒体数据中的要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等。
[0044]接下来,如果完成了图像显示装置100与移动终端600a和600b之间的同步,则图像显示装置100可以利用与第一无线通信方法不同的第二无线通信方法,经由无线路由器500向移动终端600a和600b发送音频数据。
[0045]针对音频数据的低延迟流以及多用户支持,第二无线通信方法可以是单向且基于多播的通信方法,并且可以是基于实时发送协议(RTP)/数据报协议(UDP)的通信方法。
[0046]例如,如果完成了第一和第二移动终端600a和600b与图像显示装置100之间的同步,则图像显示装置100可以经由无线路由器500,向第一和第二移动终端600a和600b发送RTP/UDP包,该RTP/UDP包包括当前由图像显示装置100回放的广播图像的音频信号。
[0047]所发送的音频信号可以根据该音频信号是否可以在移动终端中解码、无线信道环境、移动终端的回放延迟而自适应地改变。例如,各种音频信号(如立体声声道的解复用音频信号、单声道的解复用音频信号、立体声声道的解码音频信号、单声道的解码音频信号、立体声声道的编码音频信号以及单声道的编码音频信号)可以从图像显示装置100发送至移动终端600a和600b。
[0048]当发送音频数据时,可以将音频数据的回放时间点信息、当前时间信息等发送至移动终端600a和600b。这时,可以将回放时间点信息和当前时间信息以RTP/UDP包的形式与音频数据一起,经由无线路由器500发送至移动终端600a和600b,或者可以经由无线路由器500发送至移动终端600a和600b,作为与音频数据分离的TCP包数据。
[0049]不同于图1,图像显示装置100与移动终端600a和600b之间的无线数据通信可以不需要网络路由器500。这时,可以在图像显示装置100与移动终端600a和600b之间执行基于WiFi Direct的数据通信。
[0050]图2是示出用户利用图1的图像显示系统收听音频信号的实例的图。
[0051]参照图2,如果在根据本发明实施方式的图像显示系统中启动无线音频发送/接收模式,则在图像显示装置100上显示的多媒体数据的视频数据50可以连续回放并显示,并且该多媒体数据的音频数据可以发送至移动终端600。移动终端600回放从图像显示装置100接收的音频数据。
[0052]于是,用户800可以通过移动终端600利用耳机700,便利地收听与显示在图像显示装置100上的多媒体数据的视频数据相对应的音频数据。
[0053]具体来说,在无线音频发送模式中,图像显示装置100的音频输出单元185处于静音模式,并由此不能直接输出音频信号。由此,不希望收听音频数据的其它用户可以在图像显示装置100回放多媒体数据时不收听音频信号。
[0054]在图2中,表示静音模式的对象60被显示在图像显示装置100的显示器180上。
[0055]图3是示出图1的图像显示装置的内部构造的框图。
[0056]参照图3,根据本发明实施方式的图像显示装置100包括:广播接收单元105、外部装置接口 130、存储器140、用户输入接口 150、传感器单元、控制器170、显示器180、音频输出单元185以及遥控器200。
[0057]广播接收单元105可以包括:调谐器单元110、解调制器120和/或网络接口 135。如需要的话,广播接收单元105可以仅包括调谐器单元110和解调制器120,或者仅包括网络接口 135。
[0058]调谐器单元110调谐至通过天线接收的射频(RF)广播信号当中的或者与预先存储在图像显示装置中的所有频道相对应的RF广播信号当中的、与用户选择的频道相对应的射频(RF)广播信号。所调谐的RF广播被转换成中频(IF)信号或基带音频/视频(AV)信号。
[0059]例如,如果所调谐的RF广播信号是数字广播信号,则它被转换成数字IF信号DIF,而如果所调谐的RF广播信号是模拟广播信号,则它被转换成模拟基带AV信号(复合视频消隐同步/声音中频(CVBS/SIF))。即,调谐器单元110可以处理数字广播信号或模拟广播信号。从调谐器单元110输出的模拟基带AV信号(CVBS/SIF)可以直接输入至控制器170。
[0060]调谐器单元110可以能够从先进电视系统委员会(ATSC)单载波系统或者从数字视频广播(DVB)多载波系统接收RF广播信号。
[0061]调谐器单元110可以从通过天线接收到的多个RF信号中,顺序地选择与通过频道存储功能预先存储在图像显示装置中的所有广播频道相对应的许多RF广播信号,并且可以将所选择的RF广播信号转换成IF信号或基带A/V信号。
[0062]调谐器单元110可以包括多个调谐器,以便接收多个频道的广播信号。另选的是,调谐器单元可以包括用于同时接收多个频道的广播信号的单个调谐器。
[0063]解调制器120接收来自调谐器单元110的数字IF信号DIF,并且解调制该数字IF信号DIF。
[0064]解调制器120可以执行解调制和信道解码,由此获取流信号TS。流信号可以是复用了视频信号、音频信号和数据信号的信号。
[0065]从解调制器120输出的流信号可以输入至控制器170,并由此经受解复用和A/V信号处理。所处理的视频和音频信号被分别输出至显示器180和音频输出单元185。
[0066]外部装置接口 130可以用于向所连接的外部装置发送数据或从所连接的外部装置接收数据。针对接口连接,外部装置接口 130可以包括A/V输入/输出(I/O)单元和/或无线通信模块。
[0067]外部装置接口 130可以无线地或者有线地连接至外部装置,如数字万用盘(DVD)播放器、Blu-ray播放器、游戏控制台、摄像机、摄录一体机,或计算机(例如,膝上型计算机),以执行有关外部装置的输入/输出操作。
[0068]A/V I/O单元外部地接收来自外部装置的视频和音频信号。无线通信单元可以与另一电子装置执行短距离无线通信。
[0069]网络接口 135用作图像显示装置100与有线/无线网络(如因特网)之间的接口。网络接口 135可以包括有线通信单元或无线通信单元。
[0070]例如,网络接口 135可以通过网络接收由因特网或内容提供方或网络运营商提供的内容或数据。
[0071]网络接口 135可以与网络路由器500执行数据通信,并且可以在网络路由器500的网络内执行数据交换。
[0072]在本发明实施方式中,在无线音频发送模式中,针对与移动终端600的同步,网络接口 135可以经由网络路由器500接收来自移动终端600的TCP包格式的控制数据,并且经由网络路由器500向移动终端600发送TCP包格式的反馈数据。
[0073]在完成同步之后,网络接口 135可以经由网络路由器500向移动终端600发送与由图像显示装置回放的多媒体数据相对应的、RTP/UDP包格式的音频数据。
[0074]存储器140可以存储供控制器170处理和控制信号所需的各种程序,并且还可以存储已处理的视频、音频以及数据信号。
[0075]存储器140可以临时存储从外部装置接口 130接收到的视频、音频和/或数据信号。存储器140可以通过频道映射表(channel map)的频道存储功能存储与预定广播频道有关的彳目息。
[0076]虽然存储器140在图3中被示出为与控制器170 (本发明不限于此)分离地配置,但存储器140也可以被并入控制器170中。
[0077]用户输入接口 150将用户输入的信号发送给控制器170或者将从控制器170接收的信号发送给用户。
[0078]例如,用户输入接口 150可以发送/接收来自遥控器200的各种用户输入信号,如开机/关机信号、频道选择信号,以及屏幕设置信号,可以向控制器170提供从本地的键接收的用户输入信号,如开关机键、频道键以及音量键的输入,和设置值,或者可以向控制器170提供从用于感测用户姿势的传感器单元接收的用户输入信号,或者可以向传感器单元发送从控制器170接收的信号。
[0079]控制器170可以将从调谐器单元110、解调制器120或外部装置接口 130接收的流信号解复用成许多信号,将解复用的信号处理成音频和视频数据,并输出该音频和视频数据。
[0080]由控制器170处理的视频信号可以在显示器180上显示为图像。由控制器170处理的视频信号还可以通过外部装置接口 130发送至外部输出装置。
[0081]由控制器170处理的音频信号可以输出至音频输出单元185。而且,由控制器170处理的音频信号可以通过外部装置接口 130发送至外部输出装置。
[0082]控制器170可以包括:DEMUX、视频处理器等,将参照图4对它们进行详细描述。
[0083]控制器170可以控制图像显示装置100的总体操作。例如,控制器170控制调谐器单元110,以调谐至与用户所选的频道或预存储的频道相对应的RF信号。
[0084]控制器170可以根据通过用户输入接口 150输入的用户命令或内部程序来控制图像显示装置100。
[0085]控制器170可以控制显示器180显示图像。显示在显示器180上的图像可以是二维(2D )或三维(3D )静止图像或运动图像。
[0086]控制器170基于由摄像机单元拍摄的图像来识别用户的位置。例如,可以检测用户与图像显示装置100之间的距离(z轴坐标)。可以检测与用户的位置相对应的、图像显示装置100中的X轴坐标和y轴坐标。
[0087]还可以包括用于生成与频道信号或外部输入信号相对应的缩略图图像的频道浏览处理器。该频道浏览处理器可以接收从解调制器120输出的流信号TS或从外部装置接口 130输出的流信号,从所接收的流信号提取图像,并生成缩略图图像。所生成的缩略图图像可以被解码成要与所解码的图像一起输入至控制器170的流形式。控制器170可以利用所输入的缩略图图像,在显示器180上显示包括多个缩略图图像的缩略图列表。
[0088]该缩略图列表可以按在显示预定图像的状态下的区域的一部分中显示缩略图列表的简要查看方法来显示,或者可以按在全部区域中显示缩略图列表的完全查看方法来显示。该缩略图列表中的缩略图图像可以顺序地更新。
[0089]显示器180转换由控制器170处理的视频信号、数据信号、OSD信号以及控制信号,或者由外部装置接口 130接收的视频信号、数据信号以及控制信号,并生成驱动信号。
[0090]显示器180可以是等离子显示板(PDP)、液晶显示器(IXD)、有机发光二极管(OLED)显示器或柔性显示器。具体来说,显示器180可以是3D显示器。
[0091]为了观看3D图像,显示器180可以被分成补充显示方法和单一显示方法。
[0092]在单一显示方法中,3D图像在显示器180上实现,而不需要分离的辅助装置(例如,眼镜)。单一显示方法例如可以包括:透镜法(lenticular method),视差屏障(parallaxbarrier)等。
[0093]在补充显示方法中,3D图像利用辅助装置作为观看装置在显示器180上实现。补充显示方法包括诸如头戴式显示器(HMD)法或眼镜法等的各种方法。
[0094]眼镜法可以被分成诸如偏光眼镜法的被动方法和诸如快门眼镜法的主动方法。HMD法可以被分成被动方法和主动方法。
[0095]观看装置可以是能够使得用户观看3D图像的3D眼镜。3D眼镜可以包括被动型偏光眼镜、主动型快门眼镜或HMD型眼镜。
[0096]观看装置可以是能够使得用户观看不同图像的眼镜。例如,第一观看装置可以使得用户能够仅观看第一图像,而第二观看装置可以使得用户能够仅观看第二图像。
[0097]如果显示器180是触摸屏,则显示器180不仅可以充任输出装置而且可以充任输入装置。
[0098]音频输出单元185接收由控制器170处理的音频信号,并将所接收的音频信号输
出为声音。
[0099]摄像机单元拍摄用户的图像。摄像机单元可以通过一个摄像机来实现,但本发明不限于此。即,摄像机单元可以通过多个摄像机来实现。摄像机单元可以在显示器180的上侧嵌入图像显示装置100中,或者可以分离地设置。由摄像机单元拍摄的图像信息可以输入至控制器170。
[0100]控制器170可以根据由摄像机单元所拍摄的图像、由传感器单元所感测的信号,或者所拍摄图像和所感测信号的组合来感测用户姿势。
[0101]遥控器200向用户输入接口 150发送用户输入。针对发送用户输入,遥控器200可以使用各种通信技术,如IR通信、RF通信、蓝牙(bluetooth)、超宽带(UWB)以及ZigBee。另外,遥控器200可以接收来自用户输入接口 150的视频信号、音频信号或数据信号,并且可视地或可听地输出所接收的信号。
[0102]上述图像显示装置100可以是能够接收数字广播的固定或移动数字广播接收器。
[0103]图3所示的图像显示装置100的框图仅仅是示例性的。根据实际实现中图像显示装置100的规范,图像显示装置100的组件可以被组合或省略或者可以添加新组件。即,若需要的话,可以将两个或更多个组件并为一个组件或者可以将一个组件设置为分离的组件。另外,每一个框的功能出于描述本发明实施方式的目的来描述,由此,具体操作或装置不应被视为对本发明的范围和精神进行限制。
[0104]不同于图3,图像显示装置100可以不包括图3中所示的调谐器单元110和解调制器120,并且可以经由网络接口 135或外部装置接口 130接收广播内容,并回放广播内容。
[0105]图4是示出图3所示的控制器的内部构造的框图。
[0106]参照图4,根据本发明实施方式的控制器170可以包括:DEMUX310、音频处理器315、视频处理器320、处理器330、OSD生成器340以及混合器345。控制器170还可以包括:数据处理器。
[0107]DEMUX310对输入流进行解复用。例如,DEMUX310可以将MPEG-2TS解复用成视频信号、音频信号和数据信号。输入至DEMUX310的流信号可以从调谐器单元110、解调制器120或外部装置接口 135接收。
[0108]音频处理器315可以处理解复用的音频信号。针对音频处理,音频处理器315可以包括各种解码器。针对向移动终端600有效发送音频数据,音频处理器315还可以包括编码器。
[0109]在根据本发明实施方式的图像显示装置100的无线音频发送模式中,向移动终端600发送的音频数据可以是:1)经DEMUX310解复用而未经音频处理器315解码的音频数据,2)经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据,或3)经DEMUX310解复用并且经音频处理器315解码的音频数据。
[0110]在音频数据I)的实例中,尽管获取要发送至移动终端600的音频数据的时间较短,但因为不解码该音频数据,所以如果接收该音频数据的移动终端600不包括解码器,则该移动终端不能解码该音频数据。
[0111]在音频数据2)的实例中,因为所解码的音频数据(S卩,未压缩的音频数据)被编码,所以可以改进向移动终端600无线地发送音频数据时的发送效率,并且可以在考虑包括在移动终端中的解码器的情况下编码该音频数据。然而,因为图像显示装置100执行解复用、解码以及编码,所以难于在图像显示装置与移动终端之间执行同步。
[0112]在音频3)的实例中,因为解复用的音频数据被解码,所以移动终端600可以接收未压缩的音频数据。因此,移动终端600可以立即回放音频数据,而无需执行另外的解码步骤。当在图像显示装置100与移动终端600之间无线发送时,要发送的无线数据的量增加,由此,针对无线信道需要宽的频率带宽。
[0113]在本发明实施方式中,音频数据I)至3)中的任一个根据无线信道环境或移动终端的回放延迟信息自适应地发送,这将参照图20及其随后的图进行描述。
[0114]音频处理器315还可以调节音频信号的低音、高音以及音量。
[0115]视频处理器320可以处理解复用的视频信号。针对视频信号处理,视频处理器320可以包括视频解码器325和缩放器(scaler) 335。
[0116]视频解码器325解码解复用的视频信号,并且缩放器335对所解码的视频信号的分辨率进行缩放,使得视频信号可以显示在显示器180上。
[0117]处理器330可以控制图像显示装置100或控制器170的总体操作。例如,处理器330控制调谐器单元110,以调谐至与用户所选的频道或预存储频道相对应的RF信号。
[0118]处理器330可以根据通过用户输入接口 150输入的用户命令或内部程序来控制图像显示装置100。
[0119]处理器330可以控制网络接口 135或外部装置接口 130的数据发送。
[0120]处理器330可以控制控制器170的DEMUX310、视频处理器320和OSD生成器340的操作。
[0121]OSD生成器340自发地或根据用户输入生成OSD信号。例如,OSD生成器340可以根据用户输入信号生成这样的信号,即根据该信号多种信息在显示器180上被显示图形或文本。OSD信号可以包括各种数据,如用户界面(UI)、多种菜单、窗口小部件、图标等。而且,OSD信号可以包括2D对象和/或3D对象。
[0122]OSD生成器340可以生成能够根据从遥控器200接收的指示装置(pointingdevice)显示在显示器上的指针。具体来说,这种指针可以由指示信号处理器生成,并且OSD生成器340可以包括这种指示信号处理器。另选的是,指示信号处理器可以与OSD生成器340分尚地设置。
[0123]混合器345可以混合由视频处理器320处理的解码视频信号与由OSD生成器340生成的OSD信号。
[0124]控制器170的数据处理器可以处理解复用的数据信号。例如,如果解复用的数据信号被编码,则数据处理器可以解码该数据信号。编码的数据信号可以是电子节目指南(EPG)信息,该EPG信息包括诸如每一个频道的广播节目的开始时间和结束时间之类的广
播信息。
[0125]图4所示的控制器170的框图是示例性的。框图的这些组件可以集成或省略,或者可以根据控制器170的规范而添加新组件。[0126]图5是示出图1的无线路由器的内部构造的框图。
[0127]参照图5,网络路由器500可以包括:网络接口 530、存储器540以及处理器520。
[0128]网络接口 530可以与图像显示装置100或移动终端600交换数据。
[0129]更具体地说,在无线音频发送模式中,针对与移动终端600的同步,网络接口 530可以接收来自移动终端600的基于TCP包的控制数据,向图像显示装置100发送基于TCP包的控制数据,接收来自图像显示装置100的基于TCP包的反馈数据,并向移动终端600发送基于TCP包的反馈数据。
[0130]接下来,如果完成了同步,则网络接口 530可以接收来自图像显示装置100的基于RTP/UDP包的音频数据,并且向移动终端600发送基于RTP/UDP包的音频数据,用于向移动终端600的无线音频数据发送。
[0131]存储器540可以存储外部IP地址和内部分配的虚拟IP地址,以提供与该虚拟IP地址相对应的无线网络和无线信道名称、频率范围和安全信息。存储器540可以存储图像显示装置100的名称,和经由网络路由器500连接至网络的移动终端600的名称。
[0132]处理器520控制网络路由器500的总体操作。
[0133]如上所述,针对无线音频发送/接收模式,处理器可以控制图像显示装置100与移动终端600之间的数据交换。如果将一电子装置添加至网络,则处理器可以附加地为该电子装置分配虚拟IP地址和无线信道。处理器可以向图像显示装置100和移动终端600提供无线信道环境信息。例如,处理器可以提供无线信道的安全信息、信道名称信息、信号强度信息等。
[0134]图6是示出图1的移动终端的内部构造的框图。
[0135]参照图6,移动终端600可以包括:无线通信单元610、音频/视频(A/V)输入单元620、用户输入单元630、感测单元640、输出单元650、存储器单元660、接口单元670、控制器680以及电源690。
[0136]根据本发明实施方式的无线通信单元610可以经由无线路由器500向图像显示装置100发送基于TCP包的控制数据,并且经由无线路由器500接收来自图像显示装置100的基于TCP包的反馈数据,用于在无线音频接收模式下与图像显示装置100的同步。
[0137]如果完成同步,则针对无线音频接收模式,无线通信单元610可以经由无线路由器500接收来自图像显示装置100的基于RTP/UDP包的音频数据。
[0138]无线通信单元610可以包括:广播接收模块611、移动通信模块613、无线因特网模块615、NFC模块617,以及全球定位系统(GPS)模块619。
[0139]广播接收模块611通过广播频道从外部广播管理服务器接收广播信号和广播相关信息中的至少一种。该广播频道可以包括卫星频道和陆基频道。
[0140]通过广播接收模块611接收的广播信号和/或广播相关信息可以存储在存储器660 中。
[0141]移动通信模块613在移动通信网络上向或从基站、外部终端以及服务器中的至少一个发送或接收无线信号。无线信号可以包括:话音呼叫信号、视频呼叫信号或与发送和接收文本/多媒体消息相关联的各类数据。
[0142]无线因特网模块615是可以设置至移动终端600的、用于无线因特网接入的内部或外部模块。例如,无线因特网模块615可以执行基于WiFi的无线通信或基于WiFi Direct的无线通信。
[0143]NFC模块617可以执行NFC。如果电子装置接近预定距离内的移动终端600,即,如果电子装置被加标签,则NFC模块617可以从或向包括NFC标签的电子装置或其中安装有NFC模块的电子装置接收或发送数据。
[0144]作为短距离无线通信技术,蓝牙(bluetooth)、射频标识(RFID)、红外数据协会(IrDA)、超宽带(UWB)以及ZigBee都可以使用。
[0145]GPS模块619可以从多个GPS卫星接收位置信息。
[0146]A/V输入单元610接收音频信号或视频信号,并且可以包括摄像机621和麦克风623。
[0147]用户输入单元630生成使得用户能够控制终端的操作的键输入数据。用户输入单元630可以包括:键盘、圆顶开关(dome switch)、触摸板(静压力/静电)等。具体来说,如果触摸板和显示器651具有分层结构,则其可以被称作触摸屏。
[0148]感测单元640检测移动终端600的当前状态(如该移动终端600是打开还是闭合,移动终端600的位置以及其被用户接触/未接触),并且生成用于控制移动终端600的操作的感测信号。
[0149]感测单元640可以包括接近传感器641、压力传感器643以及运动传感器645。运动传感器645可以利用加速度传感器、陀螺仪传感器以及重力传感器来感测移动终端600的运动或位置。具体来说,陀螺仪传感器测量角速度并且感测移动终端相对于基准方向旋转的方向(角)。
[0150]输出单兀650可以包括:显不器651、音频输出模块653,警告单兀655以及触觉模块 657。
[0151]显示器651显示经移动终端600处理的信息。
[0152]如上所述,如果显示器651和触摸板具有分层结构以配置触摸屏,则显示器651不仅可以被用作输出装置而且可以被用作用于经由用户触摸来输入信息的输入装置。
[0153]音频输出模块653可以输出从无线通信模块610接收的或者存储在存储器660中的音频数据。该音频输出模块653可以包括:扬声器、蜂鸣器等。
[0154]警告单元655输出通知用户在移动终端600中出现了事件的信号。
[0155]触觉模块657生成用户可以感觉到的各种触觉效果。由触觉模块657生成的触觉效果的典型例是振动。
[0156]存储器660可以存储用于控制器680的处理和控制的程序,并且可以临时存储输入或输出数据(例如,电话簿、消息、音频,静止图像以及活动图像)。
[0157]接口 670用作与连接至移动终端600的所有外部装置的接口。接口 670可以接收来自外部装置的数据或者接收电力,并将电力传送至移动终端600的组件,或者将移动终端600的数据发送至外部装置。
[0158]控制器680控制移动终端600的总体操作。例如,控制器680执行与话音通信、数据通信、视频通信等相关联的控制和处理。控制器680可以包括用于多媒体回放的多媒体回放模块681。多媒体回放模块681可以按硬件形式在控制器180中实现,或者可以按软件形式与控制器680分离地实现。下面,参照图11及其随后的图,对控制器680的用于多媒体回放的操作进行描述。[0159]电源690在控制器680的控制下,接收外部电力或内部电力并且向各组件提供操作所需电力。
[0160]图6所示的移动终端600的框图仅是示例性的。根据实际实现中移动终端600的规范,移动终端600的组件可以被组合或省略或者可以添加新组件。即,若需要的话,可以将两个或更多个组件并为一个组件或者可以将一个组件设置为分离的组件。另外,每一个框的功能出于描述本发明实施方式的目的来描述,由此,具体操作或装置不应被视为对本发明的范围和精神进行限制。
[0161]图7是例示根据本发明一实施方式的操作图像显示装置的方法的流程图。
[0162]参照图7,首先,图像显示装置100在接收到来自移动终端的无线音频接收模式进入信号时进入无线音频发送模式(操作S725)。接着,利用第一无线通信方法执行与移动终端600的同步(操作S730)。
[0163]图像显示装置100的网络接口 135可以经由无线路由器500接收包括无线音频发送模式开始信号的TCP包。在本发明实施方式中,为了保证数据通信可靠性,基于TCP的通信方法可以被采用为第一无线通信方法。
[0164]如果接收到TCP包中的无线音频发送模式开始信号,则图像显示装置100的控制器170可以控制进入无线音频发送模式。接着,控制器170可以控制图像显示装置以与移动终端600进行同步。
[0165]更具体地说,图像显示装置100的控制器170可以与所接收的无线音频发送模式开始信号相对应地,按TCP包的形式控制发送有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等,作为反馈数据。
[0166]有关声道数的信息指示要发送音频数据的声道是单声道、立体声声道还是5.1声道的信息。
[0167]编码状态信息可以指示要发送的音频数据是:1)经DEMUX310解复用但未经音频处理器315解码的音频数据,2)经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据,还是3)经DEMUX310解复用并且经音频处理器315解码的音频数据。
[0168]编码方案信息在编码状态信息指示编码音频数据时有效,并且可以指示编码方案是AC3编码方案还是AAC编码方案。
[0169]例如,如果图像显示装置100在回放特定频道的广播图像作为多媒体数据的状态下接收到无线音频发送模式开始信号,则图像显示装置100的控制器170在要发送的音频数据的编码方案是AAC编码方案的情况下控制发送AAC作为编码方案信息,并在声道数为2的情况下控制发送立体声声道,作为有关声道数的信息。
[0170]接下来,图像显示装置100的网络接口 135可以接收包括同步完成信息的TCP包,该同步完成信息指示完成了与移动终端600的同步。于是,完成图像显示装置100与移动终端600之间的同步。即,在无线音频发送模式下完成针对音频数据发送的准备。
[0171]接下来,图像显示装置100从多媒体数据提取音频信号(操作S740)。利用第二通信方法将所提取的音频信号发送至移动终端(操作S750)。
[0172]在完成同步之后,图像显示装置100的控制器170提取要发送的音频信号。例如,如果多媒体数据是广播信号,则控制器170 (更具体地,图像显示装置的DEMUX310)可以将广播流解复用成音频信号、视频信号以及数据信号。
[0173]在根据本发明实施方式的无线音频发送模式中,向移动终端600发送的音频数据可以是:1)经DEMUX310解复用而未经音频处理器315解码的音频数据,2)经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据,或3)经DEMUX310解复用并且经音频处理器315解码的音频数据。
[0174]图像显示装置100的控制器170可以控制选择音频信号I)至3)中的任一个和按单向多播RTP/UDP包的形式向移动终端600发送所选择的音频信号。
[0175]在本发明实施方式中,针对音频数据的低延迟流以及多用户支持,基于实时发送协议(RTP) /用户数据报协议(UDP)的通信方法可以被采用为第二无线通信方法。
[0176]接下来,图像显示装置100回放多媒体数据(操作S760)。具体来说,图像显示装置100的控制器170可以解码解复用的音频信号、视频信号以及数据信号当中的视频信号,并且输出要显示在显示器180上的视频信号。接着,显示器180可以显示与所接收的广播信号相对应的广播图像。这时,图像显示装置100的音频输出单元185可以不输出与所接收的广播信号相对应的广播音频信号。即,图像显示装置的音频输出单元185处于静音模式,并由此不能输出音频信号。由此,不希望收听音频数据的其它用户在图像显示装置100回放多媒体数据时不需要收听音频信号。
[0177]图8是例示根据本发明一实施方式的操作移动终端的方法的流程图。
[0178]参照图8,首先,移动终端600进入对图像显示装置的遥控模式(操作S805)并显示遥控画面(操作S810)。在显示遥控画面的状态下,确定是否接收到无线音频接收模式开始信号(操作S815),并且如果是,移动终端进入无线音频接收模式(操作S816)。接着,显示无线音频接收画面(操作S818),并且利用第一无线通信方法执行与图像显示装置的同步(操作 S820)。
[0179]如果执行移动终端600的遥控菜单项或遥控应用项,则移动终端600的控制器680可以控制图像显示装置100进入遥控模式。移动终端600的控制器680可以控制在显示器651上显示图13的(a)中所示的遥控画面1310。
[0180]图13的(a)的遥控画面1310包括:静音项、频道(CH)控制项、音量(VOL)控制项、无线音频接收模式项(WiFi探测(WiFi SOUND)) 1315。如果用户选择无线音频接收模式项(WiFi探测)1315,则移动终端600的控制器680可以确定选择了无线音频接收模式,并且控制显示指示无线音频接收模式的无线音频接收画面。
[0181]图13的(b)示出了无线音频接收画面。指示无线音频接收模式的WiFi探测画面1330显示在显示器651上。
[0182]图13的(b)的WiFi探测画面1330包括:指示无线音频接收模式的对象(用WiFi探测指示)1332、频道控制项1334以及音量控制项1336。
[0183]如果选择遥控画面1310的无线音频接收模式项(WiFi探测)1315,则移动终端600的控制器680可以与控制显示WiFi探测画面1330分离地,控制向图像显示装置100发送包括无线音频接收模式开始信号的TCP包,如图13的(b)中所示。S卩,控制器680可以控制与图像显示装置100的同步。
[0184]图像显示装置100进入无线音频接收模式并且执行与移动终端的同步。即,图像显示装置100可以按TCP包的形式发送有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等,作为反馈数据。移动终端600的控制器680可以经由无线通信单元610接收有关声道数的信息、编码状态信息、编码方案信息等。
[0185]如果完成了与图像显示装置100的同步,则移动终端600的控制器680可以控制发送包括同步完成信息的TCP包,该同步完成信息指示完成了与图像显示装置100的同步。
[0186]接下来,移动终端600利用第二无线通信方法接收来自图像显示装置的音频信号(操作S850)。在完成同步之后,图像显示装置100可以发送RTP/UDP包形式的音频数据,并且移动终端600的控制器680接收该音频数据。该音频数据可以是I)未编码的音频数据,2)编码的音频数据,或3)复用且编码的音频数据。
[0187]接下来,移动终端600回放所接收的音频数据(操作S865)。具体来说,与音频数据I)至3)中的任一个相对应地,移动终端600的控制器680回放音频数据,并且经由音频输出模块653输出所播放的音频数据。
[0188]移动终端600的用户可以收听从移动终端600输出的音频信号,同时观看由图像显示装置100回放的多媒体数据的视频。
[0189]不同于图8,即使遥控画面未显示在移动终端600上,该移动终端也可以立即进入无线音频接收模式。例如,如果操纵指示无线音频接收模式的热键或者执行无线音频接收模式应用,则移动终端可以立即进入无线音频接收模式。通过在不显示遥控画面的情况下,操纵热键或者执行应用,图13的(b)中所示的WiFi探测画面1330可以立即显示在移动终端600上。
[0190]图9是例示根据本发明一实施方式的图像显示系统的操作的流程图。
[0191]图9的图像显示系统的操作对应于图7和图8。
[0192]更具体地说,操作S905至S918 (操作S905、S910、S915、S916以及S918)对应于图
8的操作 S805 至 S818 (操作 S805、S810、S815、S816 以及 S818),而操作 S922 至 S928 (操作S922、S924、S926以及S928)对应于图8的操作S830和图7的操作S730。
[0193]步骤S940对应于图7的操作S740,而操作S942至S944 (操作S942和S944)对应于图7的操作S750和图8的操作S850。
[0194]步骤S960对应于图7的操作S760,而操作S965对应于图8的操作S865。
[0195]图10是涉及用于描述图像显示装置与移动终端之间的TCP包数据交换的视图。
[0196]移动终端600的控制器680可以控制经由TCP发送器1125发送控制数据。控制数据可以包括以下信息中的至少一种:无线音频接收模式开始信息或结束信息、无线信道设置请求信息、已分配无线信道信息、解码信息、无线信道环境信息或回放延迟信息。
[0197]在同步处理期间,在这种控制数据当中,无线音频接收模式开始信息、无线信道设置请求信息、已分配无线信道信息、解码信息等可以被发送至图像显示装置100。
[0198]在音频数据接收处理期间,在这种控制数据当中,无线音频接收模式结束信息、无线信道改变请求信息、无线信道环境信息、回放延迟信息等可以被发送至图像显示装置100。
[0199]图像显示装置100的控制器170可以经由TCP接收器1025接收控制数据。控制器170可以控制经由TCP发送器1020发送反馈数据。反馈数据可以包括以下信息中的至少一种:有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息、回放时间点信息,当前时间信息等。[0200]在同步处理期间,在这种控制数据当中,有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等可以被发送至移动终端600。
[0201]在音频数据发送处理期间,在这种控制数据当中,要发送的音频数据的回放时间点信息等可以被发送至移动终端600。
[0202]在图10中,图像显示装置100的同步器1010与控制器170分离地设置,以使得当前时间信息经由TCP发送器1020与反馈数据分离地被发送至移动终端600。移动终端600的同步器1110与控制器680分离地设置,以使得当前时间信息经由TCP接收器1120与反馈数据一起被接收。
[0203]当前时间信息可以在被包括在反馈数据中的状态下发送。
[0204]图像显示装置100的TCP接收器1025和TCP发送器1020可以被包括在图3的网络接口 135中。移动终端600的TCP接收器1120和TCP发送器1125可以被包括在图6的无线通信单元610中。
[0205]图11是涉及用于描述图像显示装置与移动终端之间的RTP/UDP包数据交换的视图,而图12示意性地示出了 RTP/UDP包数据的结构。
[0206]图像显示装置100可以接收来自调谐器单元110、外部装置接口 130或网络接口135的多媒体数据。
[0207]针对流数据的情况,DEMUX310解复用流数据,解码器1030解码音频数据,以及编码器1040编码所解码的音频数据。DEMUX310、解码器1030以及编码器1040可以被包括在控制器170中。
[0208]可向移动终端600发送的音频数据可以是:①经DEMUX310解复用而未经解码器1030解码的音频数据,②经DEMUX310解复用、经解码器1030解码并且经编码器1040编码的音频数据,或③经DEMUX310解复用并且经解码器1030解码的音频数据。
[0209]如图12所示,要发送的音频数据1210可以通过图像显示装置100的RTP发送器1045与RTP包1220接合,可以通过UDP发送器1050与UDP包1230接合,并且可以作为IP包1240发送至移动终端600。
[0210]移动终端600的UDP接收器1150分离出UDP包120,RTP接收器1145分离出RTP包1220,并且向编码器1130或音频输出模块653 (更具体地说,音频回放缓冲器)提供音频数据1210。
[0211]如果由图像显示装置100发送的音频数据是音频数据①或②,则因为音频数据被编码,所以该音频数据被解码器1130解码并且被提供给音频输出模块653。
[0212]作为另一示例,如果由图像显示装置100发送的音频数据是音频数据③,则因为音频数据被解码,所以将该音频数据提供给音频输出模块653,而不需解码。
[0213]图像显示装置100的RTP发送器1045和UDP发送器1050可以被包括在图3的网络接口 135中。移动终端600的UDP接收器1150和RTP接收器1145可以被包括在图6的无线通信单元610中。
[0214]图14示出了与图13类似的、用于进入无线音频接收模式的移动终端的用户接口的另一不例。
[0215]参照图14,而且不同于图13,如果选择图14的(a)的遥控画面1310的“TV共享”项1305,则如图14的(b)中所示,可以显示TV共享画面。在图14中,TV共享画面包括诸如WiFi探测项1322、第二 TV项1324、云TV项1326等的遥控项。
[0216]其中,如果选择WiFi探测项1322,则移动终端600的控制器680可以控制显示WiFi探测画面1330,如图14的(c)所示,其示出了与图13的(b)类似的无线音频接收画面。另外,移动终端600的控制器680可以与WiFi探测画面1330分离地控制向图像显示装置100发送包括无线音频接收模式开始信号的TCP包。S卩,控制器680可以控制与图像显示装置100的同步。
[0217]图15A至图17C是涉及用于描述图8的操作移动终端的方法的各种示例的视图。
[0218]首先,图15A示出了当在显示无线音频接收模式画面的状态下接收到音频数据时显示指示接收到音频数据的对象。
[0219]图像显示装置100可以在进入无线音频发送模式时,在回放多媒体数据的同时不输出音频数据。由此,如上所示,指示静音模式的对象60可以显示在显示器180上。
[0220]移动终端600可以在按无线音频接收模式接收到音频数据时,在显示器651上显示指示接收到音频数据的对象1333。环绕指示无线音频接收模式的对象1332而显示聚焦对象1333。
[0221]在未接收到音频数据时可以不显示对象1333,而可以仅在接收到音频数据时显示对象1333。由此,用户可以可视且便利地确认是否接收到音频数据。
[0222]不同于图15A,指示无线音频接收模式的对象1332被聚焦、移动或高亮,而不显示聚焦对象1333。
[0223]接下来,与图15A类似,图15B示出了显示指示接收到音频数据的对象。图15B在对象的形状方面不同于图15A。
[0224]在图15B中,代替指示无线音频接收模式的对象1332,显示了指示所接收的音频数据的音量级的对象1335。S卩,对象1335可以被显示为均衡器对象。因此,不仅可以可视地确认所接收的音频数据的存在/不存在,可以可视地确认而且音量级。
[0225]接下来,图15C示出了如果在显示无线音频接收模式画面1330的状态下接收到音频数据,则显示与该音频数据相对应的文本1350。
[0226]移动终端600的控制器680可以获取与所接收的音频数据相对应的文本。例如,移动终端600的控制器680可以利用话音识别算法将音频数据转换成文本。作为另一示例,移动终端600的控制器680可以将所接收的音频数据发送至外部服务器,并且从服务器接收与该音频数据相对应的文本。因此,用户可以便利地确认希望的音频数据。
[0227]接下来,图I?示出了如果在显示无线音频接收模式画面1330的状态下接收到音频数据,则显示与音频数据相对应的文本1350和与该文本相对应的字幕1355。
[0228]移动终端600的控制器680还可以获取与文本相对应的字幕。例如,移动终端600的控制器680可以利用文本翻译算法从该文本获取翻译成预定语言的字幕。作为另一示例,移动终端600的控制器680可以经由网络1400将所接收的音频数据或文本数据发送至外部服务器,并且经由网络1400从服务器接收相对应的文本或字幕。因此,用户可以便利地确认希望的音频数据。
[0229]图16A至图16C示出了当检测到将耳机插座连接至移动终端600时进入无线音频接收模式。
[0230]图16A示出了图像显示装置100显示预定图像50而移动终端600显示遥控画面1310的实例。图像显示装置100的音频输出单元185输出与所显示的图像50相对应的音
频信号。
[0231]接下来,图16B示出了如果将耳机插座连接至移动终端600,则在移动终端600的显示器651上显示指示该移动终端是否进入无线音频接收模式的对象1360。
[0232]移动终端600的控制器680检测是否将耳机插座连接到了移动终端600。例如,如果连接了耳机插座,则移动终端600的控制器680可以检测到连接至耳机插座的连接端子的电阻器中的电流流动,并且确定连接了耳机插座。
[0233]如果耳机插座连接至移动终端600,则移动终端600的控制器680可以控制显示指示该移动终端是否进入无线音频接收模式的对象1360。这种对象1360可以包括无线音频接收模式进入项1362,和进入取消项。因此,这可以改进用户便利性。
[0234]如果选择进入项1362,则移动终端600的控制器680可以控制在移动终端600的显示器651上显示无线音频接收模式画面1330,如图16C所示。S卩,移动终端600可以进入无线音频接收模式。另外,图像显示装置100可以进入无线音频发送模式。由此,图像显示装置100可以不输出音频信号,而是可以在显示器180上显示指示静音模式的对象60。
[0235]在不需要显示指示移动终端是否进入图16B的无线音频接收模式的对象1360的情况下,图16A的画面可以直接切换至图16C的画面。即,如果将耳机插座连接至移动终端600,则移动终端600的控制器680可以控制立即在移动终端600的显示器651上显示无线音频接收模式画面1330。因此,这可以改进用户便利性。
[0236]图17A至图17C示出了同步设置由图像显示装置回放(或再现)的多媒体数据和由移动终端回放(或再现)的音频数据的各种示例。
[0237]图17A示出了移动终端600的无线音频接收模式画面1330包括指示无线音频接收模式的对象1332、频道控制项1334、音量控制项1336以及同步设置项1410的实例。如与图13的(b)相比,还包括了同步设置项1410。
[0238]如果选择同步设置项1410,则移动终端600的控制器680可以控制在显示器651上显示同步设置画面1420。
[0239]问步设直画面1420可以包括用于自动设直问步的自动t旲式项1430,和用于手动设置同步的手动模式项1440。
[0240]在图17A中,自动模式项1430包括最大可允许同步延迟时间项,和用于改变所接收的音频数据的声道数的自动立体声/单声道改变项。当选择自动模式项时,可以在激活状态下显示包括在自动模式项1430中的最大可允许同步延迟项和立体声/单声道改变项。
[0241]在图17A中,手动模式项1440包括:用于改变音频数据的声道数的项1442、编码状态改变项1444、由图像显示装置回放的多媒体数据的回放延迟时间增加项1445、回放延迟时间减小项1446以及回放延迟时间显示窗1447。当选择手动模式项时,可以在激活状态下显示包括在手动模式项1440中的这些项目。
[0242]在选择手动模式项之后,可以仅在所接收的音频数据的声道为立体声声道时激活用于改变音频数据的声道数的项1442,并且可以在激活之后,通过用户选择而将立体声声道改变至单声道。
[0243]编码状态改变项1444可以在选择手动模式项之后仅当所接收的音频数据是编码的音频数据2)时才被激活,并且可以在激活之后,将编码的音频数据2)改变至解复用的音频数据I)或解码的音频数据3)。
[0244]图17B至图17C示出了根据图像显示装置与移动终端之间的无线环境,改变并显示用于设置由移动终端回放的音频数据的同步的同步设置画面的实例。
[0245]图17B示出了如果无线环境良好,则在移动终端600的显示器651上显示指示无线环境良好的对象1412。
[0246]如果选择同步设置项1410,则因为无线环境良好,所以移动终端600的控制器680可以控制在显示器651上显示等同于图17A的同步设置画面1420。
[0247]图17C示出了如果无线环境不好,则在移动终端600的显示器651上显示指示无线环境不好的对象1414。
[0248]如果选择同步设置项1410,则因为无线环境不好,所以移动终端600的控制器680可以控制在显示器651上显示不同于图17A的同步设置画面1460。
[0249]如所示出的,同步设置画面1460可以包括用于自动设置同步的自动模式项1430,和考虑无线状态的推荐模式项1450。
[0250]自动模式项1430的最大可允许同步延迟时间在图17A中被设置成默认120ms,但在图17C中可以被设置成默认80ms。即,图17A的用于设置同步延迟的项目中的至少一些可以根据无线环境改变。因此,可以根据无线环境恰当地设置同步。
[0251]推荐模式项1450可以包括:用于改变音频数据的声道数的项1442、编码状态改变项1444,以及由图像显示装置回放的多媒体数据的回放延迟时间显示窗1447。
[0252]单声道被推荐为用于改变音频数据的声道数的项1442的默认值,而编码的音频数据2)可以被推荐为编码状态改变项1444的默认值。
[0253]另外,可以在回放延迟时间显示窗1447中显示10ms,作为默认值。
[0254]移动终端600的控制器680可以考虑无线环境来改变用于设置由移动终端回放的音频数据的同步的同步设置画面,或者同步设置画面的至少一些项。由此,可以根据无线环境恰当地设置同步。
[0255]图18是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图。
[0256]参照图18,图像显示装置100的控制器170接收来自移动终端600的无线音频接收模式进入信号(操作S1510)。如图7的操作S710中所述,图像显示装置100可以接收包括无线音频发送模式开始信号的TCP包数据。TCP接收器1025可以分离出TCP包,并且向图像显示装置100的控制器170发送无线音频发送模式开始信号。
[0257]接下来,图像显示装置100的控制器170向移动终端600发送有关要发送的音频数据的信息(操作S1520)。例如,TCP接收器1020可以向移动终端600发送包括有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等的TCP包。
[0258]接下来,图像显示装置100的控制器170接收来自移动终端600的解码信息(操作S1530)。具有与该解码信息相对应的编码状态的音频数据被发送(操作S1540)。
[0259]移动终端600的控制器680可以生成指示是否可以利用所接收的有关音频数据的信息中的编码方案信息,来解码要由移动终端600接收的音频数据的解码信息。该解码信息是其中值“I”可以指示可以解码音频数据而值“O”可以指示不能解码音频数据的标志。
[0260]图像显示装置100的控制器170通过TCP接收器1020接收解码信息。如果可以解码音频数据,则控制器170保持要发送音的频数据的编码方案,并且向移动终端600发送该音频数据。
[0261]如果该解码信息指示不能解码音频数据,则图像显示装置100的控制器170改变要发送的音频数据的编码方法,并且向移动终端600发送该音频数据。
[0262]例如,如果要发送的音频数据的编码方案是AAC编码方案,并且移动终端600不能利用这种编码方案执行解码,则图像显示装置100接收指示不能执行解码的信息。图像显示装置100可以将要发送的音频数据的编码方案改变成AC3编码方案,并再次向移动终端600发送该音频数据。如果移动终端600可以利用AC3编码方案解码音频数据,则可以将指示可以执行解码的信息发送至图像显示装置100。由此,图像显示装置100可以控制向移动终端600发送具有AC3编码方案的音频数据。
[0263]编码方案可以通过改变要发送的音频数据的源来改变。即,编码方案可以通过将要发送的音频数据从图11的音频数据①改变成图11的音频数据③来改变。
[0264]例如,如果音频数据①的编码方案是AAC编码方案,而编码器1040的编码方案是AC3编码方案,则要发送的音频数据可以从图11的音频数据①改变成音频数据③。
[0265]接下来,图像显示装置回放多媒体数据(操作S1550)。具体来说,图像显示装置100的控制器170可以解码解复用音频信号当中的音频信号、视频信号以及数据信号,并且输出要显示在显示器180上的视频信号。由此,显示器180可以显示与所接收的广播信号相对应的广播图像。这时,图像显示装置100的音频输出单元185可以不输出与所接收的广播信号相对应的广播音频信号。
[0266]图19是例示根据本发明另一实施方式的操作移动终端的方法的流程图,而图20至图22是涉及用于描述图18的操作图像显示装置的方法或图19的操作移动终端的方法的各种示例的视图。
[0267]参照图19,移动终端600向图像显示装置100发送无线音频接收模式进入信号(操作S1610),并且接收来自图像显示装置100的有关音频数据的信息(操作S1620)。操作S1660对应于图20的操作S1710,而操作S1620对应于图20的操作S1720。
[0268]移动终端600的TCP发送器1125可以向图像显示装置100发送包括无线音频接收模式开始信号的TCP包数据。图22的(a)示出了从移动终端600向图像显示装置100发送无线音频接收模式开始信号SWi_s。
[0269]图像显示装置100的TCP接收器1025可以接收包括无线音频接收模式开始信号的TCP包数据,分离TCP包,并向回放管理器1070发送无线音频接收模式开始信号。从图像显示装置100的角度来说,图像显示装置100的回放管理器1070将无线音频接收模式开始信号视为无线音频发送模式开始信号。
[0270]图像显示装置100的回放管理器1070可以控制向移动终端600发送有关要发送的音频数据的信息。由此,图像显示装置100的TCP发送器1020可以向移动终端600发送包括有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等的TCP包。
[0271]图22的(b)示出了从图像显示装置100向移动终端600发送有关要发送的音频数据的信息Inf_aud。
[0272]移动终端600的TCP接收器1120可以接收包括有关音频数据的信息的TCP包数据,分离TCP包,并且向回放管理器1170发送有关要发送的音频数据的声道数的信息、编码状态息、编码方案息等。[0273]接下来,移动终端600向图像显示装置100发送解码信息(操作S1630),并且接收来自图像显示装置100的与该解码信息相对应的音频数据(操作S1640)。回放所接收的音频数据(S1650)。操作S1630对应于图20的操作S1730,操作S1640对应于图20的操作S1740,而操作S1650对应于图20的操作S1750。
[0274]移动终端600的回放管理器1170可以基于所接收的编码方案信息等,来确定移动终端600的解码器1130是否可以解码要接收的音频数据。移动终端600的回放管理器1170可以控制通过TCP发送器1125发送指示是否可以解码音频数据的解码信息。
[0275]图22的(C)示出了从移动终端600向图像显示装置100发送解码信息Inf_able。
[0276]图像显示装置100的TCP接收器1025可以接收包括解码信息的TCP包数据,分离TCP包,并向回放管理器1070发送该解码信息。
[0277]图像显示装置100的回放管理器1070可以控制发送与所接收的解码信息相对应的音频数据。
[0278]例如,要发送音的频数据的源可以与所接收的解码信息相对应地改变。即,要发送的音频数据可以从图11的音频数据①改变成图11的音频数据③。
[0279]例如,如果移动终端600可以利用AC3编码方案执行解码,音频数据①的编码方案是AAC编码方案,而编码器1040的编码方案是AC3编码方案,则图像显不装置100的回放管理器1070可以控制转换器1085将要发送的音频数据从图11的音频数据①改变成音频数据③。
[0280]图像显示装置100的RTP发送器1045和UDP发送器1050可以分别向移动终端600发送附有RTP包的数据,和附有UDP包的数据。
[0281]图像显示装置100的回放管理器1070可以控制同步器1080,以使得向移动终端600发送要发送的音频数据的回放时间点信息和当前时间信息。回放时间点信息和当前时间信息从同步器1080输出。接着,图像显示装置100的TCP发送器1020可以向移动终端600发送包括回放时间点信息和当前时间信息的TCP包。
[0282]图22的(d)示出了从图像显示装置100向移动终端600发送音频数据Audio_l、2或3,回放时间点信息Inf-pt等。
[0283]移动终端600的UDP接收器1150和RTP接收器1145可以分别分离UDP包和RTP包,以使得将音频数据向缓冲器1190发送。
[0284]移动终端600的回放管理器1170控制所接收的音频数据的回放。
[0285]如果通过图像显示装置100发送的音频数据是音频数据①或②,则因为音频数据被编码,所以该音频数据被解码器1130解码并且被提供给音频输出模块653。
[0286]作为另一示例,如果图像显示装置100发送的音频数据是③,则因为音频数据被解码,所以立即将该音频数据提供给音频输出模块653,而不需解码。
[0287]图21的DEMUX310、解码器1030、编码器1040以及回放管理器1070可以被包括在图像显示装置100的控制器170中。其中,回放管理器1070可以对应于图4的处理器330。图21的TCP发送器1020、TCP接收器1025、UDP发送器1050以及RTP发送器1045可以被包括在图3的网络接口 135中。缓冲器1090可以对应于存储器140。
[0288]图21的移动终端600的回放管理器1170可以被包括在移动终端600的控制器680中。图21的TCP发送器1125、TCP接收器1125、UDP发送器1150以及RTP发送器1145可以被包括在图3的无线通信单元610中。缓冲器1190可以对应于存储器660。
[0289]尽管由RTP接收器1145处理的音频信号在图21中被示出为经由缓冲器1190输出至解码器1130或音频输出模块653,但如果由RTP接收器1145处理的音频信号是编码的音频信号,则该音频信号可以由解码器1130解码,并且可以将所解码的音频信号存储在缓冲器1190中。S卩,缓冲器1190可以插在音频输出模块653与解码器1130之间。
[0290]根据本发明一实施方式,如果在显示用于遥控图像显示装置的遥控画面的状态下接收到无线音频接收模式开始信号,则显示无线音频接收模式画面,以使得移动终端进入能够无线地接收来自图像显示装置的音频数据的无线音频接收模式。因此,这可以增加用户便利性。
[0291]当接收到音频数据时,可以显示指示接收到音频数据的对象。因此,用户可以可视且便利地确认是否接收到音频数据。
[0292]所接收的音频数据可以被显示为文本或与该文本相对应的字幕。因此,用户可以便利地确认希望的音频数据。
[0293]如果检测到耳机插座被连接至移动终端,则该移动终端可以自动进入无线音频接收模式,或者显示指示移动终端是否进入无线音频接收模式的对象,由此,改进用户便利性。
[0294]显示用于设置由图像显示装置回放的多媒体数据和由移动终端回放的音频数据的同步的同步设置画面,由此根据用户偏好便利地设置同步。
[0295]因为同步设置画面中的某些项根据图像显示装置与移动终端之间的无线环境改变,所以可以根据无线环境设置同步。
[0296]根据本发明一实施方式,图像显示装置根据无线发送模式利用第一无线通信方法来执行与移动终端的同步,而利用与第一无线通信方法不同的第二无线通信方法来向移动终端发送提取的音频数据。通过利用不同的无线通信方法来执行同步和音频数据发送,可以有效地执行无线音频数据发送。因此,可以改进用户便利性。
[0297]具体来说,如果基于发送控制协议(TCP)的通信方法被用作第一无线通信方法,则可以保证控制数据与反馈数据的数据通信可靠性。
[0298]如果基于实时发送协议(RTP) /用户数据报协议(UDP)的通信方法被用作第二无线通信方法,则可以使得能够实现音频数据的低延迟流传输和多用户支持。
[0299]通过执行有关移动终端的无线音频发送模式,仅希望收听音频数据的用户可以收听该音频数据,而不希望收听该音频数据的用户不能收听该音频数据。因此,可以提供根据用户偏好的服务并且改进用户便利性。
[0300]根据前述实施方式的图像显示装置和用于操作图像显示装置的方法不限于本文阐述的实施方式。因此,本文阐述的示例性实施方式的变型例和组合可以落入本发明的范围内。
[0301]根据前述实施方式的操作图像显示装置的方法可以实现为代码,该代码可以被写入至计算机可读记录介质,并由此可以由处理器读取。该计算机可读记录介质可以是可以按计算机可读方式存储数据的任何类型的记录装置。该计算机可读记录介质的示例包括:ROM、RAM、CD-ROM、磁带、软盘、以及光学数据存储部。计算机可读记录介质可以通过连接至网络的多个计算机系统来分布,使得按分散方式向该多个计算机系统写入和从该多个计算机系统执行计算机可读代码。本领域普通技术人员可以构造用于实现本文描述的实施方式所需的功能程序、代码,以及代码段。
[0302]尽管已经出于例示性目的公开了本发明的实施方式,但本领域技术人员应当清楚,在不脱离如所附权利要求书中公开的本发明的范围和精神的情况下,各种修改、添加以及替换都是可以的。
[0303]相关申请的交叉引用
[0304]本申请要求于2012年6月8日在韩国知识产权局提交的韩国专利申请No. 10-2012-0061624的优先权和权益,该韩国专利申请的内容公开通过引用并入于此。
【权利要求】
1.一种操作移动终端的方法,该方法包括以下步骤: 在所述移动终端上显示(S810)用于遥控图像显示装置的遥控画面; 如果在显示所述遥控画面期间接收到无线音频接收模式开始信号,则进入(S816)无线音频接收模式;以及 在所述移动终端上显示(S818)无线音频接收模式画面。
2.根据权利要求1所述的方法,所述方法还包括以下步骤: 根据所述无线音频接收模式接收(S850)来自所述图像显示装置的音频数据;并且 播放(S865)所接收的音频数据。
3.根据权利要求2所述的方法,其中,所述无线音频接收模式画面包括指示接收到所述音频数据的对象。
4.根据权利要求2所述的方法,所述方法还包括以下步骤:显示以下中的至少一个 所述音频数据相对应的文本和与所述文本相对应的字幕。
5.根据权利要求1所述的方法,其中: 所述遥控画面包括无线音频接收模式项,并且 如果选择所述无线音频接收模式项,则执行进入所述无线音频接收模式。
6.根据权利要求1所述的方法,其中,如果检测到耳机插座被连接至所述移动终端,则自动执行所述无线音频接收`模式。
7.根据权利要求1所述的方法,所述方法还包括以下步骤:如果检测到耳机插座被连接至所述移动终端,则显示指示所述移动终端是否进入所述无线音频接收模式的对象, 其中,如果选择所述对象的无线音频接收模式项,则执行进入所述无线音频接收模式。
8.根据权利要求1所述的方法,其中,所述无线音频接收模式画面包括频道控制项、音量控制项以及同步设置项中的至少一个。
9.根据权利要求1所述的方法,所述方法还包括以下步骤:显示包括自动模式项、手动模式项以及推荐模式项的同步设置画面,所述自动模式项用于设置由所述图像显示装置播放的多媒体数据和由所述移动终端播放的音频数据的同步。
10.根据权利要求1所述的方法,所述方法还包括以下步骤:根据所述图像显示装置与所述移动终端之间的无线环境,改变并显示用于设置由所述移动终端播放的音频数据的同步的同步设置画面。
11.一种移动终端,该移动终端包括: 音频输出模块(653); 显示器(651),该显示器被设置成显示用于遥控图像显示装置的遥控画面;以及 控制器(680),该控制器被设置成在显示所述遥控画面期间接收到无线音频接收模式开始信号的情况下控制进入无线音频接收模式,并且控制显示无线音频接收模式画面。
12.根据权利要求11所述的移动终端,所述移动终端还包括:无线通信单元(610),该无线通信单元被设置成根据所述无线音频接收模式接收来自所述图像显示装置的音频数据, 其中,所述控制器控制回放所接收的音频数据。
13.根据权利要求12所述的移动终端,其中,所述控制器控制显示以下中的至少一个:与所述音频数据相对应的文本和与所述文本相对应的字幕。
14.根据权利要求11所述的移动终端,其中,所述控制器控制显示包括自动模式项、手动模式项以及推荐模式项的同步设置画面,所述自动模式项用于设置由所述图像显示装置播放的多媒体数据和由所述移动终端播放的所述音频数据的同步。
15.根据权利要求11所述的移动终端,其中,所述控制器根据所述图像显示装置与所述移动终端之间的无线环境,改变并显示用于设置由所述移动终端播放的音频数据的同步的同步设置画面。
【文档编号】H04M1/725GK103491404SQ201310174086
【公开日】2014年1月1日 申请日期:2013年5月13日 优先权日:2012年6月8日
【发明者】李硕熙, 黄正焕, 黄善中, 申昇沐 申请人:Lg电子株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1