用户终端、控制用户终端的方法及多媒体系统与流程

根据本公开的设备和方法涉及用户终端、控制用户终端的方法以及多媒体系统，并且更具体地涉及能够同时观看由显示装置显示的图像内容的用户终端、控制这种用户终端的方法以及多媒体系统。

背景技术：

当前，显示装置向用户提供多种内容。具体地，观看者想要同时确认多种图像内容并且在所确认的图像内容之中选择他们想要观看的内容。

传统上，存在使用画中画(PIP)功能来同时确认多个图像内容的方法。在这种情况下，可能出现一个图像内容遮挡其它图像内容的观看障碍现象。另外，出现了难以使用一个遥控器来同时控制原始图像内容和PIP图像内容的问题。

另外，存在使用多个显示装置来同时确认多个图像内容的方法。例如，存在分别使用电视(TV)和智能电话确认图像内容的方法。在这种情况下，多个显示装置不交互工作，使得必须单独控制多个显示装置，而这是不便的。

技术实现要素：

本公开提供能够利用用户终端通过确认显示装置当前播放的内容而更直观地控制显示装置的用户终端、用于控制该用户终端的方法以及多媒体系统。

根据本公开的方面，用于控制用户终端的方法包括：显示第一图像内容；在感测到预设用户交互的情况下，向外部显示装置传输请求图像内容的信号；以及在从显示装置接收到显示装置当前显示的第二图像内容的情况下，同时显示第一图像内容和第二图像内容。

预设用户交互可以是触摸用户终端的触摸屏的上部区域然后向下执行拖拽的拖拽交互，以及在同时显示第一图像内容和第二图像内容的过程中，可根据拖拽交互的拖拽量来确定第二图像内容的显示量，以及根据所确定的显示量与第一图像内容同时显示第二图像内容的一部分。

在同时显示第一图像内容和第二图像内容的过程中，当感测到用户触摸在向下移动的过程中转向左方和右方中的一个的拖拽交互时，可缩小第二图像内容并在与用户触摸转向的方向对应的区域上显示第二图像内容，以及可缩小第一图像内容并在与用户触摸转向的方向的相反方向对应的区域上显示第一图像内容。

在同时显示第一图像内容和第二图像内容的过程中，在根据拖拽交互同时显示第一图像内容和第二图像内容的情况下，当用户触摸向下拖拽预定距离或更多时，可在整个屏幕上显示第二图像内容并移除第一图像内容。

用于控制用户终端的方法还可包括：当感测到触摸第一图像内容和第二图像内容中的一个然后向左方和右方中的一个执行拖拽的拖拽交互时，将触摸的图像内容改变成另一图像内容并显示所改变的图像内容。

在第一图像内容和第二图像内容是广播内容的情况下，在将所触摸的图像内容改变成另一图像内容并显示所改变的图像内容的过程中，可根据拖拽交互的方向将所触摸的广播内容改变成具有与所触摸的广播内容对应的信道不同的信道的广播内容，并且可显示所改变的广播内容。

用于控制用户终端的方法还可包括：在输入预设用户命令的情况下，在第一图像内容和第二图像内容附近显示内容列表；以及在感测到触摸内容列表中所包括的多个图像内容之中的第三图像内容然后对第一图像内容和第二图像内容中的一个执行拖拽的拖拽交互的情况下，将所拖拽的图像内容改变成第三图像内容并显示第三图像内容。

用于控制用户终端的方法还可包括：在输入触摸第一图像内容然后向上执行拖拽的用户命令的情况下，向显示装置传输与第一图像内容有关的信息，其中，在接收到与第一图像内容有关的信息的情况下，显示装置在显示屏上显示第一图像内容。

用于控制用户终端的方法还可包括：在输入触摸第一图像内容与第二图像内容之间的边界然后向上执行拖拽的用户命令的情况下，向显示装置传输与第一图像内容和第二图像内容有关的信息，其中，在接收到与第一图像内容和第二图像内容有关的信息的情况下，显示装置在显示屏上同时显示第一图像内容和第二图像内容。

在显示第一图像内容的过程中，可从显示装置接收第一图像内容的图像流并显示该图像流；以及在将所触摸的图像内容改变成另一图像内容并显示所改变的图像内容的过程中，可从显示装置接收并显示复合有第一图像内容和第二图像内容的图像流。

显示装置可显示第二图像内容而用户终端显示第一图像内容和第二图像内容，以及显示装置和用户终端可利用第二图像内容的元数据中所包括的时间戳信息使第二图像内容彼此同步并显示该第二图像内容。

根据本公开另一方面，与显示装置交互工作的用户终端包括显示器、通信器、传感器以及控制器，其中，显示器显示第一图像内容，通信器执行与显示装置的通信，传感器感测用户交互，在经由传感器感测到预设用户交互的情况下，控制器控制通信器向显示装置传输请求图像内容的信号，以及在从显示装置接收到显示装置当前显示的第二图像内容情况下，控制器控制显示器同时显示第一图像内容和第二图像内容。

预设用户交互可以是触摸用户终端的触摸屏的上部区域然后向下执行拖拽的拖拽交互；以及控制器可根据拖拽交互的拖拽量确定第二图像内容的显示量，并控制显示器根据所确定的显示量与第一图像内容同时显示第二图像内容的一部分。

在经由传感器感测到用户触摸在向下移动的过程中转向左方和右方中的一个的拖拽交互时，控制器可控制显示器缩小第二图像内容并在与用户触摸转向的方向对应的区域上显示第二图像内容，以及缩小第一图像内容并在与用户触摸转向的方向的相反方向对应的区域上显示第一图像内容。

在根据拖拽交互同时显示所述第一图像内容和所述第二图像内容的情况下，当用户触摸向下拖拽预定距离或更多时，控制器可控制显示器在整个屏幕上显示第二图像内容并移除第一图像内容。

当经由传感器感测到触摸第一图像内容和第二图像内容中的一个然后向左方和右方中的一个执行拖拽的拖拽交互时，控制器可控制显示器将触摸的图像内容改变成另一图像内容并显示所改变的图像内容。

在第一图像内容和第二图像内容是广播内容的情况下，控制器可控制显示器根据拖拽交互的方向将所触摸的广播内容改变成具有与所触摸的广播内容对应的信道不同的信道的广播内容，并且显示所改变的广播内容。

在输入预设用户命令的情况下，控制器可控制显示器在第一图像内容和第二图像内容附近显示内容列表；以及在感测到触摸内容列表中所包括的多个图像内容之中的第三图像内容然后对第一图像内容和第二图像内容中的一个执行拖拽的拖拽交互的情况下，控制器可控制显示器将所拖拽的图像内容改变成第三图像内容并显示第三图像内容。

在经由传感器感测到触摸第一图像内容然后向上执行拖拽的拖拽交互的情况下，控制器可控制通信器向显示装置传输与第一图像内容有关的信息；以及在接收到与第一图像内容有关的信息的情况下，显示装置可在显示屏上显示第一图像内容。

在经由传感器感测到触摸第一图像内容与第二图像内容之间的边界然后向上执行拖拽的拖拽交互的情况下，控制器可控制通信器向显示装置传输与第一图像内容和第二图像内容有关的信息；在接收到与第一图像内容和第二图像内容有关的信息的情况下，显示装置可在显示屏上同时显示第一图像内容和第二图像内容。

在经由通信器从显示装置接收到第一图像内容的图像流的情况下，控制器可控制显示器处理接收的图像流以显示第一图像内容；以及在经由通信器从显示装置接收到复合有第一图像内容和第二图像内容的图像流的情况下，控制器可控制显示器处理复合的图像流以显示第一图像内容和第二图像内容。

显示装置可显示第二图像内容而用户终端显示第一图像内容和第二图像内容；显示装置和用户终端可利用第二图像内容的元数据中所包括的时间戳信息使第二图像内容彼此同步并显示该第二图像内容。

根据本公开又一方面，与显示装置交互工作的用户终端包括显示器、通信器、传感器以及控制器，其中，显示器显示多个图像内容，通信器执行与显示装置的通信，传感器感测用户交互，在经由传感器感测到预设用户交互的情况下控制器控制通信器向显示装置传输请求图像内容的信号；以及在经由通信器从显示装置接收到显示装置当前显示的另一图像内容的情况下，控制器控制显示器同时显示多个图像内容和另一图像内容。

根据本公开再一方面，与显示装置交互工作的用户终端包括显示器、通信器、传感器以及控制器，其中，显示器显示多个图像内容，通信器执行与显示装置的通信，传感器感测用户交互，在从显示装置接收到多个图像内容的情况下，控制器控制显示器显示所接收的多个图像内容；以及在经由传感器感测到针对多个图像内容中的一个的预设用户交互的情况下，控制器控制通信器向显示装置传输与所感测的预设用户交互相关的图像内容有关的信息。

根据本公开的再一方面，用于控制多媒体系统的方法包括：由用户终端显示第一图像内容；由显示装置显示第二图像内容；在感测到预设用户交互的情况下用户终端向显示装置传输请求图像内容的信号；响应于该请求信号，显示装置传输第二图像内容；以及在从显示装置接收到第二图像内容的情况下，用户终端同时显示第一图像内容和所接收的第二图像内容。

根据如上所述的本公开各示例性实施方式，用户可利用用户终端更直观地控制显示装置，并且可利用用户终端和显示装置同时观看多种图像内容。

附图说明

图1是示出了根据本公开示例性实施方式的多媒体系统的视图；

图2是示意性地示出了根据本公开示例性实施方式的用户终端的配置的框图；

图3是详细地示出了根据本公开示例性实施方式的用户终端的配置的框图；

图4A至图4F是用于描述根据本公开示例性实施方式用户终端显示由显示装置当前显示的图像内容的方法的视图；

图5A至图5C是用于描述根据本公开示例性实施方式用户终端将多个图像内容中的一个改变成另一个图像内容的方法的视图；

图6A至图6D是用于描述根据本公开示例性实施方式使用内容列表将多个图像内容中的一个改变成另一个图像内容的方法的视图；

图7A至图7C是用于描述根据本公开示例性实施方式显示装置使图像内容与由用户终端显示的多个图像内容中的一个同步并且该播放图像内容的方法的视图；

图8A至图8C是用于描述根据本公开示例性实施方式显示装置使图像内容与由用户终端显示的多个图像内容中的一个同步并且播放该图像内容的方法的视图；

图9是示出了根据本公开示例性实施方式的显示装置的框图；

图10是用于描述根据本公开示例性实施方式控制用户终端的方法的流程图；

图11是用于描述根据本公开示例性实施方式控制多媒体系统的方法的顺序图；以及

图12A和图12B是用于描述根据本公开另一示例性实施方式用户终端同时显示三个或更多个图像内容的示例的视图。

具体实施方式

本公开可进行多种修改并且可具有多个示例性实施方式。因此，本公开的具体示例性实施方式将在附图中示出并且将在本说明书中详细地描述。然而，应理解的是，本公开不限于具体示例性实施方式，并且在不背离本公开的范围和精神的情况下，本公开包括所有的修改、等同和替换。当认为与本公开相关的现有技术的详细描述会使本公开的主旨不清楚时，将省略其详细描述。

措辞“第一”、“第二”等可用于描述多种部件，但是这些部件不应受这些措辞限制。这些措辞用于将一个部件与其它部件区分开。

本申请中使用的措辞仅用于描述示例性实施方式，而不旨在限制本公开的范围。除非上下文另外明确地指出，否则单数形式旨在包括复数形式。还将理解的是，本说明书中使用的措辞“包括”或“配置有”旨在说明本说明书中提及的特征、数字、步骤、操作、部件、部分或其组合的存在，但是不排除一个或多个其它特征、数字、步骤、操作、部件、部分或其组合的存在或添加。

在示例性实施方式中，“模块”或“单元”可执行至少一个功能或操作，并且可以用硬件或软件实现或者用硬件和软件的组合实现。另外，除必须在专门的硬件中实现的“模块”或“单元”外的多个“模块”或多个“单元”可整合到至少一个模块中，以及可在至少一个处理器(未示出)中实施。

在下文中，将参照附图详细描述本公开的多种示例性实施方式。图1是示出了根据本公开示例性实施方式的多媒体系统10的视图。如图1所示，多媒体系统10包括用户终端100和显示装置200。这里，用户终端100可以是包括用于控制显示装置200的触摸屏的独立遥控器。但这仅是一个示例，并且用户终端100可以是诸如智能电话、平板个人电脑(PC)等多种便携式用户终端。另外，显示装置200可以是智能电视(TV)。但这仅是一个示例，并且显示装置200可以是诸如数字TV、台式PC、膝上型PC等多种显示装置。

用户终端100和显示装置200可通过多种通信方案互相连接。例如，用户终端100和显示装置200可使用诸如蓝牙、Wi-Fi等无线通信模块执行两者之间的通信。

另外，用户终端100和显示装置200可分别显示第一图像内容和第二图像内容。这里，由用户终端100显示的第一图像内容可从显示装置200接收。但这仅是一个示例，并且第一图像内容可从独立的外部设备接收或者可以是预存储的图像内容。另外，第一图像内容和第二图像内容可以是广播内容。但这仅是一个示例，第一图像内容和第二图像内容可以是从互联网接收的视讯点播系统(VOD)图像内容或预存储的图像内容。

在用户终端100显示第一图像内容的情况下当感测到由用户预设的用户交互时，用户终端100可将请求内容的信号传输至外部的显示装置200。这里，预设用户交互可以是触摸用户终端100的上部区域然后向下执行拖拽的拖拽交互。

在用户终端100从显示装置200接收到由显示装置200当前显示的第二图像内容的情况下，用户终端100可同时显示第一图像内容和第二图像内容。

具体地，用户终端100可根据拖拽交互的拖拽量确定第二图像内容的显示量，并且可根据所确定的显示量与第一图像内容同时显示第二图像内容的至少一部分。另外，在感测到向下执行拖拽然后将用户触摸转向左方和右方中的一个的拖拽交互时，用户终端100可缩小第二图像内容并且在与用户触摸转向的方向对应的区域上显示第二图像内容，以及缩小第一图像内容并且在与用户触摸转向的方向相反的方向所对应的区域上显示第二图像内容。然而，在以预定距离或更大距离向下执行拖拽的情况下，用户终端100可将第一图像内容从显示屏移除，并且在整个屏幕上显示第二图像内容。

另外，用户终端100可在同时显示第一图像内容和第二图像内容时使用用户交互将第一图像内容和第二图像内容中的至少一个改变成另一图像内容。如本公开示例性实施方式，在感测到触摸第一图像内容和第二图像内容中的一个然后向左方和右方执行拖拽的拖拽交互时，用户终端100可将所触摸的图像内容改变成另一图像内容。另外，在用户终端100同时显示第一图像内容和第二图像内容的情况下当预设用户命令输入时，用户终端100可在显示屏的一个区域上显示内容列表并且使用内容列表根据用户交互来改变图像内容。

另外，在用户终端100同时显示第一图像内容和第二图像内容的情况下当感测到预设用户交互时，用户终端100可将与图像内容(感测到的是针对该图像内容的用户交互)有关的信息传输至显示装置200。在接收到与图像内容有关的信息的情况下，显示装置200可显示与所接收的信息对应的图像内容。

通过如上所述的多媒体系统10，用户可使用用户终端100更直观地控制显示装置200，并且可使用用户终端100和显示装置200同时观看多个图像内容。

同时，虽然在如上所述的示例性实施方式中描述了用户终端100同时显示的两个图像内容的情况，但这仅是一个示例。也就是说，用户终端100可同时显示三个或更多个图像内容。

接下来，将参照图2至图8C更详细地描述用户终端100。

图2是示意性地示出了根据本公开示例性实施方式的用户终端100的配置的框图。如图2所示，用户终端100包括显示器110、通信器120、传感器130和控制器140。

显示器110通过控制器140的控制显示多个图像内容。具体地，显示器110可显示从显示装置200接收到的图像内容。这里，在从显示装置200接收第一图像内容的图像流的情况下，显示器110可显示第一图像内容，并且在从显示装置200接收到第一图像内容和第二图像内容复合的图像流的情况下，显示器110可同时显示第一图像内容和第二图像内容。

同时，显示器110可以与传感器130的触摸传感器结合，从而成为触摸屏。

通信器120执行与多种外部设备的通信。具体地，通信器120可执行与显示装置200的通信。在这种情况下，通信器120可实时地从显示装置200接收图像内容，并且可将请求图像内容的内容请求信号传输至显示装置200。

传感器130感测用于控制用户终端100的用户交互。具体地，传感器120可以是设置在触摸屏中的触摸传感器，并且可感测用户的触摸交互(具体地，拖拽交互)。

控制器140控制用户终端100的整体操作。具体地，在显示器110显示第一图像内容的情况下当通过传感器130感测到预设用户交互时，控制器140可控制通信器120来将请求图像内容的信号传输至显示装置200，并且在从显示装置200接收到由显示装置200当前显示的第二图像内容的情况下，控制器140可控制显示器110来同时显示第一图像内容和所接收的第二图像内容。

具体地，控制器140可控制显示器110来显示从显示装置200接收到的第一图像内容。在这种情况下，显示装置200可显示与第一图像内容不同的第二图像内容。

在显示第一图像内容的情况下当感测到预设用户交互时，控制器140可控制通信器120将请求由显示装置200当前显示的第二图像内容的信号传输至显示装置200。这里，预设用户交互可以是触摸用户终端100的触摸屏的上部区域并随后向下执行拖拽的拖拽交互。

另外，在响应于请求信号而从显示装置200接收到第二图像内容的情况下，控制器140可控制显示器110来同时显示所接收到的第二图像内容和第一图像内容。具体地，在显示装置200接收到请求信号的情况下，显示装置200可将第一图像内容和第二图像内容复合以产生图像流，并且将所产生的图像流传输至用户终端100。用户终端100可将所接收的图像流去复合以将所接收的图像流分离成第一图像内容和第二图像内容，并且处理分离的第一图像内容和第二图像内容以在一个屏幕上同时显示第一图像内容和第二图像内容。

具体地，在感测到触摸触摸屏的上部区域并随后向下执行拖拽的拖拽交互的情况下，控制器140可根据拖拽交互的拖拽量来确定第二图像内容的显示量，并且可根据所确定的显示量来控制显示器110将第二图像内容的一部分与第一图像内容同时显示。也就是说，控制器140可向下的拖拽量增大时增加第二图像内容的显示量。

此外，当经由传感器130感测到用户触摸在向下移动的过程中转向左方和右方中的一个的拖拽交互时，控制器140可控制显示器110缩小第二图像内容并在与用户触摸转向的方向对应的区域上显示第二图像内容，以及缩小第一图像内容并在与用户触摸转向的方向相反的方向所对应的区域上显示第一图像内容。例如，当感测到用户触摸在向下移动的过程中转向左方的拖拽交互时，控制器140可控制显示器110来缩小第二图像内容并在左侧区域上显示第二图像内容以及缩小第一图像内容并在右侧区域上显示第一图像内容。

然而，在根据拖拽交互同时显示第一图像内容和第二图像内容的情况下当用户触摸被向下拖拽预定距离或更多时，控制器140可控制显示器110在整个屏幕上显示第二图像内容并且移除第一图像内容。

具体地，在用户终端100显示第二图像内容的情况下，控制器140可控制显示器110利用图像内容的元数据中所包括的时间戳信息来将该第二图像内容与由显示装置200显示的第二图像内容同步并显示该第二图像内容。

因此，用户终端100可通过上述过程直观地确认外部显示装置200当前显示的图像内容。

此外，在第一图像内容和第二图像内容被同时显示的情况下，控制器140可根据预设用户交互将第一图像内容和第二图像内容中的至少一个改变成另一图像内容。

具体地，在第一图像内容和第二图像内容被同时显示的情况下当经由传感器130感测到触摸第一图像内容和第二图像内容中的一个然后在向左方和右方中的一个上执行拖拽的拖拽交互，控制器140可控制显示器110将所触摸的图像内容改变成另一图像内容并显示所改变的图像内容。具体地，在第一图像内容和第二图像内容是广播内容的情况下，控制器140可控制显示器110根据拖拽交互的方向将触摸的广播内容改变成不同于与所触摸的广播内容对应的信道的另一信道的广播内容并显示所改变的广播内容。例如，在感测到向左方的拖拽交互的情况下，控制器140可控制显示器110改变广播内容，以减小信道号并显示所改变的广播内容。

此外，在显示第一图像内容和第二图像内容的情况下当输入预设用户命令(例如，通过该命令选择遥控器的预设按钮)时，控制器140可控制显示器110在第一图像内容和第二图像内容附近显示内容列表。此外，控制器140可通过拖放操作将第一图像内容和第二图像内容中的至少一个改变成另一图像内容。

此外，控制器140可控制通信器120向显示装置200传输与图像内容(针对该图像内容而感测预设用户交互)有关的信息，使得显示装置200根据预设用户交互显示当前由用户终端100显示的多个图像内容中的一个。

具体地，在经由传感器130感测到触摸第一图像内容然后向上执行拖拽的拖拽交互的情况下，控制器140可控制通信器120向显示装置200传输与第一图像内容有关的信息。在接收到与第一图像内容有关的信息的情况下，显示装置200可在显示屏上显示第一图像内容。

此外，在经由传感器130感测到触摸第一图像内容与第二图像内容之间的边界然而向上执行拖拽的拖拽交互的情况下，控制器140可控制通信器120向显示装置200传输与第一图像内容和第二图像内容有关的信息。在与第一图像内容和第二图像内容有关的信息被接收时，控制器140可控制显示器在显示屏上同时显示第一图像内容和第二图像内容。

通过上述过程，用户可更直观地执行控制，使得显示装置200可显示在用户终端100上观看的图像。

图3是详细示出根据本公开示例性实施方式的用户终端100的配置的框图。如图3所示，用户终端100包括显示器110、通信器120、音频输出部150、存储器160、图像处理器170、音频处理器180、传感器130以及控制器140。

同时，图3通过示例的方式大体示出在用户终端100是具有多种功能(诸如内容提供功能、显示功能、通信功能等)的装置的情况下的各部件。因此，在另一示例性实施方式中，可省去或改变图3所示的一些部件，还可添加其他部件。

显示器110显示通过在图像处理器170中处理经由通信器120接收的图像数据而渲染的视频帧以及在图形处理器143中渲染的各页面中的至少一个。具体地，显示器110可显示从外部显示装置200接收的至少一个广播内容。具体地，在接收到包括第一广播内容的图像流的情况下，显示器110可显示由图像处理器170处理的第一广播内容。可替代地，在接收到第一广播内容和第二广播内容复合的图像流的情况下，显示器110可同时显示由图像处理器170处理的第一广播内容和第二广播内容。

通信器120是以多种通信方案与各类外部设备执行通信的部件。通信器120可包括多种通信芯片，诸如WiFi芯片、蓝牙芯片、近场通信(NFC)芯片、无线通信芯片等。这里，WiFi芯片、蓝牙芯片和NFC芯片分别以WiFi方案、蓝牙方案、NFC方案执行通信。在这些芯片之中，NFC芯片表示使用多种RFID频带(诸如135kHz、13.56MHz、433MHz、860～960MHz、2.45GHz等)之中的13.56MHz频带、以NFC方案操作的芯片。就使用WiFi芯片或蓝牙芯片而言，首先传输和接收诸如SSID、对话密钥等多种连接信息并通过使用该连接信息来连接通信。然后，可传输和接收多种信息。无线通信芯片表示根据诸如IEEE、Zigbee、第三代移动通信技术(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)等多种通信协议执行通信的芯片。

具体地，通信器120可从显示装置200接收包括广播内容的图像流。此外，通信器120可根据用户交互向显示装置200传输与用户试图通过显示装置200观看的图像内容有关的信息。

另外，通信器120可从外部服务器接收诸如VOD内容的多种图像内容。

音频输出部150是输出多种警报或音频消息以及与音频处理器180执行多种处理(诸如解码、放大、噪声过滤等)有关的多种音频数据的部件。具体地，在显示装置200显示多个图像内容的情况下，音频输出部150可输出与多个图像内容之中被用户选择的一个图像内容对应的音频。

存储器160将用于驱动用户终端100的多种模块存储在其中。例如，存储器160中可存储包括基础模块、感测模块、通信模块、呈现模块、网页浏览器模块和服务模块的软件。这里，基础模块是处理从用户终端100中所包括的每个硬件传送出的信号并向上层模块传送经处理的信号的基础模块。感测模块，作为从多种传感器采集信息并且分析和管理所采集的信息的模块，可包括面部识别模块、音频识别模块、动作识别模块、NFC识别模块等。呈现模块，作为用于配置显示屏的模块，可包括用于播放和输出多媒体内容的多媒体模块以及执行用户接口(UI)和图形处理的UI渲染模块。通信模块是用于与外界执行通信的模块。网页浏览器模块是执行网页浏览以访问网络服务器的模块。服务模块是包括用于提供多种服务的多种应用的模块。

如上所述，存储器160可包括多种程序模块。然而，根据用户终端100的类型和性能，可省去、改变或添加各程序模块中的一些。例如，在用户终端100是智能电话的情况下，基础模块中还可包括基于全球定位系统(GPS)确定位置的位置确定模块，感测模块中还可包括感测用户操作的感测模块。

此外，存储器160可包括缓存器，该缓存器将图像内容暂时存储在其中以使得用户终端100和显示装置200可将图像内容彼此同步并播放该图像内容。缓存器中所存储的图像内容可根据图像内容的时间戳信息输出至显示器110。

图像处理器170是对包括经由通信器120接收的图像内容的图像流执行处理的部件。在图像处理器170中，可对图像流执行诸如解码、去复合、缩放、噪声过滤、帧速转换、分辨率转换等多种图像处理。

音频处理器180是对图像内容的音频数据执行处理的部件。在音频处理器180中，可对音频数据执行诸如解码、放大、噪声过滤等多种处理。在音频处理器180中处理的音频数据可输出至音频输出部150。

传感器130可感测用于控制用户终端100的部件的多种用户交互。具体地，传感器130可以是用于感测用户的触摸交互的触摸传感器。这里，触摸传感器可设置在显示器110的后表面上从而作为触摸屏。

控制器140利用存储器160中所存储的多种程序控制用户终端100的总体操作。

如图3所示，控制器140包括随机存取存储器(RAM)141、只读存储器(ROM)142、图形处理器143、主中央处理单元(CPU)144、第一接口145-1至第n接口145-n以及总线146。这里，RAM 141、ROM 142、图形处理器143、主CPU 144、第一接口145-1至第n接口145-n等可经由总线146彼此连接。

ROM 142中存储有用于启动系统的指令集等。当打开命令输入至电源时，主CPU 144可根据ROM 142中所存储的指令将存储器160中所存储的操作系统(O/S)复制到RAM 141，并且运行O/S以启动系统。当启动完成时，主CPU 144将存储器160中所存储的多种应用程序复制到RAM 141，并且运行复制到RAM 141的应用程序以执行多种操作。

图形处理器143利用计算器(未示出)和渲染器(未示出)渲染包括诸如指针、图标、图像、文本等多种对象的页面。计算器利用从输入接收的控制命令、根据页面的布局计算各个对象的属性值，诸如用于显示各个对象的坐标值、形状、大小、颜色等。渲染器基于计算器中所计算的属性值渲染包括对象的多种布局的页面。在显示器110的显示区域上显示渲染器中所渲染的页面。

主CPU 144访问存储器160以利用存储器160中所存储的O/S执行启动。此外，主CPU 144利用存储器160中所存储的多种程序、内容、数据等执行多种操作。

第一接口145-1至第n接口145-n连接至上述各部件。接口中的一个可以是经由网络连接至外部设备的网络接口。

具体地，在经由传感器130感测到预设用户交互的情况下，控制器140可控制通信器120向显示装置200传输请求由显示装置200当前显示的图像内容的内容请求信号；以及在由显示装置200当前显示的第二图像内容从显示装置200被接收的情况下，控制器140可控制显示器110同时显示第一图像内容和所接收的第二图像内容。

接着，将参照图4A至图8C更详细地描述控制器140的功能。为了参考，在该示例性实施方式中将描述图像内容是广播内容的情况。

首先，如图4A所示，用户终端100显示第一广播内容410，显示装置200显示第二广播内容420。这里，用户终端100接收的第一广播内容410可以是从显示装置200接收的广播内容。

在用户终端100显示第一广播内容410的情况下当感测到用户触摸触摸屏的上部区域然后向下执行拖拽的拖拽交互时，控制器140可控制通信器120向显示装置200传输请求第二广播内容420的内容请求信号。

在第一广播内容410和第二广播内容420复合的图像流从显示装置200被接收的情况下，控制器140可控制图像处理器170对复合的图像流进行去复合并随后执行图像处理。

此外，控制器140可根据拖拽交互控制显示器110，使其如图4B所示在显示器110的上部区域显示经处理的第二广播内容420。

这里，控制器140可根据拖拽交互向下的拖拽量来确定第二广播内容420的显示量。此外，控制器140可控制显示器110根据所确定的显示量来显示第二广播内容420。具体地，如图4B和图4C所示，控制器140可控制显示器110，使得第二广播内容的显示量随着拖拽交互向下逐渐进行而增加。

当感测到用户触摸在向下移动的过程中转向左方和右方中的一个的拖拽交互时，控制器140可控制显示器110缩小第二广播内容420并在与用户触摸转向的方向所对应的区域上显示第二广播内容420，以及缩小第一广播内容410并在与用户触摸转向的方向相反的方向所对应的区域上显示第一广播内容410。例如，如图4D所示，当感测到用户触摸在向下移动的过程中转向左方和右方中的一个的拖拽交互时，控制器140可控制显示器110将第二广播内容420逐渐移动至左侧区域以与用户触摸对应。在该情况下，控制器140可缩小第二广播内容420的尺寸并将第二广播内容420向左侧区域移动，以及还可缩小第一广播内容410的尺寸使得第一广播内容410逐渐设置在右侧区域上。此外，在用户触摸达到显示器110的左侧区域的任一点的情况下，控制器140可以以双模式工作，如图4E所示，在该双模式中，在左侧区域上显示第二广播内容420而在右侧区域上显示第一广播内容410。

然而，在第二广播内容420根据拖拽交互向下移动的情况下当用户触摸向下拖拽预定距离或更多时，控制器140可控制显示器110在显示器110上仅显示第二广播内容。具体地，如图4F所示，在同时显示第一广播内容410和第二广播内容420的情况下，当用户触摸从上部区域向下拖拽至与竖直长度的80％或更多对应的点时，控制器140可控制显示器110在整个屏幕上显示第二广播内容420并且移除第一广播内容410。

同时，用户终端100显示的第二广播内容420和显示装置200显示的第二广播内容420可彼此同步和播放。具体地，控制器140将由图像流处理的第二广播内容420存储在缓存器中，并利用图像流中所包括的时间戳信息输出缓存器中所存储的第二广播内容，从而能够将该第二广播内容420与显示装置200的第二广播内容420同步并输出该第二广播内容420。

用户可通过参考图4A至图4F所描述的过程经由用户终端100观看第二广播内容420。

此外，控制器140可根据用户交互控制显示器110将同时显示的第一广播内容410和第二广播内容420中的一个改变成另一内容并且显示所改变的内容。

作为本公开的示例性实施方式，在如图5A所示同时显示第一广播内容510和第二广播内容520的情况下，当如图5B所示感测到触摸第二广播内容520然后向左方执行拖拽的拖拽交互时，控制器140可控制通信器120向显示装置200传输请求第三广播内容530的信号，其中，第三广播内容530的信道号在第二广播内容520的信道号之前。如图5C所示，在第一广播内容510和第三广播内容530复合的图像流从显示装置200被接收的情况下，控制器140可控制图像处理器170处理所接收的图像流，并且可控制显示器110显示经过图像处理的第三广播内容530和第一广播内容510。

作为本公开的另一示例性实施方式，在如图6A所示同时显示第一广播内容610和第二广播内容620的情况下，当感测到预设用户命令(例如，触摸显示器110的下部区域的用户命令)时，如图6B所示，控制器140可控制显示器110在显示器110的下部区域显示广播内容列表630。此外，如图6C所示，在感测到触摸广播内容列表中所包括的多个项目中的第一项目631然后执行向显示第二广播内容620的区域拖拽的拖拽交互的情况下，控制器140可控制通信器120向显示装置200传输请求与第一项目631对应的第四广播内容640的信号。如图6D所示，在第一广播内容610和第四广播内容640复合的图像流从显示装置200被接收的情况下，控制器140可控制图像处理器170处理所接收的图像流，并且可控制显示器110显示经过图像处理的第四广播内容640和第一广播内容610。

用户可通过如图5A至图6D所示的方法改变他/她试图在用户终端100中观看的图像内容。

此外，在用户终端100显示多个广播内容的情况下当感测到对于多个广播内容中的一个的预设用户交互时，控制器140可控制通信器120向显示装置200传输与广播内容(针对该广播内容而感测预设用户交互)有关的信息。

作为本公开的示例性实施方式，如图7A所示，在显示装置200显示第一广播内容710而用户终端100显示第二广播内容720和第三广播内容730的情况下，当经由传感器130感测到触摸第三广播内容730然后向上执行拖拽的拖拽交互时，控制器140可控制通信器120向显示装置200传输与第三广播内容730有关的信息。这里，与第三广播内容730有关的信息可包括第三广播内容730的ID信息、用于播放第三广播内容730的控制命令以及与拖拽交互的拖拽量有关的信息。此外，如图7B所示,显示装置200可根据所确定的拖拽量显示第三广播内容730的局部区域。此外，如图7B所示，用户终端100的控制器140还可控制显示器110根据所确定的拖拽量来显示第三广播内容730的另一局部区域。此外，在与第三广播内容730有关的信息中所包括的拖拽量是预设值或更多的情况下，如图7C所示，显示装置200可在整个屏幕上显示第三广播内容730。

作为本公开的另一示例性实施方式，如图8A所示，在显示装置200显示第一广播内容810而用户终端100显示第二广播内容820和第三广播内容830的情况下，当经由传感器130感测到触摸第二广播内容820与第三广播内容830之间的边界然后向上执行拖拽的拖拽交互时，控制器140可控制通信器120向显示装置200传输与第二广播内容820和第三广播内容830有关的信息。这里，与第二广播内容820和第三广播内容830有关的信息可包括第二广播内容820和第三广播内容830的ID信息、用于播放第二广播内容820和第三广播内容830的控制命令以及与拖拽交互的拖拽量有关的信息。此外，如图8B所示，显示装置200可根据所确定的拖拽量来显示第二广播内容820和第三广播内容830的局部区域。此外，如图8B所示，用户终端100的控制器140还可控制显示器110根据所确定的拖拽量来显示第二广播内容820和第三广播内容820的另一局部区域。此外，在与第二广播内容820和第三广播内容830有关的信息中所包括的拖拽量是预设值或更多的情况下，如图8C所示，显示装置200可以以双模式工作，在该双模式中显示装置200在整个屏幕上显示第二广播内容820和第三广播内容830。

用户可通过显示装置200按照如上参照图7A至图8C所描述的过程更直观地观看他/她经由用户终端100观看的图像内容。

同时，虽然图4A至图8C已经描述了图像内容是从显示装置200接收的广播内容的情况，但是这仅是示例，换言之，图像内容可以是从外部服务器接收的VOD内容。在该情况下，由显示装置200和用户终端100播放的图像内容可利用外部服务器中所存储的时间戳信息而彼此同步和播放。

接着，将参照图9更详细地描述显示装置200。如图9所示，显示装置200包括图像接收器210、图像处理器220、显示器230、通信器240、存储器250、输入部260以及控制器270。

图像接收器210从外界接收图像流。具体地，图像接收器210可从外部广播站接收包括广播内容的图像流，并且可从外部服务器接收包括VOD图像内容的图像流。

具体地，图像接收器210可包括多个调谐器以显示多个广播内容或向外部用户终端100传输多个广播内容。这里，图像接收器210可包括两个调谐器。然而，这仅是示例，图像接收器210还可包括三个或更多调谐器。

图像处理器220可处理通过图像接收器210接收的图像流。具体地，图像处理器220可将图像流处理成使得在以单模式工作的情况下仅显示一个图像内容，以及可将图像流处理成使得在以双模式工作的情况下显示两个图像内容。具体地，在与图像内容有关的信息从用户终端100接收的情况下，图像处理器220可根据拖拽交互的拖拽量来处理图像内容。

显示器230根据控制器270的控制显示至少一个图像内容。具体地，显示器230可在以单模式工作的情况下显示一个图像内容，以及可在以双模式工作的情况下显示多个图像内容。

通信器240执行与多种外部设备的通信。具体地，通信器240可执行与外部用户终端100的通信。具体地，通信器240可向用户终端100传输图像内容，并且从用户终端100接收与图像内容有关的、包括控制命令的信息。

存储器250将用于驱动显示装置200的多种数据和程序存储在其中。具体地，存储器250可包括缓存器，该缓存器将图像内容暂时存储在其中以使该图像内容与用户终端100的图像内容同步和显示。缓存器可利用图像流中所包括的时间戳信息向图像处理器220或显示器230输出图像内容。

输入部260接收用于控制显示装置200的多种用户命令输入。这里，输入部260可以是遥控器。然而，这仅是示例，输入部260可以是多种输入装置，诸如定点装置、动作输入装置、音频输入装置、鼠标、键盘等。

控制器270可控制显示装置200的总体操作。具体地，控制器270可控制通信器240向用户终端100传输第一图像内容。这里，控制器270可控制显示器230显示第二图像内容。

此外，在通过通信器240从用户终端100接收到对于第二图像内容的内容请求信号的情况下，控制器270可控制图像处理器220复合第一图像内容和第二图像内容以生成图像流。此外，控制器270可控制通信器240向用户终端100传输经复合的图像流。

此外，在第一图像内容被显示的情况下当通过通信器240从用户终端100接收到与第二图像内容有关的、包括内容切换命令的信息时，控制器270可控制显示器230从显示屏移除第一图像内容并显示第二图像内容。这里，在从用户终端100接收到与第二图像内容和第三图像内容有关的、包括内容切换命令的信息的情况下，控制器270可控制显示器230以从显示屏移除第一图像内容以及以双模式工作来同时显示第二图像内容和第三图像内容。

图10是用于描述根据本公开示例性实施方式控制用户终端100的方法的流程图。

首先，用户终端100显示第一图像内容(S1010)。这里，第一图像内容可以是从显示装置200接收的图像内容。然而，这仅是示例，第一图像内容可以是另一图像内容。

然后，用户终端100确定是否感测到预设用户交互(S1020)。这里，预设用户交互可以是触摸用户终端的触摸屏的上部区域然后向下执行拖拽的拖拽交互。

在感测到预设用户交互的情况下(S1020-Y)，用户终端100向显示装置200传输内容请求信号(S1030)。

然后，响应于内容请求信号，用户终端100从显示装置200接收显示装置200当前显示的第二图像内容(S1040)。

然后，用户终端100同时显示第一图像内容和第二图像内容(S1050)。这里，用户终端100可以以双模式工作，在该双模式中，用户终端100在左侧区域上显示第一图像内容并且在右侧区域上显示第二图像内容。

图11是用于描述根据本公开示例性实施方式的控制多媒体系统的方法的顺序图。

首先，用户终端100显示第一图像内容(S1110)，显示装置200显示第二图像内容(S1120)。

然后，用户终端100感测预设用户交互(S1130)。这里，预设用户交互可以是触摸触摸屏的上部区域然后向下执行拖拽的拖拽交互。

然后，用户终端100向显示装置200传输内容请求信号(S1140)。这里，内容请求信号可以是请求显示装置200当前显示的内容的信号。

然后，显示装置200向用户终端100传输第二图像内容(S1150)。

然后，用户终端100同时显示第一图像内容和第二图像内容(S1160)。这里，用户终端100播放的第二图像内容和显示装置200播放的第二图像内容可彼此同步和播放。

如上所述，用户可通过本公开示例性实施方式、经由用户终端100更容易确认显示装置200显示的图像内容。

同时，虽然上述示例性实施方式中已经描述了用户终端100或显示装置200可同时显示两个图像内容的情况，但是这仅是示例，用户终端100或显示装置200可同时显示三个或更多图像内容。例如，用户终端100或显示装置200可如图12A所示同时显示三个图像内容1210、1220和1230；或者可如图12B所示显示四个图像内容1240、1250、1260和1270。具体地，在用户终端100显示两个图像内容的情况下当感测到预设用户交互同时，用户终端100可向显示装置200传输请求显示装置200当前显示的图像内容的信号。在显示装置200当前显示的图像内容从显示装置200被接收的情况下，如图12A所示，用户终端100可显示包括已经显示的两个图像内容和所接收的图像内容的三个图像内容。

此外，根据上述各示例性实施方式用于控制显示装置的方法可通过程序来实施从而被提供至显示装置。具体地，可提供这样的非暂时性计算机可读介质，该非暂时性计算机可读介质中存储有包括用于控制显示装置的方法的程序。

非暂时性计算机可读介质不是诸如寄存器、高速缓冲存储器、存储器等将数据暂时存储在其中的介质，而表示将数据半永久地存储在其中并且可被装置读取的介质。具体地，上述各应用或程序可存储和设置在非暂时性计算机可读介质中，诸如光盘(CD)、数字通用光盘(DVD)、硬盘、蓝光光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等。

虽然上文已经示出和描述了本公开的示例性实施方式，但是本公开不局限于上述具体示例性实施方式，而是在不脱离本公开如所附权利要求中公开的范围和精神的情况下，可由本公开所属领域的技术人员进行各种修改。这些修改也应当理解成落入本公开的范围内。