图像显示设备及其操作方法与流程

本申请基于在2019年1月8日提交到韩国知识产权局的第10-2019-0002398号韩国专利申请并要求其优先权，该申请的公开内容通过引用全部合并于此。

本公开的各个实施例涉及一种图像显示设备及其操作方法，更具体地说，涉及一种能够方便地设置多频段远程(multi-brandremote,mbr)控制器的图像显示设备和一种操作图像显示设备的方法，其中，所述mbr控制器控制所述图像显示设备和连接到所述图像显示设备的外围设备。

背景技术：

图像显示设备具有再现用户可查看的图像的功能。例如，用户可通过图像显示设备来观看广播。图像显示设备显示由用户在从广播站发送的广播信号之中选择的广播。

此外，已经研发出除了广播功能之外还提供各种内容的智能电视(tv)。智能tv分析并自动提供针对用户的愿望定制的内容，而不是基于用户的选择来被动操作。

同时，当外围设备(诸如机顶盒、蓝光盘播放器、数字通用盘(dvd)播放器、流传输设备、家庭影院、音频设备等)连接到诸如tv的图像显示设备时，可由一个远程控制器通过使用tv远程控制器的多频段远程(mbr)控制功能，来控制各种连接的设备。tv远程控制器可产生用于以红外(ir)操纵的外围设备的ir信号，以根据是否基于所产生的ir信号来操纵外围设备来自动设置tv远程控制器的mbr控制功能。

然而，为了为在无线通信(比如，zigbeerf4ce、蓝牙等)下操作的外围设备设置mbr功能，需要用于tv远程控制器与外围设备之间的无线通信的配对处理，但因为tv远程控制器通常不包括显示器且大多数tv观看者位于远离外围设备处，所以用户会难以识别将被连接的外围设备。结果，难以等同地应用用于移动电话与无线设备(主要是支持蓝牙的头戴耳机(headphone)/耳机(earphone))之间的无线通信的配对技术。

技术实现要素：

本公开的实施例提供一种图像显示设备和一种操作所述图像显示设备的方法，其中，所述图像显示设备能够方便地设置控制无线连接的外围设备(例如，zigbeerf4ce或蓝牙)的多频段远程(mbr)控制器。

其他方面将在下面的说明书中部分地阐述，将从所述说明书中部分地清楚，或可通过实践本公开的实施例而获知。

根据本公开的实施例，提供一种图像显示设备，包括：存储器，其中存储有至少一个指令；无线通信器；处理器，其中，所述处理器被配置为通过执行存储在存储器中的至少一个指令，获取与连接到图像显示设备的外围设备相应的外围设备标识信息，并基于外围设备标识信息来控制无线通信器将与外围设备相应的搜索数据发送到图像显示设备的控制设备，并且，在从控制设备接收到响应数据时，基于外围设备标识信息确定与外围设备相应的配对数据以及控制码信息，并通过无线通信器将配对数据和控制码信息发送到控制设备，其中，响应数据包括针对从控制设备发送的搜索数据的响应并与从外围设备接收的响应信号相对应。

根据本公开的实施例的搜索数据可包括外围设备标识信息。

根据本公开的实施例的外围设备可通过高清多媒体接口(hdmi)端口连接到图像显示设备，并且，通过hdmi端口来接收与外围设备相应的外围设备标识信息。

根据本公开的实施例的与外围设备相应的外围设备标识信息可包括制造商、运营商名称或外围设备的型号名称之中的至少一个。

根据本公开的实施例的处理器可进一步被配置为，基于使用图像显示设备的区域的位置信息来确定与外围设备相应的外围设备标识信息。

根据本公开的实施例的存储器可包括数据库，其关联地存储与多个外围设备之中的每一个相应的外围设备标识信息、搜索数据、配对数据和控制码信息。

根据本公开的实施例的处理器可进一步被配置为，从外围服务器接收数据库，并将数据库存储在存储器中。

根据本公开的实施例的图像显示设备可进一步包括显示器，其中，处理器可进一步被配置为，控制显示器基于从外围设备接收的图像信号来显示图像，通过分析图像信号来提取标识码数据，并通过无线通信器将提取的标识码数据发送到控制设备或外围设备。

根据本公开的实施例的标识码数据可包括在控制设备与外围设备之间的配对期间在认证中使用的数据。

根据本公开的实施例的处理器可进一步被配置为，在从控制设备接收到第二响应数据时，通过分析图像信号来提取标识码，其中，第二响应数据可包括针对从控制设备发送的配对数据的响应，并且与从外围设备接收的响应信号相对应。

根据本公开的实施例的处理器可进一步被配置为通过基于用户输入分析图像信号来提取标识码数据。

根据本公开的实施例，提供一种操作图像显示设备的方法，所述方法包括：获取与连接到图像显示设备的外围设备相应的外围设备标识信息，基于外围设备标识信息将与外围设备相应的搜索数据发送到图像显示设备的控制设备，并且，在从控制设备接收到响应数据时，基于外围设备标识信息确定与外围设备相应的配对数据以及控制码信息，并将配对数据和控制码信息发送到控制设备，其中，响应数据包括针对从控制设备发送的搜索数据的响应并且与从外围设备接收的响应信号相对应。

附图说明

本公开的特定实施例的上述和其他方面、特点和优点将通过以下结合附图进行的描述而更加清楚，其中：

图1示出根据本公开的实施例的包括图像显示设备、控制设备和外围设备的系统；

图2是根据本公开的实施例的操作图像显示设备的方法的流程图；

图3是根据本公开的实施例的通过使用一个控制设备来设置用于控制图像显示设备和外围设备的多频段远程(mbr)控制器的方法的流程图；

图4是根据本公开的实施例的通过使用一个控制设备来设置用于控制图像显示设备和外围设备的mbr控制器的方法的流程图；

图5a、图5b、图5c、图5d和图5e是用于描述根据本公开的实施例的由图像显示设备执行的设置mbr控制器的方法的示图；

图5f是根据本公开的实施例的用于描述由图像显示设备执行的通过使用mbr控制器控制外围设备的方法的示图；

图6示出根据本公开的实施例的图像显示设备、控制设备和物联网(iot)设备；

图7a和图7b是根据本公开的实施例的用于描述由图像显示设备执行的设置mbr控制器的方法的示图；

图8a和图8b是根据本公开的实施例的用于描述通过使用控制设备来控制iot设备的方法的示图；

图9是根据本公开的实施例的图像显示设备的框图；

图10是根据本公开的另一实施例的图像显示设备的框图；以及

图11是根据本公开的实施例的控制设备的框图。

具体实施方式

将简要描述这里使用的术语，并将详细描述本公开。

尽管本公开中使用的术语是根据考虑到本公开中的功能在当下普遍使用的通用术语而选择的，但是所述术语会根据本领域普通技术人员的意图或新技术的引入而变化。此外，在特定情况下，可选择特定术语，在这种情况下，在本公开的相应描述部分来公开所述术语的含义。因此，本公开中使用的术语应不仅由术语的简单名称来限定，而且由术语的含义和整个说明书的内容来限定。

在本公开的整个说明书中，当假设特定部分包括特定部件时，术语“包括”意味着相应部分可还包括其他部件，除非描述了特定的相反含义。在本公开的实施例中使用的术语(诸如“单元”或“模块”)指示用于处理至少一个功能或操作的单元，并可通过硬件、软件、或通过硬件和软件的组合来实现。

以下，将参照附图来详细描述本公开的实施例，以使得本领域的普通技术人员能够容易地实施本公开的实施例。然而，本公开可按照各种形式来实施，不限于这里描述的本公开的实施例。为了清除地描述所述公开，与所述描述无关的部分已经被从附图中省略，并且，在整个说明书中，相同的参考标号指示相同的部分。

在整个说明书中，表述“a、b或c之中的至少一个”指示仅有a、仅有b、仅有c、a和b两者、b和c两者、a、b、c全部、或其各种变型。

图1示出根据本公开的实施例的图像显示设备、控制设备和外围设备的系统。

参照本公开的实施例，图像显示设备100可包括但不限于电视(tv)，并可按照包括显示器的各种形式来实现。例如，图像显示设备100可利用再现将在其上显示的内容的各种电子设备来实现，诸如，移动电话、平板个人计算机(pc)、数字相机、摄录机、膝上型计算机、桌面计算机、电子(e)书终端、数字广播终端、个人数字助理(pda)、便携式多媒体播放器(pmp)、导航器、mp3播放器、可穿戴设备等。此外，本公开的实施例可容易地实现在(但不限于)具有大尺寸显示器的显示设备诸如tv中。

图像显示设备100可以是固定类型或移动类型，并可以是能够接收数字广播的数字广播接收机。图像显示设备100可实现为平面显示设备、或设置有具有曲度的屏幕的曲面显示设备、或具有可调节曲度的柔性显示设备。图像显示设备100的输出分辨率可包括例如高清(hd)、全hd、超hd或高于超hd的分辨率。

根据本公开的实施例的外围设备300可以是回放设备，其中，图像显示设备100经由所述回放设备来再现多媒体内容。例如，外围设备300可包括机顶盒、蓝光盘播放器、dvd播放器、流传输设备、家庭影院、音频设备等。外围设备300可以是iot设备。外围设备300可包括温度传感器、湿度传感器、声音传感器、运动传感器、接近传感器、气体检测传感器、热检测传感器、冰箱、空调、闭路tv(cctv)、洗衣机、吸尘器、炉子、去湿器、电灯、火警等。

外围设备300可利用各种电子设备来实现，诸如智能电话、平板个人计算机(pc)、移动电话、视频电话、电子书阅读器、桌上型pc、膝上型pc、上网本计算机、个人数字助理(pda)、便携式多媒体播放器(pmp)、mp3播放器、可穿戴设备等。

根据本公开的实施例的图像显示设备100可通过使用有线或无线通信来发送和接收数据、信号等。例如，个人设备300可将图像信号发送到显示设备100，随后，图像显示设备100可基于接收的图像信号来显示图像。

控制设备200可利用用于控制图像显示设备100的各种形式的设备来实现，如远程控制器或移动电话。根据本公开的实施例的控制设备200可通过使用图像显示设备100的控制码或信令信息来控制图像显示设备100。例如，控制设备200可通过使用红外(ir)信令来控制图像显示设备100，并通过使用蓝牙(bt)信令来控制图像显示设备100。

根据本公开的实施例的控制设备200可被设置为多频段远程(mbr)控制器，并由此可控制外围设备300以及图像显示设备100。根据本公开的实施例的外围设备300可以是支持无线通信方案(诸如zigbeerf4ce(以下，rf4ce)或bt)的设备。为了通过使用控制设备200以rf4ce控制外围设备300，需要控制设备200与外围设备300之间的配对。因此，控制设备200可与外围设备300执行配对，并在成功配对时，通过使用与外围设备300相应的控制码信息以rf4ce控制外围设备300。

当存在多个支持rf4ce的外围设备时，控制设备200在执行配对之前会需要搜索或发现执行配对的外围设备。因此，根据本公开的实施例的控制设备200可将与外围设备相应的搜索或发现信号发送到外围设备，并从所述外围设备之中与搜索信号相应的外围设备接收响应信号。

在本公开的实施例中，术语“用户”可指示观看在图像显示设备上显示的图像的观看者或控制图像显示设备的功能或操作的人，并可包括家庭用户、管理者或安装工程师。

图2是根据本公开的实施例的操作图像显示设备的方法的流程图。

参照图2，在操作s210，根据本公开的实施例的图像显示设备100可获取关于外围设备的设备信息。

例如，图像显示设备100和外围设备300可通过高清多媒体接口(hdmi)线缆来连接，并且，图像显示设备100可通过使用hdmi-消费者电子控制(cec)或hdmi信息帧来接收关于外围设备300的设备信息。根据本公开的实施例，关于外围设备300的设备信息可包括但不限于外围设备300的以下项之中的至少一个：外围设备300的操作功能或特性、设备类型、制造商、运营商名称或型号名称。

图像显示设备100可基于关于使用图像显示设备100的位置的位置信息来获取关于外围设备300的设备信息。例如，图像显示设备100可获取关于在图像显示设备100所在的区域中使用的外围设备的信息。

图像显示设备100还可基于用户输入来获取关于外围设备的信息。例如，用户可直接将外围设备的设备类型、制造商、运营商名称和型号名称输入到图像显示设备100，并且，图像显示设备100可基于输入的信息来获取关于外围设备的信息。然而，图像显示设备100可使用各种方法来获取关于外围设备的信息，而不受限于上述示例。

在操作s220，根据本公开的实施例的图像显示设备100可基于获取的关于外围设备的设备信息来确定关于外围设备的搜索数据。

根据本公开的实施例的图像显示设备100可将以下各项之中的至少一个彼此映射，并将它们的映射作为关联数据存储在数据库(db)中：关于支持rf4ce的外围设备的设备信息、外围设备的标识信息(例如，外围设备的id)、用于搜索外围设备的搜索数据、用于与外围设备执行配对的配对数据、或用于控制外围设备的控制码信息。例如，图像显示设备100可从外部设备或外部服务器接收用于支持rf4ce的外围设备的db，并存储所述db。

图像显示设备100可通过使用db来确定与设备信息相应的搜索数据。例如，图像显示设备100可搜索映射到设备信息的外围设备的设备标识信息(例如，外围设备的id)，并获取映射到外围设备的设备标识信息的搜索数据(例如，发现外围设备的原始数据)。

图像显示设备100可从外围设备接收作为搜索数据的搜索的结果，并且，搜索数据可包括在设备标识信息中。

在操作s230，图像显示设备100可将确定的搜索数据发送到控制设备200。例如，图像显示设备100可经由bt或低能量蓝牙(ble)将搜索数据发送到控制设备200，但不限于此。

控制设备200可将从图像显示设备100接收的搜索数据转换为与外围设备相应的形式的信号或封包。控制设备200可基于接收的搜索数据，通过rf4ce模块(rf4ce发送器)来发送信号或封包。

当在控制设备200附近存在与搜索数据相应的外围设备时，外围设备300在接收到与从控制设备200发送的搜索数据相应的信号或封包时，可将响应信号(或封包)发送到控制设备200。

控制设备200可接收响应信号(或封包)并将与响应信号相应的响应数据发送到图像显示设备100。控制设备200可经由bt或ble将响应数据发送到图像显示设备100，但不限于此。

当图像显示设备100从控制设备200接收到响应数据时，图像显示设备100可将与外围设备相应的、配对数据和控制码信息发送到控制设备200。

图3是根据本公开的实施例的使用一个控制设备来设置用于控制图像显示设备和外围设备的多频段远程(mbr)控制器的方法的流程图。

参照图3，在操作s305，图像显示设备100和外围设备300可通过有线/无线网络而彼此连接。例如，图像显示设备100和外围设备300可通过hdmi线缆彼此连接。例如，图像显示设备100和外围设备300可通过hdmi线缆来彼此连接。图像显示设备100和外围设备300可使用无线通信(诸如蓝牙、ble、zigbee、无线保真(wifi)等)彼此连接。

在操作s310，外围设备300可将设备信息发送到图像显示设备100。

例如，当无线设备300使用hdmi线缆而连接到图像显示设备100时，图像显示设备100可通过使用hdmi-cec或hdmi信息帧来接收关于外围设备300的设备信息。所述设备信息可包括但不限于外围设备300的以下各项之中的至少一个：功能、操作特性、设备类型、制造商、运营商名称或型号名称。

在操作s320，图像显示设备100可基于关于外围设备的设备信息来确定关于外围设备的搜索数据。图3的操作s320与图2的操作s220相同，由此将省略对其的冗余描述。

图像显示设备100可在操作s325将搜索数据发送到控制设备200，并且，控制设备200可将从图像显示设备100接收的搜索数据转换为与外围设备300相应的形式的信号或封包。在操作s330，控制设备200可通过rf4ce模块(rf4ce发送器)来发送信号或封包。

当在控制设备200附近存在与搜索数据相应的外围设备时，外围设备300可在操作s340接收与从控制设备200发送的搜索数据相应的信号或封包，并将响应信号(或封包)发送到控制设备200。

控制设备200可接收响应信号(或封包)并将与响应信号对应的响应数据发送到图像显示设备100。控制设备200可经由bt或ble将响应数据发送到图像显示设备100，但不限于此。

当图像显示设备100从控制设备200接收到响应数据时，图像显示设备100可在操作s360确定与外围设备300相应的配对数据和控制码信息，并在操作s365将配对数据和控制码信息发送到控制设备200。

控制设备200可存储从图像显示设备100接收的配对数据和控制码信息，并将配对数据转换为与外围设备相应的形式的信号或封包。控制设备200可在操作s370通过rf4ce模块(rf4ce发送器)来发送信号或封包。

外围设备300可接收从控制设备200发送的与配对数据相应的信号或封包，并将响应信号(或封包)发送到控制设备200。

在配对中，对于不需要标识码的输入的设备，可通过由外围设备300执行从控制设备200接收与配对数据相应的信号或封包并发送响应信号的操作来完成配对。当配对完成时，在操作s380，控制设备200可通过注册与外围设备300相应的控制码信息来完成mbr控制器设置。控制设备200可通过使用注册的控制码信息来控制外围设备300。

图4是根据本公开的实施例的通过使用一个控制设备来设置用于控制图像显示设备和外围设备的多频段远程(mbr)控制器的方法的流程图。

参照图4，根据本公开的实施例的控制设备200可从图像显示设备100接收用于执行配对的信息，其包括外围设备的标识信息。

控制设备200可基于从图像显示设备100接收的用于执行配对的信息(包括外围设备的标识信息)来输出用于配对的搜索数据，其中，搜索数据可包括外围设备的标识信息。

当外围设备300从控制设备200接收到与外围设备300相应的用于配对的搜索数据时，外围设备300可在操作s410将第二响应信号发送到控制设备。

当外围设备300从控制设备200接收到与外围设备300相应的用于配对的搜索数据时，外围设备300还可在操作s420将包括配对所需的标识码(例如，个人识别号(pin)码)数据或标识码的图像信号发送到图像显示设备100。

根据本公开的实施例的标识码数据可以是在控制设备与外围设备之间的配对期间在认证中使用的数据。

根据本公开的实施例，当外围设备300是包括显示器的设备时，外围设备300可在外围设备300的显示器上显示标识码。

图像显示设备100可在操作s430显示从外围设备300接收的标识码，并显示用于输入标识码的输入窗口。

在操作s415，控制设备200可将与从外围设备300接收的第二响应信号相应的第二响应数据发送到图像显示设备100。

当根据本公开的实施例的图像显示设备100从控制设备200接收到第二响应数据时，图像显示设备100可开始对从外围设备300接收的图像信号的图像分析。在操作s440，图像显示设备100可通过分析图像信号来识别显示的标识码。例如，图像显示设备100可识别包括在图像信号中的文本、数字等。

图像显示设备100还可基于用户输入来开始图像分析以识别标识码。

在操作s450，图像显示设备100可将识别的标识码数据发送到控制设备200。在操作s452，控制设备200可将从图像显示设备100接收的标识码数据转换为与外围设备300相应的形式的信号或封包。在操作s455，控制设备200可通过rf4ce(rf4cr发送器)来发送信号或封包。

外围设备300可从控制设备200接收与标识码数据相应的信号或封包，并当作为标识码数据接收的标识码与在操作s420发送到图像显示设备100的标识码匹配时，在操作s460将配对成功响应信号发送到控制设备200。

当控制设备200从外围设备300接收到配对成功响应信号时，控制设备200可在操作s465将配对成功响应信号传送到图像显示设备100。

当控制设备200从外围设备300接收到配对成功响应信号时，控制设备200可在操作s470注册与外围设备300相应的控制码信息，由此在操作s480完成mbr控制器设置。控制设备200可通过使用注册的控制码信息来控制外围设备300。

同时，根据本公开的实施例的图像显示设备100可将识别的标识码数据发送到外围设备300。

当从图像显示设备100接收的标识码数据与在操作s420发送到图像显示设备100的标识码数据匹配时，外围设备300可将配对成功响应信号发送到图像显示设备100或控制设备200。图像显示设备100可将从外围设备300接收的配对成功响应信号发送到控制设备200，而不受限于此。

当控制设备200从图像显示设备100或外围设备300接收到配对成功响应信号时，控制设备200可在操作s470注册与外围设备300相应的控制码信息，并由此在操作s480完成mbr控制器设置。控制设备200可通过使用注册的控制码信息来控制外围设备300。

图5a到图5e是用于描述根据本公开的实施例的由图像显示设备执行的设置mbr控制器的方法而参考的示图。

根据本公开的实施例的图像显示设备100可提供mbr控制器设置功能。如图5a所示，图像显示设备100可显示设备选择菜单510，用于基于用户输入来选择针对其设置mbr控制器的外围设备的类型。设备选择菜单510可包括用于选择外围设备的类型的多个项目。例如，所述多个项目可包括机顶盒项目、蓝光播放器项目、家庭影院项目等。图5a的设备选择菜单510仅仅是示例，而不受限于此。

当外围设备的类型被选择时，可如图5b来显示用于选择连接到外围设备的端口的端口选择菜单520。端口选择菜单520可包括用于选择包括在图像显示设备100中的连接端口的多个项目。例如，图像显示设备100可包括多个hdmi端口，并且，所述多个项目可包括与hdmi端口相应的项目(例如，hdmi1、hdmi2和hdmi3)。图像显示设备100可激活并显示与多个连接端口之中连接到外部设备(例如，外围设备)的端口相应的项目。

根据本公开的实施例的外围设备300可通过hdmi线缆连接到图像显示设备100和多个hdmi端口之中的任何一个。用户可通过确定连接到外围设备的端口，来选择与连接到外围设备的端口相应的项目。图像显示设备100可获取指示外围设备是否连接到多个端口的信息和关于连接的外围设备的信息，并将获取的信息显示在端口选择菜单520上。因此，用户可容易地识别和选择连接到将针对其设置mbr控制器的外围设备的端口。

当根据本公开的实施例的图像显示设备100通过hdmi线缆被连接到外围设备时，图像显示设备100可通过使用hdmi-cec或hdmi信息帧来接收关于外围设备300的设备信息。设备信息可以包括但不限于外围设备300的以下项之中的至少一个：功能、操作、能力、设备类型、制造商、运营商名称或型号名称。

参照图5c，根据本公开的实施例的图像显示设备100可显示用于设置附加信息的附加信息设置菜单530。例如，当图像显示设备100未能通过使用hdmi-cec或hdmi信息帧来获取关于外围设备300的设备信息时，图像显示设备100可显示附加信息设置菜单530，但不限于此。

附加信息设置菜单530可包括用于设置关于使用图像显示设备100的区域的区域信息的项目531和用于设置外围设备的服务提供商的项目532。附加信息设置菜单530可以还包括但不限于用于设置关于外围设备的制造商和型号名称等的信息的项目。

根据本公开的实施例的图像显示设备100还可基于附加信息来获取关于外围设备的设备信息。例如，根据本公开的实施例的图像显示设备100可基于区域信息来获取关于在区域中最常使用的外围设备(例如，机顶盒)的设备信息，或可基于服务提供商来获取关于外围设备的设备信息。

当根据本公开的实施例的图像显示设备100获取关于外围设备的设备信息时，图像显示设备100可执行图2的操作s220到s250。根据本公开的实施例的控制设备200可将与配对数据相应的信号或封包发送到外围设备300，其中，所述配对数据与外围设备相应。外围设备300可将包括配对所需的标识码(例如，个人识别号(pin)码)数据或标识码的图像信号发送到图像显示设备100。

根据本公开的实施例的图像显示设备100可显示包括从外围设备300接收的标识码的图像。

例如，如图5d所示，图像显示设备100可显示标识码540和用于输入标识码540的输入窗口550。

在这种情况下，当控制设备200包括数字键盘(或数字按钮)时，用户可通过使用控制设备200的数字键盘来输入显示在图像显示设备100上的标识码。当控制设备200或图像显示设备100包括语音识别功能时，用户可通过使用语音信号来输入数字码。当控制设备200包括触摸板时，用户可通过使用触摸输入(例如，拖曳&触摸)来输入标识码。然而，用户可按照各种方式来输入标识码，但不限于此。

同时，当难以通过使用控制设备200来输入标识码时，用户可选择在图5d中示出的自动识别项目560。根据本公开的实施例的图像显示设备100可在自动识别功能被选择时开始图像分析。图像显示设备100可通过分析图像来识别显示的标识码。例如，图像显示设备100可识别包括在图像信号中的文本、数字等。

图像显示设备100可在输入窗口550上显示用户输入的标识码或自动识别的标识码。

图像显示设备100可将识别的标识码数据发送到控制设备200。控制设备200可基于与外围设备相应的控制码信息，将从图像显示设备100接收的标识码数据转换为被格式化以由外围设备进行识别的信号或封包。

外围设备300可从控制设备200接收与标识码数据相应的信号或封包，并当作为标识码数据接收的标识码与发送到图像显示设备100的标识码匹配时，将配对成功响应信号发送到控制设备200，并在接收到配对成功响应信号时，将配对成功响应信号传送到图像显示设备100。

因此，如图5e所示，图像显示设备100可显示mbr控制器设置完成消息570。

在mbr控制器设置完成时，控制设备200可注册与外围设备300相应的控制码信息，并通过使用注册的控制码信息来控制外围设备300。

当多个外围设备被连接到图像显示设备100时，可选择设备添加项目580以按照相同的方式执行用于其他外围设备的mbr控制器设置。

图5f是用于描述根据本公开的实施例的由图像显示设备执行的通过使用mbr控制器来控制外围设备的方法而参考的示图。

参照图5f，根据本公开的实施例的图像显示设备100可按照参照图5a到图5e描述的方式完成对于机顶盒(stb)的mbr控制器设置，其中，机顶盒可以是连接到hdmi端口1(hdmi1)的外围设备。

图像显示设备100还可基于用户输入来显示外部输入菜单屏幕590。外部输入菜单屏幕590可包括指示连接到图像显示设备100的外部设备(例如，stb)的项目或指示用于将图像显示设备100与外部设备连接的接口的项目。

图像显示设备100可在接收到用于选择hdmi端口1(hdmi1)的输入时，将关于连接到hdmi端口1(hdmi1)的stb的信息发送到控制设备200。

根据本公开的实施例的控制设备200可在从图像显示设备100接收到关于stb的信息时，将在节能模式下操作的无线通信器切换到活动状态。

控制设备200还可接收用于控制stb的用户输入。控制设备200可通过使用存储在存储器中的关于stb的控制码信息，将用户输入转换为与由stb识别的格式相应的格式的控制信号或封包。控制设备200可通过使用无线通信器将转换的控制信号或封包发送到stb。因此，用户可通过使用设置的mbr控制器来控制stb。

图6示出根据本公开的实施例的图像显示设备、控制设备和物联网(iot)设备。

参照图6，图像显示设备100可通过有线/无线通信连接到一个或多个iot设备601、602、603和604。

根据本公开的实施例的iot设备可以是应用于iot的通用设备(或对象)。例如，iot设备可包括温度传感器、湿度传感器、声音传感器、运动传感器、接近传感器、气体检测传感器、热检测传感器、冰箱、空调、cctv、洗衣机、吸尘器、炉子、去湿器、电灯、火警等。然而，iot设备不限于所述示例。

根据本公开的实施例的控制设备200可被设置为mbr控制器，并由此可不仅控制图像显示设备100，而且控制连接到图像显示设备100的一个或多个iot设备601、602、603和604。根据本公开的实施例的iot设备可以是支持zigbeerf4ce(以下，rf4ce)的设备。

根据本公开的实施例的控制设备200可与一个或多个iot设备601、602、603和604执行配对，并在完成配对时，通过使用关于所述一个或多个iot设备601、602、603和604的控制码信息，利用rf4ce方案来控制所述一个或多个iot设备601、602、603和604。

将参照图7a到图8b来更详细地描述所述配对。

图7a和图7b是用于描述根据本公开的实施例的由图像显示设备执行的设置用于iot设备的mbr控制器的方法所参考的示图。

根据本公开的实施例的图像显示设备100可提供用于iot设备的mbr控制器设置功能。如图7a中所示，图像显示设备100可显示用于基于用户输入来选择针对其设置mbr控制器的iot设备的类型的设备选择菜单710。设备选择菜单710可包括指示连接到图像显示设备100的iot设备的类型的多个项目。例如，多个项目可包括指示扫地机器人、空调、冰箱、洗衣机等的项目。图7a的设备选择菜单710仅仅是示例，而不受限于此。

所述多个项目可包括iot设备的型号名称、制造商名称等。图像显示设备100可基于用户输入来获取iot设备的型号名称或制造商名称，或可从连接的iot设备接收关于iot设备的设备信息。

参照图7b，根据本公开的实施例的图像显示设备100可显示用于设置附加信息的附加信息设置菜单750。例如，当图像显示设备100未能获取关于iot设备的设备信息时，图像显示设备100可显示附加信息设置菜单750，但不限于此。

附加信息设置菜单750还可包括但不限于用于设置关于iot设备的制造商和型号名称等的信息的项目。

根据本公开的实施例的图像显示设备100还可基于附加信息来获取关于iot设备的设备信息。

当根据本公开的实施例的图像显示设备100获取关于iot设备的设备信息时，图像显示设备100可基于iot设备信息确定与iot设备相应的搜索数据并将确定的搜索数据发送到控制设备200。控制设备200可基于从图像显示设备100接收的搜索数据来识别相应的iot设备，并与识别的iot设备执行配对。已经参照图3和图4详细地描述了与外围设备执行配对的方法，且该方法可等同地应用于iot设备。因此，将省略冗余的描述。

控制设备200可从图像显示设备100接收与iot设备相应的控制码信息。在完成控制设备200与iot设备之间的配对时，控制设备200可注册与iot设备相应的控制码信息，并通过使用注册的控制码信息来控制iot设备。

图8a和图8b是用于描述根据本公开的实施例的通过使用控制设备来控制iot设备的方法所参考的示图。

参照图8a，根据本公开的实施例的图像显示设备100可显示广播内容810。当用户期望在观看广播内容810的同时通过使用控制设备200来控制连接到图像显示设备100的空调时，控制设备200可基于用户输入将空调控制模式进入命令发送到图像显示设备100。

例如，控制设备200可在接收到包括在控制设备200中的特定按键(或按钮)(例如，与空调控制模式进入相应的按键或按钮)的输入时，将空调控制模式进入命令发送到图像显示设备100。当控制设备200包括语音识别功能时，控制设备200可基于用户的语音信号将空调控制模式进入命令发送到图像显示设备100。然而，本公开不限于所述示例。

当图像显示设备100在空调控制模式下操作时，如图8b中所示，图像显示设备100可显示指示图像显示设备100在空调控制模式下操作的消息820。图像显示设备100可显示远程控制器指南屏幕830，其中，包括在控制设备200中的按键被匹配到空调控制功能。

根据本公开的实施例的远程控制器指南屏幕830可包括指示包括在控制设备200中的按键的项目并显示指定到所述按键的空调控制功能。例如，远程控制器指南屏幕830可包括指示包括在控制设备200中的第一按键的第一项目831以及指示温度控制功能被指定到第一项目831的文本。远程控制器指南屏幕830可还包括指示第二按键的第一项目832以及指示风向设置功能被指定到第二项目832的文本。

图像显示设备100还可以在以空调控制模式操作的同时继续显示广播内容810，并按照不干扰广播内容810的显示的方式将远程控制器指南屏幕830显示在显示器的部分区域上。

图9是根据本公开的实施例的图像显示设备的框图。

参照图9，根据本公开的实施例的图像显示设备100可包括通信器110、处理器120、存储器130和显示器140。

根据本公开的实施例的通信器110可在处理器120的控制下将数据发送到外部设备(例如，控制设备、外围设备等)并从外部设备接收数据。

通信器110可根据图像显示设备100的能力和结构，通过使用以下项之中的至少一个发送和接收数据或信号：无线局域网(wlan)(例如，无线保真(wi-fi))、蓝牙、有线以太网、红外(ir)、低能量蓝牙(ble)、超声波、zigbee或hdmi。

根据本公开的实施例的通信器110可通过hdmi线缆将数据或信号发送到外围设备并从外围设备接收数据或信号。通信器110可通过使用诸如蓝牙、ble、zigbee、wi-fi等的无线通信将数据或信号发送到外围设备或控制设备，或从外围设备或控制设备接收数据或信号。

通信器110可通过使用hdmi-cec或hdmi信息帧来接收关于外围设备的设备信息。根据本公开的实施例，关于外围设备的设备信息可包括但不限于外围设备的以下项之中的至少一个：设备类型、制造商、运营商名称或型号名称。

根据本公开的实施例的处理器120可执行存储在存储器130中的至少一个程序。处理器120可包括单核、双核、三核、四核和多核。处理器120也可包括多个处理器。例如，处理器120可利用主处理器和在休眠模式下操作的副处理器来实现。

根据本公开的实施例的存储器130可存储用于驱动和控制图像显示设备100的各种数据、程序或应用。

存储在存储器130中的程序可包括至少一个计算机可读指令。存储在存储器130中的程序或应用可由处理器120来执行。

根据本公开的实施例的处理器120可通过执行从存储器130加载的计算机程序的至少一个指令，基于关于外围设备的设备信息来确定关于外围设备的搜索数据。当处理器120从控制设备200接收到响应数据时，图像显示设备100可确定与外围设备相应的、配对数据和控制码信息。

处理器120可控制包括从外围设备接收的标识码的图像被显示，并分析显示的图像以识别标识码。处理器120可控制识别出的标识码被显示在显示器上以及识别出的标识码被发送到外围设备或控制设备。

根据本公开的实施例的显示器140可转换由处理器120处理的图像信号、数据信号、屏上显示(osd)信号、控制信号等以产生驱动信号。显示器140可利用等离子体显示板(pdp)、液晶显示器(lcd)、有机发光二级管(oled)、柔性显示器等来实现，也可利用三维(3d)显示器来实现。显示器140可包括触摸屏并由此可用作输入设备以及输出设备。

根据本公开的实施例的显示器140可显示用于设置mbr远程控制器的各种菜单屏幕。显示器140可还显示包括从外围设备接收的标识码的图像，并显示从该图像识别的标识码。如图8b中所示，显示器140可显示用于控制外围设备的远程控制器指南屏幕。然而，本公开不限于该示例。

图10是根据本公开的另一实施例的图像显示设备的框图。图10中示出的图像显示设备1000可以是图1中示出的图像显示设备100的示例。

参照图10，根据本公开的实施例的图像显示设备1000可包括调谐器1400、控制器1100、显示器1200、通信器1500、检测器1300、输入器/输出器1700、视频处理器1800、音频处理器1150、存储器1900和电源1600。

图10的通信器1500和图10的输入器/输出器1700(输入/输出单元，i/o)可与图9的通信器110相应，图10的控制器1100可与图9的处理器120相应，图10的存储器1900可与图9的存储器130相应，图10的显示器1200可与图9的显示器140相应。

调谐器1400可通过针对经由有线或无线接收的广播信号，经由放大、混频、谐振等来调谐频率，来选择图像显示设备1000将从多个电波分量接收的频道的频率。广播信号可包括音频、视频和附加信息(例如，电子节目指南(epg))。

调谐器1400可在与基于用户输入(例如，从控制设备接收的控制信号，诸如频道编号输入、频道上下输入和epg屏幕上的频道输入)的频道编号相应的频带中接收广播信号。

调谐器140可从诸如地面广播、有线广播、卫星广播、互联网广播等各种来源接收广播信号。调谐器1400可从诸如模拟广播、数字广播等的来源接收广播信号。

根据本公开的实施例的通信器1500可在控制器1100的控制下向外部设备或服务器发送数据或信号，并从外部设备或服务器接收数据或信号。控制器1100可向通过通信器1500连接的外部设备发送内容/从所述外部设备接收内容，从外部设备下载应用，或浏览web。

通信器1500可根据图像显示设备1000的能力和结构，通过使用wlan1510(例如，wi-fi)、蓝牙1520或有线以太网之中的至少一个，发送和接收数据或信号。

根据本公开的实施例的通信器1500可通过使用短程通信与根据本公开的实施例的控制设备通信。例如，通信器1500可通过使用蓝牙、wi-fi、nfc、ir、zigbee等将数据或信号发送到控制设备并从控制设备接收数据或信号。

通信器1500可从控制设备接收用于控制图像显示设备的操作的控制命令，并可根据控制命令来执行操作。

视频处理器1800可处理由图像显示设备1000接收的视频数据。视频处理器1800可针对视频数据执行各种图像处理，诸如解码、缩放、噪声滤除、帧率转换、分辨率转换等。

检测器1300可感测用户的语音、用户的图像或用户的交互，并可包括麦克风1310、相机1320和光接收器1330。

麦克风1310可接收用户说出的语音。麦克风1310可将接收的语音转换为电信号，并将电信号输出到控制器1100。用户的语音可包括例如与图像显示设备1000的菜单或功能相应的语音。

相机1320可在相机识别范围内接收与包括手势的用户动作相应的图像(例如，连续帧)。控制器1100可通过使用接收的动作的识别结果来选择在图像显示设备1000上显示的菜单，或执行与接收的动作的识别结果相应的控制。

光接收器1330可通过显示器1200的边框的采光窗口(lightingwindow)来接收从外部控制设备接收的光信号(包括控制信号)。光接收器1330可从控制设备接收与用户输入(例如，触摸、按压、触摸手势、语音或动作)相应的光信号。可在控制器1100的控制下从接收的光信号提取控制信号。

输入器/输出器(i/o单元)在控制器1100的控制下，从位于图像显示设备1000之外的外部源接收视频(例如，运动图像等)、音频(例如，语音、音乐等)和附加信息(例如，epg等)。输入器/输出器可包括hdmi端口1710、组件插孔(componentjack)1720、pc端口1730和usb端口1740之一。输入器/输出器可包括hdmi端口1710、组件插孔(componentjack)1720、pc端口1730和usb端口1740的组合。

控制器1100可控制图像显示设备1000的整个操作和图像显示设备1000的内部组件之间的信号流，并处理数据。当用户输入被输入或者预设并存储的条件被满足时，控制器1100执行操作系统(os)和存储在存储器1900中的各种应用。

控制器1100可包括随机访问存储器(ram)1810、只读存储器(rom)1820和处理器1830，其中，ram1810存储从外部源输入的信号或数据或者被用作与由图像显示设备1000执行的各种任务相应的存储区域，rom1820在其中存储用于控制图像显示设备1000的控制程序。

图形处理单元(gpu)1840可通过使用计算器和渲染器来产生包括各种对象(诸如按钮、图像、文本等)的屏幕。计算器可通过使用由检测器1300感测的用户的输入，基于屏幕的布局来计算各个对象的诸如坐标、形状、大小、色彩等的属性值。渲染器可基于由计算器计算出的属性值，产生包括对象的各种布局的屏幕。由渲染器产生的屏幕可显示在显示器1200的显示区域中。

第一接口1850-1到第n接口1850-n可连接到以上描述的组件。所述接口之一可以是通过网络连接到外部设备的网络接口。

ram1810、rom1820、处理器1830、gpu1840以及第一接口1850-1到第n接口1850-n可通过至少一个内部总线1860互相连接。

在本公开的当前实施例中，术语“图像显示设备的控制器”可包括处理器1830、rom18820和ram1810。

显示器1200对由控制器1100处理的图像信号、数据信号、osd信号、控制信号等进行转换，以产生驱动信号。显示器1200可利用pdp、lcd、oled、柔性显示器等来实现，也可利用3d显示器来实现。显示器1200可包括触摸屏，并由此可用作输入设备以及输出设备。

音频处理器1150可处理音频数据。音频处理器1150可针对音频数据执行各种处理，诸如解码、放大、噪声过滤等。同时，音频处理器1150可包括用于处理与多个内容相应的音频的多个音频处理模块。

音频输出器1250可在控制器1100的控制下输出通过调谐器1400接收的广播信号中所包括的音频。音频输出器1250可输出通过通信器1500或输入器/输出器1700输入的音频(例如，语音、声音等)。音频输出器1250可在控制器1100的控制下输出存储在存储器1900中的音频。音频输出器1250可包括扬声器1260、头戴耳机输出端1270或索尼/飞利浦数字接口(s/pdif)输出端1280。音频输出器1250可包括扬声器1260、头戴耳机输出端1270和s/pdif输出端1280的组合。

电力源1600可在控制器1100的控制下将从外部电源输入的电力提供给图像显示设备1000的内部元件。电力源1600可在控制器1100的控制下将从包括在图像显示设备1000中的至少一个电池输出的电力提供给内部元件。

存储器1900可在控制器1100的控制下存储用于驱动和控制图像显示设备1000的各种数据、程序或应用。存储器1900可包括广播接收模块、频道控制模块、音量控制模块、通信控制模块、语音识别模块、动作识别模块、光接收模块、显示控制模块、音频控制模块、外部输入控制模块、功率控制模块、无线连接(例如，通过蓝牙)的外部设备的功率控制模块、语音数据库(db)或动作db。存储器1900的模块和db可按照软件的形式来实现，以在图像显示设备1000中执行广播接收的控制功能、频道控制功能、音量控制功能、通信控制功能、语音识别功能、动作识别功能、光接收控制功能、功率控制功能、或无线连接(例如，通过蓝牙)的外部设备的功率控制功能。控制器1100可通过使用存储在存储器1900中的前述软件来执行各个功能。

同时，图9和图10中分别示出的图像显示设备100和1000的框图是用于本公开的实施例的框图。所述框图的元件可取决于实际实现的图像显示设备100和1000的规格而集成、增加或省略。也就是说，当必要时，两个或更多个元件可被集成为单个元件，或者，一个元件可被划分为两个或更多个元件。在每个元件(或模块)中执行的功能旨在描述本公开的实施例，具体的操作或其设备不会限制本公开的范围。

图11是根据本公开的实施例的控制设备的框图。

参照图11，根据本公开的实施例的控制设备200可包括无线通信器210、处理器220、存储器240、用户输入器250、输出器260和供电器270。

根据本公开的实施例的无线通信器210可通过使用wlan(例如，wi-fi、蓝牙、ble、超声波等)将数据或信号发送到图像显示设备100或外围设备300，或从图像显示设备100或外围设备300接收数据或信号。

无线通信器210可包括能够根据ir通信标准将信号发送到图像显示设备100并从图像显示设备100接收信号的ir模块。例如，控制设备200可根据需要将关于通电/断电、改变、音量改变等的命令发送到图像显示设备100。

无线通信器210可包括能够根据zigbeerf4ce标准将信号发送到外围设备300并从外围设备300接收信号的rf4ce模块。例如，无线通信器210可从图像显示设备100接收与外围设备300相应的搜索数据，将接收的搜索数据转换为与外围设备300相应的形式的信号或封包，并通过rf4ce模块将信号或封包发送到外围设备300。

无线通信器210可将从图像显示设备接收的配对数据转换为与外围设备300相应的形式的信号或封包，并通过rf4ce模块将信号或封包发送到外围设备300。

无线通信器210可从外围设备300接收与搜索数据相应的响应信号和与配对数据相应的响应信号，并将与接收的响应信号相应的响应数据发送到图像显示设备100。然而，本公开不限于所述示例。

根据本公开的实施例的存储器240可存储对于控制设备200的控制或操作而言必需的各种类型的程序、应用数据等。

根据本公开的实施例的存储器240可存储与外围设备相应的控制码信息。存储在存储器240中的程序可包括至少一个指令。存储在存储器240中的程序(例如，至少一个指令)或应用可由处理器220来执行。

处理器220控制所述控制设备200的整个操作。处理器220可通过无线通信器210将与用户输入器250的按键操作相应的信号发送到图像显示设备100或外围设备300。例如，处理器220可接收用户输入信号，通过使用与外围设备相应的控制码信息将接收的信号转换为与外围设备相应的控制信号，并通过使用无线通信器210将控制信号将发送到外围设备。

用户输入器250可包括键区、按钮、触摸板或触摸屏。用户可通过操作用户输入器250将与图像显示设备100相关的命令输入到控制设备200。当用户输入器250包括硬键按钮，用户可通过按下硬键按钮，将与图像显示设备100或外围设备300相关的命令输入到控制设备200。当用户输入器250包括触摸屏时，用户可通过触摸所述触摸屏的软键，将与图像显示设备100或外围设备300相关的命令输入到控制设备200。

输出器260可输出与对用户输入器250的操作相应的图像或语音信号，或由图像显示设备100或外围设备300接收的信号。通过输出器260，用户可识别用户输入器250是否被操作，或者图像显示设备100或外围设备300是否被控制。

例如，输出器260可包括led模块、被配置为产生振动的振动模块、被配置为输出音频的音频输出模块或被配置为输出图像的显示模块，其中，led模块在用户输入器250被操作时或信号通过无线通信器210被发送到图像显示设备100或从图像显示设备100被接收时被点亮或熄灭。

供电器270可向控制设备200供电。供电器270可在控制设备200未被用户操作达特定时间段时停止供电，由此防止费电。供电器270可在包括在控制设备200中的特定按键被操作时恢复供电。

同时，图11中示出的控制设备200的框图是本公开的实施例的框图。框图的组件可取决于实际实现的控制设备200的规格而集成、增加或省略。也就是说，当必要时，两个或更多个组件可被集成为单个组件，或者，一个组件可被划分为两个或更多个组件。在每个组件(或模块)中执行的功能旨在描述本公开的实施例，其详细操作或其设备不会限制本公开的范围。

根据本公开的实施例的图像显示设备的操作方法可按照程序命令的形式来实现，其中，所述程序命令可通过各种计算机部件来执行并被记录在计算机可读记录介质中。计算机可读记录介质可包括单独或组合形式的程序命令、数据文件、数据结构等。记录在计算机可读记录介质中的程序命令可以是针对本公开的当前实施例专门设计和配置的程序命令，或由计算机软件领域的本领域技术人员使用时所知悉的程序命令。计算机可读记录介质的示例可包括磁介质(诸如硬盘、软盘和磁带)、光介质(诸如压缩盘只读存储器(cd-rom)和磁通用盘(dvd))、磁光介质(诸如软盘)和专门被配置为存储并执行程序命令的硬件设备(诸如只读存储器(rom)、随机访问存储器(ram)和闪存等)。此外，程序命令的示例包括由编译器创建的机器码和可由计算机使用解释器执行的高级别语言码。

根据本公开的实施例的图像显示设备的操作方法可包括在计算机程序产品中并被提供。计算机程序产品可在卖方与买方之间交易为产品。

计算机程序产品可包括软件(s/w)程序和存储s/w程序的非瞬时计算机可读记录介质。例如，计算机程序产品可包括通过制造商或图像显示设备或电子市场(例如，谷歌playstore或appstore)电子化分发的s/w形式的产品。为了电子分发，s/w程序的至少一部分可存储在存储介质中或临时产生。在这种情况下，存储介质可以是制造商或电子市场中服务器的存储介质或临时存储s/w程序的中继服务器。

在包括服务器和客户端设备的系统中，计算机程序产品可包括服务器的存储介质或客户端设备的存储介质。或者，当存在与服务器或客户端设备通信的第三个设备(例如，智能电话)时，计算机程序产品可包括s/w程序本身，其被从服务器发送到客户端设备或第三个设备，或被从第三个设备发送到客户端设备。

在这种情况下，服务器、客户端设备和第三个设备之一可执行计算机程序产品以执行根据本公开的实施例的方法。或者，服务器、客户端设备和第三个设备中的两者或更多可执行计算机程序产品以按照分布式来执行根据本公开的实施例的方法。

例如，服务器(例如，云服务器或ai服务器等)可执行存储在服务器中的计算机程序介质，以控制与服务器通信的客户端设备来执行根据本公开的实施例的方法。

根据本公开的实施例的图像显示设备可使得容易设置用于使用zigbeerf4ce控制外围设备mbr控制器。

尽管已经参照本公开的示例实施例示出和描述了本公开，但本公开的范围不限于所述描述，还可包括本领域普通技术人员使用由权利要求限定的本公开的范围可作出的各种变型和改进。