影像显示装置的制作方法

影像显示装置
1.本技术是申请号为201680089319.3、申请日为2016年9月15日的发明名称为“影像显示装置和影像显示装置的协作控制方法”的申请的分案申请。
技术领域
2.本发明涉及保存影像数据的外部设备、影像显示装置和远程操作终端间的设备协作技术。


背景技术：

3.作为本技术领域的背景技术，在专利文献1中，作为课题记载了“提供使对在与多个监视器连接的stb(机顶盒)存储的影像内容能够由智能手机等操作的影像发送系统的操作性提高的控制部、发送装置和发送方法。”4.作为该课题的解决方案记载了：“影像数据控制部(智能手机)包括：能够发送指示成为对显示装置(卧室tv)无线发送特定信息的状态的特定信息发送指示的特定信息发送指示发送部(近距离无线通信部，wi-fi通信部)；能够基于特定信息的电波强度确定最接近的显示装置的显示装置确定部(控制部)；和对构成为能够用无线发送影像数据的影像数据发送装置(服务器)，能够发送指示对最接近的显示装置发送影像数据的影像数据发送指示的影像数据发送指示发送部(wi-fi通信部)。(摘要的主要内容)”。
5.现有技术文献
6.专利文献
7.专利文献1：日本特开2016-25599号公报


技术实现要素：

8.发明要解决的技术课题
9.但是，在上述文献记载的技术中，持有影像数据控制部(智能手机)的用户需要主动地通过对显示装置(电视机)和影像数据发送装置(服务器)进行指示，来建立影像数据控制部(智能手机)、显示装置(电视机)、影像数据发送装置(服务器)之间的协作，使用便利性差。此外，作为代替上述影像数据发送装置(服务器)的设备，考虑有摄像机、录像机等外部设备，但没有考虑与上述显示装置(电视机)连接的外部设备变更时的协同动作。
10.本发明鉴于上述情况提出，目的在于，提供在存在多种多样的外部设备与影像显示装置连接的可能性的环境中，以少的负担建立外部设备、影像显示装置和远程操作终端间的协作，并且实现用户操作性高的设备间的协同动作的技术。
11.用于解决课题的技术方案
12.为了解决上述课题，本发明例如是能够与外部设备和对该外部设备进行远程操作的远程操作终端连接的影像显示装置，其特征在于，包括：检测所述外部设备与该影像显示装置已连接的情况的连接检测部；在所述连接检测部检测到连接了所述外部设备时，生成用于使接受对该外部设备的操作指示的应用软件在所述远程操作终端起动的起动信号的
协作建立部；和将所述起动信号发送至所述远程操作终端的通信接口。
13.发明效果
14.根据本发明，在存在多种多样的外部设备与影像显示装置连接的可能性的环境中，能够以少的负担建立外部设备、影像显示装置和远程操作终端间的协作，能够实现用户操作性高的设备间的协同动作。上述记载内容以外的目的、结构、效果通过以下的说明能够明确。
附图说明
15.图1是第一实施方式的三者协作系统的结构图。
16.图2中，(a)是第一实施方式的电视机(tv)的块结构图，(b)是第一实施方式的影像显示装置(tv)的功能框图。
17.图3中，(a)是第一实施方式的智能手机的块结构图，(b)是第一实施方式的智能手机的功能框图。
18.图4是第一实施方式的摄像机的块结构图。
19.图5是用于说明第一实施方式的中继表的说明图。
20.图6是用于说明第一实施方式的协作表的说明图。
21.图7是第一实施方式的三者协作处理的流程图。
22.图8是第一实施方式的中继应用获取处理的流程图。
23.图9是第一实施方式的遥控器决定处理的流程图。
24.图10是第一实施方式的遥控应用获取处理的流程图。
25.图11中，(a)和(b)是用于说明第一实施方式的遥控器图像的说明图。
26.图12是第二实施方式的三者协作系统的结构图。
27.图13中，(a)是第二实施方式的摄像机的功能框图，(b)是第二实施方式的智能手机的功能框图，(c)是第二实施方式的电视机的功能框图。
28.图14是用于说明第二实施方式的协作表的说明图。
29.图15是第二实施方式的三者协作处理的流程图。
具体实施方式
30.《第一实施方式》
31.以下，使用附图说明本发明的第一实施方式。另外，以下说明的实施方式是用于实现本发明的一例，能够根据应用本发明的装置的结构、各种条件，适当修正或变更，本发明并不限定于以下的实施方式。此外，也可以将后述的各实施方式的一部分适当组合构成。
32.图1是本实施方式的三者协作系统的结构图。如本图所示，本实施方式的三者协作系统包括影像显示装置10、远程操作终端20和外部设备30。影像显示装置10和外部设备30例如由hdmi(high-definition multimedia interface：高清晰度多媒体接口)(注册商标)线缆等连接。此外，远程操作终端20通过近距离无线通信(例如nfc、ir通信、bluetooth(注册商标，蓝牙)等)或无线lan与影像显示装置10连接。此外，影像显示装置10经由互联网与服务器90连接。
33.影像显示装置10从外部获取影像数据，显示于本机所具有的显示部。本实施方式
的影像显示装置10例如是电视机、不具有tv调谐器的监视器等。以后以电视机为例进行说明。电视机10还具有无线lan的访问点功能，经由互联网与服务器90连接。
34.远程操作终端20储存用于实现遥控功能的应用软件(以下简称为“遥控应用”)。远程操作终端20通过构成远程操作终端20的硬件执行遥控应用，能够实现遥控器功能。本实施方式的远程操作终端20例如是智能手机、平板终端、便携电话终端等具有通信功能的信息处理终端。以下以智能手机为例进行说明。
35.外部设备30对影像数据进行保存或中继。此外，与电视机10连接、将保存或中继的影像数据向电视机10发送。本实施方式的外部设备30例如是摄像机、录像机、机顶盒(stb)等。以后以摄像机为例进行说明。
36.摄像机30和电视机10由hdmi线缆连接，但两者的连接并不限定于此。只要是将摄像机30和电视机10以1对1的方式连接的接口则无论是有线还是无线均可。此外，代替摄像机30，也可以使用能够与电视机10的usb端子(未图示)连接的usb存储器装置。此时，所述usb存储器装置可以使用usb线缆或直接地与电视机10连接。此外，本实施方式中，智能手机20和电视机10由近距离通信连接，但也可以不具有该功能。
37.[硬件结构]
[0038]
以下，分别对于本实施方式的三者协作系统中的电视机10、智能手机20、摄像机30说明详细结构。
[0039]
[电视机]
[0040]
图2的(a)是本实施方式的电视机10的框图。电视机10具有控制部11、tv调谐器12、显示部13、存储部14、hdmi通信接口(i/f)15、有线lan通信接口(i/f)16、无线lan通信接口(i/f)17和近距离通信接口(i/f)18。
[0041]
控制部11是按照规定的程序控制电视机10整体的微处理器单元。
[0042]
存储部14具有程序区域、暂时存储区域、蓄存存储区域。程序区域是执行基本动作程序和其它应用程序时，这些程序被展开的区域。暂时存储区域在各种应用程序执行时根据需要暂时保存数据。蓄存存储区域对各种设定值、各种程序、动态图像数据等以不被供电的状态下也进行存储。作为蓄存存储区域，例如使用闪存rom、ssd(solid state drive，固态硬盘)、hdd(hard disc drive，硬盘驱动器)等器件。
[0043]
另外，本实施方式中，电视机10通过从应用服务器经由互联网下载新应用程序，能够进行功能扩展。此时，下载的新应用程序存储于存储部14的蓄存存储区域。
[0044]
本实施方式的电视机10通过控制部11将存储于蓄存存储区域的新应用程序在程序区域展开，并且执行展开的新应用程序，来实现多种新功能。
[0045]
显示部13例如是液晶面板或有机el显示器等显示器件。本实施方式的显示部13是，后述的tv调谐器12接收由天线接收到的广播电波，显示影像处理后的图像等。
[0046]
tv调谐器12将由天线接收到的广播电波以影像信号的形式输出。tv调谐器12具有地面数字调谐器、bs/cs数字调谐器、ofdm解调部、mpeg解码器等。
[0047]
hdmi通信i/f15是hdmi通信的接口部。hdmi通信i/f15具有tmds(transition minimized differential signaling，最小化传输差分信号)处理部、将由tmds处理部接收到的加密的影像信号解密的解密部、cec(consumer electronics control，消费性电子产品控制)控制部等，将电视机10与摄像机30等1对1连接。
[0048]
无线lan通信i/f17用作无线lan的访问点，与智能手机20等具有无线lan通信i/f的设备进行数据的发送接收。
[0049]
有线lan通信i/f16通过家用网关与互联网连接，与服务器90之间进行数据的发送接收。
[0050]
近距离通信i/f18在与智能手机20等之间进行近距离无线通信(nfc、ir通信、bluetooth等)。
[0051]
[智能手机]
[0052]
图3的(a)是本实施方式的智能手机20的框图。智能手机20具有控制部21、便携电话网通信i/f22、触摸面板23、存储部24、无线lan通信i/f27和近距离通信i/f28。
[0053]
控制部21是按照规定的程序控制智能手机20整体的微处理器单元。
[0054]
存储部24具有程序区域、暂时存储区域和蓄存存储区域。程序区域是执行基本动作程序和其它应用程序时展开这些程序的区域。暂时存储区域在各种应用程序执行时根据需要暂时保存数据。蓄存存储区域对各种设定值、各种程序、动态图像数据等在不被供电的状态下也进行存储。作为蓄存存储区域例如使用闪存rom、ssd、hdd等器件。
[0055]
本实施方式的智能手机20从应用服务器经由互联网和无线lan访问点下载含有上述遥控应用的新应用程序，由此能够进行功能扩展。此时，下载的新应用程序存储于存储部24的蓄存存储区域。
[0056]
本实施方式的智能手机20通过控制部21将存储于蓄存存储区域的新应用程序在程序区域中展开并执行，能够实现多种新功能。
[0057]
触摸面板23是组合例如液晶面板或有机el显示器等的显示器件和触摸面板等的信号输入装置的装置。本实施方式的智能手机20用作电视机10和摄像机30的遥控器。触摸面板23显示此时的遥控画面等。此外，通过检测用户在屏幕上接触而进行的操作而进行操作输入的检测。
[0058]
便携电话网通信i/f22与移动体电话通信网的基地局进行无线通信，进行电话通信(通话)和数据的发送接收。
[0059]
无线lan通信i/f27经由无线lan访问点与电视机10、摄像机30或服务器90进行数据的发送接收。
[0060]
近距离通信i/f28在与电视机10之间进行近距离无线通信(nfc、ir通信、bluetooth等)。
[0061]
[摄像机]
[0062]
图4的(a)是本实施方式的摄像机30的框图。摄像机30具有控制部31、影像输入处理部32、显示部33、存储部34、hdmi通信i/f35、无线lan通信i/f37和近距离通信i/f38。
[0063]
控制部31是按照规定的程序控制摄像机30整体的微处理器单元。
[0064]
存储部34具有程序区域、暂时存储区域和蓄存存储区域。程序区域是在执行基本动作程序和其它应用程序时展开这些程序的区域。暂时存储区域在各种应用程序执行时根据必要暂时保存数据。蓄存存储区域对各种设定值、各种程序、动态图像数据等在不被供电的状态下也进行存储。作为蓄存存储区域例如使用闪存rom、ssd、hdd等器件。
[0065]
显示部33是例如液晶面板或有机el显示器等显示器件。例如，显示由后述的影像输入处理部32进行了影像处理的影像数据。
[0066]
影像输入处理部32具有摄像光学系统、摄像元件和影像信号处理系统。摄像光学系统具有透镜、光圈等。影像信号处理系统对输入的影像信号进行数字信号处理。
[0067]
hdmi通信i/f35是hdmi通信的i/f部。hdmi通信i/f35具有tmds处理部、将影像信号加密的加密部、cec控制部，与电视机10等1对1连接。
[0068]
无线lan通信i/f37经由无线lan访问点与电视机10或智能手机20进行数据的发送接收。
[0069]
近距离通信i/f38在与无接点充电机(例如充电座)之间进行近距离无线通信(nfc、ir通信、bluetooth等)。
[0070]
[功能结构]
[0071]
接着说明本实施方式的电视机10、智能手机20和摄像机30的功能。
[0072]
[电视机]
[0073]
本实施方式的电视机10中，检测到保存影像数据的摄像机30经由hdmi通信i/f15已连接时，在智能手机20使遥控应用起动，控制其后的协同动作。在智能手机20为睡眠状态时，可以在解除睡眠状态后使遥控应用起动。另外，向智能手机20的各种指示经由无线lan通信i/f17或近距离通信i/f18进行。在不需要特别区分时称为通信i/f。
[0074]
为了实现它，如图2的(b)所示，本实施方式的电视机10具有：建立电视机10、摄像机30和智能手机20的三者间的协作的第一协作建立部120；控制三者间的协作建立后的协同动作的中继部130；和连接检测部140。此外，第一协作建立部120具有配对部121和遥控器决定部122。
[0075]
连接检测部140检测到摄像机30经由hdmi通信i/f15连接时，通知第一协作建立部120。在本实施方式中，从摄像机30经由hdmi通信i/f15被通知设备id。连接检测部140通过得到该设备id而检测出连接。
[0076]
配对部121根据来自智能手机20等的在三者协作系统能够成为遥控器的各种终端(候选智能手机)的请求(配对请求)关联候选摄像机。关联的候选摄像机是该候选智能手机能够操作的摄像机，是有连接的可能性的摄像机。关联的结果以中继表500的方式保存。
[0077]
本实施方式中，配对部121在从连接检测部140被通知了摄像机30被连接的情况时，从该摄像机30接收设备信息并存储。由此，配对部121蓄存当前连接的摄像机30和过去蓄存的摄像机30的设备信息。
[0078]
另外，设备信息包括识别该摄像机30的信息(设备id)和中继应用信息。中继应用信息包括对该摄像机30经由电视机10从智能手机20进行操作时需要的应用程序(中继应用)的名称(中继应用名)和智能手机20的对应os信息。
[0079]
中继应用是将电视机10从智能手机20经由通信i/f接收到的操作指示，经由作为与摄像机30的通信i/f的hdmi通信i/f15向摄像机30指示的应用程序。
[0080]
此外，本实施方式的配对部121当从候选智能手机接收配对请求时，关联能够由该候选智能手机操作的候选摄像机，生成中继表500。从候选智能手机发送的配对请求包括该候选智能手机的识别信息(设备id)和该候选智能手机的os信息。设备id例如可以是候选智能手机的ip地址等。此外，配对部121将关联的候选摄像机的设备id返回通知给请求方的候选智能手机。
[0081]
配对部121例如使用包含于配对请求的智能手机的os信息和候选外部设备的对应
os信息，判断可否关联。
[0082]
此处，在图5表示配对部121生成的中继表500的例子。如本图所示，本实施方式的中继表500与候选智能手机的设备id510关联，登记能够操作的候选摄像机520。作为候选摄像机520的信息，登记设备id521、中继应用名522、表示是否安装了该中继应用的信息(安装情况)523。另外，图5中，例示了作为安装情况523，在安装了中继应用时为“1”、在没有安装时为“0”的情况。
[0083]
另外，在与1个候选摄像机关联多个候选智能手机时，可以在它们之间预先添加优先顺序，将其信息也登记于中继表500。
[0084]
遥控器决定部122当经由hdmi通信i/f15连接了摄像机30时，决定在三者协作系统中用作遥控器的智能手机20，在决定的智能手机20中使遥控应用起动。通过参照配对部121生成的中继表500，从与连接的摄像机30(候选摄像机)关联登记的候选智能手机中，决定智能手机20。
[0085]
例如，在中继表500中添加了候选智能手机的优先顺序时，依据该优先顺序决定。另一方面，在没有添加优先顺序时，例如选择该时刻与电视机10最接近的候选智能手机。最接近的候选智能手机例如是在电视机10与各候选智能手机之间进行基于近距离无线通信(nfc、ir通信、bluetooth等)或无线lan的通信，选择电波强度最大的一个。
[0086]
另外，从登记于中继表500的多个候选智能手机中选择用作遥控器的智能手机20的方法并不限定于此。例如，也可以对登记的全部候选智能手机进行通知，选择最早发送来同意的意思的候选智能手机。
[0087]
此外，在与此处选择的智能手机20之间的通信被切断时，遥控器决定部122再次用上述方法决定用作遥控器的智能手机20。
[0088]
遥控器决定部122生成用于使操作摄像机30的遥控应用起动的起动信号，对决定的智能手机20经由通信i/f发送。本实施方式中，起动信号包括电视机10和摄像机30各自的设备id。在接收到该起动信号的智能手机20侧，使操作摄像机30的遥控应用起动。
[0089]
中继部130在三者协作建立依据中继应用进行中继处理。具体来说，从智能手机20接收智能手机20经由遥控应用接受的操作指示，对摄像机30中继。此外，处理根据该操作指示从摄像机30传送的数据。
[0090]
另外，操作指示是操作摄像机30的指示。本实施方式中，例如包括在显示部13显示摄像机30的操作画面的指示、使摄像机30保存的影像数据显示于显示部13的指示等。
[0091]
另外，电视机10实现的各功能，通过控制部11的微处理器将储存于存储部14的蓄存区域的程序在程序区域展开并执行而实现。此外，中继表500储存于蓄存区域。电视机10实现的各功能中的全部或一部分的功能，也可以由asic(application specific integrated circuit，专用集成电路)、fpga(field-programmable gate array，现场可编程逻辑门阵列)等硬件实现。此外，电视机10和摄像机30由hdmi连接时，电视机10与摄像机30之间的控制信号的交接可以由cec功能实现。
[0092]
[智能手机]
[0093]
智能手机20依据来自电视机10的指示，作为摄像机30的遥控器起作用。为了实现它，如图3的(b)所示，本实施方式的智能手机20包括：建立电视机10、摄像机30和智能手机20的三者间的协作的第二协作建立部210和遥控器处理部220。此外，第二协作建立部210具
有协作表生成部211。
[0094]
协作表生成部211为了实现三者间的协作而生成协作表600。本实施方式中，将本机能够操作的电视机(候选电视机)和候选摄像机的组合与在操作中使用的应用(遥控应用)关联地生成协作表。
[0095]
具体地说，对电视机10进行配对请求，结果以通知源的电视机10作为候选电视机，将从电视机10通知的候选摄像机的设备id与该候选电视机的设备id关联保存。此外，基于关联的候选摄像机的设备id和电视机10的设备id，确定用于经由电视机10操作该候选摄像机的遥控应用。
[0096]
另外，在本实施方式中，如上所述，遥控应用使智能手机20用作经由电视机10操作摄像机30的遥控器。即，遥控应用是例如接受将保存于摄像机30的影像数据显示于电视机10的显示部13的指示的应用。该遥控应用一般保存于外部的服务器90。本实施方式的智能手机20经由互联网访问服务器90，获得该应用。
[0097]
图6中表示本实施方式的协作表生成部211生成的协作表600的例子。如该图所示，本实施方式的协作表600对每个候选电视机关联登记该候选电视机的设备id610、经由该候选电视机能够操作的摄像机即候选摄像机的设备id620和确定用于经由该候选电视机分别控制该候选摄像机的遥控应用的信息(遥控应用名)630。此外，也登记表示具有该遥控应用名630的遥控应用的有无安装的信息(安装信息)640。另外，图6中，作为安装信息640，例示了在安装了遥控应用时登记“1”、在没有安装时登记“0”的情况。
[0098]
遥控器处理部220进行用于实现三者协作的处理。具体地说，展开并执行遥控应用。
[0099]
智能手机20实现的各功能通过控制部21的微处理器将储存于存储部24的蓄存区域的程序在程序区域展开并执行而实现。此外，协作表600储存于蓄存区域。智能手机20实现的各功能中全部或一部分的功能可以由asic、fpga等硬件实现。
[0100]
[摄像机]
[0101]
本实施方式的摄像机30经由hdmi通信i/f35与电视机10连接时，对连接对象的电视机10发送用于控制本机的信息。如上所述，本功能可以由cec功能实现。
[0102]
[三者协作处理的流程]
[0103]
说明具有以上功能的电视机10、智能手机20和摄像机30的三者协作处理的流程。图7是用于说明本实施方式的三者协作处理的流程的流程图。另外，中继表500和协作表600可以预先生成。
[0104]
此外，以下举例说明从记录于摄像机30的存储部34的动态图像中由对智能手机20的操作选择需要的动态图像而显示于电视机10的显示部13的情况。但是，并不限定于该例子。在选择动态图像并显示的指示以外，例如用于将摄像机30保存的动态图像或静态图像存储于电视机10的存储部14的指示等，也能够同样适用该协作处理。
[0105]
首先，将摄像机30用hdmi与电视机10连接，或者，使已由hdmi与电视机10完成连接的摄像机30的电源为接通(on)时(步骤s301)，从摄像机30向电视机10发送包含摄像机30的设备id的触发信息。
[0106]
电视机10中，连接检测部140接收设备id的通知，向遥控器决定部122发送。当接收设备id时，电视机10的遥控器决定部122参照中继表500，进行获取中继应用的中继应用获
取处理(步骤s101)，获取中继应用。此外，也进行决定用作遥控器的智能手机的遥控器决定处理(步骤s102)，决定智能手机20。
[0107]
遥控器决定部122对决定的智能手机20通知连接指示(步骤s103)。此处，对智能手机20通知电视机10的设备id、摄像机30的设备id，并且发送促使遥控应用起动的命令。
[0108]
此处，使用图8说明步骤s101的中继应用获取处理的详情。
[0109]
首先，遥控器决定部122检索中继表500(步骤s411)，判断接收到的设备id是否已登记(步骤s412)。此处，在没有登记时，结束三者协作处理本身。
[0110]
另一方面，在已登记时，遥控器决定部122判断与该设备id521关联登记的中继应用是否已安装(步骤s413)。在已安装时，判断是否为最新版(步骤s414)。关于是否为最新版，通过经由互联网访问服务器90，比较作为中继应用信息登记的版本信息和提供的最新版的信息而判断。
[0111]
在安装了最新版的中继应用时，结束处理。另一方面，在没有安装中继应用时，或者虽然安装了但不是最新版时，遥控器决定部122经由互联网访问服务器90，下载最新版的中继应用(步骤s415)并安装(步骤s416)，结束中继应用获取处理。
[0112]
另外，可以是摄像机30保存中继应用，电视机10从摄像机30获取中继应用。此外，也可以比较存储于服务器90的中继应用和存储于摄像机30中的中继应用的版本，适当获取较新的中继应用。
[0113]
此外，在上述说明中，在安装有中继应用时，也经由互联网在服务器90确认其是否为最新版，或者询问摄像机30，总是安装最新版。但是，也可以不进行是否为最新版的确认。
[0114]
此外，在摄像机30中存储有旧版本的中继应用的状态下，经由互联网从服务器90下载最新版的中继应用时，电视机10可以使用从服务器90获取的最新版的中继应用，更新存储于摄像机30的旧版本的中继应用。
[0115]
接着，使用图9说明步骤s102的遥控器决定处理的详情。
[0116]
遥控器决定部122首先检测电视机10的无线lan的同一子网(子nw)内的能够用作遥控器的设备(步骤s421)并将其提取。此处，例如检测同一子nw内的各种设备中的智能手机。
[0117]
然后，遥控器决定部122检索中继表500(步骤s422)，判断在步骤s421提取的智能手机中，是否有与具有由s101的处理接收到的设备id的摄像机30关联登记的候选智能手机(步骤s423)。
[0118]
在没有登记时，结束三者协作处理本身。另外，可以在结束前，通知用户没有登记能够用作遥控器的智能手机。
[0119]
另一方面，在有登记时，遥控器决定部122判断登记的候选智能手机的台数(步骤s424)。
[0120]
在登记有多台时，遥控器决定部122从其中选择作为遥控器的智能手机20(步骤s425)，将其决定为用作遥控器的智能手机20(步骤s426)。选择通过上述方法进行。
[0121]
在上述步骤s424中，如果登记的台数为1台，则将该候选智能手机决定为用作遥控器的智能手机20(步骤s426)。当决定用作遥控器的智能手机20时，遥控器决定部122结束遥控器决定处理。
[0122]
另外，该遥控器决定处理在三者协作处理执行中由于某些原因与用作遥控器的智
能手机20的连接中断时也执行。
[0123]
回到图7，接收到连接指示的智能手机20的遥控器处理部220进行遥控应用获取处理(步骤s201)。
[0124]
依据图10说明遥控应用获取处理的详情。
[0125]
遥控器处理部220使用通知的电视机10的设备id和摄像机30的设备id，检索协作表600(步骤s431)，判断是否安装了与两者关联的遥控应用(步骤s432)。
[0126]
在安装了遥控应用时，遥控器处理部220判断该应用的版本是否为最新版(步骤s433)。是否为最新版的判别通过经由互联网访问服务器90，比较作为遥控应用信息登记的版本信息和提供的最新版的信息而进行。
[0127]
在没有安装遥控应用时，或安装的遥控应用不是最新版时，遥控器处理部220访问服务器90，下载最新版的遥控应用(步骤s434)。然后将其安装(步骤s435)，结束处理。
[0128]
另外，上述的中继应用同样可以不进行是否为最新版的判断。进而，此处，说明了遥控应用从服务器90下载的情况，但也可以从电视机10下载。此时，将各种遥控应用预先存储在电视机10的存储部14的蓄存存储区域。此外，可以存储于服务器90的遥控应用和存储于电视机10的遥控应用的版本，获取较新的一者。此外，可以将经由互联网从服务器90下载的遥控应用存储于电视机10的蓄存存储区域。
[0129]
回到图7，当结束遥控应用获取处理时，遥控器处理部220使遥控应用起动，在智能手机20的触摸面板23显示遥控器图像(步骤s202)。此处，显示的遥控器图像以能够滚动的方式显示，进行能够选择操作电视机10或摄像机30的某一者的操作显示、频道操作显示、录像的动态图像的再现开始、停止等的显示。
[0130]
将显示的遥控器图像的一例表示于图11的(a)和图11的(b)。如该图所示，本实施方式的遥控器图像700具有操作对象设备选择区域710和遥控器操作接受区域720。
[0131]
操作对象设备选择区域710经由该遥控器图像700接受操作对象的设备的选择。此处，接受电视机10和摄像机30的任一者的选择。例如，如这些图所示，具有用于接受选择的按钮。此外，这些按钮以能够识别选择的设备的方式显示。
[0132]
在遥控器操作受理区域720显示在操作对象设备选择区域710选择的设备的操作画面。例如，在选择了电视机10时，进行频道选择显示等。另一方面，在选择了摄像机30时，进行接受再现的动态图像的选择、再现开始、再现停止等指示的画面显示。此外，在选择任一者时，均同样显示音量调整等。
[0133]
另外，遥控器操作受理区域720可以构成为通过滚动来改变操作画面。此时，在操作对象设备选择区域710可以以能够识别在操作画面操作的对象的设备的方式显示。
[0134]
另外，该遥控器图像700仅是一例，如何显示能够根据各设备安装的功能而改变。此外，例如，可以将设备选择的显示设定为3以上。此外，可以是合并每个设备的遥控器操作的遥控器图像。例如，是能够在再现摄像机30的动态图像的同时，指示将该图像记录于电视机10的存储部14的图像等。
[0135]
回到图7，当遥控器图像显示于触摸面板23时，遥控器处理部220进行摄像机30的动态图像选择画面的传送指示(步骤s203)。该传送指示从智能手机20向电视机10发送。接收到它的电视机10的中继部130将该指示向中继目标的摄像机30发送(步骤s104)。
[0136]
接收到传送指示的摄像机30，将动态图像选择画面的数据向电视机10传送(步骤
s302)。另外，动态图像选择画面例如为选择存储于摄像机30的动态图像的画面。选择的画面是例如显示动态图像的缩略图的图像等。
[0137]
接收到动态图像选择画面的数据的电视机10中，中继部130依据该数据将摄像机30的动态图像选择画面显示于显示部13(步骤s105)。中继部130在传送指示源的智能手机20进行意味着画面显示结束的画面显示结束通知(步骤s106)。
[0138]
当接受到画面显示结束通知时，智能手机20中，遥控器处理部220使本机处于能够接受来自用户的遥控器操作的状态。由此，用户能够一边看着在电视机10的显示部13显示的动态图像选择画面一边进行对摄像机30的指示。
[0139]
遥控器处理部220当接收到来自用户的操作进行的指示(操作指示)时，将该操作指示向电视机10发送(步骤s204)。此处接受的操作指示例如是选择的动态图像的再现指示等。动态图像的选择例如从在电视机10作为动态图像选择画面显示的动态图像的缩略图中选择。
[0140]
当从智能手机20接收操作指示时，电视机10中，中继部130对摄像机30中继该操作指示(步骤s107)。
[0141]
接收到指示的摄像机30依据操作指示，将数据向电视机10传送(步骤s303)。例如，在接收到规定的动态图像的再现指示时，将该动态图像数据向电视机10传送。
[0142]
电视机10的中继部130将传送来的数据显示于显示部13(步骤s108)，并且将意味着结束中继处理的处理结束通知向智能手机20发送(步骤s109)。例如，在接收到动态图像数据时，开始该动态图像的显示。
[0143]
接收到处理结束通知的智能手机20中，遥控器处理部220更新遥控器图像(步骤s205)。另外，在步骤s103中接收到从电视机10通知的连接指示的智能手机20，在已安装遥控应用时，不促使遥控应用的自动起动，代之，可以通过变更遥控应用的图标的颜色来向用户通知有来自电视机10的通知的消息。用户可以确认遥控应用的颜色的改变而手动地起动遥控应用。
[0144]
如以上所说明的那样，根据本实施方式，例如将摄像机30与电视机10连接作为触发，建立摄像机30、电视机10和智能手机20的协作。然后，通过来自智能手机20的遥控器操作，能够进行摄像机30和电视机10的协作控制。
[0145]
这样，根据本实施方式，在不限于特定的外部设备、存在多种多种的外部设备(摄像机)与影像显示装置(电视机)连接的可能性的环境下，也能够自动建立装置间的协作。因此，能够不对用户造成过度的负担地建立操作性和使用方便性好的三者协作系统。
[0146]
《第二实施方式》
[0147]
接着说明本发明的第二实施方式。在第一实施方式中，通过影像显示装置作为中继装置发挥功能而实现影像显示装置、外部设备、远程操作终端的三者协作处理。在本实施方式中，远程操作终端主导地实现协作。
[0148]
即，第一实施方式中，电视机10处于中心地承担控制系统整体的功能。而在第二实施方式中，智能手机20控制系统整体。
[0149]
图12表示本实施方式的三者协作系统的结构图。如该图所示，本实施方式的三者协作系统包括影像显示装置(电视机)10、远程操作终端(智能手机)20、外部设备(摄像机)30和访问点40。
[0150]
本实施方式的电视机10、智能手机20和摄像机30的基本结构与第一实施方式同样。此外，访问点40将电视机10、智能手机20、摄像机30等无线lan客户设备间相互连接，而且将这些无线lan客户与其它网络连接。
[0151]
以下，对本实施方式以与第一实施方式不同的结构为主进行说明。以下，对与第一实施方式共同的部分，只要没有特别说明，标注相同的附图标记，省略其详细说明。
[0152]
在本实施方式中，电视机10、智能手机20和摄像机30例如经由无线lan借助访问点40连接。即，它们不进行hdmi连接。由此，电视机10和摄像机30可以不具有hdmi通信i/f15和hdmi通信i/f35。
[0153]
[功能结构]
[0154]
[摄像机]
[0155]
本实施方式的摄像机30如图13的(a)所示，具有经由访问点40对无线lan的同一子网内的全部设备发送连接请求的连接请求发送部310。本实施方式中，连接请求例如包括本机的设备id。另外，连接请求的发送目标的设备可以不限于电视机10和智能手机20。连接请求经由无线lan通信i/f37发送。
[0156]
摄像机30实现的上述功能通过控制部31的微处理器将储存在存储部34的蓄存区域的程序在程序区域展开并执行而实现。摄像机30实现的各功能中的全部或一部分功能可以由asic、fpga等硬件实现。
[0157]
[智能手机]
[0158]
如图13的(b)所示，本实施方式的智能手机20具有第二协作建立部210a和遥控器处理部220a。
[0159]
第二协作建立部210a当从摄像机30经由无线lan通信i/f27接收连接请求时，起动摄像机30和电视机10各自的遥控应用。因此，第二协作建立部210a具有协作表生成部211a、遥控器决定部212和显示目标决定部213。
[0160]
协作表生成部211a进行协作的设备彼此的配对，生成协作表800。配对例如使用近距离无线通信等进行。例如，使用进行接近的设备彼此相互指定的按钮操作等的公知手段即可，没有特别限制。此外，例如，智能手机20可以构成为访问访问点40，从得到的连接设备的列表中选择电视机10和摄像机30。由此，能够得到设备的种类和识别该设备的设备id。设备的种类是能够确定影像显示装置、图像存储装置等的信息，设备id例如是ip地址等。
[0161]
协作表生成部211a对通过配对得到的设备的列表，基于设备id(ip地址)，访问服务器90等，获取该设备的遥控应用的信息(例如遥控应用名)。关联得到的信息，如图14所示生成协作表800。
[0162]
另外，获取遥控应用的信息时，智能手机20判断是否能够协作。例如，也有没有准备智能手机20的os用的遥控应用的情况。仅这样的没有准备遥控应用的设备，判断为不能够协作，不登记于协作表800。
[0163]
在生成的协作表800中，设备id810、确定该设备的种类的信息(种类信息)820、该设备的遥控应用的信息(遥控应用名)830和表示是否安装了由遥控应用名830指定的遥控应用的信息(安装信息)840关联登记。另外，在图14中例示了，作为安装信息840，在安装了遥控应用时登记为“1”、在没有安装时登记为“0”的情况。本实施方式的协作表800登记于智能手机20的存储部24。
[0164]
遥控器决定部212当接收来自摄像机30的连接请求时，在与同一子网连接的所有智能手机间，进行决定作为遥控器的智能手机20的遥控器决定处理。
[0165]
具体地说，判断包含于连接请求的设备id是否登记在本机保存的协作表800中，如果没有，则结束处理。另一方面，在登记了时，使本机为能够成为遥控器的候选智能手机。在同一子网内，同样地判断是否有作为候选智能手机的其它智能手机。
[0166]
此时，如果没有其它候选智能手机，则将本机决定为用作遥控器的智能手机20。另一方面，在有其它候选智能手机时，与该候选智能手机间进行交流，决定将哪一个用作遥控器的智能手机20。此处，例如使用分布式判优(distributed arbitration)的方法决定。
[0167]
另外，用作遥控器的智能手机20的选择方法能够是预先决定智能手机间的优先顺序而选择优选顺序最高的候选智能手机的方法、选择最接近摄像机30的候选智能手机的方法等。摄像机30与智能手机20的距离通过确定摄像机30的设置位置、根据gps或无线lan的电波强度，推测智能手机20的距访问点40的位置而计算出。
[0168]
另外，三者协作处理开始后，与选择为遥控器的智能手机20之间的通信中断时，摄像机30再次进行连接请求。此时，遥控器决定部212接受该连接请求，进行遥控器决定处理，决定用作遥控器的智能手机20，由此进行再选择。
[0169]
进而，本实施方式的遥控器决定部212，在后述的显示目标决定部213决定显示影像的电视机10时，判断在协作表800中用于三者协作的摄像机30、电视机10各自的遥控应用是否已安装。判断后，根据需要获取遥控应用并进行安装。
[0170]
显示目标决定部213在决定了本机用作遥控器的智能手机20时，决定同一子网内的电视机中作为摄像机30的图像的显示目标(显示目标装置)的电视机10。
[0171]
在作为同一子网内的电视机有多个登记于协作表800的电视机(候选电视机)时，将其中的一个选择为显示目标装置的电视机10。作为显示目标装置的电视机10的选择，例如通过下述方法等进行：预先决定候选电视机间的优选顺序，选择优选顺序最高的电视机的方法；将最接近智能手机20的候选电视机作为显示目标装置的电视机10的方法；将最接近摄像机30的候选电视机作为显示目标装置的电视机10的方法；或将多个候选电视机一览显示供用户选择的方法。
[0172]
另外，在选择最接近智能手机20的候选电视机时，例如，在各候选电视机与智能手机20之间进行近距离无线通信，将此时的电波强度最大的候选电视机作为最接近智能手机20的候选电视机。在选择最接近摄像机30的候选电视机时，例如，对摄像机30和各候选电视机，使用未图示的gps功能等，摄像机30和各候选电视机分别获取位置信息，根据该获取的各位置信息检测出摄像机30与各候选电视机的距离，决定最接近的候选电视机。
[0173]
遥控器处理部220a在本智能手机20、作为显示目标装置的电视机10与摄像机30之间执行三者协作处理。在本实施方式中，起动作为显示目标装置的电视机10用的遥控应用和摄像机30用的遥控应用，根据用户的指示分别执行两者的遥控。
[0174]
两遥控应用被起动，在智能手机20的触摸面板23显示的遥控器图像与第一实施方式的图11的(a)和图11的(b)的遥控器图像同样。本实施方式中，经由操作对象设备选择区域710选择操作对象设备时，与此对应地使该设备的遥控应用动作。
[0175]
例如，选择电视机10时，在智能手机20的触摸面板23显示电视机10用的遥控器图像(例如图11的(a))700。将经由该画面接受的指示向电视机10送出。本实施方式中，例如将
以电视机10的ip地址为目的地的命令向访问点40送出。
[0176]
此外，选择摄像机30时，在智能手机20的触摸面板23显示摄像机30用的遥控器图像(例如图11的(b))。将经由该遥控器图像接受的指示向摄像机30送出。本实施方式中，例如将以摄像机30的ip地址为目的地的命令向访问点40送出。
[0177]
智能手机20实现的各功能通过控制部21的微处理器将储存在存储部24的蓄存区域的程序在程序区域展开并执行而实现。此外，协作表800储存于蓄存区域。智能手机20实现的各功能中全部或一部分的功能可以由asic、fpga等硬件实现。
[0178]
[电视机]
[0179]
本实施方式的电视机10不进行用于三者协作的中继。由此，如图13的(c)所示，可以不具有第一协作建立部120和中继表500。此外，代替中继部130，具有中继部130a。
[0180]
本实施方式的中继部130a从智能手机20接收确定数据的发送源的设备id和对该数据的操作指示。此外，当从具有接收的设备id的摄像机30接收数据时，依据接收到的操作指示处理该数据。接收的操作指示例如是将该数据显示于显示部13、储存于存储部14等。此外，当结束处理时，对智能手机20通知该消息。另外，设备id、操作指示、数据经由无线lan通信i/f17接收。
[0181]
[三者协作处理的流程]
[0182]
说明具有以上的功能的电视机10、智能手机20和摄像机30的本实施方式的三者协作处理的流程。图15是用于说明本实施方式的三者协作处理的流程的流程图。另外，协作表800预先生成。
[0183]
此处，举例说明与第一实施方式同样，从记录于摄像机30的存储部34的动态图像中根据来自智能手机20的操作选择所需的动态图像而显示于电视机10的显示部13的情况。另外，此外的遥控器操作，例如将摄像机30保存的动态图像或静态图像存储于电视机10的存储部14的操作等，只要是通常的摄像机30和电视机10所具有的遥控器操作则并不特别限定于该例。
[0184]
首先，摄像机30的连接请求发送部310经由访问点40发送连接请求(步骤s321)。连接请求对同一子网内的全部智能手机发送。
[0185]
同一子网内的所有智能手机的遥控器决定部212分别接收来自摄像机30的连接请求时，进行遥控器决定处理，在该三者协作处理中，决定成为遥控器的智能手机20(步骤s221)。决定通过上述方法进行。
[0186]
之后，在步骤s221决定的智能手机20的显示目标决定部213从同一子网内的全部电视机中决定要成为显示目标装置的电视机10(步骤s222)。
[0187]
遥控器决定部212获取遥控应用(步骤s223)。遥控应用的获取处理的流程与第一实施方式的图10中说明的遥控应用获取处理大致同样。但是，在本实施方式中，对电视机10和摄像机30分别执行本处理。
[0188]
即，使用通知的摄像机30的设备id和决定的电视机10的设备id，检索协作表800，判断是否与各个设备id关联地安装了遥控应用。在安装了时，判断该应用的版本是否是最新版。在没有安装遥控应用时，或安装的遥控应用不是最新版时，从对应服务器下载最新版的遥控应用并进行安装。
[0189]
当结束遥控应用获取处理时，智能手机20的遥控器处理部220a起动各遥控应用，
在智能手机20的触摸面板23显示遥控器图像(步骤s224)。
[0190]
之后，遥控器处理部220a进行摄像机30的动态图像选择画面的传送指示(步骤s225)。该传送指示从智能手机20经由访问点40向电视机10和摄像机30发送。另外，传送指示包括电视机10、智能手机20和摄像机30各自的识别信息(例如ip地址)。
[0191]
接受它的摄像机30将动态图像选择画面的数据向作为显示目标装置的电视机10传送(步骤s322)。另外，动态图像选择画面与第一实施方式同样，例如是选择存储在摄像机30中的动态图像的画面。进行选择的画面是指例如显示动态图像的缩略图的图像等。
[0192]
接收到动态图像选择画面的数据的电视机10的中继部130a依据该数据，将摄像机30的动态图像选择画面显示于显示部13(步骤s121)。对发送源的智能手机20进行意味着画面显示结束的画面显示结束通知(步骤s122)。
[0193]
当接收画面显示结束通知时，智能手机20的遥控器处理部220a使得成为能够接受来自用户的遥控器操作的状态。由此，用户能够一边看着在电视机10的显示部13显示的动态图像选择画面一边进行对摄像机30的指示。
[0194]
遥控器处理部220a当接收来自用户的操作指示时，将该指示向电视机10和摄像机30发送(步骤s226)。此处接受的操作指示例如是选择的动态图像的再现指示等。动态图像的选择例如从在电视机10作为动态图像选择画面显示的动态图像的缩略图选择。
[0195]
接收到指示的摄像机30根据操作指示，将数据向电视机10传送(步骤s323)。例如，在接收到规定的动态图像的再现指示时，将该动态图像数据向电视机10传送。
[0196]
电视机10的中继部130a将传送的数据显示于显示部13(步骤s123)，并且将意味着结束显示处理的处理结束通知向智能手机20发送(步骤s124)。例如，在接收到动态图像数据时，开始该动态图像的显示。
[0197]
接收到处理结束通知的智能手机20的遥控器处理部220a更新遥控器图像(步骤s227)。
[0198]
如以上说明的那样，根据本实施方式，通过经由访问点40进行摄像机30的连接请求，自动决定显示目标的电视机10和用作遥控器的智能手机20，在它们之间执行三者协作处理。即，用户通过智能手机20的操作，能够进行摄像机30和电视机10的操作，能够将保存于摄像机30的影像数据显示于电视机10。
[0199]
这样，根据本实施方式，能够与第一实施方式同样以较小的负担实现操作性好的三者协作系统。
[0200]
另外，在上述第二实施方式中，构成为以摄像机30经由访问点40对同一子网内的智能手机20发送连接请求为触发，开始三者协作处理，但并不限定于此。
[0201]
例如，可以构成为以摄像机30设置于充电座为触发，开始三者协作处理。充电座例如能够进行无接点充电或来自电源插座的充电，根据设置的摄像机30的支持状况，选择无接点充电或自电源插座的充电。进而，充电座构成为通过近距离通信(nfc、ir通信、bluetooth等)能够将充电座设备id向摄像机30通知。
[0202]
此时，当摄像机30设置于充电座上时，例如开始无接点充电，且摄像机30通过nfc通信接收充电座的id。摄像机30对无线lan的同一子网内的全部设备，将本机的设备id和充电座的设备id作为触发而发送。
[0203]
由此，仅是将摄像机30设置于充电座，就能够执行三者协作处理。即，用户仅通过
将摄像机30设置于充电座，就能够利用规定的智能手机20控制摄像机30和电视机10。
[0204]
此外，第二实施方式中，在协作表800按各设备登记了各种类和遥控应用，但并不限定于此。例如，在按电视机和摄像机的组合得到遥控应用时，可以是具有与第一实施方式同样的结构的协作表。
[0205]
即，协作表生成部211a访问服务器90，对每个候选电视机，提取具有能够与该候选电视机协作操作的遥控应用的摄像机。将得到的摄像机作为候选摄像机与其遥控应用的信息一起登记。
[0206]
此时，遥控器处理部220a与第一实施方式同样，将与摄像机30和决定的电视机10关联地保存于协作表的遥控应用展开，执行遥控器处理。
[0207]
此外，上述各实施方式中，在智能手机20没有遥控应用时，自动地从服务器经由互联网下载并安装。但是并不限定于该方法。例如，可以在智能手机20的触摸面板23进行促使下载遥控应用的提示显示，下载和安装在接受用户的指示后进行。此外，第一实施方式的电视机10的中继应用的下载和安装也同样。
[0208]
以上说明了本发明的实施方式的例子。当然实现本发明的技术的结构并不限定于所述实施方式，能够有各种变形例。此外，文中、图中出现的数值等仅是一例，使用不同的数值也无损于本发明的效果。
[0209]
上述本发明的功能等的一部分或全部可以通过例如用集成电路设计等而由硬件实现。此外，也可以通过微处理器单元等解析实现各功能等的程序并执行而由软件实现。也可以同时使用硬件和软件。
[0210]
此外，图中所示的控制线、信息线表示了说明上所需的部分，并没有表示产品上的全部控制线、信息线。
[0211]
附图标记说明
[0212]
10：影像显示装置(电视机)，11：控制部，12：tv调谐器，13：显示部，14：存储部，15：hdmi通信i/f，16：有线lan通信i/f，17：无线lan通信i/f，18：近距离通信i/f，
[0213]
20：远程操作终端(智能手机)，21：控制部，22：便携电话网通信i/f，23：触摸面板，24：存储部，27：无线lan通信i/f，28：近距离通信i/f，
[0214]
30：外部设备(摄像机)，31：控制部，32：影像输入处理部，33：显示部，34：存储部，35：hdmi通信i/f，37：无线lan通信i/f，38：近距离通信i/f，
[0215]
40：访问点，90：服务器，
[0216]
120：第一协作建立部，121：配对部，122：遥控器决定部，130：中继部，130a：中继部，140：连接检测部，
[0217]
210：第二协作建立部，210a：第二协作建立部，211：协作表生成部，211a：协作表生成部，212：遥控器决定部，213：显示目标决定部，220：遥控器处理部，220a：遥控器处理部，
[0218]
310：连接请求发送部，
[0219]
500：中继表，510：候选智能手机的设备id，520：候选摄像机，521：候选摄像机的设备id，522：中继应用名，523：安装的有无，
[0220]
600：协作表，610：候选电视机的设备id，620：候选摄像机的设备id，630：遥控应用名，640：安装的有无，
[0221]
700：遥控器图像，710：操作对象设备选择区域，720：遥控器操作接受区域，
[0222]
800：协作表，810：设备id，820：种类，830：遥控应用名，840：安装的有无。