控制装置、控制系统和控制方法与流程

文档序号:14010552阅读:330来源:国知局
控制装置、控制系统和控制方法与流程

本发明涉及控制装置、控制系统和控制方法。



背景技术:

近年来,在各种领域中活用信息通信技术(ict)。其中,针对具备具有通信功能且与因特网等网络连接并使用的形式的电子设备或包含该电子设备的系统、即iot设备等网络设备的关注提高。例如,在日本特开2009-267666号公报中公开了判别本车内是否存在希望使用的无线通信装置的技术。

这样,用户需要在网络内搜索希望使用的网络设备或具有希望使用的功能的网络设备并进行使用。但是,有时用户并不掌握是否具有其他网络设备。



技术实现要素:

本发明的目的在于,提供能够向用户提示具有关联功能的外部设备的控制装置、控制系统和控制方法。

根据本发明的一个方式,控制装置包含能够选择性地利用的一个以上的内置功能,其中,所述控制装置具有:多个通信部,它们包含第1通信部和第2通信部;内置功能部,其执行所述内置功能;控制部,其判定选择了所述内置功能中的哪个所述内置功能,通过所述第1通信部进行的第1通信进一步判定是否存在执行与选择出的所述内置功能相关联的外部功能的外部设备;图标显示控制部,其在判定为存在所述外部设备的情况下,向用户提示除了所述内置功能部以外,所述外部设备也能够执行选择出的所述内置功能;以及通信控制部,其在根据所述图标显示控制部显示的图标显示选择了所述外部设备时,通过第2通信使所述第2通信部与所述外部设备一起执行所述外部功能。

根据本发明的一个方式,控制系统具有:所述控制装置;以及一个以上的所述外部设备。

根据本发明的一个方式,在由控制装置执行的控制方法中,该控制装置包含能够选择性地利用的一个以上的内置功能,其中,所述控制方法包含以下步骤:进行包括第1通信和第2通信在内的多个通信;执行所述内置功能;判定选择了所述内置功能中的哪个所述内置功能,通过所述第1通信进一步判定是否存在执行与选择出的所述内置功能相关联的外部功能的外部设备;在判定为存在所述外部设备的情况下,向用户提示所述外部设备也能够执行选择出的所述内置功能;以及在根据所述提示的图标显示选择了所述外部设备时,通过第2通信与所述外部设备一起执行所述外部功能。

发明效果

根据本发明,能够提供能够向用户提示具有关联功能的外部设备的控制装置、控制系统和控制方法。

附图说明

图1是示出第1实施方式的控制系统的结构例的概略的框图。

图2是示出第1实施方式的控制装置控制处理的一例的流程图。

图3是示出第2实施方式的控制系统的结构例的概略的框图。

图4是示出第2实施方式的各功能外部设备db的结构的一例的图。

图5是示出包含第2实施方式的智能手机和特定外部设备的控制系统的结构的一例的示意图。

图6是示出第2实施方式的特定外部设备的结构的一例的示意图。

图7a是示出选择了第2实施方式的智能手机的照相机模式时的状况的示意图。

图7b是示出基于第2实施方式的智能手机实现的特定外部功能提示的状况的示意图。

图7c是示出第2实施方式的图标显示的一例的示意图。

图7d是示出第2实施方式的控制系统中的辅助显示的一例的示意图。

图7e是示出第2实施方式的控制系统中的辅助显示的另一例的示意图。

图7f是示出第2实施方式的特定外部设备是镜头型照相机的情况下的使用时的状况的示意图。

图7g是示出第2实施方式的特定外部设备是安装在无人飞行器上的照相机的情况下的使用时的状况的示意图。

图8a是示出第2实施方式的智能手机控制处理的一例的流程图。

图8b是示出第2实施方式的智能手机控制处理的一例的流程图。

图8c是示出第2实施方式的智能手机控制处理的一例的流程图。

图9a是示出第2实施方式的照相机控制处理的一例的流程图。

图9b是示出第2实施方式的照相机控制处理的一例的流程图。

图10a是示出未连接特定外部设备时的图标显示的一例的示意图。

图10b是示出连接了特定外部设备时的图标显示的一例的示意图。

图10c是示出连接了特定外部设备时的图标显示的另一例的示意图。

图10d是示出连接了特定外部设备并进行使用时的图标显示的一例的示意图。

具体实施方式

[第1实施方式]

<控制系统的结构>

对本发明中的第1实施方式进行说明。在图1中作为框图示出第1实施方式的控制系统1的结构例的概略,参照该图1对本实施方式的控制系统1的结构进行说明。本实施方式的控制系统1包含控制装置10和一个以上的外部设备。另外,控制装置10只要是具有一个以上的内置功能和通信功能的电子设备即可,例如包含智能手机、平板pc、数字照相机等。并且,在本实施方式中,控制装置10和外部设备进行通信,但是,该通信的形式可以是有线,也可以是无线,进而,还可以经由因特网等通信线路进行。因此,本实施方式的外部设备可以包含在iot设备中。下面,以本实施方式的控制装置10具有多个内置功能的情况、即与外部设备进行不经由因特网的无线通信的情况为例进行说明。

控制装置10具有控制部11、显示控制部11a、第1通信部12a、第2通信部12b、记录部13、内置功能部14、操作部15、显示部16、时钟部17。

控制部11进行与控制装置10的各部的动作有关的控制。显示控制部11a例如根据控制装置10取得的信息生成显示信息,将该显示信息输出到后述显示部16。并且,显示控制部11a例如可以负责尺寸调整等与显示有关的图像处理。控制部11具有图标显示控制部11b和通信控制部11c。图标显示控制部11b例如取得与图标有关的信息,生成图标显示用的显示信息并将其输出到显示部16。通信控制部11c例如进行切换后述第1通信和第2通信的控制。另外,显示控制部11a可以包含在控制部11中,图标显示控制部11b或通信控制部11c也可以不包含在控制部11中。

控制装置10具有包含第1通信部12a和第2通信部12b的通信部。控制装置10所具有的第1通信部12a例如使用bluetooth(注册商标)lowenergy(ble)、nearfieldcommunication(nfc)、zigbee(注册商标)等低消耗功率的通信标准,例如在与外部设备之间进行通信。下面,将经由控制装置10所具有的第1通信部12a进行的通信称为第1通信。控制装置10所具有的第2通信部12b例如使用与wi-fi(注册商标)等第1通信相比为高速的通信标准或数据转送容量较大的通信标准,例如在与外部设备之间进行通信。下面,将经由控制装置10所具有的第2通信部12b进行的通信称为第2通信。

在记录部13中记录有与控制装置10的动作有关的各种设定和信息、从外部设备取得的信息等。内置功能部14执行控制装置10所具有的内置功能。例如,作为内置功能,作为控制装置10的智能手机例如包含拍摄、录音、显示、声音输出、电话、电子邮件等功能。例如,内置功能部14包含执行拍摄功能的拍摄功能部。拍摄功能部例如包含光学系统、摄像元件、控制电路等。操作部15取得用户的操作结果作为输入,将取得结果作为操作信号输出到控制部11。操作部15例如包含按钮、提钮、触摸面板。显示部16例如包含液晶显示器,根据显示控制部11a生成的显示信息进行显示。时钟部17生成时刻信息,将其输出到控制部11。该时刻信息例如在取得数据的记录时被使用。

本实施方式的控制系统1所具有的外部设备例如包含第1特定外部设备20。本实施方式的外部设备例如包含照相机、ic录音机、电视机、pc显示器、扬声器、pc、智能手机等。另外,例如在控制装置10是照相机的情况下等,外部设备也可以包含更换镜头、闪光灯等。

第1特定外部设备20具有控制部21、记录部23、外部功能部24。控制部21进行与第1特定外部设备20的各部的动作有关的控制。在记录部23中例如记录有执行外部功能部24中包含的外部功能时取得的信息、与第1特定外部设备20的各部的动作有关的信息等。外部功能部24执行第1特定外部设备20所具有的外部功能。例如,作为外部功能,作为第1特定外部设备20的照相机包含拍摄、录音等功能。例如,作为外部功能,作为第1特定外部设备20的ic录音机包含录音等功能。

第1特定外部设备20还具有第1通信部22a和第2通信部22b。第1通信部22a通过第1通信而与控制装置10所具有的第1通信部12a进行通信。第1通信例如包含控制装置10与外部设备之间的控制信号的发送接收。第1特定外部设备20的第2通信部22b通过第2通信而与控制装置10所具有的第2通信部12b进行通信。第2通信例如包含控制装置10与外部设备之间的外部设备的取得数据的发送接收。

将控制装置10所具有的多个内置功能中的、存在具有相关联的功能或相似的外部功能的外部设备的功能称为特定功能。控制装置10所具有的内置功能部14包含执行特定功能的特定功能部14a。并且,将与控制装置10所具有的特定功能相关联或相似的外部设备的功能称为特定外部功能,将具有特定外部功能的外部设备称为特定外部设备。第1特定外部设备20所具有的外部功能部24包含执行特定外部功能的特定外部功能部24a。

在控制装置10所具有的记录部13中设置有各功能外部设备db13a。在各功能外部设备db13a中例如记录有控制装置10所具有的特定功能与第1特定外部设备20所具有的特定外部功能之间的对应。关于各功能外部设备db13a中记录的信息,例如可以预先进行登记等并进行记录,也可以在控制装置10初次连接特定外部设备时等、各功能外部设备db13a中未记录与该特定外部设备有关的信息的情况下等取得并进行记录。

并且,第1特定外部设备20所具有的记录部23具有功能信息存储部23a。在功能信息存储部23a中记录有与第1特定外部设备20所具有的特定外部功能有关的信息。这种功能信息存储部23a中记录的信息例如包含特定外部功能的性能等,例如在向用户提示使用了特定外部功能时假设的信息的辅助显示等中被使用。该功能信息不需要是如名字那样的“功能”,除了作为能够搜索“功能”的线索的产品名或产品型号等确定产品本身的信息以外,还可以是产品领域和简称、以及用户设定的设定信息等关联信息。本实施方式的技术可以根据这种id这样的信息、关联信息而与控制系统1的外部进行通信,能够在外部搜索或解释该设备的“功能”。并且,本实施方式的技术能够根据此前的利用历史推测用户在该状况下经常使用的信息并进行提示。此时,这种关联信息、功能信息的存储部可以在控制系统1的外部,可以暂时记录与外部的搜索、判定结果协作的信息,记录部的一部分也可以在外部。

本实施方式的特定外部设备只要是至少具有与特定外部功能部24a相当的部分和通信部的电子设备即可,可以是一个,也可以是2个以上的多个。本实施方式的控制系统1例如还包含第2特定外部设备30。第2特定外部设备30具有控制部31、记录部33、外部功能部34、第1通信部32a、第2通信部32b。记录部33具有功能信息存储部33a。外部功能部34具有特定外部功能部34a。第2特定外部设备30所具有的各部与第1特定外部设备20所具有的各部相同,控制部31相当于控制部21,记录部33相当于记录部23,功能信息存储部33a相当于功能信息存储部23a,外部功能部34相当于外部功能部24,第1通信部32a相当于第1通信部22a,第2通信部32b相当于第2通信部22b。下面,对本实施方式的控制系统1具有这2个特定外部设备的情况进行说明。

另外,控制装置10的记录部13、第1特定外部设备20的记录部23、第2特定外部设备30的记录部33或它们所具有的各要素例如是闪存这样的非易失性存储器,但是,也可以还具有staticrandomaccessmemory(sram)或dynamicrandomaccessmemory(dram)这样的易失性存储器。并且,控制装置10的记录部13、第1特定外部设备20的记录部23、第2特定外部设备30的记录部33或它们所具有的各要素可以分别由一个存储器等构成,也可以组合多个存储器等来构成。并且,控制装置10的记录部13、第1特定外部设备20的记录部23或第2特定外部设备30的记录部33所具有的各要素中的2个以上可以由一个存储器构成。当然,也可以利用位于控制系统1的外部的数据库等作为该存储器的一部分。

另外,控制装置10的控制部11、显示控制部11a、第1特定外部设备20的控制部21、第2特定外部设备30的控制部31、它们所具有的各要素包含centralprocessingunit(cpu)、applicationspecificintegratedcircuit(asic)、fieldprogrammablegatearray(fpga)、digitalsignalprocessor(dsp)或graphicsprocessingunit(gpu)等集成电路等。控制装置10的控制部11、显示控制部11a、第1特定外部设备20的控制部21、第2特定外部设备30的控制部31、它们所具有的各要素可以分别由一个集成电路等构成,也可以组合多个集成电路等来构成。并且,控制装置10的控制部11、显示控制部11a、它们所具有的各要素中的2个以上可以分别由一个集成电路等构成,第1特定外部设备20的控制部21所具有的各要素中的2个以上可以分别由一个集成电路等构成,或者,第2特定外部设备30的控制部31所具有的各要素中的2个以上可以分别由一个集成电路等构成。例如控制装置10的记录部13、第1特定外部设备20的记录部23、第2特定外部设备30的记录部33或集成电路等根据其内部所具有的记录区域中记录的程序,进行这些集成电路等的动作。

<控制系统的动作>

在图2中作为流程图示出第1实施方式的控制装置控制处理的一例,参照该图2对本实施方式的控制系统1的动作进行说明。另外,设外部设备针对第1通信处于待机状态。

在步骤s101中,控制部11使显示部16一览显示与控制装置10所具有的各个内置功能有关的图标即各功能图标。例如,在控制装置10的电源接通时、睡眠状态被解除时等进行本步骤的处理。

在步骤s102中,控制部11根据与用户操作对应的操作部15的输出,判定是否选择了表示多个内置功能中的特定功能的图标。例如,在用户在步骤s101中选择了某个各功能图标时执行本步骤的处理。控制部11例如参照记录部13来判定所选择出的功能是否是特定功能。关于控制装置控制处理,在判定为选择了特定功能以外的内置功能的情况下进入步骤s110,在判定为选择了特定功能的情况下进入步骤s103。

在步骤s103中,控制部11通过第1通信来搜索特定外部设备。在本步骤中,控制部11参照各功能外部设备db13a来确定与选择出的特定功能对应的特定外部设备。控制部11使控制装置10所具有的第1通信部12a在与所确定的特定外部设备之间进行第1通信。该各功能外部设备db13a中记录的信息不需要是必须按照“功能”进行分类的信息,也可以是作为能够参照、搜索“功能”的线索的产品名或产品型号等记录了产品本身的信息。并且,各功能外部设备db13a中记录的信息可以是能够一一分析产品领域和简称、以及用户设定的设定信息等关联信息并判定是否具有该功能的信息。在设备的选择时,可以取得可访问的这种id这样的信息、关联信息。进而,控制系统1可以与其外部进行通信,能够在外部搜索或解释该设备的“功能”。即,各功能外部设备db13a可以在控制系统1的外部。另一方面,控制系统1可以在其内部具有暂时记录其外部的搜索、判定结果的部分。功能不需要必须是相似功能,也可以搜索录音功能,能够搜索具有录音功能的数字照相机、摄像机、智能手机。

在步骤s104中,控制部11根据第1通信的结果,判定与选择出的特定功能对应的特定外部设备当前是否位于控制装置10的周围。关于控制装置控制处理,在判定为存在特定外部设备的情况下进入步骤s105,在判定为不存在特定外部设备的情况下进入步骤s110。这里,在无线通信中利用消耗功率较少、始终能够允许通信(等待接收等)的bluetoothlowenergy(ble)等即可。ble的通信是命令主体,该命令通信的通信期间是一时性的,所以,接连切换通信线路,例如如果利用ble的通信,则能够依次搜索通信对方。

在步骤s105中,控制部11通过第1通信从特定外部设备取得信息。在本步骤中,控制部11从特定外部设备取得的信息例如包含与表示该特定外部设备的图标和特定外部功能的性能或特征有关的信息。所取得的信息被记录在各功能外部设备db13a中。并且,控制部11使显示部16显示与选择出的特定功能有关的图标。这里显示的图标包含表示特定功能部14a的图标和表示本步骤中取得的特定外部设备的图标。通过这样进行图标显示,本实施方式的控制装置10能够以与选择内置功能相同的感觉,直观地自由自在地与外部设备进行协作。如果用户使用本实施方式的控制装置10,则用户能够在视觉上立即想起包中或桌子抽屉中的设备,能够进行迅速的操作。通过该操作,如果是照相机拍摄功能,则用户能够进行拍摄区域的放大或最佳功能的选择。如果从特定外部设备取得的信息是图标,则信息量也较少,根据本实施方式的技术,能够提高通信速度,能够以通信容量较少的无线方式简单地进行通信。

在步骤s106中,控制部11例如根据与用户操作对应的操作部15的输出,判定是否选择了所显示的图标中的表示特定外部设备的图标。关于控制装置控制处理,在判定为选择了表示特定外部设备的图标的情况下进入步骤s107,在判定为未选择表示特定外部设备的图标的情况下进入步骤s111。这里,以选择一个图标的形式进行说明,但是,在利用多个照相机协作进行拍摄的用途中,也可以能够选择多个图标。进而,控制装置10例如也可以一并记载并显示各功能外部设备db13a中记录的特征。通过这种研究,用户通过称为图标操作的、利用个人电脑或智能手机建立的用户接口的延长,能够简单地选择自己能够使用的其他关联设备,而不进行特别的追加操作。

即,在这种结构中,控制部11判定选择了控制装置10的内置功能中的哪个内置功能。并且,控制部11通过第1通信部12a进行的通信,进一步判定是否存在执行与选择出的内置功能关联相似的外部功能的外部设备。例如,控制部11所具有的图标显示控制部11b例如通过图标显示向用户进行提示。这样,本实施方式的技术能够提供在根据该图标显示选择了上述外部设备时能够通过第2通信部12b无缝地与外部设备进行协作的控制装置10或控制系统1和控制方法。另外,例如控制部11所具有的通信控制部11c进行各通信的切换等。

在步骤s107中,控制部11起动选择出的图标所表示的特定外部设备。在本步骤中,控制部11生成用于起动该特定外部设备的控制信号,使控制装置10所具有的第1通信部12a通过第1通信向特定外部设备进行发送。在接收到该控制信号时,特定外部设备接通电源,或者解除睡眠模式,开始进行其动作。

在步骤s108中,控制部11使控制装置10所具有的第2通信部12b在与特定外部设备之间建立第2通信。然后,控制部11通过第1通信或第2通信对特定外部设备的动作进行控制,并且,通过第2通信取得特定外部设备取得的数据。即,用户能够开始利用特定外部设备。在步骤s109中,控制部11判定是否结束该特定外部功能。例如可以根据与用户操作对应的操作部15的输出来进行该判定,也可以根据是否能够继续进行与特定外部设备之间的通信来进行该判定。关于控制装置控制处理,在判定为不结束该特定外部功能的情况下,继续进行与特定外部功能有关的处理,直到在步骤109中判定为结束为止,在判定为结束该特定外部功能的情况下返回步骤s101。

在步骤s102中选择了特定功能以外的内置功能的情况下或在步骤s104中未发现特定外部设备的情况下,在步骤s110中,控制部11使显示部16显示表示内置功能部14的图标。然后,控制装置控制处理进入步骤s111。

在步骤s110之后或在步骤s106中未选择表示特定外部设备的图标的情况下,在步骤s111中,控制部11例如根据与用户操作对应的操作部15的输出,判定是否选择了所显示的表示控制装置10所具有的内置功能部14的图标。并且,在步骤s111中,控制部11判定控制装置10所具有的内置功能部14的选择项是否是一个。关于控制装置控制处理,在选择了表示内置功能部14的图标或判定为选择项是一个的情况下进入步骤s113,在判定为未选择表示内置功能部14的图标的情况下进入步骤s112。

在步骤s112中,控制部11判定是否返回各功能图标一览显示。在本步骤中,例如在步骤s111中操作部15检测到返回、结束等用户操作的情况下,在操作部15在规定时间内未检测到用户操作的情况下等,判定为返回。关于控制装置控制处理,在判定为返回的情况下返回步骤s101,在未判定为返回的情况下返回步骤s111。

在步骤s113中,控制部11开始进行选择出的图标所表示的内置功能部14的动作。在步骤114中,控制部11例如根据与用户操作对应的操作部15的输出,判定是否结束该内置功能部14的动作。关于控制装置控制处理,在判定为不结束该内置功能部14的动作的情况下,继续进行与选择出的内置功能有关的处理,直到在步骤s114中判定为结束为止,在判定为结束该内置功能部14的动作的情况下返回步骤s101。

另外,在本实施方式中,说明了一个特定外部设备具有一个特定外部功能的情况,但是不限于此。例如,特定外部功能部可以具有执行与多个特定功能分别对应的多个特定外部功能的特定外部功能模块。这种情况下,例如,可以在s103中代替特定外部设备而搜索特定外部功能模块,在s105中显示表示特定外部功能模块的图标。

并且,叙述了本实施方式的控制部11使显示部16一览显示图标,但是不限于此。控制部11使显示部16显示的内容是控制装置10或特定外部设备所具有的各个功能,只要是能够确定控制装置10或特定外部设备的信息即可,可以是任意的,例如可以是字符串。例如,在邮件功能的情况下等,也可以不是机械要素,而是使功能图像化的显示。并且,设本实施方式的控制部11通过第1通信来取得特定外部功能的性能或特征、表示特定外部设备的图标的信息等进行了说明,但是,这些信息也可以预先记录在各功能外部设备db13a等中。

另外,叙述了控制部11在未发现特定外部设备的情况下使显示部16显示表示内置功能部14的图标,但是不限于此。控制部11例如也可以在各功能外部设备db13a中预先记录有特定功能与特定外部设备的对应的情况下,即使未通过通信而发现特定外部设备,也进行提示,向用户提示该特定外部设备的准备。

并且,设在本实施方式的各功能外部设备db13a中预先记录有与各个特定功能对应的特定外部设备进行了说明,但是不限于此。例如,控制部11也可以在选择了控制装置10所具有的内置功能时,通过第1通信搜索并判定是否存在能够执行与选择出的内置功能相关联或相似的功能的特定外部设备。

并且,例如在图2中作为流程图示出的控制装置控制处理中的步骤s105中,控制部11也可以根据所取得的特定外部功能的性能或特征,显示在使用了特定外部设备的情况下假设的信息作为辅助显示。例如,在特定外部功能是拍摄功能的情况下,辅助显示包含与假设为在使用特定外部设备的情况下能够取得的视场角、焦距、感光度等外部设备的设定的信息有关的显示。辅助显示可以是图像,也可以是图形,还可以是字符串。并且,辅助显示可以是使其功能可视化的信息,如果是望远镜头,则较大地进行拍摄,可以显示其效能。

并且,控制部11可以同时使用特定功能部14a和特定外部设备。例如,控制部11可以在选择了动态图像拍摄功能时,通过特定功能部14a进行摄像,通过特定外部设备中包含的ic录音机取得声音。关于特定外部设备取得的数据,例如可以通过第2通信逐次取得,也可以通过第1通信发送时钟部17的输出等,此后能够同步。在以此后能够同步的方式取得了数据的情况下,可以通过第2通信在特定外部设备的利用后取得该数据,也可以经由外部的记录介质取得该数据。

<控制系统的优点>

这样,本实施方式的控制系统1在用户选择了控制装置10的内置功能时,搜索能够执行与该内置功能相关联的功能的特定外部设备。这里,在检测到相应的特定外部设备时,能够同时向用户提示或推荐能够执行该内置功能的特定功能部14a和特定外部设备。因此,用户仅选择内置功能,就能够选择能够执行相互相似、关联、协作的功能的特定功能部14a和特定外部设备,而不用有意识别。

并且,如果本实施方式的控制系统1对使用特定外部设备的情况下假设的信息进行辅助显示,则用户能够容易地判断是否应该使用所提示的特定外部设备。

[第2实施方式]

对本发明中的第2实施方式进行说明。这里,对与第1实施方式的不同之处进行说明,对相同部分标注相同标号并省略其说明。

<控制系统的结构>

在图3中作为框图示出第2实施方式的控制系统1的结构例的概略,参照该图3对本实施方式的控制系统1的结构进行说明。下面,以本实施方式的控制系统1例如包含作为控制装置10的智能手机100、作为特定外部设备的ic录音机200、镜头型照相机即第1照相机300、能够进行空中拍摄的无人飞行器即第2照相机400的情况为例,更加具体地对控制系统1的结构和动作进行说明。因此,本实施方式的智能手机100所具有的特定功能例如包含录音功能和拍摄功能。

智能手机100具有控制部110、显示控制部111、第1通信部121、第2通信部122、记录部130、内置正面照相机部141、内置背面照相机部142、内置拾音部143、操作部150、显示部160、时钟部170、方位/视场角判定部180。控制部110具有图标显示控制部112和通信控制部113。与第1实施方式的控制装置10的结构进行比较,控制部110相当于控制部11,显示控制部111相当于显示控制部11a,图标显示控制部112相当于图标显示控制部11b,通信控制部113相当于通信控制部11c,第1通信部121相当于控制装置10所具有的第1通信部12a,第2通信部122相当于控制装置10所具有的第2通信部12b,记录部130相当于记录部13,操作部150相当于操作部15,显示部160相当于显示部16,时钟部170相当于时钟部17。

在记录部130中设置有各功能外部设备db131。各功能外部设备db131相当于第1实施方式的控制装置10所具有的各功能外部设备db13a。这里,图4示出本实施方式的各功能外部设备db131的结构的一例。如图4所示,在各功能外部设备db131中记录的信息中例如记录有具有与智能手机100所具有的特定功能相似或关联的外部功能的特定外部设备的信息。在该信息中例如包含设备名、类别、特定外部功能、该功能所具有的特征或性能、表示该设备的图标的信息等。

例如,在本实施方式中,将第1设备作为设备名,记录与ic录音机200有关的信息,记录其特定外部功能是录音功能,其特征是能够选择线性pcm作为录音形式,并且能够进行噪声去除,图标i1是图4所示的图标等。例如,在本实施方式中,将第2设备作为设备名,记录与第1照相机300即镜头型照相机有关的信息,记录其特定外部功能是拍摄功能,其特征是能够进行望远拍摄,作为其他特征,例如通过使用适配器能够固定在智能手机100上,图标i2是图4所示的图标等。例如,在本实施方式中,将第3设备作为设备名,记录与第2照相机400即安装在无人飞行器上的照相机有关的信息,记录其特定外部功能是拍摄功能,其特征是能够进行广角拍摄,作为其他特征,能够飞行移动并进行空中拍摄,图标i3是图4所示的图标等。另外,这些信息记录在各功能外部设备db131中的定时在后面叙述。并且,与特定外部设备有关的设备名例如可以是用于识别设备的id。

这里,比较简单地示出本实施方式中显示的图标,举出各个图标分别表示一个外部设备的例子,但是,也可以能够搜索如照相机和闪光灯、pc和键盘、“带闪光灯的照相机”那样关联的设备。该情况下,即使用户无法搜索一个设备,也能够相关联地进行搜索,能够利用的设备增多。图标容易理解即可,也可以不是图形,可以利用文本、文字进行显示。但是,在图形的情况下,超越语言,能够容易地直观地理解。

并且,该表形式不需要必须限于这种形式,并且,这里记载的各项目不是必要的。该功能信息不需要是如名字那样的“功能”,除了作为能够搜索“功能”的线索的产品名或产品型号等确定产品本身的信息以外,还可以是产品领域和简称、以及用户设定的设定信息等关联信息。本实施方式的技术可以根据这种id等信息、关联信息而与控制系统1的外部进行通信,能够在外部搜索或解释该设备的“功能”。此时,各功能外部设备db131、功能信息存储部331等可以在控制系统1的外部,并且,可以暂时记录外部的搜索、判定结果。

功能还能够置换为利用场景。例如,控制装置10在希望使用照相机时,能够判定为还希望进行录音,相似的选择控制是有效的。进而,在s103中使用“搜索”这样的语言,但是,本实施方式的技术还能够实现学习用户的利用历史等并建议外部设备这样的应用,该情况下,能够通过认证、认定、检测这样的方法选出设备。图标信息可以通过通信得到,或者可以通过预定的对应关系得到。即,本实施方式的控制装置10能够表现为判定用户的设备利用场景而切换基于上述第1通信的信息的控制装置。这里,控制系统1可以根据场景来切换利用第1通信探寻外部设备时的信息,相应的外部设备对其进行响应,也可以对利用第1通信进行响应的外部设备进行识别、选定、取舍选择,图标显示相应的外部设备。

这里,再次参照图3继续对本实施方式的控制系统1的结构进行说明。内置正面照相机部141、内置背面照相机部142、内置拾音部143相当于第1实施方式的控制装置10所具有的特定功能部14a。

内置正面照相机部141和内置背面照相机部142例如分别包含摄像元件和摄像光学系统,根据摄像元件的摄像面上成像的被摄体像生成图像数据并进行输出。另外,在本实施方式中,内置正面照相机部141和内置背面照相机部142同样执行拍摄功能,但是,配置在相互不同的位置,以使得能够拍摄相互不同的方向。内置拾音部143例如具有麦克风,进行拾音并输出声音数据。另外,声音数据不限于人的声音,包含拾取的所有声音的数据。方位/视场角判定部180例如根据内置正面照相机部141、内置背面照相机部142等取得的图像,判定智能手机100的当前的拍摄范围、拍摄方向等。并且,方位/视场角判定部180例如可以包含陀螺仪传感器、电子指南针、gps等传感器,并且,可以根据这些传感器的输出来判定拍摄范围、拍摄方向等。进而,方位/视场角判定部180可以一并使用图像和传感器输出值来判定拍摄范围、拍摄方向等。

ic录音机200至少具有用于执行录音功能的特定外部功能部和通信部。

第1照相机300具有控制部310、第1通信部321、第2通信部322、记录部330、摄像部340、操作部350、图像特征提取部360、时钟部370、传感器部380。第1照相机300具有与第1实施方式的第1特定外部设备20所具有的特定外部功能部24a相当的特定外部功能部。该特定外部功能部例如包含摄像部340、图像特征提取部360。

控制部310相当于第1实施方式的第1特定外部设备20所具有的控制部21。本实施方式的控制部310具有裁剪部311、拍摄控制部312、焦点/视场角信息部313、视场角控制部314、尺寸调整部315。裁剪部311对图像实施裁剪加工。拍摄控制部312例如进行与拍摄有关的各种设定,对基于摄像部340的摄像进行控制。焦点/视场角信息部313根据摄像部340取得的图像,取得与第1照相机300拍摄时的焦点的状态、视场角等的设定有关的信息。视场角控制部314例如根据焦点/视场角信息部313的输出,对摄像部340的摄像的视场角进行控制。尺寸调整部315例如对摄像部340取得的图像实施尺寸调整加工。

与第1实施方式的第1特定外部设备20的结构进行比较,第1通信部321相当于第1通信部22a,第2通信部322相当于第2通信部22b,记录部330相当于记录部23,功能信息存储部331相当于功能信息存储部23a,摄像部340相当于特定外部功能部24a。记录部330具有功能信息存储部331。在功能信息存储部331中例如记录有第1照相机300所具有的功能、该功能的性能、表示该设备的图标的信息等。摄像部340具有光学系统341。摄像部340例如还具有摄像元件,根据经由光学系统341入射的光线在该摄像元件的摄像面上成像的被摄体像,生成图像数据并进行输出。

操作部350取得用户的操作结果。并且,操作部350例如包含按钮、拨盘、滑块、触摸面板等。图像特征提取部360例如检测摄像部340取得的图像中包含的特征。这里提取的图像特征例如用于被摄体的识别、被摄体的判别等。时钟部370输出时刻信息。传感器部380例如包含电子指南针、加速度传感器、亮度传感器、gps传感器等,取得第1照相机300的壳体、周围的状态并进行输出。

第2照相机400至少具有用于执行拍摄功能的特定外部功能部和通信部。

在图5中作为示意图示出第2实施方式的包含智能手机100和第1照相机300的控制系统1的结构的一例。智能手机100可以具有图5所示的适配器190。此时,第1照相机300可以是经由适配器190所具有的镜头安装部191固定在智能手机100上的形式。并且,在图6中作为示意图示出第2实施方式的第2照相机400的结构的一例。例如如图6所示,第2照相机400还具有飞行部,能够进行空中拍摄。另外,该飞行部可以进行无人机那样的自主飞行,也可以接受无线操纵进行飞行。

<第2实施方式的控制系统的动作的概要>

在图7a中作为示意图示出选择了第2实施方式的智能手机100的照相机模式时的状况,参照该图7a对本实施方式的控制系统1的动作的概要进行说明。照相机模式是智能手机100所具有的特定功能中包含的拍摄功能,例如由内置正面照相机部141或内置背面照相机部142来执行。用户u1例如在想拍摄关注被摄体即鸟o1时,取出智能手机100,选择照相机模式以开始进行拍摄。用户u1例如根据显示部160中显示的各功能图标,对操作部150中包含的触摸面板进行操作来选择照相机模式。此时,智能手机100使用第1通信对具有拍摄功能作为特定外部功能的第1照相机300和第2照相机400请求功能信息。

这样,本实施方式的控制装置10可以预先取得用户“想”的事情,根据日期时间、季节、用户所在的场所、移动的方向、看到的内容、观察的内容、听到的声音、设备、装置的使用方法等,控制装置10可以判定该用户或设备的利用场景并进行建议。即,本实施方式的控制装置10能够改写为如下的控制装置:判定用户的设备利用场景,确定该设备利用场景中请求的关联的外部功能,将上述第1通信中使用的信息切换为能够搜索能够执行该外部功能的外部设备的信息。并且,在本实施方式的控制系统1中,可以根据场景来切换利用第1通信探寻外部设备时的信息,相应的外部设备对其进行响应,控制装置10可以对利用第1通信进行响应的外部设备进行识别、选定、取舍选择,图标显示相应的外部设备。本实施方式的控制装置10切换显示图标,以使得在拍摄较远的部分时推荐望远镜头,在拍摄较近的部分时推荐微距镜头。关于快速运动的部分,切断高速快门,将摄像的性能等记载在图4的表、数据库等中即可。可以以能够根据利用场景进行区分的方式准备该表等。

图7b是示出第2实施方式的智能手机100提示特定外部功能时的状况的示意图。通过第1通信检测到第1照相机300和第2照相机400,并且,在取得功能信息后,如图7b所示,智能手机100使显示部160显示存在特定外部设备或能够使用特定外部设备的意思的通知a1。另外,通知a1可以通过图标的显示来实现。

这里,图7c是示出利用图标显示实现通知a1时的一例的示意图。例如,图标i4表示智能手机100所具有的内置正面照相机部141或内置背面照相机部142。例如,图标i2表示第1照相机300,图标i3表示第2照相机400。这些多个图标可以一览显示,例如也可以根据包含滑动的用户操作而依次显示。用户对这样显示的图标进行操作或选择,由此能够选择功能,而不用有意识别是通过智能手机100所具有的特定功能部执行照相机模式,还是与特定外部设备进行通信来执行照相机模式。并且,例如在用户将第1照相机300放入包中时、将第2照相机400放入车内时等、忘记具有特定外部设备时,也能够通过图标等通知a1想起具有能够使用的特定外部设备。在选择了所显示的图标中的表示特定外部设备的图标的情况下,智能手机100开始与该特定外部设备进行第2通信。此时的通信例如是第2通信部122进行的包含外部设备取得的连续数据取得在内的持续通信。在第2通信中发送实时取景图像,所以,假设通信容量较多的wi-fi通信等,与所述ble不同,不是简单的访问、响应这样的一时性的信息交换,在建立通信需要劳力和时间的意思中,在依次发送容量较大的数据的方面,都成为占用线路的通信。此时,ble能够进行如下动作:能够搜索其他设备,在基于wi-fi的线路占用时,作为另一个通信,能够自由改变访问对方等。

并且,如上所述,在显示表示特定外部设备的图标时或显示前,智能手机100可以显示在使用该特定外部设备时假设的效果作为辅助显示。图7d是示出第2实施方式的控制系统1中的辅助显示的一例的示意图。这里,对显示在使用第1照相机300时假设的效果的情况的一例进行说明。并且,在选择照相机模式后,例如通过智能手机100所具有的内置背面照相机部142执行实时取景显示。例如,如图7d所示,在显示部160中显示实时取景显示。此时,关注被摄体即鸟o1飞向远方,关于所取得的实时取景显示,无法以适合于图像内的关注被摄体即鸟o2的视场角进行拍摄。此时,智能手机100根据利用第1通信从第1照相机300取得的信息,例如进行如下的辅助显示:如通知a2那样显示第1照相机300的镜头等的规格,并且,如通知a3那样显示在使用第1照相机300时能够取得的图像的视场角。通过这种辅助显示,例如用户u1能够容易地判断选择由包含所显示的图标所表示的内置正面照相机部141或内置背面照相机部142的特定功能部执行的功能和由第1照相机300执行的功能中的哪个功能比较好。

进而,在图7e中作为示意图示出第2实施方式的控制系统1中的辅助显示的另一例。例如,如图7e所示,在基于智能手机100所具有的特定功能部的拍摄中,有时感光度不足而使取得的图像变暗。智能手机100根据利用第1通信从第1照相机300取得的信息,例如进行如下的辅助显示:如通知a4那样显示使用第1照相机300的情况的效果,并且,如通知a5那样显示在使用第1照相机300时能够取得的图像的视场角等。进而,智能手机100可以根据利用第1通信从第1照相机300取得的信息,对实时取景显示的图像实施图像处理,虚拟地表现能够利用第1照相机300取得的图像的曝光等并使显示部160进行显示。

在图7f中作为示意图示出第2实施方式的特定外部设备是第1照相机300的情况下的使用时的状况。并且,在图7g中作为示意图示出第2实施方式的特定外部设备是第2照相机400的情况下的使用时的状况。这样,用户u1能够与选择智能手机100所具有的特定功能部的情况同样地,选择并使用第1照相机300这样的镜头型照相机或第2照相机400这样的安装在无人飞行器上的照相机的特定外部设备。并且,用户u1例如能够取得在事前的辅助显示中假设的图像。

如上所述,智能手机100进行图标显示并进行辅助显示,能够在特定功能部的基础上提示用户u1能够使用的特定外部设备。

<第2实施方式的控制系统的动作>

在图8a、图8b和图8c中作为流程图示出第2实施方式的智能手机控制处理的一例,参照该图8a、图8b和图8c,以选择照相机模式的情况为例对本实施方式的控制系统1的动作进行说明。

在步骤s201中,控制部110在一览显示各功能图标后,判定是否选择了照相机模式。关于智能手机控制处理,在选择了包含照相机模式以外的特定功能的内置功能的情况下、没进行任何选择的情况下等判定为未选择照相机模式的情况下进入步骤s202,在判定为选择了照相机模式的情况下进入步骤s203。在步骤s202中,控制部110进行与选择出的智能手机100所具有的内置功能有关的各个处理。然后,例如智能手机控制处理返回步骤s201。

在步骤s203中,控制部110选择了照相机模式,所以,使用第1通信对第1照相机300和第2照相机400请求各设备功能信息。然后,控制部110将所取得的各设备功能信息记录在各功能外部设备db131中。

在步骤s204中,控制部110在检测到特定外部设备的情况下,从各功能外部设备db131读出图标信息,使显示部160显示表示特定外部设备的图标和表示特定功能部的图标。这里,例如设为仅检测到第1照相机300。此时,控制部110使显示部160显示分别表示内置正面照相机部141、内置背面照相机部142和第1照相机300的3个图标。

并且,控制部110生成接通第1照相机300的电源的控制信号,通过第1通信对第1照相机300发送该控制信号。并且,在第1照相机300所具有的特定外部功能部具有用于执行多个特定外部功能的多个特定外部功能模块的情况下,该控制信号包含用于指定起动哪个特定外部功能模块的信号。

在步骤s205中,控制部110起动智能手机100的拍摄功能。已知用户至少希望使用拍摄功能,所以,在本步骤中起动内置正面照相机部141或内置背面照相机部142。这里,例如设为内置背面照相机部142起动,下面继续进行说明。在步骤s206中,控制部110从内置背面照相机部142取得图像,使显示部160开始进行实时取景显示。

在步骤s207中,控制部110判定拍摄姿态和视场角。在本步骤中,控制部110参照各功能外部设备db131或者进行第1通信,从步骤s204中检测到的第1照相机300取得例如焦距和电子指南针等传感器部380的输出值,判定第1照相机300的拍摄姿态、视场角。另外,例如也可以在步骤s203中取得焦距等第1照相机300固有的信息。并且,方位/视场角判定部180判定基于智能手机100的内置背面照相机部142的拍摄方向和视场角。

在步骤s208中,控制部110根据步骤s207中的判定结果,判定智能手机100所具有的内置背面照相机部142和第1照相机300的拍摄方向是否是相同方向。另外,这里,判定为朝向相同方向包含如下情况:例如,用户已经准备第1照相机300以进行使用,并且,智能手机100和第1照相机300的拍摄方向一致。用户已经准备了第1照相机300的情况例如可能包含看到步骤s204中显示的通知等而进行准备的情况。另一方面,除了准备了第1照相机300、但是拍摄方向不同的情况以外,在放入包中等的情况下等,判定为未朝向相同方向。关于智能手机控制处理,在判定为朝向相同方向的情况下进入步骤s209,在判定为未朝向相同方向的情况下进入步骤s211。

在步骤s209中,控制部110使第1照相机300对摄像部340取得的图像进行解析。在本步骤中,例如第1照相机300所具有的控制部310针对摄像部340取得的图像,取得包含该图像取得时的视场角和该图像的焦点的信息的与设定有关的信息。并且,图像特征提取部360提取该图像的特征部。并且,控制部310例如将该图像的特征部设为对象部位,结合该对象部位进行autofocus(af)、automaticexposure(ae)、automaticwhitebalance(awb)。进而,控制部310使用第1通信向智能手机100发送这些af、ae、awb中使用的参数等与第1照相机300的设定有关的信息。并且,控制部110取得该信息。

在步骤s210中,控制部110根据步骤s209中取得的信息进行辅助显示。然后,智能手机控制处理进入步骤s211。

在步骤s211中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否选择了例如表示第1照相机300的图标即表示特定外部设备的图标。关于智能手机控制处理,在判定为选择了表示特定外部设备的图标的情况下进入步骤s214,在判定为未选择表示特定外部设备的图标的情况下进入步骤s212。

在步骤s212中,控制部110判定是否选择了表示内置正面照相机部141或内置背面照相机部142的图标。关于智能手机控制处理,在判定为选择了表示内置正面照相机部141或内置背面照相机部142的图标的情况下进入步骤s213,在判定为未选择表示内置正面照相机部141或内置背面照相机部142的图标的情况下返回步骤s211。

在步骤s213中,控制部110通过选择出的内置正面照相机部141或内置背面照相机部142执行与拍摄功能有关的动作。与该功能有关的动作与在步骤s111中选择了表示特定功能部14a的图标的情况相同。在与内置拍摄功能有关的动作结束后,智能手机控制处理返回步骤s201。

在步骤s214中,控制部110开始在与第1照相机300之间进行第2通信。在步骤s215中,控制部110判定是否建立了第2通信。关于智能手机控制处理,在判定为建立了第2通信的情况下进入步骤s216,在判定为未建立第2通信的情况下进入步骤s221。

在步骤216中,控制部110通过第2通信从第1照相机300取得摄像部340生成的图像,将其显示在显示部160中,开始进行实时取景显示。并且,断开正在起动的内置背面照相机部142。

在步骤s217中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否对第1照相机300发送拍摄指示。关于智能手机控制处理,在判定为进行拍摄指示的情况下进入步骤s218,在未判定为进行拍摄指示的情况下进入步骤s219。

在步骤s218中,由于第2通信被与实时取景显示等有关的通信占用,所以,控制部110例如使用第1通信对第1照相机300发送拍摄指示用的控制信号。另外,如果是能够通过第2通信发送该控制信号的状况,则可以通过第1通信和第2通信中的任意一方发送该控制信号。

在步骤s219中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否对第1照相机300请求图像。在判定为进行图像请求的情况下进入步骤s220,在判定为未进行图像请求的情况下返回步骤s201。在步骤s220中,控制部110记录该图像。此时,控制部110例如根据与用户操作对应的操作部150的输出,决定将该图像记录在智能手机100所具有的记录部130、第1照相机300所具有的记录部330、与智能手机100连接的外部介质或与第1照相机300连接的外部记录介质中的哪个记录区域中。在记录后,智能手机控制处理返回步骤s201。

这样,在本实施方式的控制系统1中,与特定功能部一起提示能够执行与用户选择出的智能手机100所具有的特定功能相似或关联的特定外部功能的特定外部设备。因此,用户仅选择智能手机100所具有的内置功能,就能够得知是否存在能够协作使用的特定外部设备,并且,如果选择该特定外部设备,则能够容易地进行功能的扩展。

另一方面,第2通信例如是wi-fi等,但是,这种通信的建立需要时间等,有时很难建立通信。下面,对在步骤s215中判定为无法建立第2通信的情况进行说明。但是,设为此时能够建立第1通信。

在步骤s221中,未建立第2通信,无法取得第1照相机300拍摄的图像,所以,控制部110根据智能手机100所具有的内置背面照相机部142取得的图像,继续进行实时取景显示。

在步骤s222中,控制部110通过第1通信取得第1照相机300的镜头规格,使显示部160显示该镜头规格。这里取得的镜头规格例如包含焦距。

在步骤s223中,控制部110通过第1通信取得第1照相机300的拍摄姿态。在步骤s224中,控制部110通过第1通信对第1照相机300发送提取拍摄对象物的特征和取得该特征的画面内位置信息的控制信号,并且,接收并取得第1照相机300取得的信息。在步骤s225中,控制部110通过第1通信使第1照相机300取得与该图像的例如控制有关的信息。该信息包含图像内的对象部位的af、ae、awb数据等与第1照相机300的设定有关的信息。并且,控制部110通过第1通信使第1照相机300发送该信息,取得该信息。

在步骤s226中,控制部110对步骤s223中取得的第1照相机300的拍摄姿态和方位/视场角判定部180输出的智能手机100所具有的内置背面照相机部142的拍摄姿态进行比较,判定在第1照相机300与智能手机100之间拍摄方向或姿态是否相同。关于智能手机控制处理,在判定为拍摄方向或姿态相同的情况下进入步骤s227,在判定为拍摄方向或姿态不相同的情况下进入步骤s234。

在步骤s227中,控制部110根据智能手机100所具有的内置背面照相机部142取得的图像以及步骤s224中取得的对象物特征和该特征的图像内位置信息,判定是否在图像内包含共通的对象物。关于智能手机控制处理,在判定为存在共通的对象物的情况下进入步骤s228,在判定为不存在共通的对象物的情况下进入步骤s230。

在步骤s228中,控制部110开始进行如下处理:针对智能手机100所具有的内置背面照相机部142取得的实时取景显示的图像,反映步骤s225中取得的对象部位的af、ae、awb中使用的参数等与第1照相机300的设定有关的信息。在步骤s229中,控制部110开始进行如下处理:针对内置背面照相机部142取得的实时取景显示的图像,根据步骤s222~步骤s224中从第1照相机300取得的信息,施加与第1照相机300的视场角相当的框等的辅助显示。即,用户虽然无法建立第2通信,但是,通过基于由第1通信取得的信息的步骤s228和步骤s229的处理,能够虚拟地确认假设为能够由第1照相机300取得的图像。

在步骤s230中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否使用智能手机100所具有的内置背面照相机部142执行拍摄。在判定为进行拍摄的情况下进入步骤s231,在判定为不进行拍摄的情况下进入步骤s232。在步骤s231中,控制部110利用内置背面照相机部142进行拍摄。并且,根据需要,可以对所取得的图像实施裁剪加工等,以使得成为例如与步骤229的处理中显示的框一致的图像。

在步骤s232中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否从智能手机100对第1照相机300的焦度、视场角等与拍摄有关的参数进行调整。关于智能手机控制处理,在判定为进行调整的情况下进入步骤s233,在判定为不进行调整的情况下进入步骤s235。在步骤s233中,控制部110通过第1通信使第1照相机300将调整结果反映给照相机控制。

在步骤s234中,智能手机100与第1照相机300的拍摄方向或姿态不相同,所以,开始进行在由内置背面照相机部142取得的实时取景图像上重叠显示拍摄方向的差异的处理。例如根据步骤s222~步骤s225中取得的信息、电子指南针的输出等,计算该拍摄方向的差异。另外,关于本步骤中的差异的显示,例如,可以结合差异程度使图像偏移来进行合成,也可以在实时取景图像上利用框等表示第1照相机300取得的视场角。进而,例如关于差异的显示,可以通知存在差异的意思,也可以将差异程度表示为数值,还可以通过图形等表示与第1照相机300取得的视场角之间的差异的方向。

在步骤s235中,控制部110例如根据与用户操作对应的操作部150的输出,判定是否以当前设定使第1照相机300进行拍摄。关于智能手机控制处理,在判定为进行拍摄的情况下进入步骤s236,在判定为不进行拍摄的情况下返回步骤s201。

在步骤s236中,与步骤s322同样,控制部110通过第1通信向第1照相机300发送控制信号,使第1照相机300进行拍摄。并且,控制部110使第1照相机300记录该图像。此时,控制部110例如根据与用户操作对应的操作部150的输出,决定将该图像记录在第1照相机300所具有的记录部330或与第1照相机300连接的外部记录介质中的哪个记录区域中。在记录后,智能手机控制处理返回步骤s201。

在图9a和图9b中作为流程图示出第2实施方式的照相机控制处理的一例,参照该图9a和图9b,以选择了第1照相机300作为特定外部设备的情况为例,进一步对本实施方式的控制系统1的动作进行说明。

在步骤s301中,控制部310使第1照相机300成为待机状态,直到接收到从智能手机100发送的第1通信为止。在从智能手机100接收到第1通信的情况下,进入步骤s302。

在步骤s302中,控制部310判定是否通过从智能手机100发送的第1通信请求了功能信息。并且,控制部310在判定为进行了请求的情况下,从功能信息存储部331中读出本设备的功能信息,通过第1通信向智能手机100进行发送。在判定为未进行请求的情况下,不进行处理。另外,本步骤的动作对应于步骤s203。

在步骤s303中,控制部310判定是否通过第1通信从智能手机100接收到接通电源的控制信号。关于照相机控制处理,在判定为接收到控制信号的情况下进入步骤s304,在判定为未接收到控制信号的情况下返回步骤s301。另外,本步骤的动作对应于步骤s204。

在步骤s304中,控制部310判定是否通过第1通信从智能手机100接收到拍摄模式信号。关于本步骤,例如在第1照相机300具有用于执行拍摄功能以外的特定外部功能的特定外部功能模块的情况下等,进行处理。关于照相机控制处理,在判定为接收到拍摄模式信号的情况下进入步骤s306,在接收到拍摄模式以外的信号的情况下进入步骤s305。另外,本步骤的动作对应于步骤s204。在步骤s305中,照相机控制处理开始进行如下处理:根据步骤s304中接收到的信号,判定转移到哪个模式,执行该模式。然后,例如照相机控制处理返回步骤s301。

在步骤s306中,控制部310判定并取得第1照相机300所具有的镜头的规格。在步骤s307中,控制部310例如判定并取得包含第1照相机300当前朝向哪个方向等的拍摄姿态。在步骤s308中,控制部310使摄像部340开始进行拍摄,取得图像。在步骤s309中,控制部310或图像特征提取部360对步骤s308中取得的图像进行解析,取得拍摄的对象物特征和该对象物的图像内位置信息。在步骤s310中,控制部310进行如下处理:判定该图像,根据判定结果,针对对象部位取得af、ae、awb等与第1照相机300的设定有关的信息。

例如使用第1通信向智能手机100发送步骤s306~步骤s310中取得的信息。这些信息可以在每次取得时进行发送,也可以在步骤s310之后进行发送。这些信息被发送到智能手机100之后,用于步骤s207~步骤s210中的拍摄姿态、视场角判定、辅助显示等。另外,这里不通过第1通信发送步骤s308中取得的图像。

然后,在智能手机控制处理的步骤s211中选择第1照相机300作为具有拍摄功能的特定外部设备、在步骤s214中开始进行用于建立第2通信的动作时,在照相机控制处理的步骤s311中,控制部310同样开始进行用于建立第2通信的动作。

在步骤s312中,控制部310判定是否建立了第2通信。关于照相机控制处理,在判定为建立了第2通信的情况下进入步骤s313,在判定为无法建立第2通信的情况下进入步骤s325。本步骤对应于步骤s215。

在步骤s313中,控制部310开始进行如下动作:例如根据步骤s308中由摄像部340取得的图像,使用第2通信向智能手机100发送实时取景显示用的显示信息。本步骤对应于步骤s216。

在步骤s314中,控制部310判定是否通过第1通信接收到拍摄指示的通信。关于照相机控制处理,在判定为接收到拍摄指示的通信的情况下进入步骤s315,在判定为未接收到拍摄指示的通信的情况下进入步骤s320。本步骤对应于步骤s218。

在步骤s315中,控制部310使摄像部340进行拍摄动作。在步骤s316中,控制部310通过第1通信向智能手机100发送第1照相机300所具有的记录介质的信息作为存储器信息。另外,记录介质例如包含记录部330和与第1照相机300连接的外部存储器。外部存储器例如包含sd卡等。在步骤s317中,控制部310根据使用第1通信从智能手机100接收到的结果,判定在哪个记录介质中记录所取得的图像。在判定为记录在记录部330或与第1照相机300连接的外部存储器中的情况下进入步骤s318,在判定为记录在记录部130或与智能手机100连接的外部存储器中的情况下进入步骤s319。在步骤s318中,控制部310将该图像记录在记录部330或与第1照相机300连接的外部存储器中。在步骤s319中,控制部310通过第2通信向智能手机100发送与该图像有关的数据。另外,关于步骤s316~步骤s319的处理,例如在根据操作部150的输出判定为不进行记录的情况下,也可以不进行处理。步骤316~319的处理对应于步骤s220。

在步骤s320中,控制部310例如根据与用户操作对应的操作部350的输出,判定是否利用第1照相机300单体进行拍摄。在本步骤中判定为利用第1照相机300单体进行拍摄的情况例如包含如下情况等:用户对第1照相机300所具有的操作部350进行操作,希望进行拍摄。因此,在本步骤以后,用户对第1照相机300所具有的操作部350进行操作,进行拍摄动作。关于照相机控制处理,在判定为进行拍摄的情况下进入步骤s321,在判定为不进行拍摄的情况下返回步骤s303。此时,断开第1照相机300的电源。然后,照相机控制处理待机,直到从智能手机100接收到接通电源的控制信号为止。在步骤s321中,控制部310例如根据与用户操作对应的操作部350的输出,开始进行拍摄动作。在步骤s322中,控制部310记录进行拍摄而取得的图像。控制部310例如也可以根据操作部350的输出,与步骤s317同样决定记录目的地。在步骤s323中,控制部310例如根据操作部350的输出或使用第1通信与智能手机100进行通信而取得的操作部150的输出等,判定是否向智能手机100发送步骤s321中取得的图像。关于照相机控制处理,在判定为发送图像的情况下进入步骤s324,在判定为不发送图像的情况下返回步骤s303。在步骤s324中,控制部310使用第2通信向智能手机100发送该图像。然后,照相机控制处理返回步骤s303。

这里,对步骤s312中判定为未建立第2通信的情况下的动作进行说明。以下的步骤s325~步骤s330的动作对应于步骤s221~步骤s236的动作,使用第1通信进行这里的与智能手机100之间的通信。

在步骤s325中,控制部310向智能手机100发送镜头等的第1照相机300的规格。在步骤s326中,控制部310针对第1照相机300的拍摄姿态,与智能手机100进行相互通信。控制部310向智能手机100发送第1照相机300的拍摄姿态,并且,取得智能手机100中由操作部150取得的用户操作的结果,反映该结果。在步骤s327中,控制部310针对第1照相机300取得的图像进行解析,取得该图像内的对象物的特征和该特征的图像内位置信息。然后,控制部310向智能手机100发送所取得的这些信息。在步骤s328中,控制部310针对该图像取得时或取得后的af、ae、awb的各个参数等与第1照相机300的设定有关的信息,与智能手机100进行相互通信。控制部310向智能手机100发送af、ae、awb等与第1照相机300的设定有关的信息的各个结果,并且,取得智能手机100中由操作部150取得的用户操作的结果,反映该结果。

在步骤s329中,控制部310判定是否接收到步骤s236中由智能手机100发送的拍摄指示。即,例如根据操作部150取得的用户的操作结果,判定用户是否进行基于第1照相机300的拍摄而不等待建立第2通信。关于照相机控制处理,在判定为进行拍摄的情况下进入步骤s330,在判定为不进行拍摄的情况下返回步骤s312。在步骤s330中,控制部310使摄像部340进行拍摄,取得图像。另外,此时,与步骤s236同样,控制部310也可以判定记录在哪个记录区域中。

<第2实施方式的信息通信装置的优点>

本实施方式的控制系统1在第1实施方式得到的优点的基础上,还具有以下优点。本实施方式的控制系统1具有第1通信和第2通信,例如在智能手机100与第1照相机300之间进行包含实时取景显示用的图像的显示信息的通信时,也能够通过第1通信进行拍摄指示、包含视场角等拍摄控制的参数在内的与第1照相机300的设定有关的信息的发送接收。因此,用户如果使用本实施方式的控制系统1,则能够通过图像或关联信息随时确认包含第1照相机300的特定外部设备的取得图像并进行拍摄的设定,并且,能够在期望的定时进行拍摄。

并且,本实施方式的控制系统1进行辅助显示,由此,在未建立第2通信的期间内,也能够通过第1通信进行拍摄设定。用户能够在建立第2通信后,开始进行拍摄。进而,用户能够通过辅助显示来确认在使用了包含第1照相机300的特定外部设备时假设的取得图像,即使未建立第2通信,也能够通过第1通信进行拍摄指示,能够取得图像。

<变形例>

(图标显示的另一例)

在第2实施方式中,示出表示包含内置正面照相机部141和内置背面照相机部142的特定功能部和包含第1照相机300的特定外部设备的图标的一例,但是,显示不限于此,例如也可以如下所述显示图标。

例如,在图10a中作为示意图示出例如未连接第1照相机300时的图标显示的一例。图标i5包含图标i6、图标i7、图标i8。例如,图标i6表示第1照相机300的状态,图标i7表示是否能够变更为其他设备或特定功能部,图标i8表示智能手机100所具有的特定功能部的状态。并且,在图10a中,与图标i8相比,较浅地显示图标i6和图标i7,这种较浅的显示表示该时点无法选择的状态的图标。即,图标i5的显示表示当前仅能够使用智能手机100所具有的特定功能部的状态。并且,在图标i8中显示与图标i7相同的图标,这表示智能手机100所具有的特定功能部例如包含内置正面照相机部141和内置背面照相机部142的情况这样的、具有多个执行特定功能的特定功能模块的情况等,并且,能够选择使用哪个模块。

例如,在图10b中作为示意图示出连接了第1照相机300时的图标显示的一例。此时,图标i9中包含的图标i10、图标i11、图标i12与图标i6和图标i7不同,并且,与图标i8同样较深地显示。即,表示能够使用图标i10所表示的第1照相机300和图标i12所表示的智能手机100所具有的特定功能部双方、并且能够进行选择的状态。因此,图10b所示的图标i9的显示例例如表示能够选择表示特定外部设备的图标和表示特定功能部的图标。

并且,例如,在图10c中作为示意图示出连接了第1照相机300时的图标显示的另一例。这里显示的图标i13包含图标i10、图标i11、图标i14、图标i15。图标显示中的深浅的意思如上所述,这里,表示能够使用图标i10所表示的第1照相机300、图标i14所表示的例如智能手机100所具有的内置正面照相机部141、图标i15所表示的例如智能手机100所具有的内置背面照相机部142中的任意的特定功能部、并且能够进行选择的状态。

这里,在图10d中作为示意图示出连接了特定外部设备并进行使用时的图标显示的一例。例如如图10d所示,在使显示部160显示上述图标时,表示第1照相机300的图标i16可以在连接时较深地显示,在未连接时较浅地显示。进而,例如如图10d所示,可以使表示第1照相机300的图标i16和表示智能手机100所具有的特定功能部的图标i17的大小不同,表现各个图标所表示的设备或特定功能部的状态。例如如图10d所示,与图标i17相比,可以通过较大显示的图标i16来表现第1照相机300处于使用中。进而,如通知a6那样,也可以具有向用户提示操作方法的显示。

(控制系统1的结构的变形例)

设智能手机100和第1照相机300例如能够经由图6所示的适配器190进行安装来进行说明,但是不限于此。第1照相机300可以由使用者持有并用于拍摄,也可以安装在智能手机100以外的部件上进行使用。

至此,例如说明了包含如第1照相机300、第2照相机400那样具有拍摄功能的特定外部设备的控制系统1,但是不限于此。例如,在选择了智能手机100所具有的录音功能时,也可以与ic录音机进行通信,如果是能够使用的状况,则进行提示。并且,例如在利用智能手机100选择了音乐再现时,也可以搜索位于智能手机100外部的扬声器并进行提示,例如在选择了动态图像再现时,也可以与tv或pc用显示器等进行通信,提示位于智能手机100的外部的具有画面显示功能的设备或特定功能部,在动态图像再现时,也可以与tv等同时提示扬声器那样的具有声音输出功能的设备或特定功能部。这里,这些关联功能也作为相似功能进行说明。

并且,作为与控制装置10相当的部件,以智能手机100这样的信息通信终端为例进行了说明,但是,如上所述,不限于此。第1实施方式和第2实施方式的技术例如还能够应用于照相机作为控制装置10发挥功能的情况等。此时,例如可以提示闪光灯、更换镜头、三脚架等照相机周边设备作为特定外部设备。进而,例如可以对内窥镜这样的处置器械应用本技术,可以对用户提示能够使用的周边设备。

另外,说明了控制装置10由用户直接操作的情况,但是不限于此。例如,用户也可以经由因特网等通信线路对控制装置10进行操作。并且,说明了控制装置10使用第1通信搜索周围是否存在特定外部设备的情况,但是不限于此。例如,在特定外部设备具有位置信息、并且与因特网等网络连接的情况下等,控制装置10也可以经由该网络来搜索特定外部设备。这里,进行了重视拍摄这样的切入点的说明,但是,不仅是民生用途,在工业用途、医疗、生物用途的观察用、诊断用的设备中,周边装置能够简单地进行搜索和通信是便利的,所以能够广泛利用。

另外,关于流程图所示的各个处理和各个处理内的各步骤,能够变更其顺序,并且还能够进行追加和删除。这些各个处理由记录部13、记录部23、记录部33、记录部130或记录部330等中记录的各个程序来执行。各个程序可以预先记录在控制装置10、第1特定外部设备20、第2特定外部设备30、智能手机100、ic录音机200、第1照相机300或第2照相机400的内部,也可以记录在其他记录介质中。记录在这些控制装置10、第1特定外部设备20、第2特定外部设备30、智能手机100、ic录音机200、第1照相机300、第2照相机400或其他记录介质中的记录方法各种各样,可以在产品出厂时进行记录,也可以利用所发布的记录介质进行记录,还可以利用因特网等通信线路进行记录。不仅是程序这样的切入点,还能够利用基于人工智能(ai)的判定等,判定用户的行为,如果ai持续学习在什么场景经常选择并经常使用什么机器材料,或者学习第三方的行为方式,则能够在更广泛的领域中利用关联设备的搜索、建议。

另外,本申请发明不限于上述实施方式,能够在实施阶段在不脱离其主旨的范围内进行各种变形。并且,各实施方式可以尽可能地适当组合来实施,该情况下,得到组合的效果。进而,在上述实施方式中包含各种阶段的发明,通过所公开的多个结构要件的适当组合,能够提取各种发明。

<附记>

另外,在本发明的上述实施方式中还包含以下发明。

[1]

一种控制装置,其包含能够选择性地利用的一个以上的内置功能,其中,所述控制装置具有:

内置功能部,其执行所述内置功能;

控制部,其判定选择了所述内置功能中的哪个所述内置功能,进一步判定是否存在执行与选择出的所述内置功能相似的外部功能的外部设备,在判定为存在所述外部设备的情况下,向用户提示除了所述内置功能部以外,所述外部设备也能够执行选择出的所述内置功能;以及

通信部,其在选择了所述外部设备时,与所述外部设备之间进行与所述外部功能的执行有关的信息的发送接收。

[2]

根据[1]所述的控制装置,其中,

所述控制部在选择了所述内置功能时,使所述通信部与一个以上的所述外部设备进行通信,搜索并判定是否存在所述外部设备。

[3]

根据[1]所述的控制装置,其中,

所述控制装置还具有记录部,

所述控制部在选择了所述内置功能时,使所述通信部进行通信,取得包含所述内置功能与执行所述外部功能的所述外部设备的对应在内的与所述外部设备有关的信息,将其记录在所述记录部中。

[4]

根据[1]所述的控制装置,其中,

所述控制装置还具有记录部,该记录部记录有显示信息,该显示信息用于显示表示所述内置功能部的图标和表示所述外部设备的图标,

所述控制部根据所述显示信息,通过表示所述内置功能部的图标和表示所述外部设备的图标的显示进行所述提示。

[5]

根据[4]所述的控制装置,其中,

所述控制部使所述通信部进行通信,取得用于显示表示所述外部设备的图标的所述显示信息。

[6]

根据[1]所述的控制装置,其中,

所述控制部通过所述通信部进行的通信取得包含所述外部设备的规格和状况的信息,根据所述信息生成用于进行辅助显示的显示信息,该辅助显示是显示所述内置功能部能够取得的数据与所述外部设备能够取得的数据之间的不同之处。

[7]

根据[1]所述的控制装置,其中,

所述通信部具有第1通信部和第2通信部,

所述第1通信部进行第1通信,该第1通信包含搜索所述外部设备的通信,

所述第2通信部进行第2通信,该第2通信包含包括所述外部设备取得的数据在内的通信,

所述第2通信的速度与所述第1通信高。

[8]

根据[7]所述的控制装置,其中,

所述控制部在无法建立所述第2通信时,根据所述内置功能部取得的数据和通过所述第1通信从所述外部设备取得的与所述外部设备的设定有关的信息,生成用于进行辅助显示的显示信息。

[9]

根据[8]所述的控制装置,其中,

所述辅助显示包含与通过所述第1通信从所述外部设备取得的假设在所述外部设备执行了所述外部功能时能够取得的数据有关的信息,

所述控制部通过所述第1通信使所述外部设备进行与所述外部功能有关的动作。

[10]

一种控制系统,其具有:

[1]~[9]中的任意一项所述的控制装置;以及

一个以上的所述外部设备。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1