专利名称：远程控制图像捕获设备的制作方法
技术领域：
本发明涉及控制图像捕获设备的领域。更具体地，本发明针对从便 携式通信设备对远程定位的图像捕获设备进行控制的方法，用于从便携 式通信设备对远程定位的图像捕获设备进行控制的便携式通信设备和计 算机程序产品，以及使得便携式通信设备能够对远程定位的图像捕获设 备进行控制的方法，用于使得便携式通信设备能够对远程定位的图像捕 获设备进行控制的的图像捕获设备和计算机程序产品。
背景技术：
照相机和其它图像捕获设备已经变得越来越小，并且如今经常出现 在诸如移动电话之类的便携式电子设备中。
利用这种技术，可能将所捕获的图像在用户之间从一部电话传送到 另一部电话。
然而，感兴趣的是从例如蜂窝电话的便携式通信设备来控制图像捕 获设备，例如照相机或者摄像机。
在这一点上，US6400903描述了从计算机对照相机进行远程控制。在 这里，向所述照相机发送命令并且从所述照相机接收图像。还可能对与 所述照相机相关的不同功能进行控制，诸如图像缩放、三角架上的位置 等。为了能够控制所述照相机，所述计算机似乎需要具有一些预先安装 的软件。因此，所述照相机似乎是专用于特定计算机的。
EP1429556中描述了另 一种令人感兴趣的解决方案，其中描述了 一种 模块化照相机，具有两个可以使用蓝牙连接彼此通信的模块。
然而，考虑到现有技术，会对允许从诸如移动电话之类的便携式通 信设备对图像捕获设备进行更为灵活的控制产生兴趣。利用更为灵活的 控制，将可以对任意的图像捕获设备进行控制。而且这样的场景可扩展 到若干种感兴趣的应用。
因此，需要对图像捕获设备进行更为灵活的控制。
发明内容
本发明涉及解决提供图像捕获设备的更为灵活的控制的问题。 总体上，这通过将MMI信息从所述图像捕获设备传送到便携式通信设备以允许所述便携式通信设备使用所述图像捕获设备种的命令来解决。
因此，本发明的一个目的是针对提供一种从便携式通信设备对远程 定位的图像捕获设备进行控制的方法，所述便携式通信设备能够对所述 图像捕获设备进行更为灵活的控制。
根据本发明的第一方面，该目的通过一种从便携式通信设备对远程
定位的图像捕获设备进行控制的方法来实现，所述方法包括步骤 从所述图像捕获设备接收MMI数据，所述MMI数据包括 至少一组屏幕图像数据，其中每组与要在所述便携式通信设备的显
示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括 与所述屏幕图像相关的可选择命令， 指定要传送所述命令的格式的格式信息，并且 可能包括指向其它可选择屏幕图像的指针，
其中 一个屏幕图像是媒体捕获屏幕图像并且当接收到与该屏幕图像 相关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据的至少 所述可选择命令一起呈现的媒体数据，
选择至少一个与屏幕图像相关联的命令， 将根据指定格式的所述命令发送到所述图像捕获设备， 如果所述命令是图像捕获命令，则进一步包括步骤 接收至少一幅由所述图像捕获设备所捕获的图像，并且将所述图像 存储在所述便携式通信设备中。
本发明的第二方面包括第一方面的特征，其中一个屏幕图像是浏览 屏幕图像，其中与该屏幕图像相关的命令包括浏览存储在所述图像捕获
设备中的图像的命令，并且进一步包括步骤如果该命令被选择和传送， 则接收至少一幅存储在所述图像捕获设备中的图像。
本发明的第三方面包括第一方面的特征，其中至少一个与所述屏幕 图像相关的命令是用于调节所述图像捕获设备的附加控制命令。
本发明的第四方面包括第一方面的特征，其中与屏幕图像相关的所 有数据组被一起接收并存储在所述便携式通信设备中，并且进一步包括 步骤将一个屏幕图像设置为活动屏幕图像，选择与另一个屏幕图像相 关联的指针并且将与该选定指针相关联的屏幕图像设置为活动屏幕图 像。本发明的第五方面包括第一方面的特征，其中自行接收与屏幕图像
相关的一组数据，并且进一步包括步骤选择指向其它可选择屏幕图像 的指针，将该指针传送到所述图像捕获设备并且接收与该指针相关联的 一组屏幕图像数据。
本发明的第六方面包括第一方面的特征，进一步包括步骤将一组 数据的命令与所述便携式通信设备的用户输入单元相关联，并且可以使
用所述便携式通信设备的显示器将这些命令与所接收的媒体数据一起呈现。
本发明的第七方面包括第一方面的特征，进一步包括步骤将所捕 获的图像数据与来自其它源的图像数据进行组合，其中所述其它源可以 是所述便携式通信设备自身或另一个图像捕获设备。
本发明的另 一个目的是针对提供一种能够以灵活的方式对远程定位 的图像捕获设备进行控制的便携式通信设备。
根据本发明的第八方面，该目的通过一种便携式通信设备来实现， 其包括
接口单元，其被配置成从图像捕获设备接收MMI数据，所述MMI数据 包括
至少一组屏幕图像数据，其中每一组与要在所述便携式通信设备的
显示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括
与所述屏幕图像相关的可选择命令，
指定要传送所述命令的格式的格式信息，并且 包括指向其它可选择屏幕图像的指针，
其中 一个屏幕图像是媒体捕获屏幕图像并且当接收到与该屏幕图像 相关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据的至少 所述可选择命令一起呈现的媒体数据，
本地存储器，和
控制单元，其被配置成
选择至少一个与屏幕图像相关联的命令，并且
命令所述接口单元将根据指定格式的所述命令发送到所述图像捕获 设备，
其中如果所述命令是图像捕获命令，则所述接口单元进一步被配置 成接收至少一幅由所述图像捕获设备所捕获的图像以存储在所述本地存储器中。
本发明的第九方面包括第八方面的特征，其中 一个屏幕图像是浏览 屏幕图像，其中与该屏幕图像相关的命令包括浏览存储在所述图像捕获 设备中的图像的命令，其中所述接口单元进一步被配置成如果所述控制 单元选择该命令并确定传送该命令，则接收至少一幅存储在所述图像捕 获设备中的图像。
本发明的第十方面包括第八方面的特征，其中至少一个与所述屏幕 图像相关的命令是用于调节所述图像捕获设备的附加控制命令。
本发明的第十一方面包括第八方面的特征，其中与屏幕图像相关的 所有数据组被所述接口单元一起接收，并且所述控制单元进一步被配置 成将它们存储在所述本地存储器中，将一个屏幕图像设置为活动屏幕图 像，选择与另一个屏幕图像相关联的指针并且将与该选定指针相关联的 屏幕图像设置为活动屏幕图像。
本发明的第十二方面包括第八方面的特征，其中所述接口设备净皮配 置成自行接收与屏幕图像相关的 一组数据，并且所述控制单元进一步被 配置成选择指向其它可选择屏幕图像的指针，命令将该指针传送到所述 图像捕获设备并且接收与该指针相关联的 一组屏幕图像。
本发明的第十三方面包括第八方面的特征，进一步包括多个用户输 入单元和显示器，其中所述控制单元进一步被配置成将一组数据的命令 与至少 一些所述用户输入单元相关联，并且可以将这些命令与所接收的
媒体数据一起呈现在所述显示器上。
本发明的第十四方面包括第八方面的特征，其中所述控制单元进一
步被配置成将所捕获的图像数据与来自其它源的图像数据进行组合，其
中所述其它源可以是所述便携式通信设备自身或另 一个图像捕获设备。 本发明的第十五方面包括第八方面的特征，其中它是移动电话。 本发明的另 一个目的针对提供一种用于便携式通信设备的计算机应
用程序产品，以使得该设备能够以灵活的方式控制远程定位的图像捕获设备。
根据本发明的第十六方面，该目的通过一种计算机程序产品来实现， 所述计算机程序产品用于从便携式通信设备控制远程定位的图像捕获设 备，并且包括计算机程序代码，当所述代码被加载到所述便携式通信设
备时，其使得所述便携式通信设备执行从所述图像捕获设备接收MMI数据，所述MMI数据包括 至少一组屏幕图像数据，其中每一组与要在所述便携式通信设备的 显示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括 与所述屏幕图像相关的可选择命令， 指定要传送所述命令的格式的格式信息，并且 可能包括指向其它可选择屏幕图像的指针，
其中 一个屏幕图像是媒体捕获屏幕图像并且当接收到与该屏幕图像 相关的一组数据时，所述固I数据还包括要与该组屏幕图像数据的至少 所述可选择命令一起呈现的媒体数据，
选择至少一个与屏幕图像相关联的命令，并且
将根据指定格式的所述命令发送到所述图像捕获设备，
如杲所述命令是图像捕获命令，则还
接收至少一幅由所述图像捕获设备所捕获的图像，并且将所述图像 存储在所述便携式通信设备中。
本发明的再另 一个目的是针对提供一种使得便携式通信设备能够以 灵活的方式控制远程定位的图像捕获设备的方法。
根据本发明的第十七方面，该目的通过一种使得便携式通信设备能 够控制远程定位的图像捕获设备的方法来实现，所述方法包括步骤
将MMI数据从所述图像捕获设备发送到所述便携式通信设备，所述 MMI数据包括
至少一组屏幕图像数据，其中每组与要在所述便携式通信设备的显 示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括 与所述屏幕图像相关的可选择命令， 指定要传送所述命令的格式的格式信息，并且 可能包括指向其它可选择屏幕图像的指针，
其中 一个屏幕图像是媒体捕获屏幕图像并且当发送与该屏幕图像相 关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据的至少所 述可选择命令一起呈现的媒体数据，
从所述便携式通信设备接收根据与屏幕图像相关联的指定格式的命
令，
其中如果所述命令是图像捕获命令，则进一步包括步骤 发送至少 一幅由所述图像捕获设备所捕获的图像。本发明的第十八方面包括第十七方面的特征，其中一个屏幕图像是 浏览屏幕图像，其中与该屏幕图像相关的命令包括浏览存储在所述图像 捕获设备中的图像的命令，并且如果从所述便携式通信设备接收了该命
令，则进一步包括步骤发送至少一幅存储在所述图像捕获设备中的图像。
本发明的第十九方面包括第十七方面的特征，其中至少一个与所述 屏幕图像相关的命令是用于调节所述图像捕获设备的附加控制命令，并 且进一步包括如果接收了该命令，则根据该命令调节所述图像捕获设备。
本发明的第二十方面包括第十七方面的特征，其中与屏幕图像相关 的所有数据组被一起发送，以便存储在所述便携式通信设备中。
本发明的第二十一方面包括第十七方面的特征，其中自行发送与屏 幕图像相关的一组数据，并且进一步包括步骤从所述便携式通信设备 接收指向其它可选择屏幕图像的指针，并且发送与该指针相关联的一组
屏幕图像数据。
本发明的又另 一个方面针对提供一种允许便携式通信设备以灵活的
方式对其进行控制的图像捕获设备。
根据本发明的第二十二方面，该目的通过一种图像捕获设备来实现，
其包括
接口单元，其被配置成
将MMI数据从所述图像捕获设备发送到所述便携式通信设备，所述 画I数据包括
至少一组屏幕图像数据，其中每一组与要在所述便携式通信设备的
显示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括
与所述屏幕图像相关的可选择命令，
指定要传送所述命令的格式的格式信息，并且 包括指向其它可选择屏幕图像的指针，
其中一个屏幕图像是媒体捕获屏幕图像并且当发送与该屏幕图像相 关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据的至少所 述可选择命令一起呈现的媒体数据，
从所述便携式通信设备接收根据与屏幕图像相关联的指定格式的命
令，
控制单元，其被配置成发送所述MMI数据，并且如果所述命令是图像捕获命令，其命令所述接口单元发送至少一幅由所述图像捕获设备所 捕获的图像。
本发明的第二十三方面包括第二十二方面的特征，其中一个屏幕图 像是浏览屏幕图像，其中与该屏幕图像相关的命令包括浏览存储在所述 图像捕获设备中的图像的命令，并且所述控制单元进一步被配置成命令 发送至少一幅存储在所述图像捕获设备中的图像。
本发明的第二十四方面包括第二十二方面的特征，其中至少一个与 所述屏幕图像相关的命令是用于调节所述图像捕获设备的附加控制命 令，并且所述控制单元进一步被配置成如果接收了该命令，则根据该命 令调节所述图像捕获设备。
本发明的第二十五方面包括第二十二方面的特征，其中所述控制单 元被配置成命令所述接口单元将与屏幕图像相关的所有数据组被一起发 送，以便存储在所述便携式通信设备中。
本发明的第二十六方面包括第二十二方面的特征，其中自行发送与 屏幕图像相关的一组数据，并且所述控制单元进一步被配置成响应于从 所述便携式通信设备接收的指针，发送与指向其它可选择屏幕图像的指 针相关联的 一组屏幕图像数据。
本发明的另一个方面针对提供一种用于图像捕获设备的计算机程序 产品，其允许便携式通信设备以灵活的方式对所述图像捕获设备进行控 制。
根据本发明的第二十七方面，该目的通过一种用于使得便携式通信 设备控制远程定位的图像捕获设备的计算机程序产品来实现，并且所述 计算机程序产品包括计算机程序代码，当所述代码被加载到所述便携式
通信设备时，其使得所述图像捕获设备执行
命令将MMI数据从所述图像捕获设备发送到所述便携式通信设备， 所述MMI数据包括
至少 一组屏幕图像数据，其中每组与要在所述便携式通信设备的显 示器上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括
与所述屏幕图像相关的可选择命令，
指定要传送所述命令的格式的格式信息，并且 包括指向其它可选择屏幕图像的指针，
其中 一个屏幕图像是媒体捕获屏幕图像并且当发送与该屏幕图像相关的一组数据时，所述MMI数据包括要与该组屏幕图像数据的至少所述 可选择命令一起呈现的媒体数据，
从所述便携式通信设备接收根据与屏幕图像相关联的指定格式的命 令，和
如果所述命令是图像捕获命令，则命令发送至少 一幅由所述图像捕 获设备所捕获的图像。
本发明具有许多优点。其能够由有可能被控制的任何图像捕获设备 来使用。其不依赖于具有预先安装的一些特殊软件，或者被提供有专用 于所讨论的图像捕获设备的一些特殊软件。通过这种方式，用户在对什 么图像捕获设备进行控制方面具有^f艮大的自由度。其还可能从控制一个 图像捕获设备变化为控制另 一个图像捕获设备，并且便携式通信设备还 可以允许其自身被其它便携式通信设备所控制。由此在可以提供怎样的 控制方面具有相当大的灵活度。例如，易于使用在图像捕获设备中提供 的新功能。虽然图像捕获设备是远程定位的，但是由于MMI信息被从所 述图像捕获设备发送到所述便携式通信设备，所以所述便携式通信设备 的用户还是可以获得他正在直接使用所述图像捕获设备的感受。
需要强调的是，当在该说明书中使用时，术语"包括"是用来指定 存在所提及的特征、整数、步骤或部件，但是并不排除存在或添加一个 或多个其它的特征、整数、步骤、部件或它们的集合。
现在将结合附图更为详细地对本发明进行描述，其中
图1是示意性示出了使用本地无线链路与照相机进行通信的移动电
话，
图2是示出了用于实施本发明的电话和照相机中所提供的不同单元 的框图，
图3示意性示出了从所述照相机发送到所述电话的多组屏幕图像数
据，
图4示意性示出了在电话和照相机之间进行交换的数据和指令， 图5示出了根据本发明在所述电话中执行的方法的流程图， 图6示出了根据本发明在所述照相机中执行的方法的流程图， 图7示意性示出了包括用于执行本发明的计算机程序代码的CD ROM 盘形式的计算机程序产品。
具体实施例方式
本发明涉及通过连接与图像捕获设备进行通信的便携式通信设备。
图1中示出了蜂窝电话形式的便携式通信设备10的示图，其经由无 线连接与照相机16形式的图像捕获设备进行通信，所述无线连接在这里 是蓝牙连接。电话10在这里被用来远程控制照相机16。为了允许用户控 制照相机16，所述电话包括显示器16和键盘14上的多个数字键形式的 用户输入单元。蜂窝电话仅仅是具有通信功能的便携式电子设备的一个 示例。本发明并不局限于这种类型的设备，而是可以在其它类型的便携 式通信设备上得以应用，例如智能电话和通信机或者类似膝上计算机、 掌上计算机或电子形成体的其它便携式电子设备。此外，所述图像捕获 设备并不局限于照相机，而还可以是便携式摄像机或甚至是另一个便携 式通信设备，其包括捕获图像或静止图像和/或视频图像的功能。正常情 况下，它还可能能够捕获声音。
图2示出了两个设备10和16的框图。电话10包括连接到电话控制 单元20的第一接口单元18，本地电话存储器19和视频解码单元17。电 话控制单元20还连接到显示器12、键盘14、本地电话存储器19和视频 解码单元17。这里，第一接口单元18是蓝牙单元。视频解码单元17还 连接到本地电话存储19和显示器12。照相机16包括连接到数字图像接 收单元32的镜头26，所述数字图像接收单元32将投影图像转换为数字 图片。该单元可以是CCD单元。数字图像接收单元32连接到图像存储器 28、照相机控制单元30、视频流单元24和第二接口单元22。视频流单 元24还连接到照相机控制单元30、图像存储器28和第二接口单元22。 照相机控制单元30还连接到图像存储器28和图像捕获控制致动器33, 所述图像捕获控制致动器33可以是按钮。第二接口单元22在这里也是 蓝牙通信单元。
图3示出了三组屏幕图像数据SC1、 SC2和SC3形式的MMI数据。每 组与提供在所述照相机的显示器上的屏幕图像相关，并且包括所示出并 且能够被激活的命令。在用于第一屏幕图像的第一组屏幕图像数据SC1 中，这些命令是C0M1、 COM2和COM3。在用于第二屏幕图像的第二组屏幕 图像数据SC2中，这些命令是C0M4、 COM5和COM6，而在用于第三屏幕图 像的第三组屏幕图像数据SC3中，这些命令是COM7、 COM8和COM9。应当 明白的是，所示出的命令的数目仅仅是示例性的，并且可以在每组屏幕图像数据中提供更多或更少的命令。然而，在每组中至少有一个命令。
第一组屏幕图像数据SC1包括指向第二组屏幕图像数据SC2的指针 P—SC2，第二组屏幕图像数据SC2包括指向第一组屏幕图像数据SC1的指 针P —SC1和指向第三组屏幕图像数据SC3的指针P-SC3,而第三组屏幕图 像数据SC3包括指向第二组屏幕图像数据SC2的指针P—SC2。应当明白的 是，第一和第三屏幕图像可以包括指向彼此的指针，并且可以为其它屏 幕图像提供更多组屏幕图像数据，在这种情况下每组可以包括其它指针。 还可以仅由所述照相机提供一个屏幕图像，在这种情况下将不包括屏幕 图像指针。各组屏幕图像数据还包括关于要传送命令的格式的格式信息。 因此，第一組包括用于第一命令的格式信息C0M1-F、用于第二命令的格 式信息C0M2_F和用于第三命令的格式信息C0M3-F。第二和第三组包括用 于其命令的类似格式信息。第二组屏幕图像信息还包括之前所捕获图像 的列表IL。在这些组屏幕图像数据SC1和SC2中，还有图像结构标识符 IF1、 IF2,其均确定要在显示器上显示图像的区域。第三组也具有这样 的结构标识符。每组屏幕图像数据均被提供为XML文件。然而，应当明 白的是，XML仅仅是实现屏幕图像数据组的一种方式。
图4示意性示出了电话10和照相机16之间的一些通信。在该示图 中，示出了从照相机16发送到电话10的包括第一組屏幕图像数据SC1 和一见频流VS的MMI (人机界面)数据。此后，从电话10向照相才几16发 送命令COMl,随后从照相机16向电话IO传送图像I。
现在将参考上述图1 -4以及图5和图6描述本发明的功能，其中图 5示出了在电话中执行的方法步骤的流程图，图6示出了在照相机中执行 的方法步骤的流程图。
在其正常的操作模式中，所述照相机是独立设备，其执行正常的照 相机功能。在这些功能中，由镜头26捕获的图像被提供到图像接收单元 32中。在这里所提供的图像然后被捕获并且存储在存储器28中。这是通 过照相机16的用户激活捕获控制致动器33来完成的。然而，所述照相 机还可以由电话进行控制，现在将对其进行描述。
这都开始于所述电话希望接管所述照相机的控制。这是通过电话控 制单元20使得第一接口单元18向所述照相机发送用于控制的请求来完 成的，步骤34。照相机16将在接下来接收该请求，步骤62。所述请求 被第二接口单元22所接收并且被转发到照相机控制单元30。这里，可以跟随有一些类型的检测是否放弃控制，或者通过例如经由显示器提示照 相机的用户来进行，或者如果他希望给予电话控制，则通过关于允许接 管控制的身份来进行电话身份的检查来进行。这两种检查都进行也是可
以的。假设允许电话10进行控制，则照相机控制单元30取出存储在存 储器28中的第一组屏幕图像数据SCI,将其提供给接口单元22并且命令 接口单元22将该组SC1发送到电话10。在这里，该组屏幕图像数据SC1 与正常照相机图像捕获相关联。为了允许电话用户拍摄照明，照相机16 的取景器也^皮提供给电话10。因此，控制单元30命令图像接收单元32 将其记录的图像转发到视频流单元24。视频流单元24创建视频流VS， 例如MPEG视频流。控制单元30还命令视频流单元24将流VS提供给接 口单元22，并且命令接口单元22将所述视频流VS发送给电话10。通过 这种方式，第 一组屏幕图像数据SC1和视频流VS形式的媒体数据作为MMI 数据被发送到电话IO,步骤64。此后，照相机16等待从电话IO接收指 令。
第一接口单元18接收第一组屏幕图像数据SC1和视频流VS，步骤 36,并且将该组屏幕图像数据SC1转发到电话控制单元20，以及将所述 寺见频流转发到视频解码单元17，所述一见频解码单元17由此可以是MPEG 解码器。控制单元20首先查找图像结构标识符IF1并确定在显示器12 上要^L用于显示图像和在这种情况下的视频流VS的视频图像的窗口。其 接着查找命令C0M1、 COM2和COM3并且确定键盘14上的哪些按4建要与哪 些命令相关联，并且还有在哪里和如何显示与显示器12上的命令相关的 信息，例如哪些按键激活哪些命令。其还确定要与指向下一组屏幕图像 数据SC2的指针P-SC2相关联的按键。作为选择，可以由照相机来指定 要在哪里显示命令和指针，要在哪里显示图像以及甚至是哪些按键被用 在第一组屏幕图像数据SC1中，从而电话控制单元20仅需要直接执行它 即可。电话控制单元20随后设置由该组屏幕图像数据SC1所确定的屏幕 图像作为激活的屏幕图像，激活命令和指针到按键的映射，在显示器12 上显示它们并且命令视频解码单元17将视频流VS提供到显示器的指定 位置。控制单元20由此确保了在显示器12上显示命令并呈现视频流VS, 步骤38。
当电话控制单元20完成这些时，其等待用户经由键盘16上的指定 按键进行输入。所述用户接下来按压一个按键，并且控制单元20选择与该按键相对应的指令。如杲已经选择了命令，步骤40，则控制单元20 命令第一接口单元18使用对应的格式将所述命令发送到照相机16。
如果用户输入是选择命令，则将命令COM发送到照相机，步骤44， 所述命令在第一屏幕图像中可以是用来捕获图像的命令C0M1、用来调节 照相机的命令，例如缩放、倾斜，或其它的一些命令，例如闪光灯控制。 第二接口单元22从电话10接收指令并且将其转发到照相机控制单元30。 如果所述指令是命令COM,步骤66，则控制单元30命令执行与所迷命令 相对应的动作，所述动作可以是捕获图像，或者是调节照相机(诸如倾 斜照相机)的命令或图像缩放命令。如果所述动作涉及所捕获的图像， 步骤70，则控制单元30命令将该图像发送到所述电话，步骤72。正常 情况下，与第一屏幕图像中的第一组屏幕图像数据SC1中的命令相关的 图像是最新捕获的图像，其存储在存储器28中。控制单元30接着将从 存储器28获取所述图像并且经由接口单元22将其发送到所述电话，或 者使得图像接收单元32直接将所述图像转发到接口单元22,步骤48。 在一些其它屏幕图像中，诸如在提供浏览屏幕图像的第二屏幕图像中， 它可以是较早捕获的图像，其中命令可以是浏览存储器28中所存储的图 像的命令，并且由此在这种情况下，控制单元30将命令从存储器28取 出之前所捕获的图像。之后，照相机16返回并再次等待指令。应当明白 的是，正常情况下，为了允许捕获其它图像，所述照相机继续呈现取景 器，即在图像I已经被发送之后将視频流VS发送到电话10,以便允许捕 获其它图像。只要第一屏幕图像是激活屏幕图像，通常都会这样进行。
所述电话接着经由第一接口单元18接收可能的动作执行结果，步骤 48,所述结果被转发到电话控制单元26。如果所述结果是所接收的捕获 图像，或者是之前存储的图像或者是新捕获的图像，则在图4中示为接 收图像I,所述图像I在控制单元20的控制下被存储在本地存储器19 中。当然，所述图像还可以呈现在显示器12上。之后，电话10等待用 户输入，步骤40和50。
在用户输入与命令的选择不对应的情况下，步骤40，控制单元20继 续并且调查所述指令是否是选择新屏幕图像，步骤50。如果用户使用了 对应于选择新屏幕图像的按键，控制单元选择并取出指向该屏幕图像的 屏幕图像数据组的指针，在这种情况下，所述指针将是P—SC2，并且经由 接口单元18将其发送到照相机16 (步骤52)。之后，所述照相机返回并等待新的指令，步骤66和74。
照相机16经由第二接口单元22接收该指令，并且将其转发到照相 机控制单元30,所述照相机控制单元30所看到的不是命令，步骤66, 而是屏幕图像指针P-SC2,步骤74。如果存在视频流，其接着中断该视 频流的发送。之后，所述控制单元从存储器28选择并取出对应的屏幕图 像数据组SC2，步骤76，并且经由接口单元22发送到电话10,步骤78。
第一接口单元18接收该组屏幕图像数据，步骤54,该组屏幕图像数 据在这里是SC2，可以伴随有图像数据，例如之前存储的图像，并且将该 组屏幕图像数据转发到电话控制单元20,所述控制单元20继续并且将命 令和指针映射到按键，并且以与第一屏幕图像相同的方式呈现它们，步 骤56。其接着使该屏幕图像成为活动屏幕图像。如果所述屏幕图像是第 二屏幕图像，则其浏览概况之前所捕获的图像的屏幕图像，其还呈现图 像里表IL，从而电话10的用户可以知道将要选择的图像。如果呈现图像， 则控制单元20使得可以与视频解码单元17相结合的图像处理单元呈现 在由图像结构标识符IF2所确定的区域内的图像。在这个屏幕图像中， 用户选择旧图像用于研究，由此，这里的一个命令使浏览命令，电话10 的用户可以通过所述命令浏览照相机16中存储的旧图像。当已经选择了 新的屏幕图像时，所述电话因此而返回并且等待选择命令，步骤40或者 选棒另一个屏幕图像，步骤50。以相同的方式，所述照相机返回并等待 接收命令，步骤66，或者等待接收新的屏幕图像指针P-SC,步骤74。
在图4中有可供选择的第三屏幕图像。该屏幕图像是设置屏幕图像， 其中可以远程执行所述照相机的不同设置，诸如^见频、黑和白、色彩、 分辨率、语言等。这些命令可包括类似"获得"特定设置和"改变"特 定设置的命令，能够由所述电话和照相机以与上述第一和第二屏幕图像 相同的方式来提供。
如果没有命令被选择，步骤40，并且没有选择新的屏幕图像，步骤 50,则所述电话控制单元20调查控制是否结束，步骤58,如果没有，其 返回并等待命令COM,步骤40，或新的屏幕图^象选择，步骤50。然而， 如果控制将要结束，步骤58,则所述电话结束控制，步骤60，这可以通 过电话控制单元20命令第一接口单元18向照相机16发送控制结束请求
来完成o
以相同的方式，如果照相机16所接收的指令不是命令，步骤66,也不是屏幕图像指针，步骤74,则其调查控制请求是否结束，步骤80。如 杲是，则所述照相机结束被控制的方法，步骤82,并且继续其原来的操
作模式，或者返回并等待其它指令。
以上已经对静止图像进行了描述。然而，应当明白的是，其还能够 为类似视频的运动图像进行提供并且可以与声音相结合。在这种情况下， 所述电话控制单元能够仅命令对已经向取景器提供的所传输视频进行记 录和存储。还有一个简单的任务是从所述照相机发送为已经存储的视频 流的视频流。还应当明白的是，在视频图像的情况下，它们可以伴随有 声音，所述声音使用麦克风进行捕获并且适当地与所述视频图像编码在 一起。
本发明揭示了多个感兴趣的应用。例如，电话可能将来自另一个源 的图像和/或声音与来自照相机的图像和/或声音相结合。如果其具有照 相机功能的话，所述其它源在这里可以是所述电话自身。以这种方式， 可以创建3D图像和立体声声音。还可能将来自多于两个的源的图像相结 合。还能够将这种结合的结果传送到服务器或类似PC的一些其它实体以 便在那里进行后续处理。
本发明还具有多个其它优点。其可以由可能被控制的任何照相机来 使用。其不依赖于具有预先安装的一些特殊软件，或者被提供有专用于 所讨论的图像捕获设备的一些特殊软件。通过这种方式，用户在对什么 照相机设备进行控制方面具有^艮大的自由度。其还可能从控制一部照相 机变化为控制另一部照相机，并且电话还可以允许其自身被其它电话所 控制。由此在可以提供怎样的控制方面具有相当大的灵活度。例如，易 于使用在照相机中提供的新功能。虽然照相机是远程定位的，但是由于 固I信息被从所述照相机发送到所述电话，所以所述电话的用户还是可以 获得他正在直接使用所述照相机的感受。
可以对本发明进行多种变化而不会背离已经提及的实施例。可能将 所有的屏幕图像数据组一起发送到所述电话。在这种情况下，有利的是， 可以将它们提供在相同的XML文件中。以这种方式，所述电话可以存储 这些屏幕图像数据组并且自己改变屏幕图像，而无需借助于所述照相机。 由此，它可以4又向所述照相才几发送命令，可能连同向所述照相才几通知哪 个屏幕图像是活动的。通过使用专用的控制软件，所迷电话还可能无需 用户输入而自动采取控制。在这种情况下，无需在所迷电话上显示各种类型的信息。屏幕图像指针还可以在命令中提供或者与命令所执行动作 的结果相关。例如，可能删除照相机中所存储的所有与第二屏幕图像相 关的图像。从而将没有图像来浏览，这就是命令为什么可以直接指向新 的屏幕图像。所述照相机还可能在执行了与命令相关的动作之后自己主 动返回屏幕图像指针。另一种可能的变化是所述电话可以接收性能信息， 即关于所述照相机所能够实现的功能的信息。由此，该信息可以以文本 的形式提供，所述文本还能够显示在所述电话的屏幕图像上。
应当明白的是，蓝牙仅仅是允许在设备之间进行通信的机制的示例。
可以使用另一种无线通信机制、IR通信或者甚至电缆来执行所述通信。 使用蓝牙的优势是其允许同时与多于一个的其它设备进行通信而无需使 用网络。
正常情况下，所述电话和照相机中的控制单元均以一个或多个处理 器的形式来提供，与所述处理器一起提供有包含用于执行这些控制单元 的功能的程序代码的程序存储器。该程序代码还可以提供在类似CD ROM 盘、记忆棒或其它适当数据载体的计算机程序产品上，当被加载到所述 设备中时，所述程序代码执行本发明。图7中示意性示出了一种这样的 介质，其示出了 CDR0M盘84，可以在其上提供用于所述电话、照相机或 这二者的程序代码。所述程序代码还可以提供在外部服务器上并且从那
里下载到所述计算机和/或电话。
因此，本发明仅由以下权利要求书进行限定。
权利要求
1.一种从便携式通信设备(10)对远程定位的图像捕获设备(16)进行控制的方法，所述方法包括步骤从所述图像捕获设备接收(36)MMI数据，所述MMI数据包括至少一组屏幕图像数据(SC1，SC2，SC3)，其中每组与要在所述便携式通信设备的显示器(12)上呈现的屏幕图像相关，所述至少一组屏幕图像数据包括与所述屏幕图像(SC1，SC2，SC3)相关的可选择命令(COM1，COM2，COM3，COM4，COM5，COM6，COM7，COM8，COM9)，指定传送所述命令的格式的格式信息(COM1_F，COM2_F，COM3_F，COM4_F，COM5_F，COM6_F，COM7_F，COM8_F，COM9_F)，和指向其它可选择屏幕图像的可能指针(P_SC1，P_SC2，P_SC3)，其中一个屏幕图像(SC1)是媒体捕获屏幕图像并且当接收到与该屏幕图像相关的一组数据时，所述MMI数据还包括与该组屏幕图像数据的至少所述可选择命令一起呈现的媒体数据(VS)，选择(40)至少一个与屏幕图像相关联的命令，将根据指定格式的所述命令发送(44)到所述图像捕获设备(16)，如果所述命令(COM1)是图像捕获命令，则进一步包括步骤接收(46)至少一幅由所述图像捕获设备(16)所捕获的图像(I)，和将所述图像存储(48)在所述便携式通信设备(10)中。
2. 如权利要求1所述的方法，其中一个屏幕图像是浏览屏幕图像 (SC2),其中与该屏幕图像相关的命令包括浏览存储在所述图像捕获设备(16)中的图像的命令，并且进一步包括步骤在该命令被选择和传 送时，接收至少一幅存储在所述图像捕获设备(16)中的图像。
3. 如权利要求1或2所述的方法，其中至少一个与所述屏幕图像相 关的命令是用于调节所述图像捕获设备U6)的附加控制命令。
4. 如之前任一项权利要求所述的方法，其中与屏幕图像相关的所有 数据组被一起接收并存储在所述便携式通信设备(10)中，并且进一步 包括步骤将一个屏幕图像设置为活动屏幕图像，选择与另一个屏幕图 像相关联的指针并且将与该选定指针相关联的屏幕图像设置为活动屏幕 图像。
5，如权利要求1-3中任一项所述的方法，其中自行接收与屏幕图像 相关的一组数据，并且进一步包括步骤选择(50)指向其它可选择屏 幕图像的指针(P—SC2),将该指针传送(52)到所述图像捕获设备(16)并 且接收(54)与该指针相关联的一组屏幕图像数据(SC2)。
6. 如之前任一项权利要求所述的方法，进一步包括步骤将一组数 据的命令与所述便携式通信设备(10)的用户输入单元(14)相关联， 并且使用所述便携式通信设备(10)的显示器(12)将这些命令与所接 收的媒体数据(VS) —起呈现。
7. 如之前任一项权利要求所述的方法，进一步包括步骤将所捕获 的图像数据与来自其它源的图像数据进行组合，其中所述其它源可以是 所述便携式通信设备(10)自身或另一个图像捕获设备。
8. —种便携式通信设备(10),其包括接口单元(18),其被配置成从图像捕获设备(16)接收匪I数据， 所述MMI数据包括至少一组屏幕图像数据(SC1， SC2， SC3),其中每组与要在所述便 携式通信设备的显示器上呈现的屏幕图像相关，所述至少一组屏幕图像 数据包括与所述屏幕图像(SC1， SC2， SC3)相关的可选择命令(C0M1， COM2， COM3, COM4， C0M5， C0M6， C0M7, C0M8， C0M9),指定传送所述命令的格式的格式信息(C0M1—F， COM2—F， C0M3-F， C0M4_F， C0M5—F， C0M6—F， C0M7_F， C0M8—F, C0M9_F),并且指向其它可选择屏幕图像的可能指针(P-SC1， P一SC2， P_SC3)，其中一个屏幕图像(SC1 )是媒体捕获屏幕图像并且当接收到与该屏 幕图像相关的一组数据时，所述MMI数据还包括要与该組屏幕图像数据 的至少所述可选择命令一起呈现的媒体数据(VS),本地存储器(19)，和控制单元(20)，其被配置成选择至少一个与屏幕图像相关联的命令，和命令所述接口单元(18)发送根据指定格式的命令到所述图像捕获 设备(16),其中如果所述命令是图像捕获命令(C0M1),则所述接口单元(18) 进一步被配置成接收至少一幅由所述图像捕获设备(16)所捕获的图像(I)以用于存储在所述本地存储器(19)中。
9. 如权利要求8所述的便携式通信设备(10),其中一个屏幕图像 是浏览屏幕图像(SC2),其中与该屏幕图像相关的命令包括浏览存储在 所述图像捕获设备(16)中的图像的命令，其中所述接口单元(18)进 一步被配置成在所述控制单元(20)选择该命令并确定传送该命令时， 接收至少一幅存储在所述图像捕获设备(16)中的图像。
10. 如权利要求8或9所述的便携式通信设备(10),其中至少一 个与所述屏幕图像相关的命令是用于调节所述图像捕获设备(16)的附加控制命令。
11. 如权利要求8-10中任一项所述的便携式通信设备(10),其中 与屏幕图像相关的所有数据组被所述接口单元(18) —起接收，并且所 述控制单元(20)进一步被配置成将它们存储在所述本地存储器(19) 中，将一个屏幕图像设置为活动屏幕图像，选择与另一个屏幕图像相关 联的指针并且将与该选定指针相关联的屏幕图像设置为活动屏幕图像。
12，如权利要求8-10中任一项所述的便携式通信设备(10)，其中所述接口设备(18)被配置成自行接收与屏幕图像相关的一组数据，并 且所述控制单元(20)进一步被配置成选择指向其它可选择屏幕图像的 指针(P—SC2),命令将该指针传送到所述图像捕获设备(16)并且接收 与该指针相关联的一组屏幕图像数据(SC2)。
13. 如权利要求8-12中任一项所述的便携式通信设备(10)，进一 步包括多个用户输入单元(14)和显示器(12)，其中所述控制单元(20) 进一步被配置成将一组数据的命令与所述用户输入单元(14)中的至少 一些相关联，并且将这些命令与所接收的媒体数据(VS) —起呈现在所 述显示器(12)上。
14. 如权利要求8-13中任一项所述的便携式通信设备(10),其中 所述控制单元(20)进一步被配置成将所捕获的图像数据与来自其它源 的图像数据进行组合，其中所述其它源可以是所述便携式通信设备自身(10)或另一个图像捕获设备。
15. 如权利要求8-14中任一项所述的便携式通信设备(10),其中 它是蜂窝电话。
16. —种计算机程序产品(84),其用于从便携式通信设备(10) 控制远程定位的图像捕获设备(16),并且包括计算机程序代码，当所述代码被加载到所述便携式通信设备(10)时，其使得所述便携式通信 设备(1G)执行从所述图像捕获设备(16 )接收固I数据，所述固I数据包括至少一组屏幕图像数据(SC1， SC2， SC3),其中每组与要在所述便 携式通信设备(10)的显示器(12)上呈现的屏幕图像相关，所述至少 一组屏幕图像数据包括与所述屏幕图像(SC1, SC2， SC3)相关的可选择命令(C0M1, COM2， COM3， COM4， C0M5， C0M6， C0M7, C0M8， C0M9)，指定传送所述命令的格式的格式信息(C0M1—F, COM2—F, COM3—F， COM4 —F， C0M5-F， C0M6 —F， C0M7 —F， C0M8—F， C0M9-F),并且指向其它可选择屏幕图像的可能指针(P-SC1， P—SC2， P—SC3)，其中一个屏幕图像(SC1 )是媒体捕获屏幕图像并且当接收到与该屏 幕图像相关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据 的至少所述可选择命令一起呈现的媒体数据(VS),选择至少一个与屏幕图像相关联的命令，并且将根据指定格式的所述命令发送到所述图像捕获设备(16),如杲所述命令是图像捕获命令(C0M1 ),则还接收至少一幅由所述 图像捕获设备(16 )所捕获的图像(I),并且将所述图像存储在所述便 携式通信设备(10)中。
17. —种使得便携式通信设备(10)能够控制远程定位的图像捕获 设备(16)的方法，所述方法包括步骤将画I数据从所述图像捕获设备(16)发送到所述便携式通信设备 (10),所述MMI数据包括至少一组屏幕图像数据(SC1， SC2， SC3),其中每组与要在所述便 携式通信设备(10)的显示器(12)上呈现的屏幕图像相关，所述至少 一组屏幕图像数据包括与所述屏幕图像(SC1， SC2， SC3)相关的可选择命令(C0M1, COM2, COM3， COM4, C0M5， COM6， COM7， C0M8, C0M9),指定传送所述命令的格式的格式信息(C0M1-F， COM2_F, COM3—F, COM4 —F， COM5 —F， COM6—F， COM7—F, COM8 —F， COM9—F)，并且指向其它可选择屏幕图像的可能指针(P-SC1, P—SC2， P—SC3),其中一个屏幕图像(SC1 )是媒体捕获屏幕图像并且当发送与该屏幕图像相关的一组数据时，所述MMI数据还包括要与该组屏幕图像数据的 至少所述可选择命令一起呈现的媒体数据(VS)，从所述便携式通信设备(10)接收(66)根据与屏幕图像相关联的 指定格式的命令，其中如杲(70)所述命令是图像捕获命令(C0M1),则进一步包括 步骤发送(72 )至少一幅由所述图像捕获设备(16 )所捕获的图像(I )。
18. 如权利要求17所述的方法，其中一个屏幕图像是浏览屏幕图像 (SC2),其中与该屏幕图像相关的命令包括浏览存储在所述图像捕获设备(16 )中的图像的命令，并且如果从所述便携式通信设备(10)接收 了命令，则进一步包括步骤发送(72)至少一幅存储在所述图像捕获 设备中的图像。
19. 如权利要求17或18所述的方法，其中至少一个与所述屏幕图 像相关的命令是用于调节所述图像捕获设备的附加控制命令，并且进一 步包括如果接收了该命令，则根据该命令调节所述图像捕获设备。
20. 如权利要求17-19任一项所述的方法，其中与屏幕图像相关的 所有数据组被一起发送，以便存储在所述便携式通信设备中。
21. 如权利要求17-19任一项所述的方法，其中自行发送与屏幕图 像相关的一组数据，并且进一步包括步骤从所述便携式通信设备(10) 接收(74)指向其它可选择屏幕图像的指针(P-SC2)，并且发送(78) 与该指针相关联的一组屏幕图像数据(SC2)。
22. —种图像捕获设备(16),其包括 接口单元(22)，其^L配置成将固I数据从所述图像捕获设备(16 )发送到便携式通信设备(10 )， 所述MMI数据包括至少一组屏幕图像数据(SC1, SC2， SC3),其中每组与要在所述便 携式通信设备(10)的显示器(12)上呈现的屏幕图像相关，所述至少 一组屏幕图像数据包括与所述屏幕图像(SC1， SC2， SC3)相关的可选择命令(C0M1， COM2, COM3， COM4, COM5， C0M6， C0M7, C0M8， C0M9),指定传送所述命令的格式的格式信息(C0M1—F, C0M2_F, C0M3_F， COM4—F， C0M5—F， C0M6—F， C0M7—F， C0M8 —F， C0M9—F)，并且指向其它可选择屏幕图像的可能指针(P —SC1， P-SC2， P-SC3), 其中一个屏幕图像(SC1 )是媒体捕获屏幕图像并且当发送与该屏幕图像相关的一组数据时，所述MMI数据还包括与该组屏幕图像数据的至少所述可选择命令一起呈现的媒体数据(VS),从所述便携式通信设备(10)接收根据与屏幕图像相关联的指定格式的命令，控制单元(30)，其被配置成发送所述薩I数据，并且在所述命令 是图像捕获命令(C0M1)时，其命令所述接口单元(22)发送至少一幅 由所述图像捕获设备(16 )所捕获的图像(I)。
23. 如权利要求22所述的图像捕获设备(16),其中一个屏幕图像 是浏览屏幕图像(SC2),其中与该屏幕图像相关的命令包括浏览存储在 所述图像捕获设备(16)中的图像的命令，并且所述控制单元(30)进 一步被配置成命令发送至少一幅存储在所述图像捕获设备(16)中的图 像。
24. 如权利要求22或23所述的图像捕获设备(16)，其中至少一 个与所述屏幕图像相关的命令是用于调节所述图像捕获设备(16)的附加控制命令，并且所述控制单元(30)进一步被配置成在接收了该命令 时，根据该命令调节所述图像捕获设备(16)。
25. 如权利要求22-24任一项所述的图像捕获设备(16),其中所 述控制单元(20)被配置成命令所述接口单元(22)将与屏幕图像相关 的所有数据组被一起发送，以便存储在所述便携式通信设备(10)中。
26. 如权利要求22-24任一项所述的图像捕获设备(16),其中自 行发送与屏幕图像相关的一组数据，并且所述控制单元(30)进一步被 配置成响应于从所述便携式通信设备(10)接收的指针(P-SC2),发送 与指向其它可选择屏幕图像的指针(P-SC2 )相关联的一组屏幕图像数据(SC2)。
27. —种用于使得便携式通信设备(10)控制远程定位的图像捕获 设备(16)的计算机程序产品(84),所述计算机程序产品(8"包括 计算机程序代码，当所述代码被加载到所述便携式通信设备(10)时， 其使得所述图像捕获设备(10)执行命令将醒I数据从所述图像捕获设备(16)发送到所述便携式通信 设备(10 ),所述MMI数据包括至少一组屏幕图像数据(SC1， SC2， SC3),其中每组与要在所述便 携式通信设备(10)的显示器(12)上呈现的屏幕图像相关，所述至少 一组屏幕图像数据包括与所述屏幕图像(SC1, SC2， SC3)相关的可选择命令(C0M1， COM2， COM3， COM4， C0M5， C0M6， C0M7， C0M8， C0M9)，指定传送所述命令的格式的格式信息(C0M1_F， C0M2_F， COM3 —F， C0M4_F， C0M5-F， C0M6 — F， C0M7 — F, C0M8 — F， C0M9-F),并且指向其它可选择屏幕图像的可能指针(P—SC1， P一SC2， P一SC3),其中一个屏幕图像(SC1 )是媒体捕获屏幕图像并且当发送与该屏幕 图像相关的一组数据时，所述画I数据包括要与该组屏幕图像数据的至 少所述可选择命令一起呈现的媒体数据(VS),从所述便携式通信设备(10)接收根据与屏幕图像相关联的指定格 式的命令，和如果所述命令是图像捕获命令(C0M1 )，则命令发送至少一幅由所 述图像捕获设备(16)所捕获的图像(I)。
全文摘要
本发明针对从便携式通信设备(10)对图像捕获设备(16)进行远程控制。MMI数据(SC1，VS)从所述图像捕获设备发送到所述便携式通信设备，并且包括至少一组与要在所述便携式通信设备中呈现的屏幕图像相关的屏幕图像数据(SC1)。所述组包括与所述屏幕图像相关的可选择命令，指定传送所述命令的格式的格式信息，并且指向其它屏幕图像的可能指针。一个屏幕图像的MMI数据包括媒体数据(VS)。如果与屏幕图像相关联的图像捕获命令被选择并且从所述便携式通信设备发送到所述图像捕获设备，则返回所述捕获设备所捕获的图像(I)。
文档编号H04N5/232GK101310521SQ200680042958
公开日2008年11月19日 申请日期2006年11月13日 优先权日2005年11月16日
发明者J·古林, K·索德斯特龙, P·海特福斯 申请人:索尼爱立信移动通讯股份有限公司