专利名称：图像组合便携式终瑞及其所用的图像组合方法
技术领域：
本发明涉及能进行图像组合的便携式终端。更特别地，本发明涉及用于能对背景图像和捕获图像进行组合的便携式终端，及其所用图像组合的方法。
背景技术：
传统上，作为一种终端设备，具有照相机功能，用于从外部获取和捕获实时图像数据，已经有一种终端设备，能将先前已经储存在终端设备内的记录图像和当用照相机捕获图像时从照相机输入的实时捕获图像进行组合(参见日本公开的专利申请号2001-177764，此后称作“专利文件1”)。
图12是一张框图，示出在专利文献1内披露的传统图像组合设备的配置。
在图12中，传统图像组合设备包括未组合图像记录部分100，图像选择部分101，坐标输入部分110，照相机部分120，图像组合部分130，显示部分140，记录指令部分150，及组合图像记录部分151。坐标输入部分110是手写输入部分(笔输入部分)，用该坐标输入部分能设定屏幕上任何区域。
下面的几种数据输入到图像组合部分130由图像选择部分130从多组图像数据中选择图像数据，这些图像数据先前储存在组合图像记录部分100内；有关输入区域内的数据，该区域是由用户在坐标输入部分110用笔输入设定的形状，尺寸及位置来确定的；及从照相机部分120输出的实时图像数据。
图像组合部分130通过将来自照相机部分120的实时获取图像添加到由图像选择部分101选择的图像上，在由来自坐标输入部分的信息所示的区域内，对图像进行组合。图像组合部分130让该组合图像显示在显示部分140。此外，为了响应来自记录指令部分150的指令，图像组合部分130将发出指令时刻显示的图像储存在组合图像记录部分151。由于这些的处理，传统图像组合设备在用户指定的区域内，能将实时获取图像与先前储存在该设备内的记录图像相组合。
传统图像组合设备请求坐标输入部分(例如，手写输入部分或笔输入部分)，必需在显示屏上指定一个任意区域，以将组合图像合并到先前准备的图像内。然而，与传统组合设备，个人计算机及类似装置相比，更难在低硬件性能的终端设备(例如，移动电话，数字照相机，PDA(个人数字助理)，家庭信息电气设备，手表，可视电话，电视，等)内提供手写输入部分。因此，在这些设备内，除了使用简单按键或按钮外，无法在屏幕上指定某一区域。然而，对屏幕上指定某一区域的按键操作和按钮操作的可操作性是相当差的。
因此，本发明的目的是提供一种便携式终端，能用按键和按钮的简单操作轻易地组合多幅捕获图像，并提供为此听用的组合图像的一种方法。
发明内容
为了实现上述目的，本发明包含下列方面。
本发明的第一方面涉及一种便携式终端，能对某一背景的背景图像和待捕获的捕获图像进行组合，该便携式终端包括背景图像捕获装置，用于获取该背景图像；捕获图像获取装置，用于获取捕获图像；掩模信息获取装置，用于获取掩模信号以响应用户指令，在该掩模信息内，指定用于组合捕获图像的至少一块区域；及图像组合装置，用于在由掩模信息获取装置获取的掩模信号指定的区域内，将由捕获图像获取装置获取的捕获图像和由背景图像获取装置获取的背景图像进行组合。
较佳地，在掩模信息内指定多块区域，并在多块区域内指定一个次序，而图像组合装置顺序地依据该次序在这些区域内对捕获图像进行组合。
此外，图像组合装置可以改变对捕获图像进行组合的这些区域的次序，以响应用户指令。
较佳地，便携式终端进一步包括背景图像建立装置，用于通过将由捕获图像获取装置捕获的捕获图像显示为移动图像，同时显示由掩模信息获取装置获取的掩模信息指定的某一区域，来建立该背景图像，并键入该捕获图像。
更佳地，背景图像建立装置将建立的背景图像与建立背景图像时已用的掩模信息链接在一起，并当背景图像与掩模信息链接时，掩模信息获取装置获取该链接的掩模信息。
此外，便携式终端进一步包括中间信息建立装置，用于产生能显示由图像组合装置在图像组合中的中途状态的信息；及中间信息发送装置，用于将由中间信息产生装置建立的中间信息发送给一台外部设备。
较佳地，中间信息建立装置能如此地建立中间信息，以使中间信息含有能显示某一区域的未使用区域信息，在该区域内还未对捕获图像进行组合。
此外，较佳地，当中间信息从一台不是它本台终端的外部终端发送时，那末图像组合装置在由中间信息内含有的未使用区域信息指定的某一区域内，对由捕获图像获取装置获取的捕获图像进行组合。
较佳地，图像组合装置对由捕获图像获取装置获取的捕获图像如此地进行组合，以便将捕获图像在该区域内显示成移动图像。
更佳地，响应于用户的一条指令，图像组合装置键入显示为移动图像的捕获图像，并对背景图像和确定的捕获图像进行组合。
较佳地，背景图像与掩模信息链接在一起，而掩模信息获取装置获取与背景图像链接的掩模信息。
较佳地，当在掩模信息内指定多个区域时，图像组合装置选择用于对捕获图像进行组的区域，以响应用户指令，并顺序地对捕获图像和背景图像进行组合。
较佳地，便携式终端进一步包括背景图像储存部分，用于储存背景图像中的至少一幅图像，其中，背景图像获取装置从背景图像储存部分获取背景图像。
较佳地，便携式终端进一步包括用于获取图像的照相机部分，其中，背景图像获取装置获取由该照相机部分捕获的图像，作为背景图像。
较佳地，便携式终端进一步包括与外部设备进行通信的通信部分，其中，背景图像获取装置经通信部分从外部设备获取背景图像。
较佳地，便携式终端进一步包括获取图像的照相机部分，其中，捕获图像获取装置获取由照相机部分获取的图像，作为捕获图像。
较佳地，便携式终端进一步包括与外部设备进行通信的通信部分，其中，捕获图像获取装置经通信部分从外部设备获取捕获图像。
较佳地，便携式终端进一步包括掩模信息储存部分，用于储存掩模信息图像中的至少一幅图像，其中，掩模信息获取装置从掩模信息储存部分获取掩模信息。
较佳地，便携式终端进一步包括与外部设备进行通信的通信部分，其中，掩模信息获取装置经通信部分从外部设备获取掩模信息。
本发明的第二方面涉及用于处理便携式终端的一种方法，该终端对有关某一背景的背景图像和捕获的捕获图像进行组合，所述方法包括获取背景图像的步骤；获取捕获图像的步骤；获取掩模信息的步骤，在掩模信息内指定至少一块用于对捕获图像进行组合的区域，以响应用户指令；及对捕获图像和背景图像进行组合的步骤，这些图像是在由获取的掩模信息指定的区域内获取的。
依据本发明，能提供下列优点本发明的便携式终端简单地通过获取能定义希望对捕获图像进行组合的区域的掩模信息，能指定希望对捕获图像进行组合的某一区域，以响应用户指令，并且能用按键和按钮的简单操作能轻易地对多幅图像进行组合。因此，能够轻易地组合多幅图像，以使即使用难以在屏幕上指定任意位置的便携式终端，例如移动电话或数字照相机，通过简单操作(例如按键操作或按钮操作)能确定希望进行图像组合的某一区域。这样，能够提供更简单的用户界面，在该界面内，改进了操作性，并减少了用户输入操作次数。
此外，因为待进行图像组合的区域次序是先前确定的，并按该次序自动地对捕获图像进行组合，用户能更简单地组合图像。
区域的次序由用户改变，以使有可能按用户所希望的对图像进行组合。通过简单的输入装置，例如按钮开关，也能改变区域的次序。
提供背景图像建立装置，以使有可能在捕获图像时显示仅在掩模帧上添加的图像，并有可能在使用掩模时，拍摄背景图像，同时确认区域位置。这样，有可能建立与用户意见一致的背景图像。
由背景图像建立装置建立的捕获图像与掩模信息链接在一起，以使掩模信息获取装置自动地获取链接的掩模信息。因此，当用户建立与用户意见一致的记录图像时，不需再次选择掩模信息。
中间信息发送给外部设备，以使该外部设备能处理在进行组合的图像。
中间信息含有未使用区域信息，以使该外部设备能在未进行图像组合的区域内再次组合捕获图像。
另一方面，便携式终端接收该中间信息，以使捕获图像能在未附加有捕获图像的区域内进行组合。这样，即使处于遥远位置的人们也能通过交换多台便携式终端之间的中间信息，能建立和交换图像，在该图像中，对人面肖像(face-photo portrait)，风景或类似图像进行组合。
因为图像组合装置能让捕获图像在区域内显示为移动图像，用户能组合图像，同时确认该捕获图像。
用户能通过键入显示为移动图像的图像，命令对图像进行组合，并因此通过按下快门能简单地组合图像。
此外，当背景图像与掩模信息链接时，自动地选择掩模信息。因此，这节省了用户选择掩模信息的工作量。
当由掩模信息指定多块区域时，由用户选择区域的次序，使它有可能按用户的希望进行图像组合。通过简单输入装置，例如按钮开关也能实现区域次序的选择。
背景图像是先前储存的，以使有可能仅用便携式终端进行图像组合。此外，背景图像是从照相机部分获取的，以使有可能按用户的希望来建立背景图像。此外，背景图像是通过通信获取的，以使能够获取不同的背景图像。
捕获图像是从照相机部分获取的，以使有可能通过简单地使用便携式终端，使它与背景图像相组合，该便携式终端内含照相机或外部配置有照相机。此外，捕获图像是通过通信获取的，以使有可能通过使用图像，例如来自位于遥远位置人物的图像，对图像进行组合。
掩模信息是先前储存的，以使有可能仅用便携式终端对图像进行组合。此外，掩模信息是通过通信获取的，以使能够获取不同的掩模信息。
附图简述图1是一张框图，示出依据本发明第一实施例的图像组合便携式终端的配置；图2是一张图表，示出掩模信息的一个例子；图3A是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作；图3B是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作；图3C是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作；图3D是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作；图3E是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作；图4是一张流程图，示出依据第一实施例的图像组合便携式终端的操作；图5是一张框图，示出依据本发明第二实施例的图像组合便携式终端的配置；图6A是一张图表，用于描述依据第二实施例的图像组合便携式终端的操作；图6B是一张图表，用于描述依据第二实施例的图像组合便携式终端的操作；图6C是一张图表，用于描述依据第二实施例的图像组合便携式终端的操作；图7是一张流程图，示出依据第二实施例的图像组合便携式终端的操作；图8是一张流程图，示出依据第三实施例的图像组合便携式终端的操作；
图9是一张流程图，示出依据第四实施例的第一图像组合便携式终端的操作；图10是一张流程图，示出依据第四实施例的第二图像组合便携式终端的操作；图11A是一张图表，用于特定描述依据第四实施例第一和第二图像组合便携式终端的操作；图11B是一张图表，用于特定描述依据第四实施例第一和第二图像组合便携式终端的操作；及图12是一张框图，示出专利文献1中披露的传统图像组合便携式终端的配置。
实现本发明的较佳方式(第一实施例)图1是一张框图，示出依据本发明第一实施例的图像组合便携式终端的配置。图像组合便携式终端是用于从用户中接收用按键或按钮的输入的一种装置，并可以是，例如，移动电话，数字照相机，PDA(个人数字助理)，家庭信息电气设备，手表，可视电话，电视或类似器具。
在图1中，图像组合便携式终端包括未组合图像记录部分200，背景图像获取部分201，掩模记录部分210，掩模信息获取部分211，照相机部分220，捕获图像获取部分221，图像组合部分230，显示部分240，记录指令部分250，和组合图像记录部分251。
在未组合图像记录部分200中，记录许多图像，图形，文本和类似资料。储存在未组合图像记录部分200内的图像称作为“记录图像”。“记录图像”不仅包括照相图像，也包括图形和文本。记录图像包括先前储存在设备内的数据，通过通信已经获取的并储存在设备内的数据；已经从该设备内提供的一台外部连接终端输入的数据；储存在存储卡内的数据，和储存在组合图像记录部分251内的数据。除了上述的记录图像外，未组合图像记录部分200可以含有在对图像进行组合时所用的附加信息，例如垂直或水平移动，透明度，颜色数，照相机曝光度，图像失真度(distorting an image)，图像变化(transformingan image)，图像亮度倒转(inverting the brightness)或类似信息。此外，可以储存互相链接的两种或多种图像或由照相机获取的数据。
背景图像获取部分201从储存在未组合图像记录部分200内的记录图像数据中选择特定的数据，并将选择的数据输入到图像组合部分230。由背景图像获取部分201选择的记录图像用作为图像组合部分230内背景的图像。因此，在下文中，由背景图像获取部分201获取的记录图像称作为“背景图像”。为了在背景图像获取部分201内进行图像选择，使用图像组合便携式终端内提供的按键或按钮(未示出)。背景图像获取部分201简单地选择先前寄存的图像，以使仅通过按键或按钮操作，能轻易地选择所希望的图像。
掩模记录部分210储存多组掩模信息。这里，“掩模信息”称作为定义某一区域的信息，在该区域内将来自照相机部分220的图像与由背景图像获取部分201选择的数据进行组合。掩模信息是由至少一块掩模区域定义的。“掩模区域”称作为能显示掩模区域的信息，该掩模区域用于通过照相机部分220对捕获图像进行组合，所述信息例如为屏幕上的形状，尺寸，及位置。储存在掩模记录部分210内的掩模信息包括已经通过通信获取的并储存在该设备内的数据；已经从该设备内提供的外部连接终端输入的数据；及储存在存储卡内的数据。这样，掩模信息是用通信下载的或从存储卡内获取的，以使用户希望的掩模信息能够自由地更新或添加。为了按上面描述的方式从外部设备获取掩模信息，必需在图像组合便携式终端内提供调制解调器或外部输入终端，或例如红外端口的通信部分。掩模区域可以包含附加信息，例如透明度，颜色数，图像失真度，图像变化，图像亮度倒转，为照相图像内特殊色彩使用图像着色(thecolor of the image)，例如兰遮片处理(blue matte process)。
图2是一张图表，示出掩模信息的一个例子。如图2所示，掩模信息项是“区域号”项，“形状”项，“尺寸”项和“位置”项。在“区域号”项中，示出由“形状”项定义的掩模区域号和随后项。区域号示出掩模区域的次序。图像组合部分230按区域号的升序对由照相机部分220获取的图像进行组合。在“形状”项中，示出掩模区域的平面形状。在“尺寸”项中，示出在“形状”项中所示的平面形状的尺寸。在“位置”项中，示出由“形状”和“尺寸”项定义的平面形状在屏幕上的位置。如图2所示(如在区域号2的情况)，“尺寸”和“位置”项可以按组合方式示出。尺寸和位置能通过下列几种方式显示点数，相对于图像的百分比，或能指明组合图像尺寸和位置的任何其他信息。在图2的例子中，掩模区域不互相交迭，但是掩模区域可以互相相邻或可以互相交迭。在它们互相交迭的情况中，必需添加能指明应当使用的图像数据的信息。此外，可以寄存有关图像数据是否适用于每个点或第一拍摄图像是否待用的信息，不需如同这个例子一样指定具有平面形状的掩模区域。
响应来自用户的一条指令，掩模信息获取部分211从储存在掩模记录部分210的掩模信息中选择希望的掩模信息，并将它输入到图像组合部分230。为了在掩模信息获取部分211内的掩模信息选择，使用在图像组合便携式终端内提供的按键或按钮(未示出)。因为先前寄存的掩模信息仅在掩模信息获取部分211内选择，仅用按键或按钮操作可选择希望的捕获图像组合区域的布局。如图2中所示，掩模信息是有关掩模区域的信息，难以从视觉上理解，所以掩模信息获取部分211让相应于掩模信息的图像显示在显示部分240上，以使用户能选择掩模信息(在图1中，省略了从掩模信息获取部分211到显示部分240的箭头)。当将掩模信息输入到图像组合部分230时，掩模信息获取部分211可以添加处理过程，例如左右倒转，上下倒转，旋转，及掩模区域关于屏幕的转换。
照相机部分220是固态图像装置，例如CCD(电荷耦合器件)和CMOS(互补金属半导体)传感器，并且外部地获取图像并顺序地输出实时获取的图像。捕获图像获取装置221从照相机部分220获取捕获图像，并将它输入到图像组合部分230。因为捕获图像获取部分221将捕获图像定期地(例如，按每一秒的间隔)输入到图像组合部分230，与照相机位置一致的实时捕获图像输入到图像组合部分230。
图像组合部分230接收来自背景图像获取部分201的图像，来自掩模信息获取部分211的掩模信息和来自捕获图像获取部分221的实时图像，作为输入，并在由掩模信息指定的范围(区域)内，将来自捕获图像获取部分221的捕获图像附加到来自背景图像获取部分201的图像上，并将它显示在显示部分240。当记录指令部分250命令记录该组合图像时，图像组合部分230选定(fix)来自捕获图像获取部分221的捕获图像，并在命令的那一点将该组合图像储存到组合图像记录部分251。
显示部分240按实时方式显示从图像组合部分230获得的显示的图像。在这种情况中，显示部分240可以按这样一种方式显示，依据照相机部分220和显示部分240之间的位置关系，使图像的左边和右边倒转。例如，当照相机部分220和显示部分240按一部分位于该设备的前面而另一部分位于它背面的这样一种关系定位时，显示部分240实际上实时显示从图像组合部分230获得的图像。另一方面，当照相机部分220和显示部分240按相同面排列时，显示部分240实际上可实时地显示从图像组合部分230获得的图像，或可以左右倒转地显示从照相机部分220获得的图像，好像在镜子内反射的图像。
记录指令部分250接收用户指令，用作键入从照相机部分220输出实时图像(移动从照相机部分220输出的图像)的快门，并命令图像组合部分230将显示的组合图像记录到组合图像记录部分251上。通过按下在图像组合便携式终端提供的按键或按钮或启动自定时器(未示出)或类似装置来执行记录指令部分250内的指令。
组合图像记录部分251将图像组合部分230发出的图像储存在该设备内例如ROM(只读存储器)或RAM(随机存储器)的存储器内，通过通信将它储存在外部存储器内，将它从该设备内提供的外部连接终端输出，或将它储存在存储卡内。组合图像记录部分251和未组合图像记录部分200不必是不同元件，但可以是相同元件。从硬件观点看，未组合记录部分200，掩模记录部分210，及组合图像记录部分可以由公用存储器来实现。
图3是一张图表，用于描述依据第一实施例的图像组合便携式终端的操作。图4是一张流程图，示出第一实施例的图像组合便携式终端的操作。下文中，将参考图3和4描述图像组合便携式终端的操作。
首先，背景图像获取部分201从储存在未组合图像记录部分200的多幅记录图像中选择用户希望的背景图像，并将它输入到图像组合部分230(步骤S301)。例如，假定背景图像获取部分201选择图3A所示的背景图像。选择可以由用户进行，同时显示一系列信息，例如，储存在未组合图像记录部分200内的多幅记录图像的名称，顺序地在屏幕上显示记录图像，或在屏幕上一次显示多幅记录图像，以使能从它们中选择一幅图像。
接着，掩模信息获取部分211从多组掩模信息中选择用户希望的掩模信息，并将它输入到图像组合部分230(步骤S302)。例如，假定掩模信息获取部分211选择如图3B所示的掩模信息。在这种情况中，掩模区域包括区域号1的椭圆掩模区域11和区域号2的三角形掩模区域12。如图2所示，掩模信息是抽象地表示，所以当选择掩模信息时，掩模信息获取部分211让用户选择具有如同图3B所示图像或具有如同图3C所示图像的掩模信息，在图3C中，对背景图像和掩模图像进行组合。掩模区域11和掩模区域12整个可用白色表示，而除它们外的一部分可由透明图像组成。
接着，图像组合部分230将处理区域号设置为“1”(步骤S303)。
接着，图像组合部分230将相应于选择的掩模信息的图像(见图3B)附加到在步骤S301选择的背景图像(见图3A)(见图3C)，并将来自捕获图像获取部分221的实时图像合并到当前处理的区域号的掩模区域，并让它显示在显示部分240(步骤S304)。在这种情况中，在图3D中示出在显示部分240显示图像的例子。在操作开始时，区域号为“1”。因此在图3D中，在区域号“2”的掩模区域12内，没有合并来自照相机部分220的图像。如图3D所示，未处理的掩模区域12由空白图像组成。在步骤S304阶段，当移动照相机部分时，捕获图像定期地从照相机部分220送出，以使用它改变当前处理的掩模区域内的视频图像。即，图像组合部分230在当前处理的掩模区域内显示由照相机部分220获取的移动图像。
在图3的例子中，在第一时刻的步骤304，图像组合部分230将图3A图像添加到图3B掩模上，以产生如同图3C所示的图像，并在图3D的椭圆掩模区域11内显示来自照相机部分220的实时图像。在第二时刻的步骤304，图像组合部分230在椭圆掩模区域11内显示来自照相机部分220的捕获图像，并在三角形掩模区域12内显示来自照相机部分220的实时图像，如同图3E所示。
未处理掩模区域不必用白色填充，但例如，能例如用黑色的另一种颜色填充或用某一特殊图案填充，或能用其他方法，只要它们能表示该区域是未处理的掩模区域。此外，图像组合部分230不仅通过添加两幅图像(即一幅在步骤S301选择的图像和一幅捕获的图像)能产生一幅显示的图像，即，在步骤S301选择的一幅图像和一幅捕获图像，而且可以执行一种处理，在该处理中，在通过对步骤S301中选择的图像和捕获图像组合为一幅图像执行转换处理后，显示该转换图像和捕获图像。
接着，图像组合部分230键入实时输入的来自照相机部分220的图像，以响应来自记录指令部分250的快门指令，键入一幅组合图像(步骤S305)。在这时，图像组合部分230临时地储存中间图像，在该中间图像中，附加到掩模区域的捕获图像与背景图像组合在一起。图像组合部分230通过链接掩模区域，一幅捕获图像有待附加到该掩模区域，可临时储存中间图像；捕获图像和背景图像，不需实际对这些图像进行组合。在输入键入后，当用户请求取消时，图像组合部分230擦除在掩模区域建立的最近图像，并又在该掩模区域内显示实时图像，以使又能捕获图像。这是已知的处理过程，并可由能储存处理图像和预处理图像的图像组合便携式终端来实现。
接着，图像组合部分230对步骤S302中选择的掩模信息内的区域号与当前处理的区域号进行比较，以确定是否还存在剩余的掩模区域(步骤S306)。当还存在剩余的区域时，图像组合部分230确定是否提供了一条中断图像组合处理的指令(步骤S307)。当没有提供中断指令时，将处理区域号加1(步骤S308)，并且程序返回到步骤S304的操作。另一方面，当在步骤S307的操作中确定提供了一条中断操作指令时，图像组合部分230进行到步骤S309的操作。这样，按区域号指定的次序对由捕获图像获取部分221从照相机部分220获取的捕获图像进行组合。
另一方面，当在步骤S306操作中确定没有剩余掩模区域时，图像组合部分230进行到步骤S309的操作。在步骤S309的操作中，图像组合部分230将当前显示的用于显示的组合图像转换成一幅图像，并这样产生最终的组合图像。当程序进行到步骤S309的操作，作为确定在步骤S307提供一条中断指令的结果时，图像组合部分230通过用白色或黑色，或特殊图案，或其他方法填充掩模区域，将未附加有捕获图像的该掩模区域转换成一幅图像。这种填充处理是按预定方法执行的。
当程序进行到步骤S309的操作，作为确定在步骤S307中提供一条中断指令的结果时，图像组合部分230可建立中间信息，显示图像组合的中途状态，并且按另一种方式，再继续后面的图像组合处理，该另一种方式是通过用白色或黑色，或特定图案对整个掩模区域进行着色，将未附加有捕获图像的该掩模区域转换为一幅图像并将该转换的图像储存在组合图像记录部分251。这里，中间信息包括在图像组合便携式终端产生的中间图像；有关已经使用的掩模的信息；能显示掩模区域的区域号的未使用区域信息，在该掩模区域内还未进行捕获图像的组合。该中间信息可包括必需回放中间图像的多幅图像；掩模信息；及在那时间点之前已经执行的图像组合的步骤。
其后，图像组合部分230将组合图像储存组合图像记录部分251内(步骤S310)，以响应来自记录指令部分250的一条指令，并结束处理。
这样，在依据第一实施例的图像组合便携式终端中，掩模信息获取部分211选择先前寄存的掩模信息并确定掩模区域，在该掩模区域内，希望按由掩模信息指定的次序对来自照相机部分220的捕获图像进行组合。依据这个次序，图像组合部分230对预组合图像和捕获图像进行组合。掩模信息获取部分211仅仅选择掩模信息，以使即使用配置有限按键数的设备，例如移动电话，能轻易地确定用于组合的区域。因此，有可能提供一种图像组合便携式终端，该便携式终端能通过用简单的按键或按钮的简易操作轻易地进行多幅图像的组合，为一幅组合图像确定由形状，尺寸或位置定义的区域。
在第一实施例中，图像组合部分230将由捕获图像获取部分221获取的捕获图像顺序地按由掩模信息指定的区域号次序附加在该掩模区域内。然而，能依据用户指令可改变附加捕获图像的掩模区域的次序。更特别地，在图4的步骤S303中，图像组合部分230让用户指定是否希望改变用于捕获图像附加的掩模区次序。当指定要改变该次序时，用户选择一块掩模区域。然后在步骤S304，图像组合部分230产生用于显示的一幅图像，在该显示中，将捕获图像附加在选择的掩模区域内。然后在图4的步骤S308中，图像组合部分230让用户选择剩余掩区域，并继续附加捕获图像。这样，仅用按钮操作就能实现让用户选择用于附加的掩模区域次序，以便即使用便携式终端就能实现这功能。
区域号不必在前赋值给掩模信息。在这种情况中，图像组合部分230通过让用户指定掩模区域对图像进行组合，一幅捕获图像待附加到该指定掩模区，并不必让用户指定该次序的变化。
在第一实施例中，一幅捕获图像附加到用于组合图像的某一掩模区域内。然而，可按捕获图像的全部或一部分是透明的这样一种方式对图像进行组合，或按能改变该捕获图像的分辨力，色调或长宽比等的这样一种方式对图像进行组合。这样，在掩模区域内对捕获图像进行组合的方法不限止于上述方法。
在第一实施例中，图像组合部分230使用储存在未组合图像记录部分200内的背景图像。然而，由捕获图像获取部分221获取的捕获图像能用作为背景图像。此外，在图像组合便携式终端内提供通信部分时，图像组合部分230经过通信部分可以从例如服务器，其他便携式终端，个人计算机，数据照相机，或监视照相机的外部设备获取背景图像。
照相机部分220可包含在图像组合便携式终端内，或可在外部提供。
当在图像组合便携式终端内提供通信部分时，捕获图像获取部分221经通信部分，利用电子邮件或类似方式可从例如服务器，其他便携式终端，个人计算机，数字照相机，或监视照相机的外部设备中获取捕获图像。掩模信息获取部分211利用电子邮件或类似方式可从外部设备中获取掩模信息。背景图像获取部分201也可利用电子邮件或类似方法从外部设备中获取背景图像。
背景图像获取部分201可以获取由照相机部分220获取的图像，作为背景图像。
(第二实施例)图5是一张框图，示出依据本发明第二实施例的图像组合便携式终端的配置。在图5中，如图1所示第一实施例相同的元件具有相同的参考数字并不再描述。
在图5中，图像组合便携式终端包括未组合图像记录部分200，背景图像获取部分401，掩模记录部分210，掩模信息获取部分211，照相机部分220，捕获图像获取部分221，图像组合部分402，显示部分240，记录指令部分250和组合图像记录部分251。
背景图像获取部分401从先前储存在未组合图像记录部分200内的多幅记录图像中选择用户希望的数据，或选择空白数据(完全透明数据)并将它输入到图像组合部分402。这里，该数据不限止于空白数据，但可以是任何数据，例如专门地用于指明没有待使用的组合图像的图像数据或能指明没有待使用的组合图像的文本数据，只要它能指明没有待使用的组合图像。
当图像组合部分402已经从背景图像获取部分401接收到图像数据时，如同第一实施例，将来自捕获图像获取部分221的捕获图像合并在掩模区域内的范围，与来自背景图像获取部分401的图像组合在一起，并将合成图像显示在显示部分240。当图像组合部分402已接收到一条不使用来自背景图像获取部分401的图像数据的指令时(空白数据)，依据由掩模信息获取部分211选择的掩模信息，将来自捕获图像获取部分221的捕获图像合并在掩区域外的范围内，并显示在显示部分240上。在这时，图像组合部分402仅用分帧线可显示掩模区域，并也将该捕获图像显示在掩模区域内。通过移动照相机部分220将该掩模区域外的背景图像改变为移动图像。在将掩模区域定位于背景图像内最佳位置的那一瞬间，用户按下记录指令部分250的快门按钮。图像组合部分402将该背景图像储存在未组合图像记录部分200内，掩模区域与该背景图像进行组合，以响应来自记录指令部分250的快门指令。图像组合部分402实际上可以将该背景图像储存在未组合图像记录部分200，不需将它与掩区域相组合。
图6示出几张图表，用于描述依据第二实施例的图像组合便携式终端的操作。图7是一张流程图，示出依据第二实施例的图像组合便携式终端的操作。在下文中，将参考图6和7描述图像组合便携式终端的操作。在图7中，与图4所示处理内容相同的步骤具有相同的步骤号并不再描述。
选择一幅记录图像(步骤S301)，选择掩模信息(步骤S302)，并初始化区域号(步骤S303)，并其后，图像组合部分402确定从背景图像获取部分401通知的图像是否是空白数据(步骤S501)。当它不是空白数据时，图像组合部分402执行如同第一实施例的步骤S304到S310的处理。
另一方面，在空白数据的情况中，图像组合部分402将来自照相机部分220的捕获图像合并在选择掩模区域外，并在显示部分240将该组合图像显示为移动图像(步骤S502)。不必用分帧线显示掩模区域的帧，可以通过倒转亮度或能识别掩模区域的其他方法来显示掩模区域。
在空白数据的情况中，如图6所示，图像组合部分402将来自捕获图像获取部分221的实时图像合并在图6A所示图像掩模区域外的范围10内，并将来自捕获图像获取部分221的捕获图像按实时方式显示在掩模区域外的范围10内，如图6B所示。
然后，图像组合部分402选定来自捕获图像获取部分221的捕获图像，以响应来自记录指令部分250的一条快门指令，并键入(enter)待储存的组合图像(步骤S503)。这键入的图像可以包括或可以不包括在步骤S502显示的帧。图6C示出不显示帧的一个例子。当通过倒转亮度或其他方法显示掩模区域时，可以使用经受这种处理的图像，或可使用未经受这种处理的图像。
其后，图像组合部分402将在步骤S503键入的组合图像储存在未组合图像记录部分200(步骤S504)，并结束该处理。
这样，在第二实施例中，有可能在背景图像获取部分401选择空白，以便在捕获图像时刻能显示和储存用于显示的图像(an image for display)，在该显示中，能交迭背景图像和单一掩模帧。因此，因为适用于背景的图像能先前捕获，同时当使用掩模时确认用于捕获图像的掩模区域，能够产生允许人面肖像或类似物用作位于最佳位置内掩模的背景图像。
在上面的实施例中，当使用一幅储存的原始记录图像时，用户必需再选择掩模信息，这化费两倍多的工作量。因此，在步骤S504的操作中，图像组合部分402可链接捕获背景图像和选择的掩模信息，并将它们记录在未组合图像记录部分200内，且可以在组合图像时自动地获取该链接掩模信息。这能节省用户选择掩模信息的工作量。为了背景图像和掩模信息之间的链接，用于指明相应于背景图像的掩模信息的一张管理表可以储存在未组合图像记录部分200，能指定掩模信息的数据识别符可加到背景图像数据，或掩模信息本身可以储存在未组合图像记录部分200内。
可以预先由第三方执行如上所述的掩模信息和背景图像之间的链接，所述第三方提供掩模信息和/或背景图像。
(第三实施例)在第三实施例中，将描述一种图像组合便携式终端，在该图像组合便携式终端中，储存在未组合图像记录部分200的图像可以与掩模信息链接。图1涉及到图像组合便携式终端的框图。这个实施例与第一实施例的不同之处在于用储存在未组合图像记录部分200内的管理表执行储存在未组合图像记录部分200内的图像和掩模信息之间的链接。在管理表中，寄存相应于储存在未组合图像记录部分200内的图像的掩信息数据识别符。
图8是一张流程图，示出依据第三实施例的图像组合便携式终端的操作。在图8中，执行与第一实施例相同操作的步骤具有相同的步骤号并不再描述。
在选择一幅记录图像(步骤S301)后，背景图像获取部分201查阅储存在未组合图像记录部分200的管理表，确定是否存在掩模信息，该掩模信息与所述选择记录图像相链接(步骤S601)。当不存在链接的掩模信息时，背景图像获取部分201将它通知给图像组合部分230(步骤S602)。其后，图像组合部分230按与第一实施例相同方式执行步骤S302和随后步骤的处理。
另一方面，当存在链接的掩模信息时，背景图像获取部分201将与选择图像链接的掩模信息的数据识别符通知给图像组合部分230(步骤S603)。然后，图像组合部分230执行下面的操作让掩模信息获取部分211选择掩模信息，该掩模信息相应于通知的掩模信息的数据识别符；获取掩信息(步骤S604)；并然后执行步骤S303和随后步骤的处理。
这样，在第三实施例中，链接用于背景的记录图像和掩模信息，以使能自动地选择为背景图像选择的最佳掩模信息，这使得有可能节省用户选择掩模信息所需的工作量。
也能考虑到下面的实施例。当指定的掩模信息没有存储在掩模记录部分210时，掩模信息获取部分211让通信部分(未示出)经网络或类似链路从外部设备(未示出)中获取掩模信息。
当从掩模记录部分210中删除与记录图像链接的掩模信息时，掩模信息获取部分211不能获取涉及数据识别符的掩模信息。为了避免这种情况，图像组合便携式终端可以单独储存该链接的掩模信息或可以被设置，以防止它被删除或修改。
(第四实施例)在第四实施例中，使用配置有通信部分的图像组合便携式终端。除了提供通信部分之外，依据第四实施例的图像组合便携式终端的功能块的配置与第一实施例的配置相同，所以参考图1。通信部分(未示出)能将由通信获取的数据发送给图像组合部分230或能将该数据从图像组合部分230发送到外面。在第四实施例中，用多台图像组合便携式终端能建立一幅最终的组合图像。在下文中，为了简化，描述一个例子，在该例子中，通过使用两台图像组合便携式终端，即第一和第二图像组合便携式终端，建立一幅最终的组合图像，但如后面描述的，从下面的描述中也能明白使用三台或更多台图像组合便携式终端的情况中的操作。
图9是一张流程图，示出依据第四实施例的第一图像组合便携式终端的操作。在图9中，与图4所示相同的操作具有相同的步骤号，并不再描述。图10是一张流程图，示出依据第四实施例的第一图像组合便携式终端的操作。图11显示几张图表，用于描述依据第四实施例的第一和第二图像组合便携式终端的操作。下文中，将参考图9，10和11描述依据第四实施例的图像组合便携式终端的操作。
首先，当第一图像组合便携式终端的图像组合部分230在步骤S306中确定存在剩余的掩模区域时，它确定从用户是否提供了将中途产生的中间图像发送给第二图像组合便携式终端的一条指令(步骤S701)。
当没有提供发送指令时，图像组合部分230进行到步骤S307的操作，并继续在其他掩模区域内进行图像组合。
另一方面，当提供发送的指令时，图像组合部分230建立能显示图像组合中途状态的中间信息(步骤S702)。这里，中间信息包括能在第一图像组合便携式终端中进行组合的中间信息；有关已用掩模的信息；能显示某一掩模区域的区域号的未用区域信息，在该掩模区域还未对捕获图像进行组合。然后，图像组合部分230让通信部分(未示出)将中间信息发送给第二图像组合便携式终端(步骤S703)，并结束该处理。图像组合部分230用电子邮件或类似方式将中间信息发送给第二图像组合便携式终端。在这种情况中，图像组合部分230能自动地将中间信息转换为电子邮件格式，用于发送给第二图像组合便携式终端。
接着，参考图10，将描述第二图像组合便携式终端的操作，中间信息发送给第二图像组合便携式终端。在图10中，与图9所示相同的操作具有相同的步骤号，并不再描述。
首先，第二图像组合便携式终端的图像组合部分230经通信部分(未示出)从第一图像组合便携式终端接收中间信息(步骤S801)。当中间信息是经过电子邮件发送时，第二图像组合便携式终端较佳地从邮件软件中启动一个程序，用于自动地或手动地执行下列操作。
接着，图像组合部分230查阅由中间信息内未使用区域信息指定的区域号，识别要进行捕获图像组合的掩模区域(步骤S802)。接着，图像组合部分230将在步骤S802中识别的掩模区域的区域号设置成进行处理的区域号(步骤S803)并进行到步骤S304的操作，并且继续在剩余掩模区域进行捕获图像的组合。其后，也在第二图像组合便携式终端中，中间信息可以发送给其他图像组合便携式终端，例如在步骤S701到S703的第一图像组合便携式终端。中间信息能按这样的方式一条一条地发送给其他图像组合便携式终端，以便用至少三台图像组合便携式终端能建立一幅最终的组合图像。
当中间信息从第二图像组合便携式终端发送时，第一图像组合便携式终端可继续按与图10所示相同的操作在某一掩模区域内对一幅捕获图像进行组合。由第一和第二图像组合便携式终端建立的最终组合图像用电子邮件或类似方式可以互相交换。在这种情况中，图像组合便携式终端可以添加一个标题或类似信息，并将自动产生的最终组合图像转换成这样一种格式，以使最终组合图像能经电子邮件进行发送，并这样可将它发送给其他图像组合便携式终端。
更特别地，如图11A所示，当第一图像组合便携式终端在掩模区域11内建立中间图像(捕获图像与该中间图像进行组合)时，它通过将区域号指定给掩模区12来建立中间信息，这中间信息包括产生的中间图像；有关已用掩模的信息；及未用区域信息，该未用区域信息能示出在掩模区域12内未进行捕获图像的组合，并这样将中间信息发送给第二图像组合便携式终端。
如图11B所示，已收到中间信息的第二图像组合便携式终端将由它自己获取的捕获图像附加到掩模区域12，以完成最终的组合图像。其后，第二图像组合便携式终端将该组合图像发送给另一台外部设备，例如第一图像组合便携式终端。这发送可以自动地或依据用户的指令来执行。
这样，在第四实施例中，中间图像能在多台便携式终端之间进行交换，该中间图像含有能显示还未附加有一幅捕获图像的某一区域的信息，以便由多台便携式终端能建立最终的组合图像。这样，通过合并来自例如位于远地的人们的一幅图像，能建立一幅组合图像。
第四实施例所示的操作能用在第一到第三实施例中。
在第四实施例中，第一图像组合便携式终端发送附加有捕获图像的中间图像，但也可发送仅含有背景图像的中间信启、，作为半图像(half image)，并进一步包含掩模信息和未用区域信息。在这种情况，第一图像组合便携式终端可以确定是否在步骤S302后进行中间发送。已接收这种中间信息的第二图像组合便携式终端按与图10所示相同的操作对捕获图像进行组合。在这操作中，第二图像组合便携式终端经过通信部分，按相同的方式获取背景图像与掩模信息链接的信息。第一图像组合便携式终端按相同方式发送背景图像与掩模信息链接的信息。
工业应用本发明的图像组合便携式终端及其所用方法允许用简单的按键和按钮的简易操作为一幅组合图像确定由形状，尺寸，及位置定义的区域，这样在便携式终端和类似设备的领域中是非常有用的。
权利要求
1.一种便携式终端，用于对某一背景的背景图像和捕获的某一捕获图像进行组合，所述便携式终端包括背景图像获取装置，用于捕获所述背景图像；捕获图像获取装置，用于获取所述捕获图像；掩模信息获取装置，用于获取掩模信息，在所述掩模信息中指定用于组合所述捕获图像的至少一块区域，以响应用户的一条指令；及图像组合装置，用于在由所述掩模信息获取装置获取的所述掩模信息指定的所述区域内，对由所述捕获图像获取装置获取的所述捕获图像和由所述背景图像获取装置获取的所述背景图像进行组合。
2.按照权利要求1所述便携式终端，其特征在于，多块所述区域是在所述掩模信息中指定的，而在所述多块区域中指定某一次序；及所述图像组合装置依据所述次序在所述区域内顺序地对所述捕获图像进行组合。
3.按照权利要求2所述便携式终端，其特征在于，所述图像组合装置改变所述区域的所述次序，以响应用户的一条指令，在所述区域内要对所述捕获图像进行组合。
4.按照权利要求1所述便携式终端，其特征在于，进一步包括背景图像建立装置，用于通过将由所述捕获图像获取装置获取的捕获图像显示为移动图像，同时显示由所述掩模信息获取装置获取的所述掩模信息指定的某一区域，并键入所述捕获图像，建立所述背景图像。
5.按照权利要求4所述便携式终端，其特征在于，当建立所述背景图像时，所述背景图像建立装置使所述建立的背景图像与已使用的所述掩模信息进行链接；及当所述背景图像与掩模信息链接时，所述掩模信息获取装置获取所述链接掩模信息。
6.按照权利要求1所述便携式终端，其特征在于，进一步包括中间信息建立装置，用于由所述图像组合装置产生能显示图像组合中途状态的信息；及中间信息发送装置，用于将由所述中间信息产生装置建立的所述中间信息发送给外部设备。
7.按照权利要求6所述便携式终端，其特征在于，所述中间信息建立装置建立所述中间信息，这样，所述中间信息包括能显示某一区域的未用区域信息，在该区域内，还未对捕获图像进行组合。
8.按照权利要求7所述便携式终端，其特征在于，当所述中间信息是从一台外部设备发送时(所述外部设备不是它本身设备)，那末，所述图像组合装置在由含在所述中间信息内的所述示用区域信息指定的某一区域内，对由所述捕获图像获取装置获取的捕获图像进行组合。
9.按照权利要求1所述便携式终端，其特征在于，所述图像组合装置对由所述捕获图像获取装置获取的所述捕获图像进行组合，这样，在所述区域内将所述捕获图像显示为移动图像。
10.按照权利要求9所述便携式终端，其特征在于，响应用户的一条指令，所述图像组合装置键入显示为移动图像的所述捕获图像，并对所述背景图像和待确定的所述捕获图像进行组合。
11.按照权利要求1所述便携式终端，其特征在于，所述背景图像与所述掩模信息链接；及所述掩模信息获取装置获取与所述背景图像链接的掩模信息。
12.按照权利要求1所述便携式终端，其特征在于，当在所述掩模信息中，指定多块所述区域时，所述图像组合装置选择所述区域，用于对所述捕获图像进行组合，以响应用户的一条指令，并顺序地对所述捕获图像和所述背景图像进行组合。
13.按照权利要求1所述便携式终端，其特征在于，进一步包括背景图像储存部分，用于储存所述背景图像中的至少一幅图像；其中，所述背景图像获取装置从所述背景图像储存部分中获取所述背景图像。
14.按照权利要求1所述便携式终端，其特征在于，进一步包括照相机部分，用于获取一幅图像；其中，所述背景图像获取装置获取由所述照相机部分获取的图像，作为所述背景图像。
15.按照权利要求1所述便携式终端，其特征在于，进一步包括通信部分，用于与外部设备进行通信；其中，所述背景图像获取装置经所述通信部分，从外部设备中获取所述背景图像。
16.按照权利要求1所述便携式终端，其特征在于，进一步包括照相机部分，用于获取一幅图像；其中，所述捕获图像获取装置获取由所述照相机部分获取的图像，作为所述捕获图像。
17.按照权利要求1所述便携式终端，其特征在于，进一步包括通信部分，用于与外部设备进行通信；其中，所述捕获图像获取装置经所述通信部分，从外部设备中获取所述捕获图像。
18.按照权利要求1所述便携式终端，其特征在于，进一步包括掩模信息储存部分，用于储存所述掩模信息图像中的至少一幅图像；其中，所述掩模信息获取装置从所述掩模信息储存部分获取所述掩模信息。
19.按照权利要求1所述便携式终端，其特征在于，进一步包括通信部分，用于与外部设备进行通信；其中，所述掩模信息获取装置经所述通信部分，从外部设备中获取所述掩模信息。
20.一种处理便携式终端的方法，所述便携式终端能对某一背景的背景图像和获取的捕获图像进行组合，其特征在于，所述方法包括获取所述背景图像的步骤；获取所述捕获图像的步骤；获取掩模信息的步骤，在所述掩模信息中指定至少一块用于对所述捕获图像进行组合的区域，以响应用户的一条指令；及对所述捕获图像和所述背景图像进行组合的步骤，所述两种图像是在由获取的所述掩模信息指定的所述区域内获取的。
全文摘要
所述图像组合便携式终端对在未组合图像记录部分(200)内准备的记录图像和由照相机部分(220)获取的捕获图像进行组合。将能定义至少一块区域的多组掩模信息储存在掩模记录部分(210)，在所述至少一块区域内，所述捕获图像将与所述记录图像进行组合。所述掩模信息获取部分(211)从所述掩模记录部分(210)选择希望的掩模信息，以响应用户的一条指令。所述图像组合部分(230)在某一区域内对所述记录图像和所述捕获图像进行组合，所述区域是由所述掩模信息获取部分(211)选择的所述掩模信息指定的。
文档编号G06T1/00GK1706181SQ20038010185
公开日2005年12月7日 申请日期2003年10月22日 优先权日2002年10月23日
发明者小岸聖史, 山下健, 小池千恵, 和田浩美 申请人:松下电器产业株式会社