视频会议终端设备、视频会议系统、图像失真修正方法和图像失真修正处理程序产品的制作方法

视频会议终端设备、视频会议系统、图像失真修正方法和图像失真修正处理程序产品的制作方法
【专利摘要】一种本地视频会议终端设备(100)包括广角摄像机镜头(10)，摄像机图像修正控制单元(12)，对来自广角摄像机镜头(10)的数字视频信号中包括的图像执行失真修正处理，摄像机图像修正表存储单元(13)，其包括与图像的一部分区域有关的用于失真修正处理的修正表，视频显示单元(19)，其显示失真修正之后的数字视频信号，以及摄像机显示切换键(20)，其输出信号来选择图像修正表。摄像机图像修正控制单元(12)使用经由摄像机显示切换键(20)通过切换所选择的图像修正表，来在数字视频信号中包括的图像上执行失真修正处理。
【专利说明】视频会议终端设备、视频会议系统、图像失真修正方法和图像失真修正处理程序产品

【技术领域】
[0001]本发明涉及一种视频会议终端设备、视频会议系统、图像失真修正方法和图像失真修正处理程序产品。

【背景技术】
[0002]视频会议系统被广泛地使用，利用视频会议系统，通过诸如互联网的通信网络在远程的地点之间举行远程会议。在传统的会议系统中，在正在参加远程会议的多方出席者之一的会议室中使用远程会议系统的终端设备。
[0003]利用传统的远程会议系统的终端设备，会捕捉到包括会议参与方的会议室的图像和诸如出席者发言的会议室中的音频。捕捉到的图像和音频被转换为数字数据，并且被发送到另一方的终端设备。将所发送的图像显示在另一方会议室中的显示器上并且通过另一方会议室中的扬声器输出音频。这能够以与在一个地点举行真实(例如，非虚拟的)会议几乎相同的状态在远程地点之间举行会议。
[0004]视频会议系统确保实质的广角视场来在终端设备的显示单元中显示多个出席者。这是通过在终端设备的摄像机功能中提供一种变焦机制或者一种向上向下移动和向左向右移动的移动机制，或者采用一种包括多个摄像机的多摄像头(multicamera)而实现的。
[0005]在日本专利N0.4048511中公开了一种鱼眼镜头摄像机，包括图像修正处理单元，该图像修正处理单元修正通过鱼眼镜头摄像机捕捉到的图像的失真。该设备中的图像修正处理单元被配置为通过组合两种类型的坐标变换来执行计算。一个坐标变换修正鱼眼镜头摄像机的安装角度，另一个坐标变换修正通过鱼眼镜头捕捉到的图像的失真。


【发明内容】

[0006]虽然传统的视频会议系统中不需要处理电路等来修正图像的失真，但是它们的终端设备具有增大的尺寸和重量，系统的成本因此也增加了。典型的传统的视频会议系统因此被实现为昂贵的、立式的设备。
[0007]此外，在专利文献I中公开的鱼眼镜头摄像机设备不能辨别捕捉的状态。这使得用户不可能选择性地使用鱼眼镜头摄像机设备中的期望的图像修正方法。
[0008]考虑到上述情况，本发明旨在提供一种包括广角摄像机并且具有增强的可用性的视频会议系统和一种图像失真修正方法，并且提供一种利用广角摄像机并采用简单结构的视频会议系统，藉此自动地修正图像，或者一种优选方式为操作者根据图像的状态来修正图像，并更进一步地抑制终端设备的增大的尺寸和重量，以此实现可携性。
[0009]为了实现上述目的，根据本发明的视频会议终端设备包括:包含广角摄像机镜头的广角摄像机；第一控制单元，从广角摄像机接收数字视频信号并对该数字视频信号中包括的图像执行失真修正处理；存储单元，在其中存储第一控制单元执行图像失真修正处理时使用的图像修正信息，该图像修正信息包括与来自广角摄像机的数字视频信号中包括的图像的至少一部分区域有关的用于失真修正处理的修正信息；第二控制单元，向耦接到网络的另一个视频会议终端设备发送信号并从该另一个视频会议终端设备接收信号；提供单元，提供广角摄像机的数字视频信号和已经被执行失真修正的数字视频信号；以及操作单元，每当操作该操作单元时，其输出信号来切换存储在存储单元中的多条图像修正信息，其中，第一控制单元使用已经经过操作单元中的切换而选择的一条图像修正信息对数字视频信号中包括的图像执行失真修正处理。
[0010]根据本发明，可以提供一种包括广角摄像机并且具有增强的可用性的视频会议系统以及其图像失真修正方法，以及可以提供一种视频会议系统，其利用广角摄像机并采用简单结构，藉此自动地修正图像，或者一种优选方式是操作者根据图像的状态来修正图像，并且更进一步地抑制终端设备的增大的尺寸和重量，这实现了可携性。

【专利附图】

【附图说明】
[0011]图1是根据本发明实施例的用于视频会议系统的视频会议终端设备的透视图。
[0012]图2是包括图1示出的视频会议终端设备的方框图的视频会议系统的示例性方框图。
[0013]图3是根据该实施例的用于视频会议系统的视频会议终端设备的图像修正表的示例性视图。
[0014]图4是根据该实施例的用于视频会议系统的视频会议终端设备的图像修正表的另一个示例性视图。
[0015]图5是根据该实施例的用于视频会议系统的视频会议终端设备的图像修正表的再一个示例性视图。
[0016]图6是用于说明不对其执行失真修正处理的图像的例子的视图。
[0017]图7是用于说明在根据该实施例的用于视频会议系统的视频会议终端设备中，通过对图6示出的几乎整个图像执行失真修正处理所获得的图像的视图。
[0018]图8是用于说明在根据该实施例的用于视频会议系统的视频会议终端设备中，通过对图6所示的图像的大致中心部分执行失真修正处理所获得的图像的视图。
[0019]图9是用于说明在根据该实施例的用于视频会议系统的视频会议终端设备中，通过对图6中示出的图像的大致左侧部分和大致右侧部分执行失真修正处理并且将它们组合到一副图像中所获得的图像的视图。
[0020]图10是用于说明根据该实施例的用于视频会议系统的视频会议终端设备中，通过对图6所示的图像的大致中心部分、右侧部分和左侧部分执行失真修正处理并且将它们组合到一幅图像中所获得的图像的视图。
[0021]图11是在根据该实施例的用于视频会议系统的视频会议终端设备中的图像失真修正方法的实施例的流程图。
[0022]图12是根据该实施例的用于视频会议系统的视频会议终端设备中，包括检测摄像机方向或者仰角步骤的图像失真修正方法的实施例的流程图。
[0023]图13是根据该实施例的用于视频会议系统的视频会议终端设备中，用于确定图像修正表的数量的示例性流程图。
[0024]图14是根据该实施例的用于视频会议系统的视频会议终端设备中，图像失真修正方法的另一个例子的流程图。
[0025]图15是用于说明图14中所示的图像失真修正方法的概念的视图。
[0026]图16是用于说明在图14中所示的图像失真修正方法中，剪裁一个区域的方法的例子的视图。
[0027]图17是用于说明在图14中所示的图像失真修正方法过程中所剪裁的区域和所显示的图像之间的关系的视图。
[0028]图18是用于说明在图14中所示的图像失真修正方法过程中所剪裁的区域和视频显示编号之间的关系的视图。
[0029]图19是在根据该实施例的用于视频会议系统的视频会议终端设备中，在图像失真修正方法过程中剪裁图像或者屏蔽一部分图像的方法的例子的流程图。
[0030]图20是用于说明图19中所示的剪裁图像或者屏蔽一部分图像的方法的例子的视图。
[0031]图21是在根据该实施例的用于视频会议系统的视频会议终端设备中，在图像失真修正方法过程中用来调节所剪裁的图像的亮度的亮度调节表的示例性视图。
[0032]图22是在根据该实施例的用于视频会议系统的视频会议终端设备中，在图像失真修正方法过程中，使用图21中所示的亮度调节表来调节所剪裁的图像的亮度的流程图。
[0033]图23是用于说明调节已经根据图22中所示的流程图进行剪裁的所剪裁图像的亮度的方法的示例性视图。

【具体实施方式】
[0034]以下参照附图描述本发明的实施例。
[0035]视频会议终端设备的外观视图
[0036]图1是根据本发明实施例，用于视频会议系统的视频会议终端设备100的透视图。
[0037]视频会议终端设备100包括主体10a和显示单元100b。如图1所示，将主体10a放置在大致水平的平面上。显示单元10b通过围绕液晶显示器(IXD)铰接单元115的IXD铰接移动(图中用数字114所示的)，可以从主体10a旋转(活动旋转)大约90度。
[0038]显示单元10b包括液晶显示单元101,该液晶显示单元101是信息显示单元的一个例子。在液晶显示单元101的上部提供超广角摄像机112(作为广角摄像机的一个例子)。
[0039]超广角摄像机112的镜头由玻璃或者塑性材料制成，并且具有例如从130到190度的视场角。例如，可以使用具有110度或更大角度的视场角的广角摄像机代替超广角摄像机112。
[0040]在该说明中，这里的广角摄像机包括超广角摄像机。
[0041]在本实施例中，液晶显示器(IXD)相当于并且被缩写为IXD。
[0042]在本实施例中，IXD被用作显示单元10b的信息显示单元；然而，实施例不限于这个例子。例如，可以采用等离子显示器、有机发光显示器(OLED)或其它显示器。
[0043]液晶显示单元101被定义为信息显示单元，并且IXD铰接单元115也被称为信息显示铰接单元。
[0044]视频会议终端设备100包括中央处理单元(CPU)、存储固定数据的只读存储器(ROM)、临时存储数据的随机存取存储器(RAM)、包括可重写非易失性存储器的备份存储器、包括缓存的输入接口电路和输出接口电路。
[0045]超广角摄像机112保持在摄像机旋转机构111中，该摄像机旋转机构111可围绕与LCD铰接单元115的旋转轴平行的轴旋转大约180度。超广角摄像机112可以如箭头指示的从提供有液晶显示单元101的向前方向旋转到向后的方向。
[0046]显示单元10b包括扩音器113和扬声器116。然而，扩音器和扬声器需要被嵌入视频会议终端设备100中。可以通过提供在视频会议终端设备100中的通用串行总线(USB)端子将显示单元10b耦接到外部扩音器和扬声器或外部扬声扩音器。
[0047]视频会议终端设备100更进一步地包括高清晰度多媒体接口(HDMI)(注册商标)和视频图形阵列(VGA)的视频输出的端口。因此在外部监视器或外部投影仪上也可以显示在液晶显示单元101上显示的视频内容。
[0048]如图1所示，在视频会议终端设备100的主体100的左侧部分提供有电源键102、菜单键103和箭头键(上和下，右和左)104。电源键102被用于打开和关闭电源。菜单键103用于显示在视频会议终端设备100中可执行的设置和操作菜单。箭头键(上和下，右和左)104用于在液晶显示单元101的屏幕上例如使用软键盘来执行键操作。
[0049]在主体10a的左侧部分上还提供有回车键(Enter键)105和关闭键(Off键)106。回车键105 (相当于典型键盘的回车键)用于在屏幕上选择OK按钮或采用使用箭头键(上和下，右和左)104在软键盘上选择的键。关闭键106被用来终止视频会议。
[0050]如图1所示，在视频会议终端设备100的主体10a的右侧部分上提供有摄像机切换键107和IXD亮度切换键108。摄像机切换键107是显示图像的所期望区域和执行失真修正处理的操作单元的一个例子，这将在随后进行描述。LCD亮度切换键108用于调节液晶显示单元101的屏幕的明亮程度。
[0051]在主体10a的右侧部分上还提供有音频音量键109和音量静音键110。音频音量键109用于调节从扬声器116输出的音量。音量静音键110用于阻止通过扩音器113捕捉到的音频被发送到另一方的视频会议终端设备100。
[0052]包括视频会议终端设备的视频会议系统的大体结构
[0053]图2是包括图1所示的视频会议终端设备100的功能框图的视频会议系统的示例性方框图。视频会议系统包括本地位置的视频会议终端设备100、远程地点的一些视频会议终端设备40、视频会议服务器50和网络30。本地地点的视频会议终端设备100 (在特定商业基地中的终端)被显示为图2中用长线和两个短线交替的点划线围绕的方框。远程视频会议终端设备40 (在远离处于特定商业基地中的终端的一些商业基地中的终端)处于举行视频会议的一些远程地点。视频会议服务器50控制视频会议系统。网络30将这些元件耦接到彼此。
[0054]在本实施例中，用本地视频会议终端设备100捕捉到的出席者在监视显示在本地视频会议终端设备100的液晶显示单元101上的其自身的图像的同时，对在本地视频会议终端设备100的液晶显示单元101上显示的其自身的图像执行失真修正处理。该出席者随后将已经被执行过失真修正处理的图像发送给远程视频会议终端设备40。
[0055]以相同的方式，用远程视频会议终端设备40捕捉到的出席者在监视显示在远程视频会议终端设备40上的其自身的图像的同时，对在远程视频会议终端设备40上显示的其自身的图像执行失真修正处理。该出席者随后将已经被执行过失真修正处理的图像发送给本地视频会议终端设备100。
[0056]本地视频会议终端设备100具有类似于远程视频会议终端设备40的结构。以下以代表性的方式描述本地视频会议终端设备100中包括的功能块。
[0057]摄像机镜头10对应于捕捉视频会议的图像的超广角摄像机112 (图1)的镜头。摄像机镜头10由玻璃或塑性材料制成。将包括会议出席者的图像的光学信号发送给摄像机传感器11，其中所述会议出席者是通过摄像机镜头10捕捉到的对象。
[0058]摄像机传感器11是图像传感器并且将从摄像机镜头10发送来的光信号转换为数字视频信号。该图像传感器是用电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器实现的。图像传感器例如是生成640 (水平方向上)X 480 (垂直方向)像素的图像的光电转换设备。
[0059]将通过摄像机传感器11从光信号转换来的数字视频信号发送给第一控制单元，摄像机图像修正控制单元12是第一控制单元的一个例子。
[0060]在从摄像机传感器11接收数字视频信号之后，摄像机图像修正控制单元12根据图像修正表的内容修正视频信号的图像中的失真，所述图像修正表是根据来自摄像机切换键107(图1)的信号已经切换的并且选择的图像修正信息的例子，这将随后描述。摄像机图像修正控制单元12随后将修正的数字视频信号发送给视频会议传输控制单元15。
[0061]将修正后的数字视频信号发送给视频显示单元19并且将其显示在液晶显示单元101上。观看液晶显示单元101的出席者操作摄像机切换键107，从而监视使用另一个图像修正表对其执行了失真修正处理的图像以在液晶显示单元101上选择适当的图像。
[0062]通过网络30和网络控制单元16 (作为第二控制单元的一个例子)将选择图像的数字视频信号发送给视频会议终端设备40，并且随后将其显示在视频会议终端设备40的液晶显示单元101上。这使得在使用远程视频会议终端设备40的地点处的会议出席者在观看已经被适当执行过失真修正处理的图像的同时进行会议。
[0063]当操作了摄像机切换键107时，将图像修正表编号发送给摄像机图像修正表存储单元13 (作为存储单元的一个例子)来选择图像修正表，这将在随后描述。
[0064]摄像机图像修正表存储单元13是利用嵌入视频会议终端设备100中的存储器(诸如硬盘驱动器、ROM和RAM)来实现的并且在其中存储至少一个图像修正表。
[0065]随后将参照图3至图5来描述图像修正表。作为例子的图像修正表具有表格式数据结构，然而可以使用任何类型的数据结构。图像修正表不指定表格式数据结构，因此它也被称作图像修正信息。
[0066]扬声器输出单元14是利用扬声器116 (图1)实现的，并且根据从人机控制单元18接收到的再生音量信号使用从视频会议传输控制单元15接收到的数字音频信号再生音频。
[0067]已经通过另一个远程视频会议终端设备40的扩音器输入单元17捕捉到将被再生的数字音频信号，并且将其从网络控制单元16输出。随后将输出的数字音频信号通过网络30发送给视频会议传输控制单元15并且发送给本地视频会议终端设备100的网络控制单元16。
[0068]视频会议传输控制单元15执行视频会议的通话控制以及数字视频信号和数字音频信号的传输控制。稍后将描述视频会议的这些控制方法。视频会议传输控制单元15是利用中央处理单元(CPU)和其上执行的并且存储在ROM中的计算机程序实现的。
[0069]摄像机图像修正控制单元12包括存储单元并且在其中存储视频会议的图像、已经被执行过失真修正处理的图像和剪裁区域的图像。
[0070]网络控制单元16控制网络30和视频会议终端设备100之间的数据的发送和接收。具体地，网络控制单元16将从视频会议传输控制单元15接收到的所发送数据发送给网络30并且将从网络30接收到的数据发送给视频会议传输控制单元15。
[0071]如上描述的，网络控制单元16透过地执行视频会议传输控制单元15和网络30之间的数据的发送和接收。网络控制单元16是用网络接口实现的。应当注意的是有线的或无线的发送和接收设备可以被用作网络接口。
[0072]扩音器输入单元17利用以从人机控制单元18接收到的记录音量信号为基准的音量大小来捕捉视频会议的音频，将音频转换为数字音频信号并且将它们发送给视频会议传输控制单元15。
[0073]扩音器输入单元17是用扩音器113 (图1)实现的。将发送给视频会议传输控制单元15的数字音频信号发送给处于正在通过网络控制单元16和网络30举行视频会议的地点的另一个远程视频会议终端设备40。
[0074]人机控制单元18通过在超广角摄像机112处的操作员(或用户)或视频会议终端设备100上的键来控制操作。例如，人机控制单元18将通过视频会议终端设备100的超广角摄像机112捕捉到的图像数据发送给视频显示单元19并且将图像数据显示在液晶显示单元101上(图1)。
[0075]另一个例子是，用户在观看液晶显示单元101 (图1)的同时，操作摄像机显示切换键20、摄像机方向切换21 (摄像机方向检测单元的一个例子)或其它操作键23 ;或者当LCD倾斜切换22 (LCD倾斜检测单元的一个例子)检测LCD的预定倾斜(即超广角摄像机112的仰角)时，人机控制单元18分别从摄像机显示切换键20、摄像机方向切换21、LCD倾斜切换22或者其它操作键23接收诸如摄像机切换信号、摄像机方向信号、LCD倾斜信号和其它操作键的信号的相应信号。
[0076]在本实施例中，采用摄像机方向切换21作为摄像机方向检测单元。然而本发明不局限于这个例子。可以采用传感器来检测摄像机镜头10的光轴的方向。
[0077]在本实施例中采用IXD倾斜切换22作为IXD倾斜检测单元。然而本发明不局限于这个例子。可以采用传感器来检测摄像机镜头10的光轴的倾斜的角度。
[0078]摄像机显示切换键20对应于摄像机切换键107 (图1)，并且取决于旋转的位置，即取决于摄像机旋转机构111 (图1)的前侧和后侧启动或者关闭摄像机方向切换21。
[0079]根据IXD铰接单元115的IXD铰接移动114(图1)，当显示单元10b变为一些预定角度的位置时，LCD倾斜切换22被启动或者关闭。其它操作键23例如相当于图1所示的电源键102、菜单键103、箭头键(上和下、右和左)104、回车键105、关闭键106、IXD亮度切换键108、音频音量键109和音量静音键110。
[0080]如上描述的,液晶显示单元101可以是不包括IXD的显示器。IXD倾斜切换22因此也被称作信息显示器倾斜切换并且LCD亮度切换键108也被称作信息显示器亮度切换键。
[0081]终端设备中的各种类型的键都不必被提供为键的形状。例如可以用在诸如LCD的显示板中嵌入有触摸式传感器的触摸板来实现终端设备中的各种类型的键。因此，在本发明该实施例中的操作键也被称作操作单元，其可以被提供为任何形状。
[0082]在从其它操作键23接收到另一个键的其它操作信号之后，人机控制单元18执行对应于用户实际上操作的键的控制。例如，当操作了音频音量键109时，人机控制单元18通过音频音量键109将再生音量信号发送给扬声器输出单元14用于指示扬声器输出单元14用该音量再生音频。
[0083]当操作了音量静音键110时，人机控制单元18将记录音量信号发送给扩音器输入单元17用于指示扩音器输入单元17不捕捉音频输入。
[0084]当显示视频会议开始屏幕的同时操作了回车键105时，人机控制单元18将视频会议室地址信号发送给视频会议传输控制单元15。
[0085]具体地说，如随后详细描述的，当视频会议室地址信号被发送到视频会议服务器50时，视频会议开始。当显示视频会议屏幕的同时操作了关闭键106时，人机控制单元18向视频会议传输控制单元15发送视频会议终止请求信号。
[0086]同样，如随后详细描述的，当视频会议终止请求信号被发送到视频会议服务器50时，将发出该终止请求的视频会议终端设备100从网络中断开。
[0087]当从摄像机显示切换键20接收到摄像机切换信号、从摄像机方向切换21接收到摄像机方向信号或者从LCD倾斜切换22接收到LCD倾斜信号时，人机控制单元18将摄像机图像修正切换信号发送给摄像机图像修正控制单元12。
[0088]一旦摄像机图像修正控制单元12从人机控制单元18接收到摄像机图像修正切换信号，摄像机图像修正控制单元12将该信号转换为图像修正表切换信号并且将该图像修正表切换信号发送给摄像机图像修正表存储单元13。
[0089]一旦摄像机图像修正表存储单元13从摄像机图像修正控制单元12接收到图像修正表切换信号，摄像机图像修正表存储单元13根据图像修正表切换信号适当地切换图像修正表并且将图像修正表的数据发送给摄像机图像修正控制单元12。
[0090]摄像机图像修正控制单元12根据图像修正表的数据执行图像失真修正处理。如果摄像机图像修正表存储单元13从摄像机显示切换键20直接接收到摄像机切换信号，那么摄像机图像修正表存储单元13以上面描述的同样的方法做出响应，由于来自摄像机方向切换21的摄像机方向信号或者来自LCD倾斜切换22的LCD倾斜信号而优先切换图像修正表。
[0091]当操作者操作摄像机显示切换键20时，操作者仅仅需要从已经被自动选择的图像修正表中选择适当的图像修正表。
[0092]摄像机图像修正控制单元12使用在那时从摄像机图像修正表存储单元13中被切换到并且被选择的图像修正表修正数字视频信号。摄像机图像修正控制单元12是使用嵌入视频会议终端设备100中的CPU和在该CPU上执行的计算机程序来实现的。
[0093]视频显示单元19根据从人机控制单元18接收的屏幕的数据或者从视频会议传输控制单元15接收的视频会议视频信号在液晶显示单元101上显示预定屏幕。
[0094]图像修正表I
[0095]图3示出了每当用户按下摄像机切换键107 (图1)时选择的图像修正表的例子。图像修正表定义了图像修正表编号(“图像修正表编号”)、必要的锐度修正(“锐度修正”)和执行失真修正处理的区域(“失真修正”)间的关系。
[0096]例如，如果用户选择了 “O”作为图像修正表编号，那么“锐度修正”修正是“η/a”(不可应用)并且“失真修正”是“全部”。也就是说，在通过切除还没有被执行失真修正处理的包括所有会议出席者的几乎整个图像而获得的所剪裁的区域上执行失真修正处理。
[0097]作为被执行失真修正处理的另一个区域，“中心”意为在通过切除尚未被执行失真修正处理的图像的大致中心部分而获得的所剪裁的图像上执行失真修正处理。
[0098]作为被执行失真修正处理的另一个区域，“右和左”意为在通过切除尚未被执行失真修正处理的图像的大致右侧部分和大致左侧部分而获得的所剪裁图像上执行失真修正处理，并且处理过的图像被一起显示在一个屏幕上。
[0099]作为另一个区域，“中心、右和左”意为在通过切除尚未被执行失真修正处理图像的大致中心部分、大致右侧部分和大致左侧部分而获得的所剪裁图像上执行失真修正处理，并且处理过的图像被一起显示在一个屏幕上。
[0100]图像修正表采用以下失真修正表来在图像的预定区域上(例如对“失真修正”)执行失真修正处理。在该修正过的区域中，地址表明失真修正之后的像素地址，也就是在失真修正之后要显示的像素的地址。X坐标值和Y坐标值表示在摄像机传感器11的光电转换设备的平面上的点位置。
[0101]失真修正之后的像素地址O:失真修正以前的光电转换设备的X坐标值和Y坐标值
[0102]失真修正之后的像素地址1:失真修正以前的光电转换设备的X坐标值和Y坐标值
[0103]失真修正之后的像素地址2:失真修正以前的光电转换设备的X坐标值和Y坐标值
[0104](省略中间部分)
[0105]失真修正之后的像素地址307199:失真修正以前的光电转换设备的X坐标值和Y坐标值
[0106]失真修正表指示出根据失真修正以前的X和Y坐标值对与失真修正之后的像素地址相对应的摄像机传感器11的光电转换设备平面上的点位置进行转换。
[0107]具体地，对于X和Y坐标的X轴，正向方向被确定为当一个人面对摄像机传感器11的光电转换设备平面时的水平方向的向右。对于X和Y坐标的Y轴，正向方向被确定为当一个人面对摄像机传感器11的光电转换设备的平面时的垂直方向的向下。
[0108]因此，失真修正之后的像素地址O指示出当一个人面对摄像机传感器11的光电转换设备的平面时，左上方的点对于X和Y坐标(0，0)的真实值。失真修正之后的地址I指示出在沿着X轴正向方向上偏移一个点之后的点对于X和Y坐标(1，0)的真实值。
[0109]在沿着相同的Y坐标值O的X轴的最右点的后续坐标是坐标(O，I)，其指示出沿着X轴和Y坐标值O以下的Y坐标I的最左点，并且使用了坐标的真实值。
[0110]以相同的方式，如果显示监视器上的地址指示例子水平方向的640点和垂直方向的480点，那么最后的地址值是:640X480-1 = 307199。
[0111]失真修正之后的X和Y坐标值是根据预定的修正算法计算的。坐标中的值是实数并且小数点之后的数字被内插到周边的点当中。
[0112]当执行失真修正处理时，在摄像机图像修正控制单元12从摄像机传感器11接收到数字视频信号之后，摄像机图像修正控制单元12利用与数字视频信号的点相对应的如上所述的表并且将被应用了表的数字视频信号发送给视频会议传输控制单元15。
[0113]当选择了失真修正处理的对象时，将对应于所选择对象的区域的图像的点与上述表中的修正之后的像素地址进行关联，借此对要被修正的对象执行失真修正处理。
[0114]预先计算出与上述表中的各个地址相对应的失真修正以前的X和Y坐标中的值，来实时执行点的移动处理。因此，可以简单并且迅速地执行对摄像机传感器11上的图像的大致整体、大致中心部分、大致右侧部分和大致左侧部分失真修正处理。
[0115]“锐度修正”起到过滤器的作用，所述过滤器被用来执行图像的边缘增强并且当将“中心”或者“右和左”被设定为“失真修正”时，被用来抑制放大图像的模糊。
[0116]在摄像机图像修正控制单元12中执行锐度修正。具体地，例如通过对移动到地址的坐标值之前或之后的图像进行空间过滤来执行锐度修正。
[0117]在用户按下摄像机切换键107 (图1)时，从人机控制单元18发送到摄像机图像修正控制单元12的摄像机图像修正切换信号中包括图像修正表编号。
[0118]图像修正表2
[0119]图4示出了每当用户按下摄像机切换键107 (图1)时切换的和选择的图像修正表的另一个例子。
[0120]图像修正表定义了图像修正表编号(“图像修正表编号”)、锐度修正的必要性(“锐度修正”)、执行失真修正处理的区域(“失真修正”)和摄像机方向(“摄像机方向”)之间的关系。与图3中所示的图像修正表的差别在于考虑到了 “摄像机方向”。
[0121]当超广角摄像机112 (图1)处于提供了液晶显示单元101的一侧时，将摄像机的方向确定为“向前”。当摄像机旋转机构111 (图1)旋转大约180度时，因此超广角摄像机112 (图1)从提供有液晶显示单元101的前侧旋转到后侧，将摄像机的方向确定为“向后”。
[0122]当“摄像机方向”是“向前”时，在图像中的任何区域上执行“失真修正”。当“摄像机方向”是“向后”并且主要捕捉到除了人以外的一些东西时，不对“右和左”区域应用失真修正处理。
[0123]也就是说，当“摄像机方向”被切换到“向后”时，在使用图像修正表编号O到3中任一个时，可以将图像修正表切换为仅是图像修正表编号4或5。
[0124]当摄像机的方向是“向后”时，从用户可以选择的图像修正表中自动排除如图3所示的不考虑摄像机方向的图像修正表。
[0125]具体地说，当使用图4所示的图像修正表时，用户仅必须选择图像修正表编号“4”到“7”。例如，当选择修正表编号“4”时，锐度修正是“n/a”并且“失真修正”是“全部”。
[0126]如上描述的，执行失真修正处理的区域可以受到诸如摄像机方向的“向前”或者“向后”的预定条件的限制。例如，提供了这样的修正表，其指示当选择了摄像机方向时可以选择的执行失真修正处理的区域。当选中预定条件时，参照修正表将执行失真修正处理的区域缩小到具体的某些个。
[0127]应当注意的是图像修正表2包括图像修正表I的以上说明中所示的失真修正表。当选择执行失真修正处理的区域时，相应地选择了失真修正表。
[0128]图像修正表3
[0129]图5示出了每当用户按下摄像机切换键107(图1)时选择的图像修正表的再一个例子。图像修正表定义了图像修正表编号(“图像修正表编号”)、锐度修正的必要性(“锐度修正”)、执行失真修正处理的区域(“失真修正”)、摄像机的方向(“摄像机方向”)和IXD的倾斜度“IXD倾斜度”之间的关系。
[0130]图5中所示的图像修正表与图4中所示的图像修正表的不同在于IXD的倾斜度，也就是，考虑到超广角摄像机112(图1)的仰角。通过对于IXD铰接移动114(图1)的机构和LCD铰接单元115 (图1)中提供的切换22检测LCD的角度。
[0131]“IXD倾斜度”包括IXD铰接移动114的四个检测阶段:以放置在水平面中的主体10a为基准的“90°或者更大”、“75。到90。以下”、“60。到75。以下”和“60°以下”。
[0132]虽然图5中所示的“IXD倾斜度”一栏包括IXD铰接移动114的四个检测阶段:“90°或更大”、“75°到90°以下”、“60°到75°以下”和“60°以下”，但是可以用值O到3来表示四个检测阶段。
[0133]预先准备好用于失真修正处理的坐标变换表，其中超广角摄像机112 (图1)的仰角包括对应于上面描述的“90°或更大”、“75°到90。以下，，、“60。到75。以下”和“60°以下”的各个角度的0、15、30和45度。
[0134]以图4所示的图像修正表相同的方式，当“摄像机方向”是“向前”时，采用所有类型的“失真修正”。相反，当“摄像机方向”是“向后”并且“失真修正”是“右和左”时，因为捕捉到了除了人以外的一些东西，所以不执行失真修正处理。
[0135]也就是说，在使用图像修正表编号O至7中的任一个时，当“摄像机方向”被切换为“向后”时，图像修正表被切换为图像修正表编号12至19中的任一个。在使用图像修正表编号8至11中的任一个时，当“摄像机方向”被切换至“向后”时，图像修正表被切换为图像修正表编号12至15中的任一个。
[0136]在图5所示的图像修正表中，当“IXD倾斜度”是“75°至90°以下”并且摄像机的方向是“向后”时，用户可以选择图像修正表编号“13”或者“17”中的任一个，而不是从许多图像修正表编号中选择。
[0137]随着“ IXD倾斜度”被改变，摄像机的角度也同样被改变，因此图像失真修正处理的内容也需要被改变。因为这样的理由，类似于图像修正表I中描述的用于失真修正处理的表，预先生成适用于液晶显示单元101的角度的图像修正表并且将其存储在摄像机图像修正表存储单元13中。
[0138]当用户利用诸如IXD铰接移动114 (图1)的移动改变包括液晶显示单元101的显示单元10b的角度时，自动选择与液晶显示单元101的角度相对应的图像修正表。
[0139]如上描述的，通过根据IXD倾斜度或者摄像机的方向而选择性或者自动地切换摄像机图像修正表，可以容易地提供适用于视频会议的图像。
[0140]图像修正表3还包括图像修正表I的上述说明中所示的失真修正表或者以预定条件限制执行失真修正处理的区域的修正表。
[0141]视频会议服务器和网络
[0142]如图2所示，视频会议终端设备100和40以及视频会议服务器50被耦接到网络30。视频会议服务器50控制视频会议室。一旦视频会议服务器50从视频会议终端设备100接收对于视频会议室地址的开始要求，视频会议服务器50生成视频会议室来开始视频会议。
[0143]一旦视频会议服务器50开始了视频会议室，视频会议服务器50从出席视频会议室的所有视频会议终端设备100和40接收压缩的数字视频信号和压缩的数字音频信号。视频会议服务器50展开各个数字视频信号和数字音频信号来从该信号组成一幅图像和一条音频，并且随后再一次压缩图像和音频来将它们发送给所有的视频会议终端设备。
[0144]因此，远程视频会议终端设备100和40可以被用来通过图像和音频核对正在于商业基地举行的会议的状态。
[0145]一旦视频会议服务器50在视频会议期间从任何一个视频会议终端设备100和40接收到视频会议的终止请求，那么视频会议服务器50从视频会议室断开发出请求的视频会议终端设备100或者40。一旦所有涉及的视频会议终端设备100和40都被断开，则视频会议室被终止。
[0146]视频会议室在这里意为，视频会议终端设备100和40被(一对一或多点方式)耦接到彼此，并且是放置视频会议终端设备100和40的地点以外的举行视频会议的虚拟地点。
[0147]视频会议传输控制单元
[0148]视频会议传输控制单元15基本上如下所述地从开始到结尾控制视频会议。
[0149]视频会议的开始和进行
[0150]当视频会议传输控制单元15从人机控制单元18接收视频会议室地址时,视频会议传输控制单元15通过网络30从网络控制单元16将视频会议室地址的开始请求发送给视频会议服务器50。
[0151]这使得视频会议服务器50生成视频会议室来开始视频会议，并且将视频会议开始完成回复发送给视频会议传输控制单元15。
[0152]当视频会议传输控制单元15从视频会议服务器50接收到视频会议开始完成回复时，视频会议传输控制单元15将视频会议开始完成回复发送给网络控制单元18。
[0153]在接收到至视频会议的切换信号之后，人机控制单元18切换视频显示单元19，以便在视频显示单元19上全屏幕地显示从视频会议传输控制单元15发送给视频显示单元19的显示数据。例如，显示数据显示消息“建立连接并且会议开始”。
[0154]视频会议传输控制单元15从摄像机图像修正控制单元12接收数字视频信号，并且从扩音器输入单元17接收数字音频信号。视频会议传输控制单元15随后通过网络控制单元16压缩这些信号并且通过网络30将信号发送到视频会议服务器50。
[0155]与此同时，视频会议传输控制单元15通过网络30和网络控制单元16从视频会议服务器50接收压缩的数字视频信号和压缩的数字音频信号，将它们展开，并且将数字视频信号发送给视频显示单元19，将数字音频信号发送给扬声器输出单元14。
[0156]如上面描述的，通过由商业基地处的视频会议终端设备100和40发送由视频会议终端设备100和40捕捉到的商业基地处的图像和音频来进行视频会议。
[0157]视频会议的终止
[0158]当视频会议传输控制单元15从人机控制单元18接收到视频会议终止请求时,视频会议传输控制单元15通过网络控制单元16和网络30将视频会议终止请求发送给视频会议服务器50。
[0159]一旦视频会议服务器50从任何一个视频会议终端设备100和40的视频会议传输控制单元15接收到视频会议终止请求信号，视频会议服务器50将视频会议终止完成回复发送给发出请求的视频会议终端设备100或40的视频会议传输控制单元15，并且从视频会议室断开发出请求的视频会议终端设备100或40。
[0160]当视频会议终端设备100或40中的视频会议传输控制单元15接收到视频会议终止完成回复时，视频会议传输控制单元15将至用户操作屏幕的切换信号发送到人机控制单元18。在接收到至用户操作屏幕的切换信号之后，人机控制单元18切换视频显示单元19，以便在视频显示单元19上全屏幕显示从人机控制单元18发送的显示数据。例如，显示数据显示消息:“断开完成”。
[0161]广角镜头摄像机
[0162]当不执行失真修正处理时
[0163]广角镜头虽然以广范围捕捉图像，但是其生成图像中的失真。因此不适于在视频会议中原样地使用图像(其中人是要被捕捉的对象)。图6示出了通过超广角摄像机112捕捉的会议的示例性图像。
[0164]三个出席者实际上端坐在会议中放置在桌子上的视频会议终端设备100的周围。
[0165]然而在图6中，中心的出席者被显示得极端小于他两侧的两位出席者。两侧的两位出席者被显示为从身体上半部至头部朝图像中心略圆并且弯曲的形状。换句话说，两侧的两位出席者似乎是圆肩姿势并且他们的头部远伸出于身体的上半部。
[0166]这是由广角镜头所生成的图像的失真所引起的。如上面描述的，具有失真的图像导致不舒服的感觉，这使得出席者在心理上难以长时间的以这种原样的状态继续视频会议。
[0167]失真修正处理的例子
[0168]图11是执行图像失真修正方法时的过程的例子的流程图。视频会议终端设备100中的ROM在其中存储用来执行该流程图中所示过程的图像失真修正处理程序。
[0169]该图像失真修正处理程序致使计算机执行:使用包括摄影镜头10的超广角摄像机112捕捉数字视频信号的步骤；从捕捉数字视频信号的步骤中捕捉到的数字视频信号中包括的图像中剪裁至少一个区域的步骤；在所剪裁的区域上切换用于失真修正处理的多条图像修正信息，以从剪裁至少一个区域的步骤中所剪裁的区域中选择期望的区域的步骤；通过将在切换多条图像修正信息的步骤中所选择的一条图像修正信息应用至所选择的期望的区域来在区域上执行图像失真修正处理的步骤；以及显示在执行失真修正处理的步骤中所修正的区域的图像的步骤。
[0170]视频会议终端设备100的CPU从ROM中读取以上所述的计算机程序，并且运行(executes)计算机程序来执行图11所示的过程。
[0171]如图11所示的，CPU首先使用包括摄影镜头10的超广角摄像机112捕捉数字视频信号(步骤SI)。结果是，如上面描述的，捕捉到如图6所示的图像。CPU随后在数字视频信号中包括的图像上执行失真修正处理，这将在稍后描述(步骤S2至S5)。
[0172]图7至10示出了使用根据本发明实施例的视频会议终端设备100通过在图6中所示的图像上执行失真修正处理而获得图像的各个示例。
[0173]图7示出了通过剪裁大致整个图6中作为示例的、显示三个出席者的图像并且在所剪裁的图像上执行失真修正处理而获得的图像。可以发现，在图7中修正了图6中两侧的两位出席者的略圆并且弯曲的形状。另外，在图7中，略微更大得显示出图6中被显示得极端小于其它出席者的中心出席者。
[0174]图8示出了通过剪裁图6中作为例子的图像的大致中心部分并且在所剪裁的图像上执行失真修正处理所获得的图像。如图8所示，执行失真修正处理以便在图像中仅仅将中心的出席者以大尺寸显示。这例如提供了中心出席者的面部表情的清晰显示。
[0175]图9示出了通过剪裁图6中作为例子的图像的左侧部分和右侧部分、在剪裁图像上执行失真修正处理并且将他们共同显示在一个屏幕上所获得的失真修正的例子。这例如提供了图6中两侧两位出席者的面部表情的清晰显示，因为他们也被以大尺寸显示。
[0176]图10示出了通过在图8和图9中的各个图像上执行失真修正处理，将包括各个出席者的图像的尺寸统一为大致相同的尺寸并且将他们共同显示在一个屏幕上所获得的图像。这例如提供了所有出席者的面部表情的清晰显示。
[0177]如图11所示，在以上所述的图像失真修正处理中，CPU从CPU捕捉数字视频信号的步骤SI中捕捉到的数字视频信号中包括的图像中剪裁至少一个区域(步骤S2)。
[0178]CPU将图像修正表切换至适用于在所剪裁的区域上的失真修正处理的图像修正表，以从步骤S2中剪裁的区域中选择期望的区域(步骤S3)。
[0179]CPU将在步骤S3选择的图像修正表应用至选择的期望的区域并且在该区域上执行图像失真修正处理(步骤S4)。
[0180]CPU随后显示在步骤S4所修正的区域的图像(步骤S5)。在初步剪裁用于显示如上面描述的图像的区域的步骤时，预先在失真修正表中定义了用于确定将被裁剪掉的矩形区域的四个点。仅仅对矩形区域应用失真修正表。这个处理对于使用所剪裁的图像外部的区域中的数据是有用的。
[0181]在图11中所示的步骤S2中，从图像中剪裁出至少一个区域，然而可以替选地执行以下的过程。具体地说，可以去除步骤S2并且执行如下过程。CPU执行如下所述的步骤S3’来代替图11所示的步骤S3。CPU将图像修正表切换至适用于与在捕捉数字视频信号的步骤SI中捕捉的数字视频信号中包括的图像上、通过摄像机切换键107 (图1)指定的所显示的内容相对应的失真修正处理的图像修正表(步骤S3’)。CPU执行如下所述的步骤S4’代替图11所示的步骤S4。CPU将在步骤S3’中选择的图像修正表应用至选择的期望区域中的视频信号或者在步骤SI中捕捉到的数字视频信号中包括的所有区域，并且在该区域上执行图像失真修正处理(步骤S4’)。CPU执行如下所述的步骤S5’来代替图11所示的步骤S5。CPU从在步骤S4’中修正的视频信号中显示期望的区域的图像(步骤S5’)。
[0182]当执行了这些过程时，失真修正表表示转换后的所显示的像素与转换前的光电转换设备的点之间的关系，借此，失真修正表自然地指定转换后的显示。因此，可以移除步骤S2。
[0183]在失真修正处理中，根据会议的状态，每次用户按下摄像机切换键107(图1)时，例如使用适用于以图7至10的顺序依此被切换到的每个图像的图像修正表，以下将描述这一点。
[0184]因此在本发明中，摄像机图像修正表存储单元13在其中将坐标变换表存储为它的用于失真修正处理的图像修正表，并且摄像机图像修正控制单元12将图像修正表切换为存储在摄像机图像修正表存储单元13中的适当的一个图像修正表。当摄像机图像修正控制单元12切换图像修正表时，与以下的操作相关联地利用信号:对应于摄像机切换键107 (图1)的摄像机显示切换键20 (图2)的操作；摄像机旋转机制111 (图1)中包括的摄像机方向切换21 (图2)的操作；以及被用来执行LCD铰接移动114的LCD铰接单元115 (图1)中包括的LCD倾斜切换22 (图2)的操作。结果是，可以选择适用于会议的图像的图像修正处理。
[0185]切换的例子(使用图3所示的图像修正表)
[0186]如以下描述切换图像修正表。应当注意的是，视频会议终端设备不包括图2中所示的摄像机方向切换21或者图1中所示的摄像机旋转机构111,并且在这个例子中,摄像机是固定的，因为在图3所示的图像修正表中不考虑摄像机的方向和LCD的倾斜度。
[0187]在进彳了会议时，当用户按下摄像机切换键107时，摄像机显不切换键20将摄像机切换信号发送给人机控制单元18。在接收到摄像机切换信号之后，人机控制单元18将摄像机图像修正切换信号发送给摄像机图像修正控制单元12。摄像机图像修正切换信号包括用户要切换到的修正表的编号。
[0188]人机控制单元18在其中临时存储在视频显示单元19中执行的修正的图像修正表编号。当从摄像机图像修正控制单元12向视频会议传输控制单元15传送图像修正之后的数字视频数据时(将在稍后描述)，人机控制单元18也接收图像修正表编号并在其中存储该编号。
[0189]在从摄像机显示切换键20接收到摄像机切换信号之后，人机控制单元18因此从在其中存储的图像修正表中确定图像修正表的后续编号。例如，当使用图3所示的图像修正表时，图像修正表编号增加一(增大一)，并且用获得的值除以表编号的总数(图3所示的例子中为4)。该除法所获得的余数被确定为图像修正表编号。
[0190]人机控制单元18将摄像机图像修正切换信号中包括的图像修正表编号发送给摄像机图像修正控制单元12。摄像机图像修正控制单元12将例如包括图3所示的图像修正表编号的摄像机图像修正切换信号发送给摄像机图像修正表存储单元13。
[0191]摄像机图像修正表存储单元13将与图像修正切换信号相对应的图像修正表的数据发送给摄像机图像修正控制单元12。摄像机图像修正控制单元12根据图像修正表的数据执行图像修正并且将图像修正之后的数字视频数据发送给视频会议传输控制单元15。
[0192]如上所述的，每当用户按下图1所示的摄像机切换键107时，人机控制单元18以预定顺序(例如从图7所示的图像开始、图8所示的图像、图9所示的图像和再到图7所示的图像)将用于在液晶显示单元101上显示图像的摄像机切换信号发送给摄像机图像修正控制单元12。
[0193]当存在许多将被选择的图像修正表时，优选的是人机控制单元18在视频显示单元19上显示一些图像修正的例子，以便用户可以选择它们中的一个。
[0194]切换的例子2 (使用图4所示的图像修正表)
[0195]图1所示的摄像机旋转机构111是在向前(朝向液晶显示单元101的一侧)与向后(朝向与液晶显示单元101的一侧相反的一侧)之间切换超广角摄像机112的方向的机构。在摄像机旋转机构111和显示单元10b之间提供有铰链，因此摄像机旋转机构111可旋转。
[0196]摄像机“向前”的方向被用来捕捉会议的出席者。在被捕捉时，在本地地点的会议出席者正在液晶显示单元101的屏幕上观看在远程地点处的会议出席者。摄像机“向后”的方向被用于捕捉除了会议的出席者以外的其他一些东西，诸如涉及会议议程的白板、会议资料、产品或者场景。
[0197]关于图4所示的图像修正表，当用户操作摄像机旋转机构111时，因为图像修正表考虑到摄像机的方向，所以图像修正表被自动地切换至适用于被摄像机捕捉到的假定对象的图像修正表。
[0198]与这个切换一起，用图1所示的摄像机旋转机构111的结构，当超广角摄像机112向后对准时，图像垂直反转。因此变换坐标，以便修正图像也垂直反转。例如，在超广角摄像机112正在向前的方向上捕捉图像的同时，当将其切换至向后以便显示图9所示的图像时，自动切换图像使其垂直反转，并且将对反转的图像进行修正。
[0199]当用户旋转摄像机旋转机构111时，人机控制单元18从摄像机显示切换键20接收摄像机方向信号。除了将被切换至的图像修正表不同之外，此后用于失真修正处理的控制方法与使用图3所示的图像修正表时的相同。
[0200]简而言之，当用户按下图1所示的摄像机切换键107时，摄像机显示切换键20将摄像机切换信号发送给人机控制单元18。人机控制单元18从检测摄像机旋转机构111的状态的摄像机方向切换21接收摄像机方向信号。
[0201]图12是关于包括检测摄像机的方向或者仰角的步骤的图像失真修正方法的示例性流程图。除了包括步骤S12用于检测广角摄像机的方向或者仰角之外，图12中所示的流程图具有与图11所示的流程图相同的步骤。
[0202]在使用包括广角摄像机镜头的广角摄像机捕捉数字视频信号的步骤Sll之后，执行步骤S12。如果用户按下图1所示的摄像机切换键107，在剪裁区域的步骤S13之前执行步骤S12。
[0203]图11所示的，在步骤S13从图像中剪裁至少一个区域。可以替选地从步骤S13开始执行接下来的过程。具体地说，可以去除步骤S13。
[0204]CPU随后执行如下所述的步骤S14’来代替图12所示的步骤S14。CPU针对在捕捉数字视频信号的步骤Sll中捕捉到的数字视频信号中包括的图像，将图像修正表切换至适用于与通过摄像机切换键107(图1)指定的所显示的内容相对应的失真修正处理的图像修正表(步骤S14’)。
[0205]CPU执行如下所述的步骤S15’来代替步骤S15。CPU将在步骤S14’选择的图像修正表应用至选择的期望区域中的视频信号或者在步骤Sll中捕捉到的数字视频信号或者中包括的所有区域，并且在该区域(S)上执行图像失真修正处理(步骤S15’)。
[0206]CPU执行如下所述的步骤S16’来代替步骤S16。CPU显示来自步骤S15’修正过的视频信号中的期望的区域的图像(步骤S16’)。
[0207]上面描述的步骤S12检测摄像机镜头10的仰角和摄像机镜头10的捕捉方向的至少一个。图像修正表包括具有包含摄像机镜头10的仰角和摄像机镜头10的捕捉方向的至少一个信息的图像修正表。只有包括包含摄像机镜头10的仰角和摄像机镜头10的捕捉方向的至少一个信息的图像修正表是要被切换至的对象。
[0208]在接收到摄像机切换信号和摄像机方向之后，人机控制单元18将摄像机图像修正切换信号发送给摄像机图像修正控制单元12。摄像机图像修正切换信号包括有关用户要切换到的修正表的编号的信息。
[0209]在这一点上，人机控制单元18在其中临时存储在视频显示单元19中执行的修正的图像修正表编号和关于摄像机方向的信息。这是因为当在图像修正之后从摄像机图像修正控制单元12向视频会议传输控制单元15发送数字视频数据时，人机控制单元18也接收图像修正表编号并将它存储在其中，这将在随后描述。
[0210]从摄像机显示切换键20接收到摄像机切换信号之后，人机控制单元18因此首先确定摄像机的方向是否已经变化并且随后在存储在其中的图像修正表中确定图像修正表的后续编号。
[0211]当确定了图像修正表的编号时，如果使用了图4所示的图像修正表，则执行图13所示的流程图中的过程。
[0212]CPU确定临时存储的摄像机方向是否与此时通过信号获得的摄像机方向不同(步骤 S21)。
[0213]如果摄像机的方向没有变化(步骤S21为否)，那么CPU对用于摄像机的特定方向的图像修正表编号(对于向前为O至3)增加一(步骤S24)，将该获得的值除以涉及摄像机该特定方向的表编号的总数(对于向前为4并且对于向后为4)(步骤S25)，并且将起始值加入到该除法的余数中(步骤S26)。这个获得的值被确定为图像修正表编号(步骤S23)。
[0214]如果摄像机的方向已经变化，(步骤S21为是)，那么CPU获取摄像机方向的起始值(对于向前为O并且对于向后为4)(步骤S22)，并且将该获得的值确定为图像修正表编号(步骤S23)。
[0215]一旦如上所述确定了图像修正表编号，则人机控制单元18将包括图像修正表编号的摄像机图像修正切换信号发送给摄像机图像修正控制单元12。摄像机图像修正控制单元12将包括图4所示的图像修正表编号的摄像机图像修正切换信号发送给摄像机图像修正表存储单元13。
[0216]摄像机图像修正表存储单元13将与接收到的图像修正切换信号相对应的图像修正表的数据发送给摄像机图像修正控制单元12。摄像机图像修正控制单元12根据该图像修正表的数据执行图像修正并且将修正后的数字视频数据发送给视频会议传输控制单元15。
[0217]如上所述的，如果添加了来自摄像机旋转机构111的摄像机的方向的数据，那么可以选择图像修正表并且适当地执行图像修正。当存在许多图像修正表时，人机控制单元18可以在视频显示单元19上显示图像修正的一些例子，以便用户可以选择它们中的一个。
[0218]切换的例子3 (使用图5所示的图像修正表)
[0219]用于IXD铰接移动114的IXD铰接单元115是调节IXD角度的机构。在图1所示的视频会议终端设备100中，在显示单元10b上提供有液晶显示单元101和超广角摄像机112。
[0220]当显示单元10b的角度由于IXD铰接移动而变化时，也就是，IXD倾斜度变化时，超广角摄像机112的仰角也变化。
[0221]例如，当IXD直立时(IXD处在与主体10a呈90度的位置)，超广角摄像机112在水平方向(相对于水平平面为O度的角)上捕捉图像，并且它的仰角是O度。当LCD位于与主体10a呈70度倾斜的位置，并且液晶显示单元101面朝倾斜向上时，超广角摄像机112相对于水平面面朝上20度。
[0222]如上所述的，当超广角摄像机112面朝上时，用于图像失真修正处理的方法也变化。因此，在本实施例中，预先准备好对应于LCD倾斜度的图像修正表。当用户操作LCD铰接机构来改变LCD倾斜度时，自动选择对应于LCD倾斜度的图像修正表。
[0223]也就是说，当用户按下图1所示的摄像机切换键107时，摄像机显示切换键20将摄像机切换信号发送给人机控制单元18。人机控制单元18从检测摄像机旋转机构111的状态的摄像机方向切换21接收摄像机方向信号并且更进一步地从检测LCD铰接单元115的状态的LCD倾斜切换22接收LCD倾斜度信号。
[0224]从摄像机显示切换键20接收到摄像机切换信号以后，人机控制单元18将摄像机图像修正切换信号发送给摄像机图像修正控制单元12。摄像机图像修正切换信号包括用户要切换到的修正表的编号。
[0225]在这一点上，人机控制单元18在其中临时存储在视频显示单元19中执行的修正的图像修正表编号和摄像机方向的信息。这是因为当从摄像机图像修正控制单元12向视频会议传输控制单元15发送图像修正后的数字视频数据时，人机控制单元18也接收图像修正表编号并且将其存储在其中，这将在稍后描述。
[0226]从摄像机显示切换键20接收到摄像机切换信号以后，人机控制单元18首先根据来自LCD倾斜切换22的LCD倾斜信号的角度来确定LCD倾斜度。
[0227]人机控制单元18随后根据临时存储的摄像机的方向和从摄像机方向切换21接收的摄像机方向来确定摄像机的方向是否已经变化。
[0228]接下来，人机控制单元18从存储在其中的图像修正表中确定图像修正表的后续的编号。当确定了图像修正表的编号时，如果使用了图5所示的图像修正表，则执行如下所述的过程。
[0229]这里的处理过程与图13所示的流程图中的相同，因此省略对它的说明。
[0230]CPU确定临时存储的摄像机方向是否与此时通过信号获得的摄像机方向不同(对应于步骤S21)。
[0231 ] 如果摄像机的方向没有变化，(对应于步骤S21中的否)，则CPU对用于摄像机特定方向的图像修正表编号(对于向前为O至11)增加一(对应于步骤S24)，将获得的值除以涉及摄像机特定方向的表编号的总数(对于向前为12并且对于向后为8)(对应于步骤S25)，并且将起始值加到该除法的余数中(对应于步骤S26)。这个获得的值被确定为图像修正表编号(对应于步骤S23)。
[0232]如果摄像机的方向已经变化了，(对应于步骤S21为是)，则CPU获取摄像机方向的起始值(对于向前为O并且对于向后为12)(对应于步骤S22)，并且将获得的起始值确定为图像修正表编号(对应于步骤S23)。
[0233]一旦如上所述的确定了图像修正表编号，人机控制单元18将包括图像修正表和IXD倾斜角度的摄像机图像修正切换信号发送给摄像机图像修正控制单元12。
[0234]摄像机图像修正控制单元12将例如图5所示的图像修正表编号和包括IXD倾斜角度的摄像机图像修正切换信号发送给摄像机图像修正表存储单元13。
[0235]摄像机图像修正表存储单元13在随后的处理步骤中获取期望的图像修正表编号，并且将图像修正表的数据发送给摄像机图像修正控制单元12。
[0236]CPU随后从每一个编号等于或者大于图像修正表切换信号中包括的图像修正表编号的多个图像修正表中搜索显示单元10b的角度对应于IXD倾斜角度的图像修正表。
[0237]如果图像修正表的编号超过用于摄像机特定方向的最大值(对于向前为直到#11，对于向后为直到#19)，那么CPU将图像修正表的编号设置为起始值(对于向前为#0,对于向后为#12)，并且再一次从每一个具有等于或者大于该起始值的多个图像修正表中搜索图像修正表，来确定对应于LCD倾斜角度的图像修正表数据的数据。
[0238]在那以后，摄像机图像修正控制单元12根据图像修正表的数据执行图像修正处理并且将失真修正之后的数字视频数据发送给视频会议传输控制单元15。
[0239]以下将摄像机图像修正表存储单元13中执行的处理步骤作为例子。例如，使用图5中所示的图像修正表编号4 (摄像机的方向是向前，LCD倾斜度是93度)并且随后在保持摄像机向前的方向的同时将LCD倾斜度变化为70度。
[0240]在步骤S21，摄像机的方向没有变化，所以处理进行到步骤S24。作为从步骤S24至S26的处理的结果，通过人机控制单元18发送给摄像机图像修正控制单元12的信息包括图像修正表编号“5”和IXD倾斜度“70度”。
[0241]摄像机图像修正控制单元12首先确定摄像机图像修正表存储单元13是否存储了IXD倾斜度是“70度”并且具有等于或者大于“5”的图像修正表编号的图像修正表。结果是，CPU获取图像修正表中的#6数据。
[0242]选择性地执行其它过程。例如可以用以下过程代替以上所述的步骤S24和之后的步骤。
[0243]获得作为操作摄像机切换键107的起点的图像修正表编号的起始值。在图5所示的修正转换表中，为LCD倾斜度一栏中的角度的状态提供值O至3。首先获得图像修正表编号作为起始值。然后，将图像修正表编号加4。
[0244]如果值超过了用于摄像机特定方向的总数的最大值，那么将编号除以图像修正表的总数(对于向前为#12，对于向后为直到#8)，并且将除法的余数用作图像修正表编号。这些过程使得可以获得考虑IXD倾斜度的图像修正表编号。
[0245]如上所述的，如果摄像机旋转机构111被添加，那么可以选择图像修正表并且适当地执行图像修正。当存在许多将要被选择的图像修正表时，优选的是人机控制单元18在视频显示单元19上显示图像修正的一些例子以便用户可以选择它们中的一个。
[0246]根据以上所述的实施例，(I)可以根据会议的状态或者被捕捉到的主题自动的选择，或者可以通过用户选择最适当的图像失真修正处理方法，借此广角摄像机可以提供逼真的图像。
[0247](2)此外，用户可以在观看图像的同时使用操作单元的摄像机切换键107来切换图像修正方法，藉此根据会议的状态或者捕捉到的主题容易地切换图像修正方法。
[0248](3)另外，与摄像机方向的切换模式和LCD倾斜的角度相关联地自动切换图像失真修正处理方法，藉此向用户提供最优的图像而不会有不舒服的感觉。
[0249]本发明的其它实施例
[0250]失真修正处理的另一个例子
[0251]在以上描述的实施例中，从通过摄像机捕捉的图像中剪裁出期望的区域并且在该剪裁的区域上执行失真修正处理。本发明不局限于此例。可以如下所述的，在通过摄像机捕捉的图像上执行失真修正处理，随后从已经执行过失真修正处理的图像中剪裁出期望的区域。
[0252]图14示出根据另一个实施例的图像失真修正方法的流程图。以与上面描述的第一实施例相同的方式在视频会议终端设备100的ROM中存储被用来执行流程图中的过程的失真修正处理程序。
[0253]现在将描述失真修正处理的概要。如图14中流程图所示的，响应于操作者的输入，CPU首先通过包括摄像机镜头10的超广角摄像机112捕捉图像(步骤S31)。
[0254]CPU随后根据操作者输入的命令在该图像上执行预定的失真修正处理(步骤S32)。执行失真修正处理之后，CPU根据操作者输入的指定区域从已经执行过失真修正处理的图像中剪裁出指定的区域(步骤S33)。
[0255]接下来，当操作者通过摄像机切换键107选择图像显示编号时，CPU根据选择的图像显示编号的输入信号，从剪裁的区域中选择预定的区域(步骤S34)，并且在液晶显示单元101上显示该预定的区域(步骤S35)。
[0256]现在将更具体地描述该步骤。
[0257]在步骤S31，响应于操作者的输入，CPU首先通过包括摄像机镜头10的超广角摄像机112捕捉图15中上方或者图6中所示的失真的数字图像。在失真的图像中显示三个出席者，并且其中中心的出席者被显示得极端小于他两侧的两位出席者。两侧的两位出席者从身体上半部至头部朝图像中心被显示为略圆并且弯曲的形状。
[0258]在步骤S32，在显示的图像上执行失真修正处理。用于第一实施例中执行的失真修正处理方法相同的过程执行失真修正处理方法。
[0259]如上述实施例一样在图像修正表中定义失真修正之前的像素地址与失真修正之后的像素地址之间的对应关系。根据该对应关系，摄像机图像修正控制单元12执行修正以将失真修正之前的像素移动到失真修正之后的像素地址。
[0260]图15中显示了像素的对应关系。具体地说，在图15的上方显示了不对其执行失真修正处理的图像，并且在图15的下方显示了对其执行失真修正处理的图像。通过地址1、2和3指定的三个矩形区域被显示在图像的上部，并且通过地址1、2和3指定的三个矩形区域也被显示在图像的下部。
[0261]在执行失真修正处理的同时，在图像的上部显示的通过地址1、2和3指定的三个矩形区域被摄像机图像修正控制单元12移动，使得它们如箭头记号所指示地对应于在图像的下部显示的通过地址1、2和3指定的各自的三个矩形区域。
[0262]在步骤S33，通过摄像机图像修正控制单元12从失真修正之后的图像中剪裁出预定的区域。
[0263]将参照图16描述剪裁区域的方法。例如，对于由终端设备的制造商预先已经设定的各个区域，可以使用箭头键(上和下，右和左)104执行剪裁。替选地，可以使用箭头键(上和下，右和左)104利用在液晶显示单元101的屏幕上显示的光标来指定剪裁的位置并且按下回车键105以执行对图像的剪裁来执行剪裁。
[0264]当在图像中指定将要剪切的水平的和垂直的线时，如同随后将要描述的，例如指定了垂直线之后，可以根据水平与垂直尺寸的预定尺寸比率自动指定水平线。
[0265]为了从图像中剪裁出期望的区域，如图16中所示的，首先指定被剪裁的线，以便图像的水平线被分为三个相等长度L，借此将图像划分为三个区域。在图16中所示的例子中，已经预先由终端设备的制造商剪裁了三个区域。应当注意的是，图16示出了与图15下方所示的失真修正之后的图像相同的图像。
[0266]随后从三个划分的图像的中心图像中剪裁出图像以便所剪裁的图像具有长度与宽度为3:4的尺寸比例。该比例对应于液晶显示单元101的屏幕尺寸。典型的显示设备具有3比4或者9比16的比例。
[0267]现在将要具体地说描述这个剪裁。图6中的中心图像的顶部和底部被切除，以便剩余的经过剪裁的图像具有相对于图像的宽度L的3/4L的长度。优选的是在纵向方向上，在从图16中的中心图像的中心线开始3/8*L处的顶端线和底部线位置上执行这个剪裁。当在这些位置上执行剪裁时，图像被剪裁，使其具有3/4L的长度。该剪裁过的图像被设定为剪裁区域I。
[0268]剪裁图16中的三个划分的图像中的左侧图像，使其具有液晶显示单元101的屏幕尺寸的一半宽度。换句话说，将图像进行剪裁，使其具有3:2的长度与宽度的尺寸比例。剪切掉图中左侧图像的顶部和底部使得剩余的所剪裁的图像具有相对于图像的宽度L的3/2*L的长度。优选的是在纵向方向上，在从图16中的中心图像的中心线开始3/4*L的顶端线和底端线的位置执行这个剪裁。将该剪裁的图像设定为剪裁区域2。
[0269]以所剪裁的区域2相同的方式剪裁图16中的三个划分的图像中的右侧图像，使其具有长度与宽度为3:2的空间比例，并且将所剪裁的图像设定为剪裁区域3。
[0270]通过以上描述的剪裁的过程，三个所剪裁的图像是图17中所示的，由剪裁区域1、该该区域2和剪裁区域3的各个线所围绕的区域的图像。
[0271]剪裁区域1、剪裁区域2和剪裁区域3的图像可以被存储在摄像机图像修正控制单元12的存储单元中。
[0272]在步骤S34，每当操作者按下摄像机切换键107，操作者可以选择在液晶显示单元101上显示的图像显示编号。
[0273]图18示出了剪裁区域1、2和3的图像与图像显示编号之间的对应关系。图18中“剪裁图像”一栏中的“整体”表示没有剪裁的失真修正之后的图像。例如，“整体”图像对应于图15下方所示的失真修正之后的图像。
[0274]图18中“剪裁图像”一栏中的“中心”表示剪裁区域I中所示的图像。例如中心”图像对应于图8中所示的图像。
[0275]图18中“剪裁图像”一栏中的“右和左”表示将剪裁区域I和剪裁区域2组合在一起的图像。例如，“右和左”图像对应于图9中所不的图像。
[0276]图18中“剪裁图像”一栏中的“中心，右和左”表示将剪裁区域1、2、3组合在一起的图像。例如，“中心,右和左”对应于图10中所示的图像。
[0277]各个图像显示编号0、1、2、3对应于图18中“剪裁图像”一栏中的“整体”、“中心”、
“右和左”、“中心，右和左”。通过操作摄像机切换键107，可以选择图像显示编号。
[0278]一旦通过操作摄像机切换键107选择了图像显示编号，在步骤S35，从摄像机图像修正控制单元12的存储单元中读出用该图像显示编号指定的图像，并且将其显示在液晶显示单元101上。
[0279]如上所述，根据本实施例，预先在摄像机传感器11捕捉的图像上执行失真修正处理，来确定将被剪裁的区域，借此使剪裁区域具有良好的外观。另外，可以容易地分辨出整体图像和剪裁区域之间的关系。
[0280]指定屏蔽区域的例子
[0281]在根据以上描述的第一实施例和另一个实施例的失真修正处理中，对于剪裁区域的形成方法不具有灵活性，并且有时对于从图像中移除一个或多个区域会困扰用户。将要描述另一个失真修正处理方法，其中，可以容易地指定屏蔽区域用于剪裁或者屏蔽期望的区域。
[0282]在本实施例中，视频显示单元19包括触摸板模块和触摸板控制单元(未显示)。触摸板模块例如是电容触摸板，用户可以通过该触摸板用他的手指或者触笔输入信息。
[0283]在本实施例中，摄像机图像修正控制单元12包括能够在其中储藏关于屏蔽区域的数据的存储单元。
[0284]图19示出视频会议开始之后形成屏蔽区域的流程图。
[0285]首先，坐在视频会议终端设备100前方的出席者通过操作菜单键103、箭头键(上和下，右和左)104和回车键105输入预定命令，在向会议另一方的出席者的视频会议终端设备发送出席者自己的图像之前，CPU在其自身的视频会议终端设备100的液晶显示单元101上显示坐在视频会议终端设备100前方出席者的图像(步骤S41)。
[0286]其后，当操作者用他的手指或者触笔的尖端在液晶显示单元101 (触摸板)上所显示的他自己的图像上指定将要剪裁的区域或者将被屏蔽的区域时，CPU根据来自触摸板模块的信号形成屏蔽图案(步骤S42)。操作者可以指定多个区域。
[0287]更具体地，参照图20，操作者一侧的图像200被显示在液晶显示单元101 (触摸板)上。当操作者使用他的手指尖等围绕诸如圆形Al、椭圆A2和五边形A3并且将区域M指定为除图像200中以上围绕的区域以外的屏蔽区域时，CPU将区域M识别为屏蔽图案。
[0288]作为结果，当在会议的另一方的视频会议终端设备的显示屏上显示图像200时，显示区域A1、A2和A3，但是除了以上区域以外的区域不被显示在图像200上。这样容易地和安全地实现会议中的隐私保护。
[0289]代替形成新的屏蔽图案，操作者可以通过操作菜单键103、箭头键(上和下，右和左)104和回车键105读取以前存储的屏蔽图案并将该图案显示在图像上。
[0290]一旦确定了屏蔽图案的位置和形状，CPU等待操作者关于他是否在摄像机图像修正控制单元12的存储单元的存储单元中存储屏蔽图案的确定的输入(步骤S43)。
[0291]如果操作者要将屏蔽图案存储在摄像机图像修正控制单元12的存储单元中，将适当的名称添加到屏蔽图案并且输入用以保存，借此，CPU在摄像机图像修正控制单元12的存储单元中存储该屏蔽图案(步骤S44)。
[0292]接下来，当操作者输入形成合成图像的请求时，CPU读取出所存储的屏蔽图案并且形成由读出的屏蔽图案和操作者的图像组成的图像(步骤S45)。如果仅在此时使用屏蔽图案，并且不存储屏蔽图案，那么当操作者输入形成合成图像的请求时，CPU形成由屏幕上显示的屏蔽图案和操作者的图像组成的图像，而不读出存储的屏蔽图案(步骤S45)。
[0293]响应于操作者的输入，CPU通过网络30向另一方的视频会议的出席者的视频会议终端设备发送该合成图像(步骤S46)。
[0294]在发送之后，当显示图像变化或者将要被屏蔽的对象变化时，再一次来自步骤S41开始执行流程图的过程。
[0295]根据本实施例，可以灵活地改变将被剪裁的区域，借此，解决了隐私的问题，并且可以灵活地改变显示的布局。
[0296]调节亮度的例子
[0297]现在将要描述调节图像的亮度的例子，这可以被应用于任何一个根据以上实施例的失真修正处理方法。例如，当图17中所示的剪裁区域2具有与剪裁区域I和3不同的亮度时，这是有用的，可以调节剪裁区域2的亮度来平衡所有区域的亮度时。
[0298]对于像这样调节亮度，视频会议终端设备100的摄像机图像修正表存储单元13可以包括图21中所示的亮度调节表。
[0299]图21中所示的亮度调节表包括三个类型的表。例如，表I包括表示用于确定亮度标准区域I的范围的、在X和Y坐标中X轴方向的起点和终点以及Y轴方向的起点和终点的坐标值，以及亮度调节值I。X轴方向对应于所显示图像的水平方向，并且Y轴方向对应于所显示的图像的垂直方向
[0300]亮度标准区域I作用为要在调节其中的亮度的剪裁区域中的亮度的标准。亮度调节值I是指示将要调节的亮度水平相对于该区域中的亮度(作为亮度的标准)的增加和减少的值。
[0301]表2和表3指定不同于彼此并且不同于要应用表I的区域，并且表2和表3包括不同于彼此并且不同于要应用表I的区域的亮度调节值。
[0302]图22示出用于调节图像的亮度的流程图。
[0303]首先，操作者通过操作一个或多个键来执行输入，所述键用来选择将要发送的图像中包括的剪裁区域的图像。CPU随后从摄像机图像修正控制单元12的存储单元中读取出图像并且将读出的图像显示在液晶显示单元101上(步骤S51)。
[0304]操作者观看剪裁区域的显示的图像，来使用箭头键(上和下，右和左)104选择将要调节亮度的剪裁区域的一个图像。CPU进行从步骤S52到步骤S53的处理，随后在终端设备的屏幕上显示将要调节亮度的剪裁区域的图像。
[0305]当操作者选择剪裁区域的多个图像时，CPU在终端设备的显示单元上显示剪裁区域的这些图像。
[0306]如果操作者不选择将要调节亮度的区域(例如，自显示图像以后直到流逝预定时间都没有输入用于选择图像的信号)，那么CPU将将要发送的图像原样地发送给视频会议的另一方的视频会议终端设备(步骤S58)。
[0307]在步骤S53，在显示屏上显示将要调节亮度的剪裁区域的图像并且操作者指定亮度调节表。CPU随后从摄像机图像修正表存储单元13读取出指定的表(步骤S53)。
[0308]图23示出在液晶显示单元101上显示的用于调节区域的亮度的四个剪裁区域A11、A12、A13和A14。在四个剪裁区域A11、A12、A13和A14中的每个区域011、012、013和014上显示出席者或者其它人。
[0309]将描述调节区域A12的亮度。在区域A12中识别亮度标准区域R作为在步骤S54指定的亮度调节表中确定的亮度标准区域。
[0310]CPU通过检测已经捕捉到的图像的亮度水平来获取亮度标准区域R的亮度，并且将指定的亮度调节表中定义的亮度调节值应用到检测的亮度水平的值。例如，在概念上将亮度显示为10个水平，从最暗的水平O到最亮的水平10。如果检测到的亮度值对应于水平7，例如对其应用-2的亮度水平调节，那么用于区域A12的将要调节的亮度水平变成水平5。CPU根据这个水平的值将区域A12的亮度改变为对应于将要达到的亮度水平的值(步骤S55)。
[0311]随后在液晶显示单元101上显示已经被调节亮度的区域A12的图像(步骤S56)。
[0312]操作者再次通过键操作显示用于亮度调节的图像，用于调节该图像的亮度。再一次进行从步骤S57到步骤S54的处理。CPU随后准备好用于指定另一个亮度调节表的输入。
[0313]如果操作者确定亮度调节已经成功并且菜单屏幕被切换到传输屏幕，那么处理从步骤S57进行到步骤S58。在步骤S58，在液晶显示单元101上显示已经被选择作为将要发送的对象的剪裁区域的图像。当操作者执行用于发送图像的输入时，CPU发送该图像。
[0314]如以上描述的，可以将根据本实施例的亮度调节应用于在执行失真修正处理之前被剪裁的各个图像。替选地，可以将根据本实施例的亮度调节应用于在执行失真修正处理之后被剪裁的各个图像。通过如上所述的过程，可以将亮度调节应用于从特定图像中剪裁的一个或多个区域。因此，本实施例减轻了由剪裁区域当中亮度的变化所引起的不适感。
[0315]在远程终端中的失真修正处理的例子
[0316]例如，通过用户在本地地点操作来在本地视频会议终端设备100中执行根据如上所述的任何一个实施例的图像失真修正处理。然而，通过观看远程视频会议终端设备40的液晶显示单元的出席者直观地辨别出通过本地视频会议终端设备100的摄像机捕捉到的出席者。
[0317]考虑到这一点，可以如下执行图像失真修正处理。用户使用本地视频会议终端设备100的菜单键103确定将要通过远程视频会议终端设备40显示的期望的图像。随后，用户可以利用例如远程视频会议终端设备40的摄像机切换键切换图像，来在用户要显示的图像上执行图像失真修正处理。
[0318]具体地说，如下执行过程。用户使用菜单键103选择用户要操作的多个远程视频会议终端设备40之一并且输入它。本地视频会议终端设备100的人机控制单元18从视频会议服务器50获取信息来唯一识别输入的远程视频会议终端设备40。
[0319]在指定用户要操作的远程视频会议终端设备40之后，本地视频会议终端设备100的人机控制单元18从摄像机显示切换键20接收摄像机切换信号。人机控制单元18将摄像机切换信号解释为用于指定的远程视频会议终端设备40的操作信号而非用于本地视频会议终端设备100本身的操作信号。
[0320]这使得本地视频会议终端设备100的人机控制单元18将唯一识别输入的远程视频会议终端设备40的信息和摄像机切换信号发送给视频会议传输控制单元15。
[0321]本地视频会议终端设备100的视频会议传输控制单元15通过网络控制单元16和网络30，根据唯一识别输入的远程视频会议终端设备40的信息，将包括摄像机切换信号的信息发送给指定的远程视频会议终端设备40。
[0322]当通过网络30和网络控制单元16将关于摄像机切换的信息通知给在指定的远程视频会议终端设备40中的视频会议传输控制单元15时，视频会议传输控制单元15将包括关于摄像机切换信号、摄像机方向和LCD倾斜度的信息发送给人机控制单元18。
[0323]人机控制单元18以如同其自身的视频会议终端设备100的摄像机切换信号等相同的方式处理该摄像机切换信号。因此人机控制单元18执行继如上所述的过程之后的图像失真修正处理。结果是，在远程视频会议终端设备40的液晶显示单元上显示的图像是远程视频会议终端设备的用户更喜欢的模式的图像。
[0324]当将从远程视频会议终端设备40获得的关于摄像机切换的信息通知给视频会议传输控制单元15时，可以如下执行处理。如图2所示的，提供具有长线和两个短线交替的点划线的箭头，其表示从视频会议传输控制单元15到摄像机图像修正控制单元12的数据传输。也就是说，可以直接从视频会议传输控制单元15对摄像机图像修正控制单元12执行控制。
[0325]通过这种结构，视频会议传输控制单元15将包括摄像机切换信号的信息和关于摄像机方向和LCD倾斜度的信息发送给摄像机图像修正控制单元12 (用一个长和两个短线交替的点划线所示的)。摄像机图像修正控制单元12可以以与其自身的视频会议终端设备100的摄像机切换信号等相同的方式处理摄像机切换信号。
[0326]以使用人机控制单元18时的相同的方式，人机控制单元18执行如上所述的过程之后的图像失真修正处理。结果是，在远程视频会议终端设备40的液晶显示单元上显示的图像是远程视频会议终端设备的用户更喜欢的模式的图像。
[0327]虽然为了完整和清晰的公开，已经针对特定实施例描述了本发明，但是所附权利要求并不因此而受限，而是应当被理解为体现本领域技术人员能够想到的所有修改和替代结构都落入这里所阐述的基本教导中。
【权利要求】
1.一种视频会议终端设备，包括: 广角摄像机，包括广角镜头； 第一控制单元，其从广角摄像机接收数字视频信号并且对该数字视频信号中包括的图像执行失真修正处理； 存储单元，在其中存储当第一控制单元执行图像失真修正处理时使用的图像修正信息，该图像修正信息包括与来自广角摄像机的数字视频信号中包括的图像的至少一部分区域有关的用于失真修正处理的修正信息； 第二控制单元，其向耦接至网络的另一个视频会议终端设备发送信号并且从该另一个视频会议终端设备接收信号； 提供单元，其提供广角摄像机的数字视频信号和已经被执行失真修正的数字视频信号；以及 操作单元，每当被操作时，该操作单元输出信号来切换存储在存储单元中的多条图像修正信息，其中 第一控制单元使用已经经过操作单元通过切换而选择的一条图像修正信息对数字视频信号中包括的图像执行失真修正处理。
2.根据权利要求1所述的视频会议终端设备，其中，在来自广角摄像机的数字视频信号中包括的图像的部分区域包含从来自广角摄像机的数字视频信号中包括的图像的大致整体、大致中心部分、大致右侧部分和大致左侧部分中选择的至少一个或者两个或多个的组合。
3.根据权利要求1或2所述的视频会议终端设备，进一步包括信息显示单元，从提供单元向其提供广角摄像机的数字视频信号和已经执行了失真修正的数字视频信号，并且该信息显示单元显示该广角摄像机的数字视频信号和已经执行了失真修正的数字视频信号。
4.根据权利要求3所述的视频会议终端设备，进一步包括: 信息显示倾斜度检测单元，其中 当信息显示倾斜度检测单元输出信息显示倾斜信号时，存储单元从存储在存储单元中的图像修正信息中选择出与信息显示倾斜信号对应的一条图像修正信息，并且 第一控制单元将选择的该条图像修正信息确定为在对来自广角摄像机的数字视频信号中包括的图像执行失真修正处理时使用的对象。
5.根据权利要求1至4中任一项所述的视频会议终端设备，进一步包括: 摄像机方向检测单元，其检测广角摄像机的捕捉方向，其中 当摄像机方向检测单元输出摄像机方向信号时，存储单元从存储在存储单元中的图像修正信息中选择对应于摄像机方向信号的一条图像修正信息，并且 第一控制单元将选择的该条图像修正信息确定为在对来自广角摄像机的数字视频信号中包括的图像执行失真修正处理时使用的对象。
6.根据权利要求1至5中任一项所述的视频会议终端设备，其中图像修正信息还包含表示指定将要按照预定条件执行失真修正处理的对象的关系的修正信息。
7.一种视频会议系统，包括: 根据权利要求1至6中任一项所述的至少两个视频会议终端设备；以及 视频会议服务器，其控制在至少两个视频会议终端设备之间举行的视频会议，其中 经过网络将视频会议终端设备和视频会议服务器耦接至彼此。
8.一种图像失真修正方法，包括: 通过包括广角摄像机镜头的广角摄像机捕捉数字视频信号的步骤； 从在捕捉数字视频信号的步骤中捕捉到的数字视频信号中包括的图像中剪裁至少一个区域的步骤； 切换用于对剪裁区域的失真修正处理的多条图像修正信息，来从在剪裁至少一个区域的步骤中所剪裁的区域中选择期望区域； 通过将在切换多条图像修正信息的步骤中选择的一条图像修正信息应用到所选择的期望区域上，来对所选择的期望区域的图像执行失真修正处理的步骤；以及 向信息显示单元提供在执行失真修正处理的步骤中所修正的区域的图像的步骤。
9.根据权利要求8所述的图像失真修正方法，包括: 检测广角摄像机的仰角和广角摄像机的捕捉方向中的至少一个的步骤，其中图像修正信息包括包含关于广角摄像机的仰角和广角摄像机的捕捉方向中的至少一个的信息的多条图像修正信息， 当在检测广角摄像机的仰角和广角摄像机的捕捉方向中的至少一个的步骤中检测了广角摄像机的仰角和广角摄像机的捕捉方向中的至少一个时，只有包括关于广角摄像机的仰角和广角摄像机的捕捉方向中的至少一个的信息的多条图像修正信息才被确定为在切换图像修正信息步骤中将要被切换到的对象。
10.一种计算机程序产品，包括非瞬态计算机可用介质，在该介质中嵌入有计算机可读程序代码，其中，当执行该程序代码时，使得计算机执行: 通过包括广角摄像机镜头的广角摄像机捕捉数字视频信号的步骤； 从在捕捉数字视频信号的步骤中捕捉到的数字视频信号中包括的图像中剪裁至少一个区域的步骤； 切换用于对剪裁区域的失真修正处理的多条图像修正信息，来从在剪裁至少一个区域的步骤中所剪裁的区域中选择期望区域的步骤； 通过将在切换多条图像修正信息的步骤中所选择的一条图像修正信息应用到所选择的期望区域上，来对所选择的期望区域的图像执行失真修正处理的步骤；以及 向信息显示单元提供在执行失真修正处理的步骤中所修正的区域的图像的步骤。
【文档编号】H04N5/225GK104380721SQ201380025479
【公开日】2015年2月25日 申请日期:2013年5月16日 优先权日:2012年5月18日
【发明者】笠谷洁, 坂本久男 申请人:株式会社理光