专利名称：电信会议设备和图像显示处理方法
技术领域：
本发明涉及一种发送和接收由照相机拍摄的图像并显示图像以执行与处于远程位置的人的通信的电信会议设备、以及图像显示处理方法。
背景技术：
近年来，随着IP网络的基础架构(infrastructure)的组建，正在推进引入这样的电信会议设备通过IP网络将诸如图像或声音的数据发送至远程基地(base)并显示所述数据。随着诸如等离子体显示器的大屏幕电视机的普及，还考虑这样的电信会议系统调整照相机的缩放倍率，以设定使得以实物大小在相对(corresponding)基地的屏幕上观看对象的图像。根据此电信会议系统，可以获得真实的感受，仿佛电信会议的任何其他方正在他 /她眼前一样。在PTL 1中描述的电信会议系统中，固定投影仪、照相机以及作为对象的人的就座位置，并且设定照相机的缩放倍率和投影仪的显示倍率。因此，在PTL 1中描述的电信会议系统中，作为对象的人可以以实物大小显示在要在电信会议时被相对基地侧的投影仪投射的屏幕上。引用列表专利文献PTL 1 JP-A-8-32948PTL 2 JP-A-10-30204
发明内容
技术问题在执行电信会议系统的基地中，可以使用屏幕大小不同的显示装置，诸如显示器。 在此情况下，为了将主基地(第一基地)侧的对象的图像以实物大小显示在相对基地(第二基地)中提供的显示装置的屏幕上，应当执行下面的操作。也就是，第二基地侧的用户应当通过远程操作设定第一基地中提供的照相机的缩放倍率。替代地，第一基地侧的用户应当根据通过诸如电信会议或电话的远程通信单元而来自第二基地侧的指令，调整第一基地中提供的照相机的缩放倍率。为了实现PTL 1中描述的电信会议系统，必须提供这样的系统电信会议中涉及的所有基地都由相同装置组成。本发明的目的是提供一种电信会议设备和图像显示处理方法，所述电信会议设备能够以实物大小将相对基地的每个照相机所拍摄的对象显示在主基地中提供的每个显示器上，而不依赖于每个基地中提供的显示器的屏幕大小。技术方案本发明提供了一种用于电信会议系统的电信会议设备，所述电信会议系统在主基地与至少一个相对基地之间发送和接收由照相机拍摄的图像，并在显示器上显示图像。所述电信会议设备包括图像接收单元，接收从相对基地发送的图像；缩放倍率设定接收单元，接收相对基地中提供的每个照相机的缩放倍率设定信息；图像放大和缩小率导出单元， 基于由缩放倍率设定接收单元接收的缩放倍率设定信息以及主基地中提供的显示器的屏幕大小信息，为每个相对基地导出将相对基地的每个照相机所拍摄的图像中的每个对象以实物大小显示在主基地中提供的显示器上的放大或缩小率；图像放大和缩小单元，基于放大或缩小率，放大或缩小从相对基地发送的图像；以及图像显示控制单元，进行控制以将由图像放大和缩小单元放大或缩小的来自每个相对基地的图像显示在主基地的显示器上。本发明还提供了由用于电信会议系统的电信会议设备执行的图像显示处理方法， 所述电信会议系统在主基地与至少一个相对基地之间发送和接收由照相机拍摄的图像，并在显示器上显示图像。所述方法包括接收从相对基地发送的图像；接收相对基地中提供的每个照相机的缩放倍率设定信息；基于缩放倍率设定信息以及主基地中提供的显示器的屏幕大小信息，为每个相对基地导出将相对基地的每个照相机所拍摄的图像中的每个对象以实物大小显示在主基地中提供的显示器上的放大或缩小率；基于放大或缩小率，放大或缩小从相对基地发送的图像；以及进行控制以将放大或缩小的来自每个相对基地的图像显示在主基地的显示器上。发明的有益效果根据本发明的电信会议设备和图像显示处理方法，甚至当每个基地中提供的显示器的屏幕大小不同时，也可以将相对基地的照相机所拍摄的对象的图像以实物大小显示在主基地中提供的显示器上。也就是，可以将相对基地中提供的每个照相机所拍摄的对象以实物大小显示在主基地中提供的显示器上。因此，电信会议设备的用户可以进行具有真实感受的电信会议，仿佛所有用户都出现在主基地一样。基地的数目不限于两个，而是，甚至当基地的数目为三个或更多时，也可以获得相同效果。
图1是示出包括实施例的电信会议设备的电信会议系统的结构的示例的框图。图2是示出实施例的电信会议设备的内部结构的框图。图3(a)是示出经放大的图像与显示器屏幕之间的大小关系的图，以及图3(b)是示出经放大的图像、经处理的图像与显示器屏幕之间的大小关系的图。图4(a)至4(c)是示出经放大的图像中的对象面部位置与图像数据的删截区域之间的关系的示例的图。图5(a)是示出经缩小的图像与显示器屏幕之间的大小关系的图，以及图5(b)是示出经缩小的图像、经处理的图像与显示器屏幕之间的大小关系的图。图6(a)至6(c)是示出经缩小的图像中的对象面部位置与图像数据的添加区域之间的关系的示例的图。图7是示出当图2中所示的电信会议设备100在显示器130上显示图像时的操作的流程图。图8是示出三个基地A至B的电信会议设备100通过网络120连接在一起的电信会议系统的框图。图9(a)是图像处理单元131在显示器130上显示其中黑色图像数据添加在经缩小的图像的外周上的图像的示例的图，而图9(b)是示出图像处理单元131在显示器130上显示其中对经缩小的图像的外周上的图像数据进行处理的图像的示例的图。图10(a)是示出图像的示例的图，而图10(b)是示出当对图像进行分割时的区域的图。图11是示出经片段延展(segment-extended)的图像的示例的图。图12是示出参考图9至11描述的图像处理单元131的操作的流程图。
具体实施例方式在下文中，将参考附图描述本发明的实施例。图1是示出包括实施例的电信会议设备的电信会议系统的结构的示例的框图。在图1中所示的电信会议系统中，三个基地A至C中提供的电信会议设备100通过网络120 连接在一起。基地的数目不限于三个，而可以是两个或更多。每个基地的电信会议设备100连接有照相机110、显示器130和输入设备140。照相机110拍摄每个基地中的人的图像。照相机110存储缩放倍率设定信息。电信会议设备 100通过网络120将由照相机110拍摄的图像的数据发送至相对基地的电信会议设备。电信会议设备100通过网络120接收从相对基地的电信会议设备发送的数据。显示器130显示由电信会议设备100接收的数据的图像。输入设备140是当用户输入要在电信会议设备 100中设定的条件等时使用的诸如鼠标或遥控器的输入接口。图2是示出实施例的电信会议设备的内部结构的框图。如图2中所示，第一实施例的电信会议设备包括图像获取单元111、图像编码单元113、图像发送单元115、图像接收单元117、图像解码单元119、缩放倍率设定获取单元121、缩放倍率设定发送单元123、缩放倍率设定接收单元125、图像放大和缩小率导出单元127、图像放大和缩小单元129、图像处理单元131以及图像显示控制单元133。图像获取单元111获取由照相机110拍摄的主基地中的对象的图像的数据。图像编码单元113以要向网络发送的格式对由图像获取单元111获取的图像数据进行编码。图像编码单元113可以根据网络120的传输带宽情况而改变图像的分辨率，并且可以执行编码。例如，当网络120的传输带宽窄时，图像编码单元113将由照相机110拍摄的图像转换为具有低分辨率的图像，然后执行编码。图像发送单元115通过网络120将由图像编码单元113编码的图像数据(经编码的图像数据)发送至相对基地的电信会议设备。要由图像发送单元115发送的经编码的图像数据可以包括表示图像的分辨率的信息(图像分辨率信息)。在此情况下，当对图像数据进行编码时，图像编码单元113将图像分辨率信息包括在经编码的图像数据中。图像接收单元117通过网络120接收从另一基地的电信会议设备发送的经编码的图像数据。图像解码单元119对经编码的图像数据进行解码，并以要显示在显示器130上的格式将图像数据发送至图像放大和缩小单元129。当将图像分辨率信息包括在由图像接收单元117接收的经编码的图像数据中时，图像解码单元119将图像分辨率信息发送至图像放大和缩小率导出单元127。缩放倍率设定获取单元121获取照相机110的缩放倍率设定信息。虽然在此实施例中，照相机110存储缩放倍率设定信息，但是电信会议设备100可以将缩放倍率设定信息
6存储在存储器(未示出)中。在此情况下，当每个基地的用户安装电信会议设备100和照相机Iio时，或者当用户设定照相机110的缩放倍率时，用户通过输入设备140设定缩放倍率。缩放倍率设定信息是表示对象的大小相对于显示器的大小的信息，与一般照相机的缩放倍率表达(例如，35mm等效中的50mm等)不同。例如，将缩放倍率设定信息表示为 “50英寸显示器中的实物大小”、“42英寸显示器中的半实物大小”等。缩放倍率设定信息中表示的对象的大小可以通过特定身体部位的大小来表示，而不通过相对于实物大小的比率来表示。例如，可以将缩放倍率设定信息表示为“在50英寸显示器中面部在垂直方向上的大小是10cm”、“在42英寸显示器中肩宽是30cm”等。在此情况下，图像放大和缩小率导出单元127基于由缩放倍率设定信息表示的身体部位的平均大小数据计算实物大小的比率。缩放倍率设定发送单元123通过网络120将由缩放倍率设定获取单元121获取的缩放倍率设定信息发送至相对基地的电信会议设备。例如，在开始电信会议的电信会议设备100建立与相对基地的电信会议设备的连接的呼叫控制时，缩放倍率设定发送单元123 将缩放倍率设定信息与包括图像数据压缩格式、传输速率等的连接信息一起发送。缩放倍率设定接收单元125通过网络120接收从另一基地的电信会议设备发送的缩放倍率设定信息。缩放倍率设定接收单元125立即将缩放倍率设定信息发送至图像放大和缩小率导出单元127。图像放大和缩小率导出单元127基于由缩放倍率设定接收单元125接收的缩放倍率设定信息、以及显示器130的屏幕大小信息，导出图像放大和缩小单元1 放大或缩小图像的比率(放大或缩小率)。图像放大和缩小率导出单元127导出放大或缩小率，使得可以将相对基地的照相机110所拍摄的对象以实物大小显示在主基地的显示器130上。下面将描述导出放大或缩小率的方法的细节。关于显示器130的屏幕大小信息，图像放大和缩小率导出单元127从显示器130 获取屏幕大小信息，或者，用户通过输入设备140将屏幕大小信息输入到图像放大和缩小率导出单元127。显示器130的屏幕大小信息包括有关表示显示器130的屏幕132的大小的“英寸”的信息、以及有关屏幕132的垂直和水平方向的每个中的像素数目(垂直像素数目X水平像素数目)的分辨率信息。图像放大和缩小单元1 执行用于基于由图像放大和缩小率导出单元127导出的放大或缩小率来放大或缩小从图像解码单元119发送的图像数据的图像的大小的数据处理。图像放大和缩小单元1 将经放大或缩小的图像的数据发送至图像处理单元131。图像处理单元131执行当图像放大和缩小单元1 放大或缩小图像时所需的图像数据处理。下面将描述由图像处理单元131执行的图像处理的细节。图像显示控制单元 133执行控制以使得在显示器130上显示由图像处理单元131处理的图像。在下文中，将详细描述由图像放大和缩小率导出单元127导出放大或缩小率的方法。在下面的描述中，假设由图像接收单元117接收的图像的分辨率(图像分辨率)与显示器130的分辨率(显示分辨率)相同。当显示器130的屏幕大小信息表示“χ英寸”，并且缩放倍率设定信息表示“y英寸显示器中的实物大小”时，图像放大和缩小率导出单元127通过表达式(1)导出放大或缩小率。[表达式1]
权利要求
1.一种用于电信会议系统的电信会议设备，所述电信会议系统在主基地与至少一个相对基地之间发送和接收由照相机拍摄的图像，并在显示器上显示所述图像，所述电信会议设备包括图像接收单元，接收从所述相对基地发送的图像；缩放倍率设定接收单元，接收所述相对基地中提供的每个照相机的缩放倍率设定信息；图像放大和缩小率导出单元，基于由所述缩放倍率设定接收单元接收的缩放倍率设定信息以及所述主基地中提供的显示器的屏幕大小信息，为每个相对基地导出将所述相对基地的每个照相机所拍摄的图像中的每个对象以实物大小显示在所述主基地中提供的显示器上的放大或缩小率；图像放大和缩小单元，基于所述放大或缩小率，放大或缩小从所述相对基地发送的图像；以及图像显示控制单元，进行控制，以将由所述图像放大和缩小单元放大或缩小的、来自每个相对基地的图像显示在所述主基地的显示器上。
2.如权利要求1所述的电信会议设备，所述缩放倍率设定信息是表示对象的大小相对于显示器的大小的信息。
3.如权利要求1所述的电信会议设备，所述图像放大和缩小率导出单元基于由所述缩放倍率设定接收单元接收的缩放倍率设定信息、所述主基地的显示器的屏幕大小信息、由所述图像接收单元接收的图像的分辨率以及所述主基地的显示器的分辨率，导出所述放大或缩小率。
4.如权利要求1所述的电信会议设备，还包括图像处理单元，检测由所述图像放大和缩小单元放大的图像中的对象的面部位置，并删截经放大的图像的局部区域的图像数据，以使得所述面部变为靠近所述主基地的显示器的屏幕中心。
5.如权利要求1所述的电信会议设备，还包括图像处理单元，检测由所述图像放大和缩小单元缩小的图像中的对象的面部位置，并在经缩小的图像的外周上添加图像数据，以使得所述面部变为靠近所述主基地的显示器的屏幕中心。
6.如权利要求1所述的电信会议设备，还包括图像处理单元，对由所述图像放大和缩小单元缩小的图像进行分割，将经缩小的图像的外周上的外周片段延展至所述主基地的显示器的屏幕端部，并将包括所述外周片段的纹理信息的图像数据添加至经延展的区域。
7.如权利要求6所述的电信会议设备，所述图像处理单元参考经缩小的图像的分辨率和所述主基地的显示器的分辨率来延展所述外周片段。
8.一种由用于电信会议系统的电信会议设备执行的图像显示处理方法，所述电信会议系统在主基地与至少一个相对基地之间发送和接收由照相机拍摄的图像，并在显示器上显示所述图像，所述方法包括接收从所述相对基地发送的图像；接收所述相对基地中提供的每个照相机的缩放倍率设定信息；基于所述缩放倍率设定信息以及所述主基地中提供的显示器的屏幕大小信息，为每个相对基地导出将所述相对基地的每个照相机所拍摄的图像中的每个对象以实物大小显示在所述主基地中提供的显示器上的放大或缩小率；基于所述放大或缩小率，放大或缩小从所述相对基地发送的图像；以及进行控制，以将经放大或缩小的来自每个相对基地的图像显示在所述主基地的显示器上。
全文摘要
一种用于在主基地与至少一个相对基地之间发送和接收图像的电信会议系统中的电信会议设备配备有图像接收单元，接收来自所述相对基地的图像；缩放倍率设定接收单元，接收所述相对基地的照相机的缩放倍率设定信息；图像放大/缩小率导出单元，基于所述缩放倍率设定信息以及所述主基地的显示屏幕大小信息，导出将所述相对基地的每个照相机所拍摄的图像中的每个对象以实物大小显示在所述主基地的显示器上的放大/缩小率；图像放大/缩小单元，基于所述放大/缩小率，放大或缩小从所述相对基地发送的图像；以及图像显示控制单元，控制经放大或缩小的来自每个相对基地的每个图像在所述主基地的显示器上的显示。因此，可以将所述相对基地的每个照相机所拍摄的对象以实物大小显示在所述主基地的每个显示器上，而与每个基地显示器的屏幕大小无关。
文档编号H04N7/15GK102474593SQ20108002805
公开日2012年5月23日 申请日期2010年5月21日 优先权日2009年7月14日
发明者冈田晋 申请人:松下电器产业株式会社