专利名称：保护秘密的电视电话的通信方法和电视电话装置的制作方法
技术领域：
本发明涉及通过通信线路来进行除了话音数据之外还进行图像数据的发送接收的电视电话系统的一个终端装置的电视电话装置，特别涉及用于礼仪和保护秘密而变换或修正使用者的活动图像的电视电话装置。
背景技术：
近年来，通过通信线路网的发展和数据压缩技术的进步，不仅话音而且图像都可以通过同一线路来进行通信(发送接收)的电视电话系统正在渐渐普及。与现有的仅发送接收话音的电话系统不同，在电视电话系统中，可以一边看着通信对方的面容一边进行通话。
以下，用图来说明电视电话系统和现有的电视电话装置。
图22表示使用现有的电视电话装置的电视电话系统整体的方框图。
在图22的电视电话系统中，在夹在电话网等的通信线路网40的两端配置电视电话装置17和电视电话装置21。即，在电视电话装置1和电视电话装置21之间通过通信线路网40来实施话音和图像的发送接收。电视电话装置1的使用者为通话人2(A者)，而电视电话装置21的使用者是通话人22(B者)。在电视电话装置1的监视器画面12a上映出通话人22(B者)的背景23，在电视电话装置21的监视器画面12b上映出通话人2(A者)的背景3。
在电视电话装置1和电视电话装置21的内部，包括操作部11，将通话人2、22的指示内容输入到电视电话装置1和电视电话装置21；显示部12，将对方通话人2、22的面容和其背景3、23等进行显示；摄像部13，对通话人2、22的面容和背景3、23等进行摄像；送受话器14，用于通话人输入输出话音；系统控制部15，根据来自操作部11的输入内容，实施对话音数据的编码/解码处理、图像数据的编码/解码处理、以及电视电话装置1或21整体的控制；话音数据编码/解码部16，对从送受话器14输入的信号进行编码并且对送出到送受话器14的信号进行解码；图像数据编码/解码部17，对从摄像部13输入的信号进行编码，并且对送出到显示部12的信号进行解码；传送控制部18，将从话音数据编码/解码部16和图像数据编码/解码部17输出的信号变换成用通信线路网40传送的信号，并且从可从通信线路网40传送的信号中提取图像数据和话音数据，将各个数据输出到话音数据编码/解码部16和图像数据编码/解码部17；以及线路接口部19，进行信号电平和信号关系式等的调整，以便将传送控制部18的输出信号输出到通信线路网40，并且进行信号电平和信号关系式等的调整，使得在电视电话装置1、21内部可以处理从通信线路网40接收的信号。
下面，更详细地说明图22中的发送图像的编码。
图23表示与对图22的电视电话装置中的发送图像进行编码处理有关的提取块的图。
在操作部11中设有线路连接/断开键(摘机/挂机键)11a，用于通话人2指示将电视电话装置1连接到线路中的处理和将电视电话装置1从线路中断开的处理。
图像数据编码部90是表示图22的图像数据编码/解码部17中的图像数据的发送中使用的编码部的块。
其它的块与图22所示的情况重复，所以省略说明。
而且，更详细地说明图23中的图像数据编码部90。
图24表示图23中的图像数据编码部90的内部结构的方框图。
此外，图24的图像数据编码部90的内部结构例如表示在ISO-IEC/JTC1/SC29/WG11 MPEG 92/否245 Test Model2中示出的图像信号编码方式。
图24的图像数据编码部90包括减法器52；DCT(离散余弦变换)电路53；量化电路54；可变长度编码电路55；发送缓冲器56；反量化电路61；IDCT(反离散余弦变换)电路62；加法器63；存储器电路64；切换电路65；以及动态补偿预测电路66。
从摄像部13输入到图像数据编码部90的信号71(数字图像信号)根据来自系统控制部15的指示，被输入到减法器52的第1输入部(1)、动态补偿预测电路66的第1输入部(1)、以及量化电路54的第2输入部(2)。减法器52的输出72被输入到DCT电路53，而DCT电路53的输出73被输入到量化电路54的第1输入部(1)。量化电路54的输出74被输入到可变长度编码电路55，并且还被输入到反量化电路61中。可变长度编码电路55的输出被输入到发送缓冲器56。从发送缓冲器56一定第1输出部<1>的输出向传送控制部18输出，而从发送缓冲器56的第2输出部<2>的输出77被输入到量化电路54的第3输入部(3)。
反量化电路61的输出81被输入到IDCT电路62，IDTC电路62的输出82被输入到加法器63的第1输入部(1)。加法器63的输出83被输入到存储器电路64的第1输入部(1)，存储器电路64的输出84被输入到动态补偿预测电路66的第2输入部(2)和切换电路65的第1输入部(1)。来自动态补偿预测电路66的第1输出部<1>的输出被输入到存储器电路64的第2输入部(2)。
另一方面，对切换电路65的第2输入部(2)施加零信号，对切换电路65的第3输入(3)输入来自动态补偿预测电路66的第2输出部<2>的输出87。切换电路65的输出85被输入到减法器52的第2输入部(2)和加法器63的第2输入部(2)。
图22～图24所示的电视电话系统和电视电话装置如下工作。
例如，说明使用电视电话装置1的通话人(A者)呼叫电视电话装置21时的通话人22(B者)的情况。
首先，通过通话人2操作图23所示的操作部11的线路连接/断开键11a后，系统控制部15通过传送控制部18和线路接口部19等将电视电话装置1与通信线路网40连接。
接着，通话人2通过未图示的拨号键等来指定通话人22的拨号序号，电视电话装置1和电视电话装置21之间的通信线路被连接。
于是，对方的通话人22的图像与通话人的背景23被一起显示在电视电话装置1的显示部12中的监视器画面12a上，并且通话人2的图像和通话人的背景3被一起显示在电视电话装置21的显示部12中的监视器画面12b上。这样，可以进行通话人2和通话人22的相互的图像和话音的发送接收。
此外，说明例如电视电话装置21的通话人22(B者)和使用电视电话装置1的通话人2(A者)结束通信的情况。
通话人2操作图23所示的操作部11中的线路连接/断开键11a后，系统控制部15通过传送控制部18和线路接口部19等来断路电视电话装置1和通信线路网40之间的连接着的通信线路。
于是，电视电话装置1的显示部12的监视器画面12a中与通话人的背景23一起显示的对方通话人22的图像消失，并且电视电话装置21的显示部12的监视器画面12b中与通话人的背景3一起显示的对方通话人2的图像也消失。这样，通话人2和通话人22的通信结束。
此外，对于上述图像数据编码部90的操作来说，如上所述，由于被ISO-IEC等机关标准化，所以仅简单地进行说明。为了减少从摄像部13输入的信号71、即电视电话装置1中的摄像图像数据与时间轴方向的冗余度，在减法器52中，经动态补偿预测电路66来实施获得与输出的图像数据的图像间的差分的减法处理。对于从减法器52输出的差分信号(输出72)，在DCT电路53中在空间方向上施加DCT(离散余弦变换)。离散余弦变换后从DCT电路53输出的差分信号(DCT系数输出73)在量化电路54中被量化，量化过的信号(输出74)在可变长度编码电路55中进行可变长度编码后，经发送缓冲器56输出到传送控制部18。
如上所述，摄像的图像数据通过DCT(离散余弦变换)、量化、可变长度编码来进行信息压缩，信息量被编码成少的信号来传送。此外，在接收端，通过解码被信息压缩的信号来获得原来的信息量。在电视电话系统中，可以由以往仅传送话音通信的线路来进行图像通信。
如上所述，电视电话装置通过在发送端使用信息压缩技术来发送编码的信号，在接收端解码接收信号，对于经电话线路仅发送接收话音信号的电话装置来说，也可以称为能够发送接收图像的电话装置。由于电视电话装置可以进行图像的发送接收，所以与具有在远距离上可以一边看着通话对方的容颜一边进行通话这样的优点相反，存在有关因电视电话装置发生故障而保护秘密的问题。
例如，在发送端的使用者进行呼叫，接收端的使用者拿起受话器的情况下，线路被连接后，在发送端和接收端双方的电视电话装置的监视器画面上立即映出对方的容颜。但是，通常由于在接收端未必预测准备打来电话，所以发生接收端的使用者的服装不整齐、发型松乱、或者接收端的使用者的周围没有整理而混乱的情况。从保护秘密的观点来看，最好不要因接收端的使用者将接收端的上述状况显示在发送端的监视器画面上。
此外，在利用电视电话装置的通话中，例如，保留通话并呼叫其它人、并且查找资料的情况下，保留话音，但保留端的状况会映出在对方的电视电话装置的监视器画面上。保留端的使用者呼叫同室或相邻室等人的动作、查找资料的动作对于看着对方的电视电话装置的监视器画面的人来说是没有意义的画面，而对于保留端的使用者来说，是被拍摄了不想让其他人看见的背景或动作的画面。因此，对于保留端的使用者来说，从保护秘密的观点来看，最好不将保留端的上述状况映出在对方端的监视器画面上。
为了消除上述的不好的情况，例如，在线路连接后或保留中，考虑不送出图像数据，但在该情况下，由于电视电话装置的监视器画面为与非工作(电源关)时相同的画面，所以产生使用者是否未进行通信线路连接的不安，怀疑发生电话机的故障或线路故障。
此外，在电视电话装置中，在结束通话并切断线路时，如果一方的使用者进行切断线路的操作，则对方监视器画面上映出的容颜突然不映出(消失)，所以通信对方端受到轻微的震惊(吃惊)。而且，通信对方的电视电话装置的使用者不能识别在监视器画面上不映出容颜是因一方的使用者的操作产生的正式的线路切断，还是电话机的故障或线路故障，存在感到不安的情况。
此外，即使仅进行话音通信的普通电话装置，为了尊重年长者等，因先放置受话器而使对方认为线路切断是失礼的，存在先放置受话器的端感到非礼的情况。在电视电话装置中，不仅对方的话音，而且对方的容颜因线路切断而突然消失，所以与只有话音的电话相比，存在先放置受话器(先切断线路)的作业更被认为是失礼的情况。因此，根据电视电话装置的使用者的生活习惯和礼节作法等常识，以往存在切断通信线路端的使用者感到礼节非常差的情况。
发明内容
本发明是用于解决上述课题的发明，目的在于提供电视电话装置，在通信开始时或在通话中保留时，通过发送处理的图像，来代替发送端的实时图像，以便保护发送端的使用者的秘密，使对方的电视电话使用者认为线路状态是在连接中。
此外，本发明的目的在于提供电视电话装置，在与对方的电视电话装置的线路被切断时，通过在监视器画面上映出的对方的容颜慢慢看不见，使电视电话使用者安心，并可以不感到礼节差地结束通信。
用于实现上述目的的本发明一形态的保护秘密的电视电话的通信方法，在第1电视电话装置和第2电视电话装置之间设定通话的情况下，将图像从第1电视电话装置发送到第2电视电话装置，该方法包括摄影第1电视电话装置的使用者的实时图像的步骤，在通话的一部分期间中将实时图像发送到第2电视电话装置的步骤，生成与实时图像不同的被处理图像的步骤；以及在通话的其它期间中将被处理图像传送到第2电视电话装置的步骤。
在本发明另一形态的保护秘密的电视电话的通信方法中，在上述本发明的一形态中，被处理图像被存储在通话前准备的第1电视电话装置的存储装置中。
在本发明另一形态的保护秘密的电视电话的通信方法中，在上述本发明的一形态中，通过获得通话前准备的图像，将第1电视电话装置中存储的预先准备的图像和实时图像进行组合而得到被处理图像。例如，实时图像的部分可以与准备的图像部分组合，在被处理图像中，这两部分被分别显示。或者，可以将半透明的实时图像覆盖在被处理图像上。
在本发明另一形态的保护秘密的电视电话的通信方法中，例如在通话开始时、通话结束时、设定为通话保留状态情况下的期间开始时、设定为通话保留状态情况下的期间结束时等可以使2个部分的大小比率或实时图像的透明度比率那样的组合比率变化。
在本发明另一形态的保护秘密的电视电话的通信方法中，被处理图像可以通过增大实时图像的量化系数来增加变更，由此可以产生覆盖实时图像的镶嵌效果。在例如通话开始时、通话结束时、设定为通话保留状态情况下的期间开始时、设定为通话保留状态情况下的期间结束时等，可以改变量化系数，以便使镶嵌效果的单元大小变化。
本发明的保护秘密的电视电话装置的一形态包括摄像部，摄像使用者的实时图像并输出图像数据；图像数据编码/解码部，对实时图像数据进行用于发送的编码，并且输出对来自通信对方的接收信号进行解码的图像数据；显示部，显示解码的图像数据；以及操作部，使用者输入指示；其中包括图像数据存储部，存储预先准备的图像数据；图像数据处理部，实施实时图像数据和预先准备的图像数据之间的合成处理；系统控制部，从图像数据存储部读出预先准备的图像数据，实施该图像数据和从摄像部输入的图像数据有关的由使用者选择的内容之间的合成处理，将该合成处理的图像数据输出到通信线路。
此外，本发明的保护秘密的电视电话装置的另一形态包括摄像部，摄像使用者的实时图像并输出图像数据；图像数据编码/解码部，对实时图像数据进行用于发送的编码，并且输出对来自通信对方的接收信号进行解码的图像数据；显示部，显示解码的图像数据；以及操作部，使用者输入指示；其中包括量化系数控制部，在图像数据编码/解码部中对图像数据进行量化时的量化系数进行控制；系统控制部，根据使用者选择的内容，从量化系数控制部输出设定量化系数的信号，控制图像数据的量化。
图1表示本发明实施例1的电视电话装置中的对发送图像进行编码处理有关的提取块的图。
图2表示图1的控制系统部的内部结构的方框图。
图3表示图1的图像数据处理部的内部结构例的方框图。
图4表示图3所示的图像数据合成电路的内部结构方框图。
图5表示图1所示的图像数据编码部的内部结构方框图。
图6表示线路连接时的实时图像和图形图像之间的合成比例随时间变化的状况的图。
图7表示(a)～(f)在线路连接时的合成比例随时间变化的监视画面的实例的图。
图8表示线路切断时的实时图像和图形图像之间的合成比例随时间变化的状况图。
图9表示(a)～(f)在线路切断时的合成比例随时间变化的监视画面的实例的图。
图10表示显示部的监视画面中的合成区域的位置的图。
图11表示线路连接时或线路切断时的本实施例1的图像数据处理部的参数设定电路的设定处理的流程图。
图12表示实施例2的电视电话装置中的图像数据处理部的结构方框图。
图13表示实施例2的线路连接时的实时图像和图形图像之间的每个点的合成比例随时间变化的状况图。
图14表示(a)～(f)在实施例2的线路连接时的合成比例随时间变化的监视画面的实例的图。
图15表示实施例2的线路切断时的实时图像和图形图像之间的每个点的合成比例随时间变化的状况图。
图16表示(a)～(f)在实施例2的线路切断时的每个点的合成比例随时间变化的监视画面的实例的图。
图17表示实施例3的电视电话装置中的图像数据处理部的结构方框图。
图18表示线路连接时或线路切断时的实施例3的图像数据处理部的参数设定电路的设定处理的流程图。
图19表示与本实施例4的电视电话装置中的发送图像的编码有关的块结构的方框图。
图20表示实施例4的电视电话装置中的图像数据编码部的内部结构方框图。
图21表示线路连接时或线路切断时的实施例4的量化系数控制部的设定处理流程图。
图22表示使用现有的电视电话装置的电视电话系统整体的方框图。
图23表示与对图22的电视电话装置中的发送图像进行编码处理有关的提取块的图。
图24表示图23中的图像数据编码部的内部结构方框图。
具体实施例方式
以下，根据图示的实施例来说明本发明。
图1是表示本发明实施例1的电视电话装置中的对发送图像进行编码处理有关的提取块的图。
在图1中，与图23所示的现有电视电话装置相同的功能部分被附以相同的符号，并省略重复的说明。此外，作为本实施例的电视电话装置101的整体结构，将图22所示的现有电视电话装置1内部的各块中的对发送图像进行编码处理有关的块用图1所示的各块来替代。
图1所示的实施例1与图23所示的以往例的结构上的主要不同点在于，在图1的电视电话装置101中，在CCD摄象机等摄像部13和图像数据编码部190之间设有实施图像数据的合成处理等的图像数据处理部170，存储图像数据处理部170中处理的图像数据的图像数据存储部150，在操作部111内，设有让使用者选择从电视电话装置101送出电视电话装置101、或通过图像数据处理部170送出处理过的图像的实时图像送出键111b和处理图像送出键111c。
图像数据存储部150是存储预先准备的图像的存储器元件等的图像数据存储部，以便图像数据处理部170进行与实时图像的合成。在本实施例1中，根据使用者的喜好，例如，可以存储通过摄像部13预先拍摄的使用者的静止图像、花草等自然物的图像、山和海等风景的图像、任意的图形图像、任意的绘画和照片、全白色图像、全灰色图像、全黑色图像等。
图像数据处理部170是可以输出图像数据存储部150中预先准备的图像数据、从摄像部13输入的实时图像、以及根据系统控制部115的指示来进行各种变化及合成处理的图像数据的数据处理部。此外，图像数据处理部170的输出还被输入到图像数据存储部150，使得由摄像部13预先拍摄的静止图像或对该静止图像实施了图像处理的图像数据存储在图像数据存储部150中。图像数据处理部170的详细内部结构用图3～图5来后述。
操作部111内设置的实时图像送出键111b，是例如在指定送出处理图像的情况下的来话时或保留继续时，在使用者的服装或发行等仪表整齐并且背景也没有不适宜的情况下，将实时图像送出的处理内容选择键。
处理图像送出键111c与实时图像送出键111b相反，是例如在指定送出处理图像的情况下的来话时或保留开始时，在不映出使用者的服装或发行等仪表不整齐并且背景也不适宜的情况下，将处理图像送出的处理内容选择键。
系统控制部115根据从操作部111的输入内容和从传送控制部18的线路状态通知的输入，进行对电视电话装置101整体的控制，并且控制对图像数据存储部150的存储内容的写入和读出，控制图像数据处理部170中的合成处理，控制图像数据编码部190中的图像数据的编码处理。系统控制部115的详细内部结构用图2来后述。
图像数据编码部190是通过实施DCT(离散余弦变换)、量化、可变长度编码等处理，对图像数据进行信息压缩并形成信息量少的信号的图像数据编码部。图像数据编码部190是例如表示在图22的图像数据编码/解码部17中的图像数据的发送中使用的编码部的块。图像数据编码部190的详细内部结构用图5来后述。
图2表示图1的系统控制部的内部结构方框图。
图2的系统控制部115包括控制图像数据处理部170中的图像合成处理的图像合成控制电路120；存储任意的图形图像和风景图像等的内置存储电路130；以及计时器电路140，计测操作部111的线路连接/断开键11a的输入定时或从传送控制部18的线路连接/断开定时起经过的时间或从保留开始/保留结束操作起经过的时间。
图像合成控制电路120例如存储以下合成条件在监视器整个画面上显示的图形图像中决定合成实时图像比例的合成比例数据121、例如在监视器整个画面的图形图像中决定插入实时图像位置的合成位置数据122、例如在监视器整个画面的图形图像中决定插入实时图像区域的合成区域数据123等。
内置存储电路130存储例如几何模样的图形图像的第1图像数据131、例如斜线状的图形图像的第2图像数据132、例如锯齿格状的图形图像的第3图像数据133等。这些图像数据可以在图像数据存储部150中存储的图像形成中使用。
图3表示图1的图像数据处理部的内部结构例的方框图。
图3的图像数据处理部170a包括参数设定电路171，根据来自系统控制部115的指示，例如设定图形图像和实时图像的合成参数；图像数据合成电路172，根据来自参数设定电路171的指示，合成并输出来自摄像部13的实时图像数据和来自图像数据存储部150的例如图形图像数据；以及图像数据选择电路173，从来自摄像部13的实时图像数据和来自图像数据存储部150的例如图形图像数据和来自图像数据合成电路172的合成处理后的图像数据中，根据来自系统控制部115或参数设定电路171的指示来选择一个图像数据并输出到图像数据编码部190。
此外，在图像数据处理部170a的参数设定电路171中，内置设定在图像数据合成电路172中例如在图形图像数据中合成的实时图像数据的位置和区域的合成位置区域设定电路181。
图4表示图3所示的图像数据合成电路172的内部结构的方框图。
图4的图像数据合成电路172包括衰减器185，根据来自参数设定电路171的指示，对来自摄像部13的输入信号实施并输出整个画面中的位置和区域比例的变更处理；衰减器186，根据来自参数设定电路171的指示，对来自图像数据存储部150的输入信号实施并输出整个画面中的位置和区域比例的变更处理；以及加法器187，将衰减器185的输出和衰减器186的输出相加并输出。此外，根据来自参数设定电路171的指示，使各衰减器185和衰减器186受控制，使得将衰减器185的输出和衰减器186的输出合成在每个像素中。
图5表示图1所示的图像数据编码部190的内部结构方框图。
图5的图像数据编码部190与图24所示的图像数据编码部90同样，包括DCT(离散余弦变换)电路53、量化电路54、可变长度编码电路55、以及发送缓冲器56。
根据来自系统控制部115的指示，从图像数据处理部170输入的信号被输入到DCT电路53，而DCT电路53的输出被输入到量化电路54。同样，量化电路54的输出被输入到可变长度编码电路55，可变长度编码电路55的输出被输入到发送缓冲器56，而发送缓冲器56的输出被输出到传送控制部18。
如上所述，由图像数据处理部170合成的图像数据在图像数据编码部90中通过DCT(离散余弦变换)、量化、可变长度编码来进行信息压缩而编码为信息量少的信号被传送。图5虽未示出，但例如通过在图5的电路中追加图24所示的减法器52和动态补偿预测电路66组成的电路，将差分信号输入到DCT电路53，可以进一步进行信息压缩的编码。
下面，参照图1～图5、以及图6～图10来说明本实施例1的电视电话装置101的工作。
图6和图7表示合成实时图像(摄像图像)和图形图像情况下的本实施例1的线路连接时的操作的一例，图6表示按时间来变化实时图像和图形图像的合成比例的情况的图，图7(a)～图7(f)表示按时间来变化合成比例的监视器图像(显示部12)的实例的图。
图6的横轴是线路连接时间(t)，而纵轴是摄像图像的区域在合成图像的整个图像区域中所占有的比例(％)。
在图6中，发送端的电视电话装置101的使用者操作操作部111的线路连接/断开键11a，尝试与通信对方的线路连接(摘机)时(t＝Tf)，如图7(a)所示，电视电话装置101的显示部的监视器画面为非显示状态，在画面上没有任何显示。
在图6中，在电视电话装置101的系统控制部115从传送控制部18接受线路被连接的通知时(t＝T0)时，如图7(b)所示，将图形图像的面积为100％的图像显示在电视电话装置101的显示部的监视器画面上。
在图6中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的1/4时的T1，那么如图7(c)所示，图形图像的面积为93.75％、摄像图像的面积为6.25％的图像被显示在电视电话装置101的显示部的监视器画面上。摄像图像的面积为6.25％的图像是与监视器画面的纵边的比率为25％、与横边的比率为25％的图像在整个画面的面积中占有的比例。
在图6中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的1/2时的T2，那么如图7(d)所示，图形图像的面积为75％、摄像图像的面积为25％的图像被显示在电视电话装置101的显示部的监视器画面上。摄像图像的面积为25％的图像是与监视器画面的纵边的比率为50％、与横边的比率为50％的图像在整个画面的面积中占有的比例。
在图6中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的3/4时的T3，那么如图7(e)所示，图形图像的面积为43.5％、摄像图像的面积为56.25％的图像被显示在电视电话装置101的显示部的监视器画面上。摄像图像的面积为56.25％的图像是与监视器画面的纵边的比率为75％、与横边的比率为75％的图像在整个画面的面积中占有的比例。
在图6中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间时的T4，那么如图7(f)所示，图形图像的面积为0％、摄像图像的面积为100％的图像被显示在电视电话装置101的显示部的监视器画面上。
下面说明上述图6和图7所示例的电视电话装置101的使用者要切断线路(挂机)情况下的工作。
图8和图9表示合成实时图像(摄像图像)和图形图像情况下的本实施例1的线路切断时的操作的一例，图8表示按时间来变化实时图像和图形图像的合成比例情况的图，图9(a)～图9(f)是表示合成比例按时间变化的监视器画面(显示部12)的实例图。
图8的横轴是线路连接时间(t)，而纵轴是摄像图像的区域在合成图像的整个图像区域中所占有的比例(％)。
在图8中，在发送端的电视电话装置101的使用者操作操作部111的线路连接/断开键11a，尝试与通信对方的线路切断(挂机)时(t＝T5)时，如图9(a)所示，电视电话装置101的显示部的监视器画面将图形图像的面积为0％、摄像图像的面积为100％的图像显示在电视电话装置101的显示部的监视器画面上。
在图8中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的1/4时的T6，那么如图9(b)所示，图形图像的面积为43.75％、摄像图像的面积为56.25％的图像被显示在电视电话装置101的显示部的监视器画面上。
在图8中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的1/2时的T7，那么如图9(c)所示，图形图像的面积为75％、摄像图像的面积为25％的图像被显示在电视电话装置101的显示部的监视器画面上。
在图8中，如果经过线路连接时间的线路连接时间t达到从图形图像至实时图像的完全切换时间的3/4时的T8，那么如图9(d)所示，图形图像的面积为93.75％、摄像图像的面积为6.25％的图像被显示在电视电话装置101的显示部的监视器画面上。
在图8中，在电视电话装置101的系统控制部115从传送控制部18接受到切断线路的通知时(t＝T9)，如图9(e)所示，将图形图像的面积为100％的图像显示在电视电话装置101的显示部的监视器画面上。
在图8中，如果经过线路连接时间的线路连接时间变为挂机状态(线路非连接状态)继续中的Tn，那么如图9(f)所示，变为非显示状态，在画面上没有任何显示。
这里，说明在合成处理中，在显示部的监视器画面上显示图形图像时，决定合成摄像图像位置的方法。
图10表示在显示部的监视器画面中的合成区域的位置图。
图10中的尺寸M例如是图22所示的显示部12的监视器画面12a的横向尺寸，而尺寸N是监视器画面12a的纵向尺寸。设监视器画面12a的左上角为坐标(0，0)，设监视器画面12a的右下角为坐标(M，N)。即，监视器画面12a以左上角的坐标(0，0)为基准点。
下面，设监视器画面12a中表示摄像图像的合成区域的横向尺寸为m，而合成区域的纵尺寸为n。设该合成区域的左上角为坐标(a，b)，设合成区域的右下角为坐标(a+m，b+n)。即，合成区域以左上角的坐标(a，b)为基准点。
此外，图10中的阴影线部分是本实施例1的电视电话装置的监视器画面12a中显示图形图像的部分，显示对方通话人的容颜的部分是监视器画面12a中显示摄像图像的部分。
这里，如果使用上述坐标位置(0、0)-(M、N)来表现监视器整个画面的区域，则合成区域、即摄像图像的区域可以表现为(a、b)-(m+a、n+b)。
合成图像是指从监视器画面的整个区域(0、0)-(M、N)上显示的图形图像中消除合成区域(a、b)-(m+a、n+b)的图形图像，使摄像图像显示在该消除区域(a、b)-(m+a、n+b)的图像。
图11表示线路连接时或线路切断时的本实施例1的图像数据处理部170a的参数设定电路171的设定处理的流程图。
系统控制部115从电视电话装置101的传送控制部18接收线路连接或切断的通知后，系统控制部115根据操作部111的实时图像送出键111b和处理图像送出键111c设定的内容来判断是否将合成图像送出到对方(步骤S1)。
在送出合成图像的情况下(步骤S1是)，系统控制部115根据操作部111的设定内容对参数设定电路171内的合成位置区域设定电路181输出指示，合成位置区域设定电路181例如在图形图像中设定摄像图像的区域和位置，并且设定经过线路连接时间怎样变化该区域(步骤S2)。
另一方面，在不送出合成图像的情况下(步骤S1否)，系统控制部115根据操作部111的设定内容来判断是否送出图形图像(步骤S3)。在送出图形图像的情况下(步骤S3是)，系统控制部115对图像数据处理部170a内的图像数据选择电路173输出选择图形图像数据的指示，在图像数据选择电路173中，选择并输出从图像数据存储部150中读出的图形图像的数据(步骤S4)。
在不送出图形图像的情况下(步骤S3否)，系统控制部115对图像数据处理部170a内的图像数据选择电路173输出选择摄像图像数据的指示，在图像数据选择电路173中，选择并输出从摄像部13接收的摄像图像的数据(步骤S5)。在结束步骤S2、步骤S4或步骤S5的设定情况下，使本设定处理结束。
通过坐标位置来进行合成区域的位置和面积设定的方法不限于上述方法，例如，也可以将基准点设定在监视器画面的中央，通过角度和绝对值来设定合成区域的位置和面积。此外，对于合成图像来说，也不限于在图形图像中设定摄像图像的合成区域，例如，相反地，也可以在摄像图像中设定图形图像的合成区域。而且，在本实施例1中，在图形图像中设置摄像图像的合成区域，但也可以合成预先进行摄影的使用者的图像和当前摄影的图像。此外，也可以使用任意的绘画和照片或插图等来代替图形图像。
在如上述的本实施例1中，在通信线路的连接时，根据线路连接时间，通过慢慢增加(逐渐增强)显示部的监视器画面的整个区域中的合成区域的显示比例(显示面积)，例如在需要电话装置时通过摘取受话器，不传送给对方的本端的状况可不作为摄像图像传送到对方端。具体地说，在线路连接之后对方不能看到隐藏的本端的服装不整和发行散乱或未整理的室内的状况，随着经过时间而可以慢慢看到扩大显示本端状况的图像区域。即，由于向对方隐藏的这些状况不会泄露给对方，所以可以保护秘密。
另一方面，在连接线路之后，尽管不送出摄像图像而送出图形图像，以便显示在通信对方的监视器整个画面上，只好完全送出图像，所以对于通信对方来说，线路被正常地连接，此外，可以识别正常传送的图像。即，通信对方能够不感到线路故障或电视电话装置故障的不安。
在本实施例1中，在通信线路的连接时，通过系统控制部115的设定，直至本端的打扮和室内的整理完成前，可以使监视器整个画面仍旧为图形图像，在整理完成后，在使用者操作操作部111的实时图像送出键111b后，可以送出实时图像(摄像图像)。即，图像送出端的使用者主动地想让本方图像被对方看到后，可以送出本方图像。
此外，作为图形图像，如上所述，除了无机质的几何模样的图形图像之外，由于使用者本身可以使用以前摄像的静止图像(肖像)或任意的风景画或照片或插图等，所以可以减轻对等待图像显示的对方产生的不快感。
此外，在一边送出实时图像一边与对方通信之中的情况下，通过操作操作部111的处理图像送出键111c，不使对方看到查询保留中的人和资料的一个接一个的状况。而且，在找到资料和人并再次开始通信时，通过操作操作部111的实时图像送出键111b，可以再次一边送出实时图像一边与对方通信。
此外，在本实施例1中，在使用者切断线路时，由于通信对方的容颜不会突然看不见，所以可以减轻使通信对方端的电视电话装置的使用者感到吃惊。这是按照从操作操作部111的线路连接/断开键起的时间，通过减少实时图像的显示比例来实施。此外，由于通信对方可以识别电话机的故障和非线路故障等正式的线路切断，所以不会感到不按。而且，实施此时的线路切断操作端的使用者从电视电话装置之前的退席动作和不准备发送到对方的图像被缩小显示面积、不清楚地发送，可以使通信对方看不到。
此外，根据同样的理由，切断目的地通信线路端的使用者不会对对方有失礼这样的感觉。
图12表示实施例2的电视电话装置中的图像数据处理部的结构方框图。本电视电话装置的图像数据处理部以外的结构与实施例1相同。因此，以下的实施例2的说明参照图12、以及图1、图2、图4、图5和图22来进行。
图12的图像数据处理部170b仅与图3的图像数据处理部170a和参数设定电路171的内部不同，其他结构与图像数据处理部170a相同。具体地说，图像数据处理部170b将图像数据处理部170a的合成位置区域设定电路181替换为合成比例设定电路182。
在实施例1的合成位置区域设定电路181中，例如将图形图像显示在显示部12的监视器画面12a上，在该图形图像中设定合成区域，可以使摄像图像(实时图像)显示在该合成区域中，但在合成比例设定电路182中，设定监视器画面12a中显示的图像中的图形图像和摄像图像的合成比例及透明度比例，按该比例将图形图像的信号和摄像图像的信号合成到每个像素(点)单位中。
此外，通过经过时间来变更合成比例设定电路182的合成比例。例如，根据各点的显示信号，从图形图像的显示信号为100％的监视器画面起，随着经过线路连接时间，随后对99％的图形图像形成实时图像为1％比例的显示信号的合成画面，接着对98％的图形图像形成实时图像为2％比例的显示信号的合成画面，以下实施同样的步骤，直至达到实时图像的显示信号为100％的监视器画面。
例如，设摄像图像的点在合成图像的点中占有的比例为‘R’(0≤R≤1)，则图形图像的点的比例可以表示为‘1-R’。设监视器整个画面中的任意位置中的点的信号电平为C，与该位置的点对应的摄像图像的点、以及图形图像的点的信号电平为A和B，则监视器画面的任意位置的点的信号电平C按公式C＝A×R+B×(1-R)来表示。
用图13～图16来说明由本实施例2的合成比例设定电路182来改变合成比例情况的电视电话装置的操作。
作为本实施例2的电视电话装置的整体操作流程图，对于图11所示的实施例1的步骤S2的处理来说，由于仅变更为设定每点合成比例的处理，所以省略记述，以下用实例来说明与实施例1的不同操作。
图13和图14表示合成实时图像(摄像图像)和图形图像情况下的本实施例2的线路连接时的操作的一例，图13表示按时间来变化实时图像和图形图像的每点合成比例情况的图，图14(a)～图14(f)表示按时间改变合成比例的监视器画面(显示部12)的实例图。
图13的横轴是线路连接时间(t)，纵轴是摄像图像的点在合成图像的点中占有的比例(％)。
在图13中，发送端的电视电话装置101的使用者操作操作部111的线路连接/断开键11a，尝试与通信对方的线路连接(摘机)时(t＝Tf)，如图14(a)所示，电视电话装置101的显示部的监视器画面为非显示状态，画面上没有任何显示。
在图13中，在电视电话装置101的系统控制部115从传送控制部18接受到连接线路的通知时(t＝T10)，如图14(b)所示，图形图像的点为100％的图像，即在完全不合成摄像图像的点下，图形图像原封不动地显示在电视电话装置101的显示部的监视器画面上。
在图13中，经过线路连接时间的线路连接时间t达到从图形图像至实时图像的整个切换时间的1/4时的T11后，如图14(c)所示，按图形图像的点为75％、摄像图像的点为25％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图13中，经过线路连接时间的线路连接时间t达到从图形图像至实时图像的整个切换时间的1/2时的T12后，如图14(d)所示，按图形图像的点为50％、摄像图像的点为50％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图13中，经过线路连接时间的线路连接时间t达到从图形图像至实时图像的整个切换时间的3/4时的T13后，如图14(e)所示，按图形图像的点为25％、摄像图像的点为75％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图13中，经过线路连接时间的线路连接时间t达到从图形图像至实时图像的整个切换时间T14后，如图14(f)所示，按图形图像的点为0％、摄像图像的点为100％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
下面说明上述图13和图14所示例的电视电话装置101的使用者切断线路(挂机)情况下的操作。
图15和图16表示将实时图像)和图形图像合成在每点中的情况下的本实施例2的线路切断时的操作的一例，图15表示按时间来变化实时图像和图形图像的每点合成比例情况的图，图16(a)～图16(f)表示按时间改变每点的合成比例的监视器画面(显示部12)的实例图。
图15的横轴是线路连接时间(t)，纵轴是摄像图像的点在合成图像的点中占有的比例(％)。
在图15中，发送端的电视电话装置101的使用者操作操作部111的线路连接/断开键11a，尝试与通信对方的线路切断(挂机)时(t＝T15)，如图16(a)所示，电视电话装置101的显示部的监视器画面将按图形图像的点为0％、摄像图像的点为100％合成到每点的图像显示在电视电话装置101的显示部的监视器画面上。
在图15中，经过线路连接时间的线路连接时间t达到从实时图像至图形图像的整个切换时间的1/4时的T16后，如图16(b)所示，按图形图像的点为25％、摄像图像的点为75％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图15中，经过线路连接时间的线路连接时间t达到从实时图像至图形图像的整个切换时间的1/2时的T17后，如图14(c)所示，按图形图像的点为50％、摄像图像的点为50％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图15中，经过线路连接时间的线路连接时间t达到从实时图像至图形图像的整个切换时间的3/4时的T12后，如图16(d)所示，按图形图像的点为75％、摄像图像的点为25％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图15中，在电视电话装置101的系统控制部115从传送控制部18接受到切断线路的通知时(t＝T19)，如图16(e)所示，按摄像图像的点为0％、图形图像的点为100％合成到每点的图像被显示在电视电话装置101的显示部的监视器画面上。
在图15中，经过线路连接时间的线路连接时间t达到使挂机状态(线路非连接状态)继续中的Tn后，如图16(f)所示，变为非显示状态，在画面上没有任何显示。
如上所述，在本实施例2中，在通信线路连接时，根据线路连接时间，在显示部的监视器画面整个区域中，通过慢慢增加图形图像的点与摄像图像的点的显示比例(逐渐增加)，可以慢慢鲜明地映出图形图像和半透明地重叠的摄像图像，所以与实施例1同样，例如，电话装置连通时，通过摘取受话器，不想传送到对方的本端的状态不会作为摄像图像传送到对方端。因此，与实施例1同样，想向对方隐瞒的本端的状况不会泄露给对方，所以可以保护秘密，可以使通信对方没有线路故障或电视电话装置故障的不安。
在本实施例2中，例如，通过使用全黑图像来作为图形图像，可以在线路连接时使摄像图像渐强，而在线路切断时使摄像图像渐弱，使图形图像100％的监视器画面和切断电源变为非显示状态的监视器画面之间的差减少，可以使通信对方在线路切断时不感到吃惊。
此外，在一边送出实时图像一边与对方通信之中的情况下，通过操作操作部111的处理图像送出键111c，例如使查询保留中的人和资料的一个接一个的状况不鲜明而不使对方原封不动地看到。而且，在找到资料和人并再次开始通信时，通过操作操作部111的实时图像送出键111b，可以再次一边送出实时图像一边与对方通信。
此外，在本实施例2中，在结束通信(一边选出实时图像的与对方的通信)时，根据操作操作部111的线路连接/断开键后时间，在显示部的监视器画面整个区域上，通过慢慢减少(逐渐减小)图形图像的点与实时图像的点的显示比例，使图形图像和重叠的摄像图像慢慢变得不鲜明而消失。因此，与实施例1同样，由于线路切断时监视器画面的通信对方的容颜不会突然看不到，所以可以减轻使通信对方端的电视电话装置的使用者感到吃惊和不快，可以使同一使用者可以识别非电话机故障和线路故障等的正式线路切断，可以放心。
此外，在本实施例2中，如上所述，由于慢慢地减少显示部的监视器画面的整个区域中的实时图像的点的显示比例，所以可以减轻切断目的地通信线路端的使用者感到余味差。
本实施例2的其它效果与实施例1所述的效果相同，所以省略说明。
由合成比例设定电路182来设定图形图像的点和摄像图像的点的合成比例的方法不限于上述线性地改变合成比例的方法，例如，根据二次函数等曲线来改变合成比例，并且合成多个图形图像画面和摄像图像的点也可以。
图17表示实施例3的电视电话装置中图像数据处理部的结构方框图。本实施例3的电视电话装置的图像数据处理部以外的结构与实施例1和实施例2相同。因此，以下的实施例3的说明参照图17以及图1～图5、图12和图22来进行。
图17的图像数据处理部170c仅与图3的图像数据处理部170a或图12的图像数据处理部170b和参数设定电路171的内部有所不同，其他结构与图像数据处理部170a或170b相同。具体地说，图像数据处理部170c将图像数据处理部170a的合成位置区域设定电路181、以及图像数据处理部170b的合成比例设定电路182双方设置在参数设定电路171内。
合成位置区域设定电路181的操作是上述实施例1中说明的操作，而合成比例设定电路182的操作是上述实施例2中说明的操作。
在本实施例3中，例如，可以将实施例1中说明的合成区域上显示的图像和实施例2中说明的每点的合成比例的变化进行组合。具体地说，例如，使图形图像显示在显示部12的监视器画面12a上，在该图形图像中设定合成区域，使摄像图像(实时图像)显示在该合成区域中，对于该合成区域的摄像图像，按合成比例设定电路182设定的合成比例形成在每个图形图像的像素(点)单位中合成的合成图像。
图18表示线路连接时或线路切断时的本实施例3的图像数据处理部170c的参数设定电路171的设定处理的流程图。
系统控制部115从电视电话装置101的传送控制部18接收线路的连接或切断的通知后，系统控制部115根据由操作部111的实时图像送出键111b和处理图像送出键111c设定的内容来判断是否将合成图像送出到对方(步骤S11)。
在送出合成图像的情况下(步骤S11是)，如实施例1所示，系统控制部115根据操作部111的设定内容判断在合成处理中是否使用位置、区域，以便在图形图像中插入一部分摄像图像，或相反地，在摄像图像中插入一部分图形图像(步骤S12)。在合成处理中使用位置、区域的情况下(步骤S12是)，系统控制部115对参数设定电路171内的合成位置设定电路181输出指示，合成位置区域设定电路181例如在图形图像中设定摄像图像的区域和位置，并且设定经过线路连接时间怎样改变该区域(步骤S13)。
在合成处理中未使用位置、区域的情况下(步骤S12否)，如实施例2所示，系统控制部115根据操作部111的设定内容来判断决定每个监视器画面中图形图像的点和摄像图像的点的比例以及是否使用合成的点比例(步骤S14)。在合成处理中使用每个点的合成比例的情况下(步骤S14是)，系统控制部115对参数设定电路171内的合成比例设定电路182输出指示，合成比例设定电路182例如在监视器画面内对合成图像区域设定图形图像的点和摄像图像的点的合成比例，并且设定经过线路连接时间怎样改变该比例(步骤S15)。
另一方面，在不送出合成图像的情况下(步骤S11否)，系统控制部115根据操作部111的设定内容来判断是否送出图形图像(步骤S16)。在送出图形图像的情况下(步骤S16是)，系统控制部115对图像数据处理部170c内的图像数据选择电路173输出选择图形图像数据的指示，在图像数据选择电路173中，选择并输出从图像数据存储部150中读出的图形图像的数据(步骤S17)。
在不送出图形图像的情况下(步骤S16否)，系统控制部115对图像数据处理部170c内的图像数据选择电路173输出选择摄像图像数据的指示，在图像数据选择电路173中，选择并输出从摄像部13中接收的摄像图像的数据(步骤S18)。
在合成处理中不使用每点的合成比例的情况下(步骤S14否)，系统控制部115结束本设定处理。此外，在步骤S17或步骤S18的设定结束的情况下，使本设定处理结束。
如上所述，在本实施例3中，在通信线路的连接时、在通信中进行保留的情况下，由于可以组合实施在实施例1和实施例2中记述的双方的处理，所以与上述实施例1和实施例2相比，可以更有效地保护秘密，可以使通信对方不感到线路故障和电视电话装置故障的不安。
此外，在本实施例3中，在通信结束时，与上述实施例1和实施例2相比，也可以更有效地减轻使通信对方端的电视电话装置的使用者感到吃惊和不快，不使通信对方产生不必要的不安，可以减轻使切断目的地通信线路端的使用者感到余味差。
本实施例3的其他效果与实施例1和实施例2中记述的效果相同，所以省略说明。
图19表示实施例4的电视电话装置102中的与发送图像的编码有关的块的结构方框图。本实施例4的电视电话装置的图19所示的块以外的结构与上述实施例1～3相同。因此，以下的实施例4的说明参照图19、以及图2、图4和图22来进行。
图19的与发送图像的编码有关的块与图1所示的实施例1中的发送图像的编码有关的块的主要不同在于图1的图像数据存储部150和图像数据处理部170在图19中被消除，在系统控制部200和图像数据编码部220之间设置量化系数控制部210。此外，由于摄像部13和操作部111与实施例1相同，所以省略重复的说明。
本实施例4的系统控制部200与上述实施例1～3不同，将用于变更图像数据编码部220中的量化系数的信号输出到量化系数控制部210。此外，量化系数控制部210输出量化系数的控制信号，以便控制图像数据编码部220中的一部分编码的量化。
图20表示本实施例4的电视电话装置102中的图像数据编码部220的内部结构的方框图。
图20的图像数据编码部220与图5所示的实施例1的图像数据编码部190的不同点在于在图像数据编码部220的DCT电路53中从摄像部13直接输入摄像图像数据，而在图20的量化电路230中，从量化系数控制部210输入控制量化的信号。本实施例4的电视电话装置102中的除了图19和图20所示的块以外的结构与上述实施例1相同，所以省略重复的说明。
这里，说明设置量化系数控制部210来控制量化电路230中的量化系数的理由。
变更量化电路230中的量化系数后，可以对发送到对方的图像实施镶嵌处理。具体地说，在量化电路230中，增大设定用于对输入图像的DCT变换输出进行量化的量化系数后，则在输出图像上显现镶嵌效果，使实时图像不清楚。
量化系数关系着镶嵌效果的块(马赛克或格)的大小。量化系数越大，因解码的图像的格的尺寸又大又粗而镶嵌效果越大。量化系数越小，解码图像近似当前图像而镶嵌效果越小。即，量化系数和输出图像所对应的镶嵌效果成正比。与实施例2所示的图像处理同样的镶嵌效果使图像的清晰度降低。
通过在线路连接时增大设定量化系数，根据经过线路连接后的时间，进行慢慢地减小控制，而在线路切断时，慢慢增大量化系数，可以获得线路连接时和线路切断时与实施例2的效果相同的效果。
以下，参照图19、图20和图22来说明本实施例4的工作。
图21表示线路连接时或线路切断时的本实施例4的量化系数控制部210的设定处理的流程图。
系统控制部115从电视电话装置102的传送控制部18接收线路连接或切断的通知后，系统控制部115根据操作部111的实时图像送出键111b和处理图像送出键111c设定的内容来判断是否将镶嵌图像送出到对方(步骤S21)。
在发送镶嵌图像的情况下(步骤521是)，系统控制部115根据操作部111的设定内容，对量化系数控制部210输出指示，量化系数控制部210例如设定变更对摄像图像进行镶嵌处理情况程度的量化系数，并且经过线路连接时间来设定使该量化系数如何变化(步骤S22)。
另一方面，在不发送镶嵌图像的情况下(步骤S21否)，结束本设定处理。
上述的本实施例4，在通信线路连接时，根据线路连接时间，通过慢慢降低(逐渐降低)量化电路230的量化系数，使镶嵌处理的格点大小慢慢变细而鲜明地映出，所以具有与实施例2相同的效果，例如，在电话装置连通时，通过摘取受话器，不传送到对方的本端的状态不能作为摄像图像传送到对方端，想向对方隐瞒的本端的状况不会泄露给对方，所以可以保护秘密，可以使通信对方没有线路故障或电视电话装置故障的不安。
此外，本实施例4在一边送出实时图像一边保持与对方通信中的情况下，通过操作操作部111的处理图像送出键111c，与实施例2同样，例如，可以使查找保留中的人和资料情况的哗啦哗啦的状况不鲜明，不让对方原封不动地看到。然后，在资料或人被找到而再开始通信时，通过操作操作部111的实时图像送出键111b，可以再次一边送出鲜明的实时图像一边与对方通信。即，图像送出端的使用者积极地想让对方看到自画像，所以可以送出清晰的自画像。
此外，在本实施例4中，在使用者切断线路时，由于通信对方的容颜不会突然看不见，所以可以减轻通信对方端的电视电话装置的使用者感到吃惊的程度。这通过以下方式来实现按照操作操作部111的线路连接/断开键后的时间，来增大摄像图像的镶嵌处理的格的尺寸，使实时图像慢慢不清楚。此外，通信对方可以识别非电话机的故障和线路故障等正式的线路切断，所以不会有不必要的不安。而且，实施此时的线路切断操作的端的使用者从电视电话装置之前的退席动作和不准备发送到对方的图像，增加镶嵌单元的尺寸、不清楚地发送，可以使通信对方看不到。
此外，根据相同的理由，首先切断通信线路端的使用者不必感到失礼于对方。
镶嵌处理的格点尺寸不限于线性增减量化系数的方法，例如，也可以根据2次函数等曲线来变化。
此外，实施例4仅追加上述的量化系数控制部210，所以仅追加小规模的电路，就可以在电视电话装置中实现保护秘密功能。此外，根据利用者的爱好由量化系数控制部210使量化系数变化，只要可以使镶嵌效果的格点尺寸变化，则同样仅追加小规模的电路，就可以实现保护秘密。
此外，本实施例4也可以组合上述实施例1～3来构成。在这种情况下，在线路连接/切断时或保留时，使用者可以选择更适合使用者喜好的画面。
在上述各实施例1～实施例3中，在操作部111中设置的键不限于实时图像发送键111b和处理图像发送键111c，例如，设置击退恶意电话装置键，在按压该键时，就将图像数据存储部150中存储的抗议的消息图像传送到对方端。
此外，在上述各实施例1～实施例4中，通信线路网40不限于有线线路，当然也包括无线线路。
而且，与实施例3的参数设定电路171中的设定处理有关，在实施例3中，首先设定位置区域后，实施对有关合成区域的每个像素的合成，而相反地，该设定处理也可以首先实施对图像整个区域的有关每个像素的合成后再设定位置区域，使得合成图像和摄像图像、或合成图像和图形图像进行位置区域合成。
再有，如上所述，通过各实施例来说明了本发明的几个变形图形，但本发明并不限于此，不言而喻，当然可以获得其它变形图形。
根据本发明的一形态，配有处理内容选择键、图像数据存储部、以及图像数据处理部，在不将本端的状况传送到对方的情况下，通过键操作将代替从摄像部输入图像的预先准备的图像发送到对方，所以可以不使通信对方感到线路异常等不安，可以保护图像发送端的秘密。此外，在图像发送端的准备完备的情况下，可以通过键操作从预先准备的图像中更换为从摄像部输入的图像。
根据本发明的另一形态，在整个画面区域中设置规定区域，可以将从摄像部输入的图像限定在该规定区域的合成图像数据发送到通信对方，所以虽然是部分，但通过对通信对方发送本端的状况，由于在监视画面上不映照脸部，所以可以缓和对方感觉到的不快感。
根据本发明的另一形态，通过将预先准备的图像的各像素点和从摄像部输入的图像的像素点合成在每个点中，实施重合在从摄像部输入的图像的处理而可以将意图不鲜明的合成图像数据发送到通信对方，所以虽然不鲜明，但通过对通信对方发送本端的状况，由于在监视画面上不映照脸部，所以可以缓和对方感觉到的不快感。
根据本发明的另一形态，由于按照来自使用者的指示或从线路通知后经过的时间来逐渐增大或逐渐减小送出到通信对方的合成图像数据的合成比率，慢慢地增大从摄像部输入的区域、或相反慢慢地减小，此外，使图像慢慢地鲜明、或相反慢慢地不鲜明地发送到对方，所以可以减少使通信对方产生吃惊或不快感，并且，对于图像送出端的使用者来说，也可以减轻感到客气或回味差的程度。
根据本发明的另一形态，在逐渐增大合成处理过的图像数据的合成比例或逐渐减小时，在合成比例变为100％或0％的情况下结束合成处理，发送从摄像部输入的图像或预先准备的图像、或切断线路，所以可以使通信对方不感到紧张而过渡到通常的电视电话的通信状态，并结束通信。
根据本发明的另一形态，由于电视电话装置的使用者的自画像为预先准备的图像数据，所以可以使通信对方感觉不到大的不舒适感而过渡到通常的电视电话的通信状态，并结束通信。
根据本发明的另一形态，将对电视电话装置的使用者的自画像实施图像合成处理的图像作为预先准备的图像数据，可以将满足图像发送端的使用者喜好的自画像发送到对方，所以可以由图像送出端的使用者将优美的自画像发送到对方。
根据本发明的另一形态，根据从操作部输入的线路连接指示、线路断开指示、线路保留指示或线路保留解除指示中的其中一个指示来开始合成处理，所以图像送出端的使用者可以按任意的定时来开始合成处理，使用方法方便。
根据本发明的另一形态，在根据来自操作部的线路连接指示来检测线路连接时才开始进行合成处理，所以合成处理的开始定时正确，与上述方面相比，可以使通信对方更感觉不到吃惊、不快感、紧张和不舒适感等而过渡到电视电话的通信状态。
根据本发明的另一形态，配有处理内容选择键、图像数据存储部、以及图像数据处理部，在不将本端的状况传送到对方的情况下，通过键操作将控制从摄像部输入的图像的量化系数的图像(镶嵌处理过的图像)发送到对方，所以可以保护图像发送端的秘密，而不使通信对方感到线路异常等不安。此外，在图像发送端的准备完备的情况下，可以通过键操作来更换为不进行镶嵌处理的图像。
根据本发明的另一形态，根据来自使用者的指示或经过从线路通知后的时间，逐渐增强或逐渐减弱对发送到通信对方的图像数据进行量化时的量化系数，可以使从摄像部输入的图像缓慢地明亮或缓慢地不明亮地发送到对方，所以可以减少因在监视画面上突然显现对方的脸部画面、脸部突然消失等而使通信对方产生吃惊或不快感，并且，对于图像送出端的使用者来说，也可以减轻感到客气或回味差的程度。
根据本发明的另一形态，由于根据从操作部输入的线路连接指示、线路断开指示、线路保留指示或线路保留解除指示中的某一个指示来开始量化系数的控制，所以图像发送端的使用者可以按任意的定时来开始合成处理，可以良好地使用方便。
根据本发明的另一形态，由于根据来自操作部的线路连接指示检测线路连接时才开始量化系数的控制，所以合成处理的开始定时正确，与上述方面相比，通信对方更不会有吃惊、不快感、紧张和不舒适等，可以过渡到电视电话的通信状态。
根据本发明的另一形态，由于对实施合成处理的图像数据进一步实施量化系数的控制并送出，所以可以更可靠地保护图像发送端的秘密。
权利要求
1.一种保护秘密的电视电话的通信方法，在第1电视电话装置和第2电视电话装置之间设定通话的情况下，从第1电视电话装置至第2电视电话装置送出图像，其特征在于，具有以下各步骤(a)对第1电视电话装置的使用者的实时图像进行摄影；(b)在所述通话的部分期间中将所述实时图像发送到第2电视电话装置；(l)在所述通话之外的期间中，对第2电视电话装置，送去将设定得大的量化系数逐渐减小的图像，以对所述实时图像产生镶嵌效果，或将设定得小的所述量化系数逐渐增大，而送去对所述实时图像产生镶嵌效果的图像。
2.如权利要求1所述的保护秘密的电视电话的通信方法，其特征在于，上述步骤(l)还包括以下步骤(k)在所述通话的开始、所述通话的结束、将所述通话设定为保留状态的期间的开始、以及将所述通话设定为保留状态的期间的结束之中，至少在一个期间中，为了改变由所述镶嵌效果引起的图像的粗糙度，而改变所述量化系数。
3.一种保护秘密的电视电话装置，通过通信线路来发送使用者的话音数据和图像数据，并且接收再现通信对方的的话音数据和图像数据，作为电视电话系统的一个终端来使用，所述电视电话装置包括摄像部，摄影自图像并输出图像数据；显示部，根据接收的图像数据来显示通信对方的图像；图像数据编码/解码部，对从所述摄像部输入的图像数据进行编码输出，并且将来自通信对方的接收信号进行解码的图像数据输出到所述显示部；系统控制部，对所述图像数据的编码/解码处理进行控制，并且控制整个电视电话装置的工作；以及操作部，将使用者输入的指示内容输出到所述系统控制部；其特征在于，包括量化系数控制部，被连接在所述系统控制部和所述图像数据编码/解码部之间，在所述图像数据编码/解码部中，通过增加在将图像数据进行量化时的量化系数而控制产生覆盖所述实时图像的镶嵌效果进行控制；处理内容选择键，设置在所述操作部内，用于选择在所述图像数据编码/解码部中实施的处理内容；所述系统控制部根据由所述处理内容选择键选择的内容，从所述量化系数控制部，对图像数据编码/解码部进行控制，将设定得大的所述量化系数随时间经过逐渐减小，或将设定得小的所述量化系数逐渐增大。
全文摘要
提供在通话中的一部分期间摄影并发送使用者的实时图像，在通话中的另一部分期间生成并发送与实时图像不同的被处理图像的电视电话。本发明的被处理图像通过预先准备或将实时图像与准备的图像进行组合来生成。或者，被处理图像通过增加实时图像的量化系数来产生镶嵌效果以覆盖实时图像。发送被处理图像，以便保护电视电话使用者的秘密，或者在通话开始或结束时提供适当的变化。或者，在将通话设定为保留状态时发送被处理图像。
文档编号H04N7/30GK1571507SQ200410064248
公开日2005年1月26日 申请日期2001年4月19日 优先权日2000年4月19日
发明者助野顺司, 幡野喜子, 蔵下拓二, 美浓部正, 杉山和宏 申请人:三菱电机株式会社