显示装置及其视频通话执行方法_3

文档序号:9380843阅读:来源:国知局
位于的地点将特定形态的⑶I作为视觉效果而进行输出。在此,⑶I可以是线、凸出显示、图形等。为此,显示装置100可以针对“请看这里”这一声音和指特定地点的动作映射和存储特定形态的GUI。
[0104]例如,控制单元120在视频通话时可以将画面分割为两个区域,在一个区域显示拍摄视频通话对方的图像,在另一区域显示内容画面。
[0105]在此,内容是用户在进行视频通话时可以利用的资料,可以为文本、图片、视频等形式。
[0106]如此,在画面被分割为两个区域的情形下,控制单元120可以将拍摄显示装置100的用户的图像及内容画面传送到服务器200,服务器200可以将显示装置100所传送的图像及内容画面都传送到与显示装置100进行视频通话的视频通话对方的其他显示装置300。
[0107]据此,进行视频通话的各个用户可以同时得到拍摄视频通话对方的图像和内容画面。
[0108]在此情形下,在用户将视线放到两个分割区域中的显示有内容画面的区域的特定地点并说“请看这里”时,控制单元120可以在用户视线所处的区域显示特定形态的GUI。
[0109]此时,控制单元120可以将关于内容画面上用户视线所处的地点(S卩,特定形态的GUI显示的地点)的位置信息传送给服务器200,服务器200可以将该位置信息传送给其他显示装置300。
[0110]据此,其他显示装置300可以利用从服务器200接收的位置信息,在内容画面上在与显示装置100的用户视线所处的地点相同的地点显示特定形态的GUI。
[0111]与之相对,若从服务器200接收到其他显示装置300传送的位置信息,则控制单元120可以在内容画面上在对应位置显示特定形态的⑶I。
[0112]另一方面,在上述的例子中,针对在用户的视线停留的位置输出对应的反馈的情形进行说明,但是这只是一个示例。
[0113]S卩,控制单元120可以根据用户视线来改变视频通话图像显示画面的布局。
[0114]具体来讲,控制单元120可将显示在用户的视线停留位置的图像放大之后进行输出。
[0115]例如,在用户将视线放到两个分割区域中的一个区域并说话时,控制单元120可以将用户视线所处区域的尺寸进行放大,而将没有视线停留区域的尺寸进行缩小。
[0116]S卩,在用户看着显示有视频通话对方的区域说话时,控制单元120可以将显示有视频通话对方的区域的尺寸进行放大,将显示有内容画面的区域的尺寸进行缩小。相反,控制单元120在用户看着显示有内容画面的区域说话时,可以将显示有视频通话对方的区域的尺寸进行缩小,将显示有内容画面的区域的尺寸进行放大。
[0117]此情形下,控制单元120可以将关于用户视线所处区域的信息(S卩,关于用户在看着视频通话画面还是看着内容画面的信息)传送到服务器200,服务器200可以将相关位置信息传送到其他显示装置300。
[0118]据此,其他显示装置300可以利用从服务器200接收的位置信息对显示装置100的用户的视线所处区域的尺寸进行放大,将其他区域的尺寸进行缩小。
[0119]与之相对,若从服务器200接收了由其他显示装置300传送的位置信息,控制单元120可以利用接收的位置信息来对其他显示装置300的用户的视线所处区域的尺寸进行放大,将其他区域的尺寸进行缩小。
[0120]如此,控制单元120可以根据用户视线所处区域改变视频通话画面的布局。
[0121]另一方面,下面基于上述内容对图2(b)的显示装置的细化构造进行说明。
[0122]根据图2(b),显示装置100包含视频通话执行单元110、控制单元120、存储单元130、音频处理单元140、视频处理单元150、遥控信号接收单元160和视线跟踪单元170。
[0123]视频通话执行单元110为用于与其他显示装置300执行视频通话的构成要素,可以包含相机111、麦克风112、通信单元113、显示器114和扬声器115。
[0124]相机111拍摄执行视频通话的用户。S卩,相机111可位于显示装置100的前面,拍摄执行视频通话的用户,生成用于视频通话的图像。
[0125]此情形下,相机111可内置于显示装置100,或者以外置方式连接于显示装置100。或者,相机111可被实现为平时隐藏在显示装置100内部,在利用视频通话功能时露到外部。
[0126]麦克风112用于获取执行视频通话的用户所发出的声音。
[0127]通信单元113可通过与服务器执行通信,来收发视频通话数据。
[0128]具体来讲,通信单元113可将相机111拍摄的图像和麦克风112获取的声音传送到服务器200,并可从服务器200接收其他显示装置300拍摄视频通话对方的图像和视频通话对方所发出的声音。
[0129]为此,通信单元113可以根据各种通信方式与服务器200执行通信,并可具有与各种通信方式对应的芯片。例如,通信单元130可以利用有线或无线LAN卡等通过互联网连接到服务器200。
[0130]显示器114显示用于视频通话的各种图像。
[0131]具体来讲,显示器114可以显示拍摄用户的图像和拍摄视频通话对方的图像。在此情形下,拍摄用户的图像和拍摄视频通话对方的图像可以以PIP方式被显示,视觉反馈可叠加显示在拍摄视频通话对方的图像上。
[0132]并且,显示器114可以显示拍摄视频通话对方的图像和内容画面。此情形下,显示器114可将画面分割为两个区域,在一个区域显示拍摄视频通话对方的图像,在另一区域显示内容画面。
[0133]扬声器115输出用于视频通话的各种音频。具体来讲,扬声器115可以输出视频通话对方所发出的声音和音响效果。
[0134]存储单元130存储各种信息。具体来讲,存储单元130可以存储关于与所发出的声音具有关联关系的动作的信息,关于与具有关联关系的动作和所发出的声音对应的反馈的信息等。
[0135]此情形下,控制单元120可利用这些信息判断用户和视频通话对方的动作和所发出的声音是否具有预先设定的关联关系,且在具有预先设定的关联关系时进行控制以输出与其对应的反馈。
[0136]另一方面,存储在存储单元130中的关于反馈的信息可以由用户设定和改变。
[0137]具体来讲,控制单元120可通过麦克风112获取并存储用户所发出的声音,并基于用户命令将存储的声音用作针对相互具有关联关系的特定动作及所发出的声音的音响效果O
[0138]例如,控制单元120可以显示针对通过麦克风112获取并存储的声音的列表,将从列表中选择的声音设定为针对相互具有关联关系的特定动作及所发出的声音的音响效果。
[0139]音频处理单元140可以对音频进行处理。例如,控制单元120可控制音频处理单元140以特定方式对在视频通话时通过麦克风112获取的声音进行编码,以传送到服务器200,并对从服务器200接收的由其他显示装置300获取的声音进行解码、放大、噪声滤除等处理,使其成为能够通过扬声器115输出的形态。
[0140]除此之外,音频处理单元140可以进行针对各种音频数据的处理。
[0141]视频处理单元150可以对视频数据进行处理。例如,控制单元120可控制视频处理单元150以特定方式对视频通话时由相机111拍摄的图像进行编码,以传送到服务器200,并对从服务器200接收的由其他显示装置300拍摄的图像进行解码、噪声滤除等处理,使其成为能够通过显示器114输出的形态。
[0142]除此之外,视频处理单元150可以进行针对各种视频数据的处理。
[0143]在此情形下,控制单元120可以控制通信单元130将编码的图像及声音传送到服务器200。
[0144]遥控信号接收单元160可以从遥控器(未图示)接收用于控制显示装置100的用户命令。在此,用户命令可包含用于执行视频通话的命令。
[0145]在此情形下,控制单元120可以进行控制,以在接收到与用于进行视频通话的命令对应的遥控信号时,进行视频通话。
[0146]S卩,当接收到与用于进行视频通话的命令对应的遥控信号时,控制单元120可激活相机111来拍摄进行视频通话的用户,激活麦克风112来收集进行视频通话的用户所发出的声音,并将视频通话数据传送给服务器200,并输出从服务器200接收的由其他显示装置300拍摄的图像和获取的声音。
[0147]视线跟踪单元170可以跟踪用户的视线。具体来讲,视线跟踪单元170可以从拍摄用户的图像中检测眼睛,并从检测出的眼睛中检测用户的视线朝向。
[0148]在此情形下,视线跟踪单元170可以基于用户的眼睛中眼珠所处区域的位置来判断用户的视线朝向。例如,若以眼睛的中央为中心,眼珠位于左、右、上、下方向,则视线跟踪单元170可以判断为用户的视线在望着显示在显示器115的画面的左、右、上、下方向。
[0149]上述的方法只是说明一实施例,用户的视线朝向显然可以根据各种方法检测出来。
[0150]在此情形下,控制单元120可基于视线跟踪单元170检测出的用户的视线朝向来改变视频通话画面的布局。
[0151]另一方面,控制单元120包含RAM 121、ROM 122、主CPU 123、图形处理单元124、第一接口 125-1至第η接口 125-η、总线126。
[0152]RAM 121、R0M 122、主 CPU 123、图形处理单元 124、第一接口 125-1 至第 η 接口125-η等可通过总线126相互连接。
[0153]第一接口 125-1至第η接口 125_η与上述各种构成要素连接。接口中的一个可以成为通过网络与外部装置连接的网络接口。
[0154]主CPU 123访问存储单元130,利用存储在存储单元130的操作系统(0/S)进行启动。而且,主CPU 123可利用存储在存储单元130的各种应用程序、数据等进行各种动作。
[0155]ROM 122中存储用于系统启动的指令集等。当输入开机命令而供应电源时,主CPU123根据存储在ROM 122中的指令将存储在存储单元130中的0/S复制到RAM 122,执行0/
当前第3页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1