显示设备和视频聊天窗口的显示方法与流程

文档序号:26786682发布日期:2021-09-28 20:57阅读:252来源:国知局
显示设备和视频聊天窗口的显示方法与流程

1.本技术涉及显示设备技术领域,尤其涉及一种显示设备和一种视频聊天窗口的显示方法。


背景技术:

2.随着移动通信技术的发展,视频聊天越来越被用户广泛使用,受到用户的欢迎。显示设备可以为用户提供诸如音频、视频、图片等播放画面。显示设备中可以运行不同的程序,以为用户提供各种各样的功能。通过在显示设备上安装并运行视频聊天应用,用户即可使用显示设备与好友进行视频聊天。
3.在进行视频聊天时,视频聊天窗口可以在显示设备屏幕上全屏显示,也可以以小窗的形式悬浮在其他画面上。相关技术中,一种显示设备包括两块显示器屏幕,其一尺寸较大进而作为主屏幕,其二尺寸较小进而作为副屏幕,主屏幕和副屏幕可以用于显示不同的信息内容。


技术实现要素:

4.本技术提供一种显示设备及视频聊天窗口的显示方法,以在视频聊天过程中给用户带来大小屏无感切换的交互体验。
5.第一方面,本技术提供一种显示设备,包括:
6.第一显示器,用于显示第一视图显示区;
7.第二显示器,用于显示第二视图显示区,所述第一视图显示区和所述第二视图显示区中包括不同的用户界面或者信息内容;
8.控制器,用于:
9.响应于视频聊天通信的建立,在第一显示器上显示视频聊天窗口,所述第一显示器为用于显示视频聊天窗口的第一选择,所述视频聊天窗口中显示有视频聊天画面;
10.在视频聊天窗口显示在所述第一显示器上时,接收用户输入的指示切换视频聊天窗口至第二选择的指令;
11.响应于所述切换视频聊天窗口至第二选择的指令,将所述第一显示器上的视频聊天窗口关闭,并在第二显示器上呈现视频聊天窗口,所述第二显示器上呈现的视频聊天窗口与所述第一显示器上呈现的视频聊天窗口相对应。
12.进一步,所述控制器还用于:
13.在视频聊天窗口显示在所述第二显示器上时,接收用户输入的指示指示切换视频聊天窗口至所述第一选择的指令;
14.响应于所述指示切换视频聊天窗口至所述第一选择的指令,将第二显示器上的视频聊天窗口关闭,在第一显示器上呈现视频聊天窗口。
15.进一步,所述视频聊天通信建立之前,所述控制器还用于:
16.接收用于设置所述第一选择的用户操作;
17.根据所述用于设置所述第一选择的用户操作,保存用户设置的所述第一选择。
18.进一步,所述在第一显示器上显示视频聊天窗口之前,所述控制器还用于:
19.将所述第二显示器的背光亮度调整至预设低亮度。
20.进一步,所述将第一显示器上的视频聊天窗口关闭后,所述控制器还用于:
21.在所述第一显示器上显示视频聊天之前的界面或者系统主页。
22.进一步,在将视频聊天窗口显示在第二显示器之前,所述控制器还用于:
23.将所述第二显示器的背光亮度调整到预设正常亮度,所述预设正常亮度高于所述预设低亮度。
24.进一步,在将视频聊天窗口显示在第二显示器时,所述控制器还用于:
25.取消第二显示器上其他信息内容的显示。
26.进一步,所述在第一显示器上显示视频聊天窗口,包括:
27.获取与所述第一显示器对应的第一窗口参数;
28.根据所述第一窗口参数在所述第一显示器上绘制视频聊天窗口;
29.通过所述视频聊天通信接收视频数据流,根据所述视频数据流生成视频聊天画面对应的视频信号,并将所述视频信号输出至所述第一显示器,以在第一显示器显示的所述视频聊天窗口中显示视频聊天画面。
30.进一步,所述在第二显示器上呈现视频聊天窗口,包括:
31.获取所述第二显示器对应的第二窗口参数;
32.根据所述第二窗口参数在所述第二显示器上绘制视频聊天窗口;
33.将根据所述视频数据流生成的视频信号输出至所述第二显示器,以在第二显示器显示的所述视频聊天窗口中显示视频聊天画面。
34.第二方面,本技术提供一种视频聊天窗口的显示方法,应用于显示设备,所述显示设备包括第一显示器和第二显示器,所述方法包括:
35.响应于视频聊天通信的建立,在第一显示器上显示视频聊天窗口,所述第一显示器为用于显示视频聊天窗口的第一选择,所述视频聊天窗口中显示有视频聊天画面;
36.在视频聊天窗口显示在所述第一显示器上时,接收用户输入的指示切换视频聊天窗口至第二选择的指令;
37.响应于所述切换视频聊天窗口至第二选择的指令,将所述第一显示器上的视频聊天窗口关闭,并在第二显示器上呈现视频聊天窗口,所述第二显示器上呈现的视频聊天窗口与所述第一显示器上呈现的视频聊天窗口相对应。
38.在上述实施例中,使用显示设备进行视频聊天时,用户可以根据需求将视频聊天窗口显示在第一显示器上或者切换至第二显示器上,操作步骤简单,可以提高显示设备两个显示器的利用率,给用户带来大小屏无感切换的交互体验。
附图说明
39.为了更清楚地说明本技术的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
40.图1示例性示出了显示设备与控制装置之间操作场景的示意图;
41.图2中示例性示出了控制装置100的配置框图;
42.图3中示例性示出了显示设备200中硬件系统的硬件结构示意图;
43.图4示例性示出了电源板与负载的连接关系示意图;
44.图5示例性示出了图3所示显示设备200的硬件架构框图;
45.图6示例性示出了本技术显示设备的功能配置示意图;
46.图7示例性示出了显示设备200中软件系统的配置框图;
47.图8示例性示出了显示设备软件系统的应用程序层示意图;
48.图9示例性示出了显示设备200中用户界面的示意图;
49.图10示例性示出了显示设备200提供的一种用户界面;
50.图11示例性示出了显示设备200提供的另一种用户界面;
51.图12示例性示出了显示设备200提供的另一种用户界面;
52.图13示例性示出了显示设备200提供的另一种用户界面;
53.图14示例性示出了显示设备200提供的另一种用户界面;
54.图15示例性示出了显示设备200提供的另一种用户界面;
55.图16示例性示出了显示设备200提供的另一种用户界面;
56.图17示例性示出了一种视频聊天窗口的显示方法的流程图。
具体实施方式
57.为了使本技术领域的人员更好地理解本技术中的技术方案,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本技术保护的范围。
58.本技术一种显示设备,其可以是如图1-9所示的双系统、双显示器结构的显示设备,即具有第一控制器(第一硬件系统)、第二控制器(第二硬件系统)、第一显示器和第二显示器的显示设备的音画同步处理,也可以是非双系统的显示设备,如可以具有一个控制器(硬件系统),或者可以具有两个以上的控制器(硬件系统),对此本技术不予限定。
59.在本技术具体实施方式中,将结合具有双系统的显示设备对本技术技术方案进行说明。下面首先对具有双系统硬件结构的显示设备的结构、功能和实现方式等方面进行详细说明。
60.为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件系统没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
61.并且,受制于硬件结构,传统显示设备的硬件系统仅支持一路硬解码资源,且通常最大仅能支持4k分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件系统中的gpu)对网络视频进行解码,而在此情况下,只能采取由硬件系统中的通用处理器(例如cpu)对视频进行软解码的方式处理视频聊天画面。
62.采用软解码处理视频聊天画面,会大大增加cpu的数据处理负担,当cpu的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。进一步的,受制于cpu的数据处理能力,当采用cpu软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
63.基于上述各方面的考虑,为克服上述缺陷,本技术公开了一种双硬件系统架构,以实现多路视频聊天数据(至少一路本地视频)。
64.下面首先结合附图对本技术所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本技术的内容更加容易理解,并不表示对本技术保护范围的限定。
65.本技术各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
66.本技术各实施例中使用的术语“遥控器”,是指电子设备(如本技术中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(rf)信号和/或蓝牙与电子设备连接,也可以包括wifi、无线usb、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
67.本技术各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
68.本技术各实施例中使用的术语“硬件系统”,可以是指由集成电路(integrated circuit,ic)、印刷电路板(printed circuit board,pcb)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本技术各个实施例中,硬件系统通常也会被称为主板(motherboard)或芯片。
69.图1中示例性示出了显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
70.其中,控制装置100可以是遥控器100a,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(zigbee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器100a上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器100a上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
71.控制装置100也可以是智能设备,如移动终端100b、平板电脑、计算机、笔记本电脑等,其可以通过本地网(lan,local area network)、广域网(wan,wide area network)、无线局域网(wlan,wireless local area network)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(ui,user interface)为用户提供各种控制。
72.示例的,移动终端100b与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移
动终端100b与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100b上,通过控制移动终端100b上用户界面,实现控制显示设备200的功能;也可以将移动终端100b上显示的音视频内容传输到显示设备200上,实现同步显示功能。
73.如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本技术各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行有线通信连接或无线通信连接。服务器300可以向显示设备200提供各种内容和互动。
74.示例的,显示设备200通过发送和接收信息,以及电子节目指南(epg,electronic program guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
75.显示设备200包括第一显示器201与第二显示器202,其中,第一显示器201与第二显示器202之间相互独立,第一显示器201与第二显示器202分别通过不同的硬件系统进行控制。
76.第一显示器201和第二显示器202可以用于显示不同的画面内容。如,第一显示器201可以用于传统电视节目的画面显示,第二显示器202用于通知类消息、语音助手等辅助信息的画面显示。
77.可选地,第一显示器201显示的内容与第二显示器202显示的内容之间可以相互独立,互不影响。例如,在第一显示器201播放电视节目时,第二显示器202可以显示与电视节目无关的时间、天气、气温、提醒消息等信息。
78.可选地,第一显示器201显示的内容与第二显示器202显示的内容之间也可以存在关联关系。例如,在第一显示器201播放视频聊天的主画面时,第二显示器202可以显示当前接入视频聊天的用户的头像、聊天时长等信息。
79.可选地,第二显示器202显示的部分或全部内容可以调整至第一显示器201显示。例如,可以将第一显示器201显示的时间、天气、气温、提醒消息等信息调整到第一显示器201显示,而用第二显示器202显示其它的信息。
80.另外,第一显示器201在显示传统电视节目画面的同时,还显示多方交互画面,且多方交互画面不会遮挡传统电视节目画面。其中,本技术对传统电视节目画面和多方交互画面的显示方式不做限定。例如,本技术可以根据传统电视节目画面和多方交互画面的优先级,设置传统电视节目画面和多方交互画面的位置和大小。
81.以传统电视节目画面的优先级高于多方交互画面的优先级为例,传统电视节目画面的面积大于多方交互画面的面积,且多方交互画面可以位于传统电视节目画面的一侧,也可以悬浮设置在多方交互画面的一角。
82.显示设备200,在一方面,可以是液晶显示器、oled(organic light emitting diode)显示器、投影显示设备;在另一方面,可以是智能电视或显示器和机顶盒组成的显示系统。显示设备200的具体类型、尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要在其性能和配置上一些改变。
83.显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。如网络电视、智能电视、互联网协议电视(iptv)等。在一些实施例中,显示设备可以不具备广播接收电视功能。
84.如图1所示,显示设备200上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示屏上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示在任意可选区域。
85.作为一种可选的连接方式,摄像头通过连接板与显示设备的后壳连接,固定安装在显示设备的后壳的上侧中部,作为可安装的方式,可以固定安装在显示设备的后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
86.作为另一种可选的连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示设备后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示设备之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏和保护用户的隐私安全。
87.作为一种实施例,本技术所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
88.当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
89.示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
90.可选的,在“边看边聊”的场景中,在观看直播视频或网络视频的同时,跨终端的进行至少一路的视频聊天。
91.另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
92.另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
93.可选的,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
94.可选的,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
95.另一示例中,用户可以在k歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。可选地,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
96.另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
97.在另一些示例中,还可以再增加更多功能或减少上述功能。本技术对该显示设备的功能不作具体限定。
98.图2中示例性示出了控制装置100的配置框图。如图2所示,控制装置100包括控制
器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
99.控制装置100被配置为可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
100.在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
101.在一些实施例中,如图1所示,移动终端100b或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100b或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
102.控制器110包括处理器112、ram 113和rom 114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
103.通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括wifi模块131、蓝牙模块132、nfc模块133等通信模块中至少一种。
104.用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144、摄像头145等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
105.输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
106.在一些实施例中,控制装置100包括通信器130和用户输入/输出接口140中的至少一者。控制装置100中配置通信器130,如:wifi、蓝牙、nfc等模块,可将用户输入指令通过wifi协议、或蓝牙协议、或nfc协议编码,发送至显示设备200。
107.存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
108.供电电源180,用于在控制器110的控制下为控制装置100各电器元件提供运行电力支持。供电电源180可以采用电池及相关控制电路实现供电。
109.图3中示例性示出了显示设备200中硬件系统的硬件结构示意图。为了便于说明,图3中显示设备200以采用液晶显示屏为例进行示意。
110.图3所示,显示设备200包括:第一面板11、第一背光组件21、主板31、交互板32、第一显示驱动板33、第二面板12、第二背光组件22、第二显示驱动板34、电源板4、按键板35、第一后壳51、第二后壳52和基座6。
111.其中,第一面板11用于给用户呈现第一显示器201的画面。第一背光组件21位于第
一面板11的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第一面板11能正常显示影像。第一背光组件21还包括第一背板(图中未示出)。主板31、交互板32、第一显示驱动板33和电源板4设置于第一背板上,通常在第一背板上冲压形成一些凸包结构。主板31、交互板32、第一显示驱动板33和电源板4通过螺钉或者挂钩固定在凸包上。主板31、交互板32、第一显示驱动板3和电源板4可以设置在一个板子上,也可以分别设置不同的板子上。第一后壳51盖设在第一面板11上,以隐藏第一背光组件21、主板31、交互板32、第一显示驱动板33和电源板4等显示设备200的零部件,起到美观的效果。
112.第一显示驱动板33主要的功能是:通过主板31上第一控制器传输的pwm信号以及lcaldimming信号,进行千级背光分区控制,此部分控制是根据图像内容变化的,以及在与主板31上第一控制器之间建立握手后,接收主板31上第一控制器发送的vbyone显示信号,并将vbyone显示信号转换为lvds信号,实现第一显示器201的图像画面显示。
113.底座6,用于支撑显示设备200,值得说明的是,图中仅示出一种形式的底座设计,本领域技术人员可以根据产品需求设计不同形式的底座。
114.第二面板12用于给用户呈现第二显示器202的画面。第二背光组件22位于第二面板12的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第二面板12能正常显示影像。第二背光组件22还包括第二背板(图中未示出)。第二显示驱动板34设置于第二背板上,通常在第二背板上冲压形成一些凸包结构。第二显示驱动板34通过螺钉或者挂钩固定在凸包上。第二显示驱动板34可以设置在一个板子上,也可以分别设置不同的板子上。第二后壳52盖设在第二面板12上,以隐藏第二背光组件22、转接驱动板(图中未示出)、第二显示驱动板板34和按键板35等显示设备200的零部件,起到美观的效果。
115.可选地,图3中还包括按键板35,按键板35可以设置在第一背板上,也可以设置在第二背板上,本技术对此不做限定。
116.另外,显示设备200还包括声音再现装置(图中未示出)例如音响组件,如包括功率放大器(amplifier,amp)及扬声器(speaker)的i2s接口等,用于实现声音的再现。通常音响组件至少能够实现两个声道的声音输出;当要实现全景声环绕的效果,则需要设置多个音响组件,输出多个声道的声音,这里不再具体展开说明。
117.需要说明的是,显示设备200还可以采用oled显示屏,这样,显示设备200所包含的模板发生相应的改变,此处不做过多说明。
118.图4示例性示出了电源板与负载的连接关系示意图,如图4所示,电源板4包括输入端in和输出端out(图中示出第一输出端out1、第二输出端out2、第三输出端out3、第四输出端out4和第五输出端out5),其中,输入端in与市电相连,输出端out与负载相连,比如,第一输出端out1和发光元件(如灯条或者自发光器件等)相连,第二输出端out2和音响组件相连,第三输出端out3和主板31相连,第四输出端out4和第一显示驱动板33相连,第五输出端out5和第一背光组件21相连。电源板4需要将交流市电转换为负载所需求的直流电,并且,该直流电通常具有不同的规格,例如音响组件需要18v,面板需要12v/18v等。
119.为便于表述,以下将双硬件系统架构中的一个硬件系统称为第一硬件系统或第一控制器,并将另一个硬件系统称为第二硬件系统或第二控制器。第一控制器包含第一控制器的各类处理器、各类接口,第二控制器则包含第二控制器的各类处理器、各类接口。第一控制器及第二控制器中可以各自安装有相对独立的操作系统,第一控制器的操作系统和第
二控制器的操作系统可以通过通信协议相互通信,示例性的:第一控制器的操作系统的framework层和第二控制器的操作系统的framework层可以进行通信进行命令和数据的传输,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。
120.下面结合图5对本技术双硬件系统架构进行进一步的说明。需要说明的是图5仅仅是对本技术双硬件系统架构的一个示例性说明,并不表示对本技术的限定。在实际应用中,两个硬件系统均可根据需要包含更多或更少的硬件或接口。
121.图5示例性示出了图3所示显示设备200的硬件架构框图。如图5所示,显示设备200的硬件系统包括第一控制器210和第二控制器310,以及通过各类接口与第一控制器210或第二控制器310相连接的模块。
122.其中,第一控制器210可以设置于图3中所示的主板31上。可选地,第一控制器210:主要实现传统电视功能(比如可以外接机顶盒等)。第二控制器310可以设置于图3中所示第二显示驱动板34上。可选地:第二控制器310可以用于接收第一控制器210发送的指令,并控制第二显示器380显示相应的图像。
123.与第一控制器210连接的模块可以包括调谐解调器220、通信器230、外部装置接口250、存储器290、用户输入接口260-3、视频处理器260-1、音频处理器260-2、第一显示器280(即图1中的第一显示器201)、音频输出接口270、供电模块240。
124.在其他实施例中,第一控制器210也可以连接更多或更少的模块。
125.在其他实施例中,第一控制器包括上述任意模块在内。
126.其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如epg数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
127.调谐解调器220,还用于根据用户选择,以及由第一控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
128.在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外部装置接口250输入至显示设备200中。
129.通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括wifi模块231,蓝牙模块232,有线以太网模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
130.显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据第一控制器210的控制接收遥控器100的控制信号。
131.外部装置接口250,是提供第一控制器210和外部其他设备间数据传输的组件。外部装置接口250可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息
(例如epg)等数据。
132.其中,外部装置接口250可以包括:高清多媒体接口(hdmi)端子也称之为hdmi 251、复合视频消隐同步(cvbs)端子也称之为av 252、模拟或数字分量端子也称之为分量253、通用串行总线(usb)端子也称之为usb 254、红绿蓝(rgb)端子(图中未示出)等任一个或多个。本技术不对外部装置接口的数量和类型进行限制。
133.第一控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作系统和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
134.如图5所示,第一控制器210包括只读存储器rom 213、随机存取存储器ram 214、图形处理器216、cpu处理器212、通信接口218(第一接口218-1,第二接口218-2、第n接口218-n)、以及通信总线。其中,ram 213和rom 214以及图形处理器216、cpu处理器212、通信接口218通过通信总线相连接。
135.rom 213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,cpu处理器212运行rom中系统启动指令,将存储在存储器290的操作系统拷贝至ram 214中,以开始运行启动操作系统。当操作系统启动完成后,cpu处理器212再将存储器290中各种应用程序拷贝至ram 214中,然后,开始运行启动各种应用程序。
136.图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第一显示器280上。
137.cpu处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
138.在一些示例性实施例中,cpu处理器212,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
139.通信接口218,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
140.第一控制器210可以控制显示设备200与第一显示器280相关的操作。例如:响应于接收到用于选择在第一显示器280上显示ui对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
141.第一控制器210可以控制显示设备200与第二显示器380相关的操作。例如:响应于接收到用于选择在第二显示器380上显示ui对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
142.其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择ui对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
143.存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器
290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。
144.其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制第一显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和ui界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
145.同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
146.用户输入接口260-3,用于将用户的输入信号发送给第一控制器210,或者,将从第一控制器210输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口260-3转送至第一控制器210;或者,控制装置可接收经第一控制器210处理从用户输入接口260-3输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
147.在一些实施例中,用户可在第一显示器280上显示的图形用户界面(gui)输入用户命令,则用户输入接口260-3通过图形用户界面(gui)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口260-3通过传感器识别出声音或手势,来接收用户输入命令。
148.视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在第一显示器280上显示或播放的视频信号。
149.示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等(图中未示出)。
150.其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入mpeg-2,则解复用模块进行解复用成视频信号和音频信号等。
151.视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
152.图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的gui信号,与缩放处理后视频画面进行叠加混合处理,以生成可供显示的图像信号。
153.帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24hz、25hz、30hz、60hz视频的帧率转换为60hz、120hz或240hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示设备的刷新率有关。显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示设备显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出rgb数据信号。
154.第一显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面。第一显示器280包括用于呈现画面的显示器组件以及驱动图像显示的驱动组件。显示的视频内容,可以来自调谐解调器220接收的广播信号中的视
频,也可以来自通信器或外部设备接口输入的视频内容。第一显示器280,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面ui。
155.以及,根据第一显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若第一显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
156.音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
157.音频输出接口270,用于在第一控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
158.在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
159.以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与第一控制器210一起集成在一个或多个芯片中。
160.供电模块240,用于在第一控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电模块240可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
161.与第一控制器210相类似,如图5所示,与第二控制器310连接的模块可以包括通信器330、检测器340、存储器390、第二显示器380(即图1中的第二显示器202)、视频处理器360和外部装置接口350。在某些实施例中还可以包括用户输入接口、音频处理器、音频输出接口(图中未示出)。在某些实施例中,也可以存在独立为第二控制器310供电的供电模块(图中未示出)。
162.在一些实施例中,第二控制器310可以包含上述任意一个或多个模块。
163.通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括wifi模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
164.通信器330和第一控制器210的通信器230也有相互交互。例如,第一控制器210硬件系统内的wifi模块231用于连接外部网络,与外部服务器等产生网络通信。第二控制器310硬件系统内的wifi模块331用于连接至第一控制器210的wifi模块231,而不与外界网络等产生直接连接,第二控制器310通过第一控制器210连接外部网络。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个wifi账号。
165.检测器340,是第二控制器310用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
166.外部装置接口350,提供第二控制器310与第一控制器210或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
167.视频处理器360,用于处理相关视频信号。
168.第二控制器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与第一控制器210的交互,来控制显示设备200的工作和响应用户的操作。
169.如图5所示,第二控制器310包括只读存储器rom 313、随机存取存储器ram 314、图形处理器316、cpu处理器312、通信接口318、以及通信总线。其中,rom 313和ram 314以及图形处理器316、cpu处理器312、通信接口318通过通信总线相连接。
170.rom 313,用于存储各种系统启动的指令。cpu处理器312运行rom中系统启动指令,将存储在存储器390的操作系统拷贝至ram 314中,以开始运行启动操作系统。当操作系统启动完成后,cpu处理器312再将存储器390中各种应用程序拷贝至ram 314中,然后,开始运行启动各种应用程序。
171.cpu处理器312,用于执行存储在存储器390中操作系统和应用程序指令,和与第一控制器210进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
172.通信接口318为多个,可包括第一接口318-1、第二接口318-2到第n接口318-n。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到第一控制器210的网络接口。
173.第二控制器310可以控制显示设备200与第二显示器380相关的操作。例如:响应于接收到用于选择在第二显示器380上显示ui对象的用户命令,第二控制器310便可以执行与由用户命令选择的对象有关的操作。
174.第二控制器310可以控制显示设备200与第一显示器280相关的操作。例如:响应于接收到用于选择在第一显示器280上显示ui对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
175.图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第二显示器380上。
176.第二控制器310的图形处理器316与第一控制器210的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于第二控制器310,应用2安装在第一控制器210,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由第二控制器310的图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由第一控制器210的图形处理器216产生图形对象。
177.图6示例性示出了本技术显示设备的功能配置示意图。
178.如图6所示,第二控制器310的存储器390和第一控制器210的存储器290分别用于存储操作系统、应用程序、内容和用户数据等,在第二控制器310和第一控制器210的控制下执行驱动第一显示器280和第二显示器380的系统运行以及响应用户的各种操作。存储器390和存储器290可以包括易失性和/或非易失性存储器。
179.对于存储器290,具体用于存储驱动显示设备200中第一控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与
应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作系统(os)内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
180.存储器290,具体用于存储视频处理器260-1和音频处理器260-2、第一显示器280、通信器230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
181.在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(os)的软件程序包括,例如:内核、中间件、应用编程接口(api)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、api或应用程序),以及内核可以提供接口,以允许中间件和api,或应用访问控制器,以实现控制或管理系统资源。
182.示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、第一音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块2913等等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
183.存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
184.示例的,存储器390,包括图像控制模块3904、第二音频控制模块3906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作系统3911、以及其他应用程序3912、浏览器模块3913等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
185.区别性的,第一控制器210的外部指令识别模块2907和第二控制器310的外部指令识别模块3907可识别不同的指令。
186.示例性的,在摄像头等图像接收设备与第二控制器310连接时,第二控制器310的外部指令识别模块3907可包括图形识别模块2907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与第一控制器210连接,因此,第一控制器210的外部指令识别模块2907可包括语音识别模块2907-2,语音识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与第一控制器210连接,由按键指令识别模块2907-3与控制装置100进行指令交互。
187.图7示例性示出了显示设备200中软件系统的配置框图。
188.对于第一控制器210,如图7中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
189.一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
190.其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示器、摄像头、flash、wifi和音频驱动器。
191.其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
192.通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
193.用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
194.控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
195.事件传输系统2914,可在操作系统2911内或应用程序2912中实现。一些实施例中,一方面在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
196.其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
197.事件识别模块2914-2,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
198.其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
199.界面布局管理模块2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
200.事件传输系统2914,可监听到的各预定义的事件或子事件的用户输入,将识别出事件或子事件的控制直接或间接提供给界面布局管理模块2913。
201.界面布局管理模块2913,用于用户界面状态(包括视图分区、项目、焦点或光标对象等位置和/或大小、变化过程等)的监控,以及根据该事件或子事件,可执行修改视图显示区的大小和位置、层级等布局,和/或,调整或修改视图显示区各类项目布局的大小或/和位置、数量、类型、内容等布局。一些实施例中,修改和调整布局,包括在屏幕上显示或不显示各视图分区或视图分区中项目内容。
202.用户输入接口,用于将用户的输入信号发送给控制器,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
203.由于第二控制器310的操作系统3911与第一控制器210的操作系统2911的功能比较相似,相关之处参见操作系统2911即可,在此就不再赘述。
204.如图8所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
205.第一控制器210的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。第二控制器310的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,第二控制器310和第一控制器210上分别包含什么应用程序是根据操作系统和其他设计确定的,本发明无需对第二控制器310和第一控制器210上所包含的应用程序做具体的限定和划分。
206.直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
207.视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
208.媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
209.应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
210.由于第二控制器310及第一控制器210中可能分别安装有独立的操作系统,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。例如,第二控制器310与第一控制器210均可以独立安装有安卓(android)及各类app,均可以实现一定的功能,并且使第二控制器310与第一控制器210协同实现某项功能。
211.图9示例性示出了显示设备200中用户界面的示意图。如图9所示,用户界面包括第一视图显示区2011和第二视图显示区2021。第一视图显示区2011和第二视图显示区2021的功能实现基本相同,下面仅对第一视图显示区2011进行重点说明。示例的,其中,第一视图显示区2011包括布局一个或多个不同项目。以及,用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
[0212]“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphicuserinterface,gui),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、widget等可视的界面元素。
[0213]
一些实施例中,第一视图显示区2011为可缩放视图显示。“可缩放”,可以表示第一视图显示区2011在屏幕上尺寸或占比是可缩放的,第一视图显示区2011中的项目在屏幕上
尺寸或占比是可缩放的。
[0214]“项目”在显示设备200中用户界面的视图显示区中显示以表示,诸如图标、缩略图、视频剪辑等对应内容的视觉对象。例如:项目可以表示电影、电视剧的图像内容或视频剪辑、音乐的音频内容、应用程序,或其他用户访问内容历史信息。
[0215]
此外,项目可以表示显示设备200与外接设备连接的接口或接口集合显示,或可表示连接至显示设备的外部设备名称等。如:信号源输入接口集合、或高清多媒体接口(high definition multimedia interface,hdmi)、usb接口、pc端子接口等。
[0216]
需要说明的是:视图显示区可呈现视频聊天项目内容,或者呈现应用层项目内容(如,网页视频、云点播(video on demand,vod)展示、应用程序画面等)。
[0217]“选择器”用于指示其中任意项目已被选择,如:光标或焦点对象。根据用户在显示器200中触摸的图标或菜单位置来定位选择信息输入,可使显示设备200中显示焦点对象的移动来选择控制项目,可选择或控制其中一个或多个项目。
[0218]
焦点对象指根据用户输入在项目之间移动的对象。示例的,通过项目边缘绘制粗线来实现或标识焦点对象位置。在其他实施例中,焦点形式不限于示例,可以是光标等有形或无形可被用户识别的形态,如可以项目的3d变形等形式,也可以改变聚焦的项目的文本或图像的边框线、尺寸、颜色、透明度和轮廓和/或字体等标识。
[0219]
在一些实施例中,用户可在显示器上显示的图形用户界面(gui)输入用户命令,则用户输入接口通过图形用户界面(gui)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
[0220]
参照图1-图9所示的实施例,显示设备包括第一显示器280、第一控制器210、第二显示器380和第二控制器310。如图1所示,第一显示器和第二显示器的显示尺寸不同,尺寸较大的第一显示器起主要显示作用,又称为主屏,尺寸较小的第二显示器起辅助显示作用,又称副屏。
[0221]
第一控制器210通过运行存储在存储器290上的各种软件控制程序(如操作系统和/或各种应用程序),来控制显示设备200的工作和响应与第一显示器280相关的用户操作。例如,控制在第一显示器280上呈现用户界面,用户界面上包括若干ui对象;响应于接收到的对用户界面上ui对象的用户命令,第一控制器210便可以执行与用户命令选择的对象有关的操作。
[0222]
其中,存储器290上存储的应用程序包括用于实现视频聊天的应用程序,第一控制器210通过运行视频聊天应用程序实现视频聊天功能。
[0223]
第二控制器310通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与第一控制器210的交互,来控制显示设备200的工作和响应与第二显示器380相关的用户操作。例如,控制在第二显示器380上呈现用户界面,用户界面上包括若干ui对象,响应于接收到的对用户界面上ui对象的用户命令,第二控制器310便可以执行与用户命令选择的对象有关的操作。
[0224]
其中,存储器390上存储的应用程序包括用于实现视频聊天的应用程序,第二控制器310通过运行视频聊天应用程序实现视频聊天功能。
[0225]
为了便于说明,将第一显示器280呈现的视图显示区称为第一视图显示区,在第二
显示器380呈现的视图显示区称为第二视图显示区。第一视图显示区和第二视图显示区可以显示不同的用户界面或者信息内容,例如,第一视图显示区和第二视图显示区可分别显示第一控制器和第二控制器所运行的操作系统的主页。
[0226]
图10至图16示例性示出的通过操作控制装置切换视频聊天窗口所在显示器的交互过程。
[0227]
当第一显示器显示如图10所示的用户界面时,用户可以通过操作控制装置100(如遥控器100a)进入到如图11所示的应用程序中心的界面,例如,用户可以通过控制控制装置的输入而移动选择器在第一视图显示区中的位置,当选择器选中用于进入应用程序中心的项目(如图10中的“我的应用”)并确定,进而在第一视图显示区中显示如图11所示的界面。如图11所示,在应用程序中心的界面中显示有各个应用程序对应的图标,如应用程序1、应用程序2
……
以及视频聊天应用等。
[0228]
接着,在图11所示的用户界面中,当用户操作控制装置而输入指示选择器选择视频聊天应用的用户指令时,控制器可以响应于该用户指令,启动视频聊天应用,并在第一视图显示区上呈现如图12所示的视频聊天应用的应用界面。
[0229]
在如图12所示的界面中,用户可以通过操作控制装置的输入而选择一个或者多个好友并发起视频聊天通话,控制器可以响应于该用户指令,与用户选择的好友设备建立视频聊天通信,当视频聊天通信建立成功时,即可与好友进行视频聊天。例如,选择图12中的好友3进行视频聊天。
[0230]
需要说明的是,视频聊天通信可以响应于本端用户接受对端用户发送的视频聊天请求而建立。例如,在显示设备显示如图10所示的画面时,接收到对端用户设备发送的视频聊天请求,接收用户通过操作控制装置输入的指示接受视频聊天请求的指令,与对端设备建立视频聊天通信。
[0231]
在一些实施例中,控制器响应于视频聊天通信的建立,可以将视频聊天窗口显示在预先设置的作为第一选择的显示器上,所述的第一选择也可称为用于显示视频聊天窗口的默认显示器或者默认的目标显示器,它可以是第一显示器,也可以是第二显示器。当第一显示器或者第二显示器为第一选择时,第二显示器或者第一显示器则为第二选择。以第一显示器为第一选择为例,控制器响应于视频聊天通信的建立,将视频聊天窗口显示在第一显示器上。
[0232]
图13示例性示出了当视频聊天窗口显示在第一显示器上时的用户界面,即视频聊天窗口显示在第一视图显示区时的用户界面。如图13所示,在该用户界面中显示有两个视频聊天窗口,分别为窗口131和窗口132,其中窗口131在第一视图显示区中全屏显示,用于显示对端用户(即好友)的视频画面;窗口132浮于窗口131的上层显示,用于显示本端显示设备用户的视频画面。
[0233]
图14示例性示出了当视频聊天窗口显示在第一显示器上时的另一用户界面,即视频聊天窗口显示在第一视图显示区时的另一用户界面。如图14所示,在该用户界面中显示有三个视频两天窗口,分别为窗口141、窗口142和窗口143。其中,窗口141和窗口142在显示器屏幕上平铺显示,所述平铺显示是指多个窗口平均分割屏幕、窗口之间不存在叠放,窗口141和窗口142分别用于显示两个对端用户的视频画面;窗口143浮于窗口142的上层显示,用于显示本端显示设备用户的视频画面。当然,窗口143可以在窗口141和窗口142的上层的
任意位置显示,此处不予赘述。
[0234]
需要说明的是,视频聊天窗口中的视频画面在video层显示,窗口元素在osd层显示,其中,窗口元素诸如图13和图14中示出的项目等。
[0235]
在进行视频聊天时,用户可以通过操作控制装置输入指示切换视频聊天窗口至第二选择的指令。例如,用户可以通过操作控制装置的输入而选择界面中用于切换视频聊天窗口所在显示器的项目(如图14中的项目“小窗聊天”),也可以通过操作控制装置上的菜单键而输入指示切换视频聊天窗口所在显示器的指令。
[0236]
示例的,当视频聊天窗口在第一显示器上显示时,如果控制器接收到用户输入的指示切换视频聊天窗口至第二选择的指令,控制器会响应于该指令,将第一显示器上的视频聊天窗口关闭,并在第二显示器呈现视频聊天窗口。
[0237]
需要说明的是,在第二显示器上呈现的视频聊天窗口与第一显示器上呈现的视频聊天窗口相对应。
[0238]
图15示例性示出了当视频聊天窗口显示在第二显示器上时的用户界面,即视频聊天窗口显示在第二视图显示区时的用户界面。图15所示用户界面为在显示如图13所示界面时切换显示器后进入的用户界面。如图15所示,在该用户界面中显示有两个视频聊天窗口,分别为窗口151和窗口152,其在显示器屏幕上平铺显示,其中,窗口151用于显示对端用户(即好友)的视频画面,窗口152用于显示本端显示设备用户的视频画面。
[0239]
图16示例性示出了当视频聊天窗口显示在第二显示器上时的另一用户界面,即视频聊天窗口显示在第二视图显示区时的另一用户界面。图16所示用户界面为在显示如图14所示界面时切换显示器后进入的用户界面。如图16所示,在该用户界面中显示有三个视频聊天窗口,分别为窗口161、窗口162和窗口163,其在显示器屏幕上平铺显示,其中,窗口161和窗口162分别用于显示对端用户(即好友)的视频画面,窗口163用于显示本端显示设备用户的视频画面。
[0240]
参照图15和图16,在将第一显示器上的视频聊天窗口关闭后,在第一显示器上显示视频聊天之前的界面(如图12所示)或者如图10所示的系统主页。
[0241]
并且,在进行视频聊天时,由于视频聊天窗口显示在第二显示器上,因此控制器还可以响应与第一显示器相关的用户操作,例如控制在第一显示器上浏览图片、播放视频等。
[0242]
另一示例的,当视频聊天窗口在第二显示器上显示时,如果接收到用户输入的指示切换视频聊天窗口至第一选择的指令,控制器会响应于该指令,将第二显示器上的视频聊天窗口关闭,并在第一显示器上呈现视频聊天窗口。
[0243]
例如,在显示如图15所示的界面时,如果控制器接收到用户输入的指示切换视频聊天窗口至第一选择的的指令,将显示如图13所示的界面。再如,在显示如图16所示的界面时,如果控制器接收到用户输入的指示切换视频聊天窗口至第一选择的指令,将显示如图14所示的界面。
[0244]
从上述示例可以看出,使用显示设备进行视频聊天时,用户可以根据需求将视频聊天窗口显示在第一显示器上或者切换至第二显示器上,操作步骤简单,可以提高显示设备两个显示器的利用率,给用户带来大小屏无感切换的交互体验。
[0245]
在一些实施例中,在第一显示器上显示视频聊天窗口之前,控制器将第二显示器的背光亮度调整到预设低亮度,该预设低亮度可以为用户预先设置的亮度值,其低于用户
设置的第一显示器的亮度,该预设低亮度也可以为第二显示器可被调整的最低亮度。例如图13或者14所示,当视频聊天窗口显示在第一显示器上时,通过将第二显示器的背光亮度调低,可以使得第二显示器从外观上与显示设备边框和底座融为一体,可以使用户的注意力集中在第一显示器上,且不会在用户输入与第一显示器相关的操作时打扰到用户。
[0246]
相应的,在这些实施例中,当需要将视频聊天窗口显示在第二显示器上时,在将将视频聊天窗口显示在第二显示器之前,将第二显示器的背光亮度调整到预设正常亮度,该预设可以为用户预先设置的亮度值。
[0247]
在一些实施例中,当在将视频聊天窗口显示在第二显示器时,取消第二显示器上其他信息内容的显示。例如参照图15和图16,与图15相比,图16中取消了在第二显示器上显示天气、时间等信息内容。
[0248]
以下结合如图1-9所示的包括双控制器双显示器的显示设备,对本技术技术方案的具体实现方式予以说明。
[0249]
在一些实施例中,存储器290中存储有视频聊天应用,第一控制器210通过运行存储器290中的视频聊天应用实现视频聊天功能。
[0250]
具体的,第一控制器启动视频聊天应用,与至少一个对端设备建立视频聊天通信连接;在第一选择为第一显示器的情况下,在第一显示器上绘制视频聊天窗口;在前述视频聊天通信连接成功后,第一控制器接收对端设备发送的视频数据流,通过视频处理器260-1根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在第一显示器上显示的视频信号,通过通信总线将得到的视频信号输出至第一显示器,以在第一显示器上的视频聊天窗口中显示视频聊天画面。
[0251]
接着,在视频聊天窗口显示在第一显示器上时,第一控制器接收用户输入的指示切换视频聊天窗口至第二选择的指令,响应于该指令,第一控制器在第二显示器上绘制视频聊天窗口,并通过通信总线将根据上述视频数据流得到的视频信号输出至第二显示器,以在第二显示器上的视频聊天窗口中显示视频聊天画面。
[0252]
在上述示例中,第一控制器通过控制swich开关来控制通信总线所连接的显示器,例如,当需要将视频信号输出至第一显示器时,控制swich开关将通信总线与第一显示器连接,当需要将视频信号输出至第二显示器时,控制swich开关将通信总线与第二显示器连接。
[0253]
还需说明的是,用户可以通过操作设置菜单中的项目,预先设置用于显示视频聊天窗口的默认目标显示器,并将其以一系统属性值的形式进行保存,当需要呈现视频聊天窗口时,第一控制器通过读取预先保存的系统属性值来获取用于显示视频聊天窗口的默认目标显示器。
[0254]
在另一些实施例中,存储器390中存储有视频聊天应用,由第二控制器310通过运行存储器390中的视频聊天应用实现视频聊天功能,由第一控制器210接收用户通过操作控制装置输入的指令,并通过与第二控制器的交互,执行与用户所输入指令对应的操作。
[0255]
具体的,第二控制器启动视频聊天应用,与至少一个对端设备建立视频聊天通信连接;在默认显示器为第一显示器的情况下,在第一显示器上绘制视频聊天窗口;在前述视频聊天通信连接成功后,第二控制器接收对端设备发送的视频数据流,通过视频处理器360
根据输入信号的标准编解码协议,对视频数据流进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,得到可直接在第一显示器上显示的视频信号,通过通信总线将得到的视频信号输出至第一显示器,以在第一显示器上的视频聊天窗口中显示视频聊天画面。
[0256]
其中,第二控制器通过控制swich开关来控制通信总线所连接的显示器,例如,当需要将视频信号输出至第一显示器时,控制swich开关将通信总线与第一显示器连接。
[0257]
此外,第二控制器通过建立并运行flag线程监测flag值变化,其中,该flag值用于表征用于显示视频聊天窗口的目标显示器,例如,当用户预先设置第一显示器为默认的目标显示器时,该flag值为1,当用户预先设置第二显示器为默认的目标显示器时,该flag值为0。第二控制器可以通过获取该flag值获取默认的目标显示器,通过监测该flag值的变化,监测需要切换视频聊天窗口所在显示器的时机。
[0258]
接着,在视频聊天窗口显示在第一显示器上时,第一控制器接收用户输入的指示切换视频聊天窗口至第二选择的指令,响应于该指令,第一控制器通过rpc命令修改第二控制器所保存的flag值,例如,当指令指示将视频聊天窗口由第一显示器切换到第二显示器时,将flag值由1修改为0。进而,第二控制器所运行的flag线程将会监测到flag值的变化。
[0259]
当第二控制器所运行的flag线程监测到flag值的变化时,第二控制器通过控制swich开关将通信总线与第二显示器连接,进而,可以将视频聊天窗口绘制在第二显示器上,同时,将根据视频数据流得到的视频信号输出至第二显示器,进而在第二显示器显示的视频聊天窗口中显示视频聊天画面。
[0260]
需要说明的是,在上述两种示例中,第一显示器显示的视频聊天窗口与第二显示器显示的视频聊天窗口具有不同的窗口参数,该窗口参数包括窗口尺寸、分辨率、算法级别等等,此处为现有技术,本技术中不予赘述。为了便于区分与说明,本技术将第一显示器显示的视频聊天窗口对应的窗口参数称为第一窗口参数,将第二显示器显示的视频聊天窗口对应的窗口参数称为第二窗口参数。第一控制器或者第二控制器根据第一窗口参数将视频聊天窗口绘制在第一显示器上,或者,根据第二窗口参数将视频聊天窗口绘制在第二显示器上。
[0261]
本技术实施例还提供一种视频聊天窗口的显示方法,该方法应用于显示设备,该显示设备具有第一显示器和第二显示器,但不仅限于此。图17示例性示出了该方法的流程图,如图17所示,该方法可以包括:
[0262]
步骤101、响应于视频聊天通信的建立,在第一显示器上显示视频聊天窗口,所述第一显示器为用于显示视频聊天窗口的第一选择,所述视频聊天窗口中显示有视频聊天画面。
[0263]
步骤102、在视频聊天窗口显示在所述第一显示器上时,接收用户输入的指示切换视频聊天窗口至第二选择的指令。
[0264]
步骤103、响应于所述指示切换视频聊天窗口至第二选择的指令,将所述第一显示器上的视频聊天窗口关闭,并在第二显示器呈现视频聊天窗口。
[0265]
在本技术方法实施例中,在视频聊天窗口显示在所述第二显示器上时,接收用户输入的指示切换视频聊天窗口至第一选择的指令;响应于所述指示切换视频聊天窗口至第一选择的指令,将第二显示器上的视频聊天窗口关闭,在第一显示器呈现视频聊天窗口。
[0266]
从上述示例可以看出,使用显示设备进行视频聊天时,用户可以根据需求将视频聊天窗口显示在第一显示器上或者切换至第二显示器上,操作步骤简单,可以提高显示设备两个显示器的利用率,给用户带来大小屏无感切换的交互体验。
[0267]
另外,为了进一步提高用户体验度,在一些实施例中,在第一显示器上显示视频聊天窗口之前,将第二显示器的背光亮度调整到预设低亮度,该预设低亮度可以为用户预先设置的亮度值,其低于用户设置的第一显示器的亮度,该预设低亮度也可以为第二显示器可被调整的最低亮度。当视频聊天窗口显示在第一显示器上时,通过将第二显示器的背光亮度调低,可以使得第二显示器从外观上与显示设备边框和底座融为一体,可以使用户的注意力集中在第一显示器上,且不会在用户输入与第一显示器相关的操作时打扰到用户。
[0268]
相应的,在这些实施例中,当需要将视频聊天窗口显示在第二显示器上时,在将将视频聊天窗口显示在第二显示器之前,将第二显示器的背光亮度调整到预设正常亮度,该预设可以为用户预先设置的亮度值。
[0269]
具体实现中,本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的方法的各实施例中的部分或全部步骤,当本技术提供的显示设备的控制器运行所述计算机程序指令时,所述控制器执行本技术所述的控制器被配置的步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-only memory,简称:rom)或随机存储记忆体(英文:random access memory,简称:ram)等。
[0270]
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如rom/ram、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
[0271]
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
[0272]
以上所述的本发明实施方式并不构成对本发明保护范围的限定。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1