显示装置和显示控制方法与流程

本技术涉及显示装置和显示控制方法，更具体地，涉及能够改善用户体验的显示装置和显示控制方法。

背景技术：

近年来，诸如电视接收机的显示装置随着其性能的提高可以提供各种功能(例如，参见专利文献1)。

引用列表

专利文献

专利文献1：美国专利第9198496号。

技术实现要素：

本发明要解决的问题

顺便提及，在诸如电视接收机的显示装置中，在提供各种功能时需要改善用户体验。

本技术是鉴于这样的情况而做出的，并且使得能够改善用户体验。

问题的解决方案

根据本技术的一方面的显示装置是一种显示装置，包括：当在显示单元上显示与通过捕获用户而获得的图像帧相对应的视频时，控制单元控制照明区域的亮度，以使照明区域用作向用户发光的灯的功能，照明区域包括在图像帧中包括用户的第一区域和除第一区域之外第二区域中的第二区域的至少一部分。

根据本技术的一方面的显示控制方法是一种显示控制方法，其中，当在显示单元上显示与通过捕获用户而获得的图像帧相对应的视频时，显示装置控制照明区域的亮度，以使照明区域用作向用户发出光的灯的功能，照明区域包括在图像帧中包括用户的第一区域和除第一区域之外第二区域中的第二区域的至少一部分。

利用根据本技术的一方面的显示装置和显示控制方法，当在显示单元上显示与通过捕获用户而获得的图像帧相对应的视频时，控制照明区域的亮度以使照明区域用作向用户发出光的灯的功能，照明区域包括在图像帧中包括用户的第一区域和除第一区域之外第二区域中的第二区域的至少一部分。

根据本技术的一方面的显示装置可以是独立装置，或者可以是构成单个装置的内部框。

附图说明

图1是示出应用了本技术的系统配置的示例的示图。

图2是示出应用了本技术的显示装置的配置的示例的框图。

图3是示出图2的显示单元的配置示例的框图。

图4是示出在显示装置上显示的显示画面的第一示例的示图。

图5是示出醒目照明的第一示例的示图。

图6是示出醒目照明的第二示例的示图。

图7是示出在显示装置上显示的显示画面的第二示例的示图。

图8是示出在显示装置上显示的显示画面的第二示例的示图。

图9是示出多个相机单元的安装示例的示图。

图10是示出显示屏幕的背景处理的示例的示图。

图11是示出在显示装置上显示的显示画面的第三示例的示图。

图12是示出在显示装置上显示的显示画面的第四示例的示图。

图13是示出在显示装置上显示的显示画面的第五示例的示图。

图14是示出在显示装置上显示的显示画面的第六示例的示图。

图15是示出切换定时到智能镜功能的示例的示图。

图16是说明显示装置的处理流程的流程图。

图17是说明显示装置的处理流程的流程图。

图18是说明显示装置的处理流程的流程图。

图19是说明显示装置的处理流程的流程图。

图20是说明显示装置的功能的第一示例的示图。

图21是说明显示装置的功能的第二示例的示图。

图22是示出图2的显示单元的另一配置示例的框图。

图23是示出计算机的配置示例的示图。

具体实施方式

下面将参考附图描述本技术的实施例。注意，下面的描述是按顺序给出的。

1.本技术的实施例

2.变型

3.计算机的配置

<1.本技术的实施例>

(系统的配置)

图1是示出应用了本技术的系统配置的示例的示图。

显示装置10包括例如电视接收机等。通过接收并处理广播信号，显示装置10显示广播内容的视频并输出其声音。因此，用户1可以观看和收听诸如电视节目的广播内容。

此外，显示装置10具有捕获功能，并且通过由相机单元捕获(成像)位于前方的用户1并显示其视频，显示装置10用作反射用户1的镜子的功能。而且，当用户1将显示装置10用作镜子时，显示装置10控制为液晶显示单元提供的背光，以用作化妆和醒目(eyecatching)的照明的功能。

显示装置10还具有诸如无线局域网(lan)的通信功能。例如，通过与安装在房间中的路由器20通信，显示装置10可以经由诸如互联网的网络40访问服务器30-1至30-n(n是大于或等于1的整数)。服务器30-1至30-n是提供各种服务的服务器。

例如，服务器30-1是提供诸如电子商务(ec)站点或电子购物街(网络商城)的网站的服务器，并且显示装置10可以呈现用于购买诸如化妆品的产品的信息(网页)。此外，例如，服务器30-2是提供社交网络服务(sns)的服务器。而且，例如，服务器30-3是分发诸如运动图像的通信内容的服务器，并且服务器30-4是分发可以由显示装置10执行的应用的服务器。注意，虽然没有进一步描述，但是服务器30-4至30-n也提供各种服务。

如上所述，除了用作一般电视接收机之外，显示装置10还具有用作所谓的智能镜的功能。

(显示装置的配置)

图2是示出应用了本技术的显示装置的配置的示例的框图。

在图2中，显示装置10包括控制单元100、调谐器单元101、解码器单元102、扬声器单元103、显示单元104、通信单元105、记录单元106、相机单元107、传感器单元108、麦克风单元109和电源单元110。

控制单元100包括例如中央处理单元(cpu)、微型计算机等。控制单元100控制显示装置10的每个单元的操作。

将从发送站发送并经由接收天线接收的广播信号输入到调谐器单元101。调谐器单元101根据来自控制单元100的控制对所接收的信号执行必要的处理(例如，解调处理等)，并且将所得到的流提供给解码器单元102。

视频流和声音流作为从调谐器单元101提供的流，被提供给解码器单元102。

解码器单元102根据来自控制单元100的控制对声音流进行解码，并将所得到的声音信号提供给扬声器单元103。此外，解码器单元102根据来自控制单元100的控制对视频流进行解码，并将所得到的视频信号提供给显示单元104。

扬声器单元103根据来自控制单元100的控制，对从解码器单元102提供的声音信号执行必要的处理，并输出与声音信号相对应的声音。显示单元104根据控制单元100的控制，对从解码器单元102提供的视频信号执行必要的处理，并显示与视频信号相对应的视频。注意，稍后将参考图3描述显示单元104的详细配置。

通信单元105包括支持无线通信的通信模块，诸如无线lan、蜂窝通信(例如长期演进技术高级(lte-advanced)、5g等)等。通信单元105根据来自控制单元100的控制，经由网络40与服务器30交换各种数据。

记录单元106包括用于临时存储数据的存储装置，诸如半导体存储器、硬盘驱动器(hdd)或缓冲装置。记录单元106根据来自控制单元100的控制记录各种数据。

相机单元107包括例如图像传感器，诸如互补金属氧化物半导体(cmos)图像传感器或电荷耦合装置(ccd)图像传感器，以及信号处理单元，诸如相机图像信号处理器(isp)。

相机单元107根据来自控制单元100的控制，由信号处理单元对通过图像传感器捕获对象而获得的捕获信号执行的各种信号处理。相机单元107将作为信号处理的结果而获得的图像帧的视频信号提供给控制单元100。

注意，相机单元107可以内置到显示装置10中或者经由预定接口在外部附接。此外，相机单元107的数量不限于一个，而是可以在显示装置10上的预定位置提供多个相机单元107。

传感器单元108包括各种传感器。传感器单元108根据来自控制单元100的控制，执行用于获得关于显示装置10的外围的各种信息的感测。传感器单元108根据感测结果将传感器数据提供给控制单元100。

传感器单元108可以包括各种传感器，诸如检测环境颜色温度的颜色传感器、测量到目标物体的距离的距离测量传感器、以及检测环境亮度的环境光传感器。

麦克风单元109将外部声音(语音)转换为电信号，并将所得到的声音信号提供给控制单元100。

电源单元110根据来自控制单元100的控制，将从外部电源或蓄电池获得的电源功率提供给包括控制单元100的显示装置10的每个单元。

(显示单元的配置)

图3是示出图2的显示单元104的配置示例的框图。

在图3中，显示单元104包括信号处理单元121、显示驱动单元122、液晶显示单元123、背光驱动单元124和背光125。

信号处理单元121基于输入其中的视频信号执行预定的视频信号处理。在该视频信号处理中，产生用于控制液晶显示单元123的驱动的视频信号，并将其提供给显示驱动单元122。此外，在该视频信号处理中，产生用于控制背光125的驱动的驱动控制信号(bl驱动控制信号)并将驱动控制信号提供给背光驱动单元124。

显示驱动单元122基于从信号处理单元121提供的视频信号来驱动液晶显示单元123。液晶显示单元123是显示面板，其中包括液晶元件和薄膜晶体管(tft)元件的像素以二维方式布置，并且液晶显示单元123根据来自显示驱动单元122的驱动来调制从背光125发出的光以执行显示。

液晶显示单元123包括例如封装在包括玻璃等的两个透明基板之间的液晶材料。包括例如氧化铟锡(ito)的透明电极形成在这些透明基板面向液晶材料的部分上，并与液晶材料一起构成像素。注意，在液晶显示单元123中，每个像素包括例如三个子像素：红色(r)、绿色(g)和蓝色(b)。

背光驱动单元124基于从信号处理单元121提供的驱动控制信号(bl驱动控制信号)来驱动背光125。背光125根据来自背光驱动单元124的驱动，向液晶显示单元123发出由多个发光元件发出的光。注意，作为发光元件，例如可以使用发光二极管(led)。

这里，背光125可以被分成多个部分发光区域，并且在每个部分发光区域中布置一个或多个发光元件，诸如led。此时，背光驱动单元124可以执行照明控制，所谓的部分驱动，其中对于每个部分发光区域改变bl驱动控制信号。此外，这里，可以通过利用背光125的部分驱动来改善亮度的动态范围。这种用于改善亮度的动态范围的技术也被称为“亮度增强”并且通过例如以下原理来实现。

即，在显示单元104在整个屏幕上均匀地显示100％白色视频作为视频信号的亮度级的情况下，背光125的多个部分发光区域全部开启。假定在该状态下显示单元104的输出亮度是100％，背光125的功率消耗是整个发光区域的一半200w，并且整个背光125的功率消耗是400w。此外，假设背光125作为整体具有400w的功率限制。

另一方面，假设在显示单元104中，黑色以视频信号的最小亮度级显示在屏幕的一半上，而白色以视频信号的亮度级为100％显示在屏幕的另一半上的情况。在这种情况下，黑色显示部分可以关闭背光125并将背光125的功率消耗降低到0w。另一方面，白色显示部分中的背光125可能消耗200w，但是在这种情况下，通过关闭黑色显示部分，产生200w的功率余量。然后，可以将白色显示部分中的背光125的功率增加到200w+200w＝400w。因此，与上述示例相比，可以将显示单元104中的最大输出亮度值lmax增加到200％。通过这种原理，实现了“亮度增强”。

注意，图2所示的显示装置10的配置是示例，并且可以包括其他部件。例如，在通过使用远程控制器来操作作为电视接收机的显示装置10的情况下，提供接收红外信号的光接收单元等。

此外，例如，显示装置10不仅可以再现诸如电视节目的广播内容，还可以再现诸如从服务器30-3分发的运动图像的通信内容、或经由支持诸如高清晰度多媒体接口(hdmi)(注册商标)或通用串行总线(usb)的预定方案的接口输入的记录内容的内容。而且，显示装置10可以下载并执行从服务器30-4分发的应用(例如，智能镜应用)。该应用可以是例如由控制单元100执行的本地应用，或执行浏览器并显示画面的网络应用。

(智能镜功能)

接着，将参考图4至图15描述显示装置10的智能镜功能。

(第一示例)

图4示出了在显示装置10上显示的显示画面的第一示例。

在图4中，显示装置10用相机单元107捕获位于其前方的用户1，并在显示单元104(的液晶显示单元123)上显示视频。

在该显示画面的中心区域中，显示位于其前方的用户1的视频。此外，在显示画面的左右区域(照明区域)中，在垂直方向上显示作为醒目照明的多个灯151，为四个灯151，并且在显示画面的下部区域中，显示与诸如化妆品的产品相关的产品信息161。

这里，通过在左右区域中显示多个灯151作为醒目照明，例如，在女演员化妆的化妆室中，或者在百货商店中的化妆品区，可以从各种角度均匀地照亮用户1(的脸)(以消除脸的阴影)，从而可以正确地进行化妆。当显示多个灯151时，控制单元100根据照明区域的亮度来控制显示单元104的背光125的亮度。这里，例如应用上述技术“亮度增强”来增加白色显示部分(即照明区域)中的背光125的功率，并且可以实现醒目照明。

这样，显示装置10将多个灯151显示为醒目照明，从而在用户1(图5中的a)的家里再现化妆的最佳照明。此时，显示在显示装置10上的用户1的视频处于被多个左右灯151照亮的状态。例如，左右多个灯151被反射在用户1的瞳孔中(图5中的b)。

注意，醒目照明不限于在左右区域中垂直显示的多个灯151，而是例如可以提供具有预定形状的灯。图6的a示出了圆环形灯152显示为醒目照明的情况的示例。在这种情况下，圆环形灯152在瞳孔中被反射为显示在显示装置10上的用户1的视频(图6中的b)。此外，灯的数量不限于在垂直方向上四个，而是可以显示任何数量。

此外，作为醒目照明，可以在横向方向上在上部区域和下部区域中显示多个灯。即，显示装置10可以在显示单元104上的显示画面的上、下、左和右区域中的至少一些区域中显示多个灯作为照明区域。这里，照明区域是包括在图像帧中包括用户1(的图像)的第一区域和在除了第一区域之外的第二区域(包括背景的区域)内的第二区域的至少一部分。

(第二示例)

图7是示出在显示装置10上显示的显示画面的第二示例。

在图7中，显示装置10用相机单元107捕获位于其前方的用户1，并且当在显示单元104上显示视频时，显示装置10使用增强现实(ar)技术(ar技术)以叠加方式显示现实世界(现实空间)中不存在的各种信息(虚拟信息)。注意，作为ar技术，可以使用诸如无标记类型或标记类型ar的已知技术。

这里，例如，在显示画面上的用户1的脸的视频通过ar技术来组成(图7中的a)。此外，通过ar技术的叠加显示不限于化妆，例如，服饰(衣服)和配饰可以在显示画面上的用户1的视频上叠加并显示(图7中的b)。例如，用户1可以预先登记关于他/她的衣柜(服饰)和配饰的信息，使得显示装置10可以呈现服饰和配饰的推荐组合。

注意，用户1可以通过操作显示装置10或通过激活诸如智能电话或平板终端的移动终端上的专用应用，来登记关于服饰等的信息。此外，可以由显示装置10(的控制单元100)使用预定算法来确定服饰等的推荐组合，或者可以经由网络40联系诸如使用机器学习的推荐服务器的专用服务器30。此外，用户1可以自己选择服饰和配饰的组合，而不是由诸如显示装置10等装置侧呈现推荐组合。

此后，例如，用户1可以购买由ar技术显示的化妆用化妆品并化妆，换上推荐服饰，并且佩戴配饰以检查在显示装置10上显示的视频中化妆之后的状态(图8)。注意，在图8中，显示在显示装置10上的视频是由相机单元107捕获的实际视频，而不是通过ar技术叠加并显示各种信息的视频。此外，用户1可以不拥有ar技术显示的服饰、配饰，并且可以鼓励用户1购买那些服饰、配饰。

顺便提及，在显示装置10中，虽然对用户1的背景视频进行模糊，但是通过模糊背景，例如，房间中的杂乱状态不会被识别。

这里，如图9所示，例如，在显示装置10的显示单元104(的液晶显示单元123)的框架的左侧和右侧分别附接有一个相机单元107-1和一个相机单元107-2，由两个相机单元107-1和107-2捕获用户1。这样，通过使用两个相机单元107-1和107-2同时从两个不同的方向对用户1进行捕获，可以获得关于深度的信息，并且可以近距离提取用户1的脸或身体(的每个部分)的区域。

然后，在显示装置10中，控制单元100可以模糊除了用户1的脸或身体的提取区域之外的区域(背景区域)，以模糊房间中的杂乱状态(图10中的a)。注意，用于背景视频(区域)的视频处理不限于模糊处理，而是可以应用其他处理。例如，控制单元100可以执行掩模用户1的脸或身体的提取区域的合成处理，以合成不同背景的视频(例如，聚会场所的建筑物的图像)(图10中的b)。

(第三示例)

图11是示出在显示装置10上显示的显示画面的第三示例。

在图11中，显示装置10检测具有诸如颜色传感器的传感器单元108的房间(外围)中的颜色温度，并且再现用户1的目的地(例如，夜间的聚会场所)的颜色温度，根据情况通过控制显示单元104上的(显示的多个灯151对应的照明区域)的背光125来针对检测到的颜色温度模拟环境光。通过这种环境光模拟，用户1可以检查当他/她实际外出时化妆是否好看(图11中的b)。

注意，关于用户1的目的地的信息被预先登记，但是作为该登记方法，当然，操作显示装置10，并且例如，在诸如智能电话的移动终端上激活专用应用以执行登记，或者关于目的地的信息可以与用户1使用的调度应用协作来获取。此外，代替使用诸如颜色传感器的传感器单元108，可以通过分析由相机单元107捕获的图像帧来检测安装有显示装置10的房间中的颜色温度。

(第四示例)

图12是示出在显示装置10上显示的显示画面的第四示例。

在图12中，显示装置10用相机单元107捕获位于其前方的用户1，在显示单元104上显示视频，并且在记录单元106上记录(或缓冲)视频的数据。因此，显示装置10可以将在记录单元106中记录(或缓冲)的过去的视频与实时视频一起显示。

例如，假设目前(时间t1)面朝显示装置10的显示画面侧的用户1面朝相对侧，即，之前背离显示装置10的显示画面x秒(时间t0)的情况。在这种情况下，由于在记录单元106中记录了面向后方的用户1的视频数据，所以显示装置10可以同时显示目前(时间t1)和之前的x秒(时间t0)的用户1的视频。由此，用户1不仅能够检查本人的当前正视图，还能够检查过去(例如数秒前)以时间差(时间迁移)显示的本人的后视图。

此外，在该示例中，已经描述了用户1背离显示装置10的显示画面的情况，但是用户1的取向不限于向后，而是例如当记录用户1在侧面取向上的视频数据时，用户1在检查化妆或服饰时还可以检查他/她的正视图和后视图以及他/她的外形。注意，显示在显示装置10的显示画面上的视频不仅可以被切换到镜像，而且可以被切换到正常图像。例如，通过将显示从镜像切换到正常图像，用户1可以检查他/她的如其他人所看到的视图。

(第五示例)

图13是示出在显示装置10上显示的显示画面的第五示例。

在图13中，显示装置10用相机单元107捕获位于其前方的用户1，显示视频，并且再现用于化妆的教学运动图像171(图13中的a)。因此，用户1可以在检查教学运动图像171的内容的同时进行化妆。

这里，假设这样的场景，其中在用户1想要再次看到教学运动图像171的某一场景并发出“再次播放”的话语的情况下(图13中的b)。此时，在显示装置10中，通过麦克风单元109收集用户1的话语，并且执行对声音信号的声音识别处理。在该声音识别处理中，通过适当地参考用于声音文本转换的数据库等，将声音数据转换为文本数据。

对这样获得的声音识别结果执行语义分析处理。在该语义分析处理中，例如，通过适当地参考用于理解口语的数据库，将作为自然语言的声音识别结果(文本数据)转换为机器(显示装置10)可以理解的表达。这里，例如，作为语义分析结果，获得用户1想要执行的意图(意图)和作为其参数的实体信息(实体)。

显示装置10基于语义分析结果对教学运动图像171进行倒带，从而再次再现目标场景。由于显示装置10支持这种声音操作，因此即使在化妆期间忙得不可开交时，用户1也可以通过声音来操作运动图像再现。

注意，在图13的示例中，示出了根据作为教学运动图像171的再现控制的声音操作执行倒带的情况。然而，不限于倒带，而是例如可以根据用户1的声音操作来执行诸如快进、暂停和慢再现的再现控制。此外，例如，教学运动图像171被再现为从服务器30-3分发的通信内容。而且，由显示装置10执行的诸如声音识别处理和语义分析处理的处理的一部分，可以由诸如经由网络40执行声音识别和/或语义分析的识别/分析服务器的专用服务器30来执行。

此外，在图13的示例中，已经描述了通过声音操作教学运动图像171的再现的情况，但是该声音操作的目标不限于此，并且例如，可以给出改变醒目照明的模式的指令、可以给出改变背景的指令、可以给出模拟环境光的指令，以及可以给出显示放大视频的指令。而且，当通过用户1的声音操作在显示装置10上显示视频时，可以切换镜像的显示和正常图像的显示。

(第六示例)

图14是示出在显示装置10上显示的显示画面的第六示例。

在图14中，显示装置10显示用户1的视频、用于化妆的教学运动图像171、以及以部分放大比例示出要化妆的用户1的一部分(例如，涂抹口红的嘴)的放大视频172。因此，用户1可以在检查涂抹口红的嘴等的实时显示的放大视频172的同时，通过将其与诸如如何涂抹口红的教学运动图像171进行比较来进行化妆。

(切换到智能镜功能的示例)

注意，可以通过例如用户1相对于显示装置10的位置是否在预定范围内，来触发在显示装置10中的正常电视功能和智能镜功能之间切换的定时。即，在显示装置10中，例如，通过诸如距离测量传感器的传感器单元108来检测用户1的位置(当前位置)，并且在与检测到的位置相对应的值等于或大于预定阈值的情况下，用户的位置在预定范围之外，从而执行正常的电视功能(图15中的a)。

另一方面，在显示装置10中，在与检测到的位置相对应的值小于预定阈值的情况下，用户的位置在预定范围内，从而执行智能镜功能(图15中的b)。即，在用户1化妆的情况下，假设用户1在一定程度上到达靠近显示装置10的位置，因此这里将其用作触发器。

此外，这里，可以执行诸如使用由相机单元107捕获的图像帧的人脸识别处理的处理。例如，在作为电视接收机的显示装置10中，通过预先登记使用智能镜功能的用户的人脸信息并执行人脸识别处理，例如，在假设家庭为四人的情况下，当父亲或儿子接近显示装置10时，维持正常的电视功能；当母亲或女儿接近显示装置10时，执行智能镜功能。

(处理的流程)

接着，将参考图16至图19的流程图来描述由显示装置10执行的处理的流程。

显示装置10在用户1执行了预定操作的情况下打开电源(s11)。因此，在显示装置10中，将来自电源单元110的电力提供给每个单元，并且例如在显示单元104上显示所选择的电视节目的视频。

然后，显示装置10激活智能镜应用(s12)。这里，例如，在基于来自传感器单元108的检测结果，在用户1相对于显示装置10的位置在预定范围内的情况下，控制单元100激活记录在记录单元106中的智能镜应用。

然后，在显示装置10中，当智能镜应用被激活，相机输入视频和醒目照明(s13，s14)被显示。这里，控制单元100执行控制，使得在显示单元104上显示由相机单元107捕获的图像帧的视频和作为醒目照明的多个灯151。注意，这里，如上所述，例如，通过应用技术“亮度增强”来增加白色显示部分(照明区域)中的背光125的功率，可以实现醒目照明。

因此，在显示装置10(的显示单元104)中显示例如图4所示的显示画面，并且用户可以使用智能镜功能。此后，将各种操作假定为显示装置10的操作，并且这里，作为示例，将描述图17所示的ar模式的操作和图18所示的模型模式的操作。

首先，参考图17描述显示装置10的ar模式的操作。显示装置10在用户1执行了预定操作的情况下开始ar模式的操作(s31)。

显示装置10接受用户1想要尝试的化妆品的选择(s32)。这里，例如，在显示单元104的显示画面上，从显示在下部区域中的产品信息161中选择根据用户1的预定操作的期望化妆品。

显示装置10通过ar技术显示在用户1上叠加了化妆的视频(s33)。这里，控制单元100执行控制，使得作为包括在由相机单元107捕获的图像帧中的用户1的视频，在显示单元104上显示在步骤s32的处理中根据用户1选择的化妆品进行化妆的视频。因此，显示装置10(的显示单元104)显示例如图7中的a所示的显示画面。

接着，显示装置10接受用户1对情况的选择(s34)。这里，控制单元100根据由用户1根据预定操作输入的用户1的目的地来选择情况(例如，户外、聚会等)。

显示装置10将照明改变为与情况相匹配的颜色(s35)。这里，控制单元100根据在步骤s34的处理中选择的情况(例如，户外或聚会)使照明区域中的背光125再现颜色温度，以改变显示单元104上显示的多个灯151的颜色(例如，从白色变为微红颜色)。因此，在显示装置10(的显示单元104)中，例如，显示图11中的b所示的显示画面(没有叠加服饰和配饰)，并且根据情况模拟环境光。

接着，显示装置10接受用户1想要尝试的配饰和服饰的选择(s36)。这里，例如，从预先登记的衣柜中，根据用户的预定操作来选择期望的配饰和服饰。

显示装置10通过ar技术显示配饰和服饰叠加在用户1上的视频(s37)。这里，控制单元100执行控制，使得在显示单元104上显示执行化妆以及在步骤s36的处理中选择的配饰和服饰叠加的视频，作为包括在由相机单元107捕获的图像帧中的用户1的视频。因此，显示装置10(的显示单元104)显示例如图11中的b所示的显示画面。

此后，确定用户1是否执行购买产品(所选择的化妆品)的操作(s38)。在确定用户1执行购买产品的操作的情况下(在s38中“是”)，显示装置10访问服务器30-1，服务器30-1经由网络40提供所期望的化妆品的ec站点(s39)。因此，用户1可以使用ec站点购买期望的化妆品。注意，这里，在用户1通过以叠加方式显示配饰和化妆品而喜欢那些配饰和服饰的情况下，通过使用ec站点不仅可以购买化妆品，而且可以购买用户1不具有的配饰和服饰。

这样，通过在ar模式下操作显示装置10，用户1可以尝试化妆、配饰和服饰。

接着，参考图18描述显示装置10的模型模式的操作。显示装置10在用户1执行了预定操作的情况下开始模型模式的操作(s51)。

显示装置10接受用户1对情况的选择(s52)。这里，控制单元100根据用户1的目的地选择情况(例如，户外、聚会等)。

显示装置10将照明改变为与情况相匹配的颜色(s53)。这里，控制单元100根据在步骤s52的处理中选择的情况(例如，户外或聚会)使照明区域中的背光125再现颜色温度，以改变显示单元104上显示的多个灯151的颜色。因此，显示装置10模拟与情况对应的环境光。

显示装置10接受用户1将要用于化妆的化妆品的选择(s54)。这里，例如，在显示单元104的显示画面上，根据用户1的预定操作从在预定区域中显示的化妆品中选择化妆品(用于化妆的化妆品)。

显示装置10根据由相机单元107捕获的图像帧来显示视频(化着妆的用户1的视频)，并且再现用于化妆的教学运动图像(s55，s56)。这里，通信单元105根据来自控制单元100的控制经由网络40访问服务器30-3，并且接收与在步骤s54的处理中选择的化妆品(例如，口红)相对应的教学运动图像的流数据。然后，在显示装置10中，由控制单元100激活再现播放器，并且处理流数据以再现教学运动图像。

因此，显示装置10(的显示单元104)显示例如图13中的a所示的显示画面。用户1可以在观看教学运动图像171的同时根据模型来化妆。

此后，确定是否改变教学运动图像的再现位置(s57)。在确定要改变教学运动图像的再现位置的情况下(在s57中“是”)，显示装置10根据用户1的声音操作来改变教学运动图像的再现位置(s58)。

这里，例如，在用户1发出“再次播放”的话语的情况下，声音由麦克风单元109收集。因此，控制单元100对声音信号执行诸如声音识别处理或语义分析处理的处理，以控制将由再现播放器再现的教学运动图像171的再现位置(图13中的b)。

当步骤s58的处理结束时，处理返回到步骤s56，重复步骤s56和后续步骤的处理。此外，在确定不改变教学运动图像的再现位置的情况下(在s57中“否”)，处理进行到步骤s59。在该确定处理中，确定用户1的化妆是否完成(s59)。然后，在确定用户1的化妆完成的情况下(在s59中“是”)，显示装置10结束模型模式的操作，例如执行图19所示的捕获模式的操作。

显示装置10接受用户1对背景的选择(s71)。此外，显示装置10根据用户1的声音操作接受捕获指令(s72)。

然后，在步骤s72的处理中显示装置10接受来自用户1的捕获指令的情况下，显示装置10开始捕获模式的操作(s73)。此时，显示装置10开始倒计时，直到执行了实际捕获为止，当倒计时结束(在s74中“是”)时，相机单元107捕获用户1(s75)。

然后，显示装置10合成用户1的捕获图像和选择的背景图像并显示(s76)。这里，例如，控制单元100对从在步骤s75的处理中获得的图像帧中提取的用户1的脸或身体的区域执行掩模处理，并且执行合成在步骤s71的处理中所选择的背景图像的合成处理(例如，聚会场所的建筑物的图像)，从而显示所得到的合成图像。

此时，确定用户1是否将合成图像发帖到sns(s77)。在确定向sns执行发帖的情况下(在s77中“是”)，显示装置10接受用户1对合成图像的发帖目的地的选择(s78)。这里，例如，显示用户1登记为成员的sns的列表，并且可以从该列表中选择合成图像所发帖到的sns。

然后，显示装置10将合成图像数据发送到所选择的sns的服务器30-2(s79)。这里，通过通信单元105，将在步骤s76的处理中获得的合成图像数据经由网络40发送到在步骤s78的处理中选择的sns的服务器30-2。因此，合成图像被发帖在sns上，并且合成图像可以由例如用户1的朋友或家庭成员使用移动终端等来观看。

注意，在确定不将合成图像发帖到sns的情况下(在s77中“否”)，跳过步骤s78和s79的处理，图19的处理结束。在这种情况下，例如，合成图像的数据被记录在记录单元106中。

以上已经描述了由显示装置10执行的处理的流程。例如，上述处理流程的概述可以如图20和图21所示。

即，作为电视接收机的显示装置10具有用作智能镜的功能，并且通过使用高亮度背光125作为醒目照明，用户1还可以使醒目完善(图20中的a)。此外，这里，醒目照明的设计可以从多个设计中自由选择(图20中的b)。

而且，在显示装置10中，当使用ar技术在现实空间中向用户1添加诸如化妆、服饰、配饰的信息以扩展现实世界时，对环境光进行模拟，或者对背景进行模糊，可以检查产品外观，包括该情况(图20中的c)。然后，显示装置10在实际商店呈现产品的库存和到达信息，或者访问ec站点的服务器30-1并呈现产品购买页面，使得能够提高用户1购买产品的动机。这样，作为电视接收机的显示装置10能够改善用户体验(ux)。

此外，由于作为电视接收机的显示装置10可以在用户1化妆时将教学运动图像再现为模型，因此用户1可以在观看教学运动图像时化妆(图21中的a)。此时，由于用户1可以在对教学运动图像执行操作(例如，倒带)的情况下通过声音操作给出指令，因此即使在化妆工作期间忙得不可开交时，用户1也可以执行操作(图21中的b)。

而且，在显示装置10中，在用户1捕获的图像(合成图像)经发帖到sns的情况下，例如，可以预先检查自拍(自拍照)图像(视频)(图21中的c)，或者可以预先检查合成背景的合成图像(图21中的d)。因此，用户1可以在sns上发帖看起来更好的图像。这样，作为电视接收机的显示装置10能够改善用户体验(ux)。

<2.变型>

在以上描述中，显示装置10已经被描述为电视接收机，但不限于此，而是可以是电子装置，诸如显示装置、个人计算机、平板终端、智能电话、移动电话、头戴式显示器和游戏机。

此外，在以上描述中，已经描述了显示装置10的显示单元104包括液晶显示单元123和背光125的情况，但是显示单元104的配置不限于此，并且例如，显示单元104可以包括自发光显示单元并且其亮度可以被控制。

(显示单元的另一种配置)

图22是示出图2的显示单元104的另一配置示例的框图。

在图22中，显示单元104包括信号处理单元141、显示驱动单元142和自发光显示单元143。

信号处理单元141基于输入到其的视频信号执行预定的视频信号处理。在该视频信号处理中，产生用于控制自发光显示单元143的驱动的视频信号，并将该信号提供给显示驱动单元142。

显示驱动单元142基于从信号处理单元141提供的视频信号驱动自发光显示单元143。自发光显示单元143是显示面板，其中包括自发光元件的像素以二维方式布置，并且根据来自显示驱动单元142的驱动执行显示。

这里，自发光显示单元143例如是自发光显示面板，诸如使用有机电致发光(有机el)的有机el显示单元(oled显示单元)。即，在采用有机el显示单元(oled显示单元)作为自发光显示单元143的情况下，显示装置10是有机el显示装置(oled显示装置)。

有机发光二极管(oled)是具有有机发光材料夹在阴极和阳极之间的结构的发光元件，并且构成在有机el显示单元(oled显示单元)上二维布置的像素。根据视频信号处理产生的驱动控制信号(oled驱动控制信号)驱动该像素中包括的oled。注意，在自发光显示单元143中，每个像素包括例如四个子像素，红色(r)、绿色(g)、蓝色(b)和白色(w)。

(实施例的组合)

注意，在以上描述中，示出了多个显示示例作为在显示装置10上显示的显示画面，但是每个显示画面的显示示例当然可以独立地显示，并且可以显示包括多个显示示例的组合的显示画面。此外，在以上的描述中，系统意味着多个组成元件(设备、模块(部件)等)的集群，而不管所有组成元件是否存在于同一封装中。

<3.计算机的配置>

上述一系列处理(例如，图16至图19的流程图中所示的处理)可以由硬件执行，也可以由软件执行。在由软件执行一系列处理的情况下，构成软件的程序安装在每个装置的计算机中。图23是示出由程序执行上述一系列处理的计算机的硬件的配置示例的框图。

在计算机1000中，中央处理单元(cpu)1001、只读存储器(rom)1002、随机存取存储器(ram)1003通过总线1004互连。输入/输出接口1005进一步连接到总线1004。输入单元1006、输出单元1007、记录单元1008、通信单元1009和驱动器1010连接到输入/输出接口1005。

输入单元1006包括麦克风、键盘、鼠标等。输出单元1007包括扬声器、显示器等。记录单元1008包括硬盘、非易失性存储器等。通信单元1009包括网络接口等。驱动器1010驱动诸如磁盘、光盘、磁光盘或半导体存储器的可移动记录介质1011。

在以上述方式配置的计算机1000中，执行上述一系列处理，例如，使得cpu1001经由输入/输出接口1005和总线1004将记录在rom1002或记录单元1008中的程序加载到ram1003中并执行该程序。

计算机1000(cpu1001)要执行的程序可以通过记录在可移动记录介质1011上，例如作为打包介质等来提供。此外，可以经由诸如局域网、互联网或数字卫星广播的有线或无线发送介质来提供程序。

在计算机1000中，当可移动记录介质1011安装在驱动器1010上时，可以经由输入/输出接口1005将程序安装在记录单元1008上。此外，该程序可以由通信单元1009经由有线或无线发送介质接收并安装在记录单元1008上。另外，该程序可以预先安装在rom1002或记录单元1008上。

这里，在本说明书中，由计算机根据程序执行的处理不必沿着作为流程图描述的过程按时间顺序执行。换言之，由计算机根据程序执行的处理还包括并行执行或单独执行的处理(例如，并行处理或由物体执行的处理)。此外，程序可以由单个计算机(处理器)处理，或者可以由多个计算机以分发式方式处理。

注意，本技术的实施例并不限于上述实施例，在不脱离本技术的要旨的范围内，可以进行各种变化。

例如，在图16至图19的流程图中示出的处理的每个步骤可以由单个装置执行或者由多个装置共享和执行。而且，在单个步骤包括多个处理的情况下，包括在单个步骤中的多个处理可以由单个装置执行或者可以由多个装置共享和执行。

注意，本技术可以采用下面描述的配置。

(1)

一种显示装置，包括：

当在显示单元上显示与通过捕获用户而获得的图像帧相对应的视频时，控制单元控制照明区域的亮度，以使照明区域用作向用户发出光的灯的功能，照明区域包括在图像帧中包括用户的第一区域和除第一区域之外第二区域中的第二区域的至少一部分。

(2)

根据(1)的显示装置，其中

显示单元，通过显示用户的镜像或正常图像的视频，显示单元用作反射用户的镜子的功能；

灯用作在用户化妆时使用的灯。

(3)

根据(2)的显示装置，其中

控制单元通过ar技术将各种信息叠加在第一区域中包括的用户的视频上。

(4)

根据(3)的显示装置，其中

控制单元显示对用户的脸的视频进行化妆的视频。

(5)

根据(4)的显示装置，其中

控制单元显示关于化妆品的信息，并根据用户选择的化妆品施加化妆。

(6)

根据(3)至(5)中任一项的显示装置，其中

控制单元显示将配饰和服饰中的至少一者的视频叠加在用户的视频上的视频。

(7)

根据(2)至(6)中任一项的显示装置，其中

控制单元显示对包括在第二区域中的背景视频执行预定视频处理的视频。

(8)

根据(7)的显示装置，其中

控制单元对背景视频执行模糊处理或者对用户的视频和另外背景视频进行合成处理。

(9)

根据(2)至(8)中任一项的显示装置，其中

控制单元控制照明区域的颜色温度，以模拟与情况相对应的环境光。

(10)

根据(2)至(9)中任一项的显示装置，其中

控制单元根据用户的化妆显示教学运动图像的视频。

(11)

根据(10)的显示装置，其中

控制单元根据用户的声音操作控制教学运动图像的再现。

(12)

根据(10)或(11)的显示装置，其中

控制单元以部分放大的方式显示用户的作为化妆目标的部位的视频，该视频是包括在第一区域中的用户的脸的视频的一部分。

(13)

根据(5)的显示装置，还包括：

通信单元，经由网络与服务器通信，

其中

通信单元根据用户的操作访问提供用于销售包括化妆品的产品的站点的服务器，并且交换关于产品的信息。

(14)

根据(2)至(12)中任一项的显示装置，还包括：

通信单元，经由网络与服务器通信；

其中

通信单元根据用户的操作访问提供sns的服务器，并发送用户化妆完成后的图像。

(15)

根据(2)至(12)中任一项的显示装置，还包括：

记录单元，记录包括在第一区域中的用户的视频的数据，

其中

控制单元基于记录在记录单元中的数据以时间迁移方式显示用户的视频。

(16)

根据(2)至(12)中任一项的显示装置，其中

照明区域包括包含在显示单元中的显示画面的上部、下部、左部、右部区域的至少一部分区域的区域，或者包括圆环形区域，并且

控制单元根据照明区域的明亮度控制照明区域的亮度。

(17)

根据(2)至(12)中任一项的显示装置，其中

显示单元在用户的位置位于预定范围之外的情况下显示内容的视频，并且在用户的位置位于预定范围内的情况下用作反射用户的镜子。

(18)

根据(1)至(17)中任一项的显示装置，其中

显示单元包括液晶显示单元，以及

控制单元控制相对于液晶显示单元设置的背光的亮度。

(19)

根据(1)至(18)中任一项的显示装置被配置为电视接收机。

(20)

一种显示控制方法，其中

当在显示单元上显示与通过捕获用户而获得的图像帧相对应的视频时，显示装置控制照明区域的亮度，以使照明区域用作向用户发出光的灯的功能，照明区域包括在图像帧中包括用户的第一区域和除第一区域之外第二区域中的第二区域的至少一部分。

参考符号列表

10显示装置

20路由器

30-1至30-n服务器

40网络

100控制单元

101调谐器单元

102解码器单元

103扬声器单元

104显示单元

105通信单元

106记录单元

107相机单元

108传感器单元

109麦克风单元

110电源单元

121信号处理单元

122显示驱动单元

123液晶显示单元

124背光驱动单元

125背光

141信号处理单元

142显示驱动单元

143自发光显示单元

1000计算机

1001cpu。