通信终端、图像显示系统、通信终端中的处理方法以及计算机程序的制作方法
【专利摘要】提供了一种在发送与广播的视频相关的附加信息时不需修改广播本身的通用机制。在通信网络上，该通信终端发送用户信息（Sa1）并且响应于用户信息接收附加信息（Sa2）。随后，通信终端开始接收广播（Sa3）。换言之，通信终端在通信路径而不是广播波上接收附加信息。附加信息包含了表示叠加在与广播相对应的视频（主视频）上的附加视频的数据。通信终端根据广播和附加信息在第一显示区域中显示将主视频和附加视频合成的叠加图像（Sa4），如果用户指示了第一显示区域的指定位置（Sa5：是），则作为响应于指定位置的处理，与所述位置相关的图像或视频被显示在第二显示区域中。
【专利说明】通信终端、图像显示系统、通信终端中的处理方法以及计算机程序
【技术领域】
[0001]本发明涉及向广播图像中添加信息。
【背景技术】
[0002]向广播图像中添加信息的技术是已知的。通常，这种技术广播了其中在图像上叠加了附加信息的电波。例如，专利文献Dl公开了对示出了 TV节目和数据广播的内容的电波进行广播。
[0003]现有技术
[0004]专利文献Dl JP2002_330422
【发明内容】
[0005]要解决的问题
[0006]在广播时，电波被发送至不定数目的用户。因此，如果要叠加至图像上的附加信息被包括在电波中，则用户接收到的附加信息必须对于所有用户而言是相同的。此外，如果附加信息包括在电波中，则用于接收信息的装置必须包括用于从广播图像中分离出附加信息的硬件组件。
[0007]因而，本发明使得能够以通用的方式传送附加信息而无需在电波中包括附加信
肩、O
[0008]技术方案
[0009]根据本发明的一个方面，提供了一种通信终端，其包括:接收单元，其接收承载有图像的电波；通信单元，其经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由所述接收单元接收的所述电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息，所述坐标信息对应于与所述图像有关的时间；显示单元，其在显示区域上显示由所述接收单元接收的所述电波所承载的图像；输入单元，其接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及执行单元，其响应于第一位置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被所述显示单元显示在所述显示区域中时由所述接收单元接收到的指令所指定的位置，并且所述第二位置是具有由包括在所述通信单元接收到的所述图像中的所述坐标信息所表明的坐标的位置。
[0010]所述服务器设备可以识别所述通信终端或所述通信终端的用户，并且所述通信单元可以接收内容取决于所述通信终端或所述用户的所述附加信息。
[0011]所述附加信息可以包括与由所述执行单元执行的处理相对应的处理信息，并且所述执行单元可以基于所述处理信息来执行所述处理。
[0012]所述通信终端还可以包括:叠加单元，其将与所述接收单元接收到的所述附加信息相对应的图像叠加在所述接收单元接收到的电波所承载的图像上，其中，所述显示单元可以显示所述叠加单元生成的所述组合图像。[0013]所述通信终端还可以包括:记录单元，其在所述接收单元接收到指定位置的所述指令时，记录所指定的位置和接收到所述指令的时间，其中，所述执行单元参照由所述记录单元记录的位置和时间来比较该位置和所述坐标信息表明的位置。
[0014]所述通信单元可以发送与由所述接收单元所接收的所述指令指定的所述位置相对应的反馈信息，并且接收反映了由包括所述通信终端的多个通信终端所传送的所述反馈信息的所述附加信息。
[0015]根据本发明的另一方面，提供了一种图像显示系统，所述图像显示系统包括:上述的通信终端；以及服务器设备，所述服务器设备发送至少所述附加信息。
[0016]根据本发明的另一方面，提供了一种处理方法，所述处理方法包括:接收承载有图像的电波；
[0017]经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由接收到的电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息，所述坐标信息对应于与所述图像有关的时间；在显示区域上显示由接收到的电波所承载的图像；接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及响应于第一位置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被显示在所述显示区域中时由接收到的指令所指定的位置，并且所述第二位置是具有由接收到的坐标信息所表明的坐标的位置。
[0018]根据本发明的另一方面，提供了一种使计算机执行处理的程序，所述处理包括以下步骤:接收承载有图像的电波；经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由接收到的电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息，所述坐标信息对应于与所述图像有关的时间；在显示区域上显示由接收到的电波所承载的图像；接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及响应于第一位置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被显示在所述显示区域中时由接收到的指令所指定的位置，并且所述第二位置是具有由接收到的坐标信息所表明的坐标的位置。
[0019]发明效果
[0020]根据本发明，可以实现以通用的方式传送附加信息而无需在电波中叠加附加信
肩、O
【专利附图】
【附图说明】
[0021]下面将参照附图描述实施方式，其中:
[0022]图1示出了图像显示系统的一般的构造；
[0023]图2示出了通信终端的硬件构造；
[0024]图3示出了服务器设备的硬件构造；
[0025]图4示出了通信终端的功能构造；
[0026]图5示出了用于在通信终端显示图像的处理的流程图；
[0027]图6示出了显示在触摸屏上的图像的示例；
[0028]图7示出了显示在触摸屏上的图像的示例；
[0029]图8示出了显示在触摸屏上的图像的示例；[0030]图9示出了对由通信终端执行的处理进行例示的流程图；
[0031]图10示出了通信终端的功能结构；
[0032]图11示出了显示在触摸屏上的图像的示例；
[0033]图12示出了对当显示图像时由通信终端执行的处理进行了例示的流程图；
[0034]图13示出了显示在触摸屏上的图像的示例。
[0035]标号的简要说明
[0036]10...图像显示系统、100...广播站、200...通信终端、210...接收单元、
220...通信单元、230...触摸屏、231...显示单元、232...输入单元、240...声音单元、
250...存储单元、260...控制单元、261...数据获取单元、262...叠加单元、263...执行单元、264...记录单元、300...服务器设备、310...通信单元、320...存储单元、330...控制单元、400...网络
【具体实施方式】
[0037]第一实施方式
[0038]图1示出了根据本发明的一种实施方式的图像显示系统10的总体构造。图像显示系统10是用于利用电波和通信网络的组合来显示图像的系统。图像显示系统10包括广播站100、通信终端200、服务器设备300和网络400。
[0039]广播站100是用于发射电波的无线通信设备。这里，“电波”是指用于公共传输的无线电波。换言之，电波不被发送至特定用户而是发送至一般的公共用户。用于发送电波的频率和技术不限于特定的频率和技术，只要通信终端200可以接收电波就可以。例如，电波可以由人造卫星来发射。根据本实施方式，由数字地面广播来发射电波。电波可以是所谓的One-Seg (接收针对移动电话或移动装置的服务的一段部分)电波。电波除了图像以外还可以承载声音。
[0040]通信终端200是用于查看包括在电波中的广播信息的电子装置。除了接收电波的功能以外，通信终端200还包括从服务器设备300接收数据的功能。换言之，通信终端200可以通过多个不同的路径来接收信息。通信终端200是例如移动电话(包括智能电话)、平板装置或PDA (个人数字助理)这样的无线通信终端。通信终端200通过网络400进行无线通信。
[0041]网络400是包括至少一种无线通信的网络。这里，无线通信网络是符合例如IMT(国际移动通信)-2000或LTE (长期演进)这样的技术标准的移动通信网络。另选地，无线通信网络可以是无线LAN (局域网)。此外，网络400可以是移动通信网络和因特网的组合网络。
[0042]图2示出了通信终端200的硬件构造。通信终端200包括接收单元210、通信单元220、触摸屏230、声音单元240、存储单元250和控制单元260。通信终端200可以包括除了图2所示的单元以外的其他单元；例如，用于向用户通知信息的单元，例如，发光二极管或振动器。
[0043]接收单元210接收电波。通信单元220通过网络400发送并接收数据。接收单元210和通信单元220分别包括用于接收无线电波的天线以及用于对接收到的电波进行解码的解码器。接收单元210向控制单元260提供图像数据，该图像数据示出了由接收到的电波所承载的图像。
[0044]触摸屏230显示图像(包括运动图片)并且接收来自用户的指令。通过对触摸屏进行触摸以确定在触摸屏230上的位置来输入指令。更具体地，触摸屏230包括显示单元231和输入单元232。
[0045]显示单元231显示图像。显示单元231包括:显示板,包括液晶装置或有机EL(电致发光)装置；以及驱动电路，用以驱动显示板。输入单元232通过在触摸屏上感测用户的触摸来接收由用户执行的输入操作。输入单元232包括例如覆盖在屏幕上的平面传感器。通过感测压力或电容以检测用户的手指在屏幕上的触摸，输入单元232可以检测用户的手指在屏幕上的触摸或者特定的装置(例如，触笔)的触摸。输入单元232可以感测从屏幕到手指或者特定的装置的距离，而不是感测触摸。输入单元232向控制单元260提供示出了所确定的用户的输入的位置的坐标信息。坐标信息包括在笛卡尔坐标中的X轴和y轴。在笛卡尔坐标中，X轴被定义为屏幕的水平方向，y轴被定义为屏幕的垂直方向。
[0046]声音单兀240输出声音。声音单兀240可以包括扬声器或者耳机或扬声器所连接的耳机塞孔。
[0047]存储单元250存储在控制单元260中所使用的数据。存储单元250包括例如硬盘驱动器或闪存存储器。存储单元250可以存储由控制单元260执行的程序，以及例如附加信息或用户信息这样的信息，这将在稍后进行说明。存储单元250饿可以包括例如存储卡这样的可以拆卸存储介质。存储介质可以是用于确定用户(换言之，使用通信终端200的订户)的ΠΜ (用户确定模块)。
[0048]用户信息是由于确定通信终端200或通信终端200的用户的信息。用户信息包括例如ID。用户信息可以包括用户的属性(例如，年龄、性别、住所、职业、兴趣、爱好或预定的特定服务)。换言之，针对各通信终端200或针对各个用户，用户信息可以是唯一的。
[0049]控制单元260控制通信终端200的操作。控制单元260包括例如CPU (中央处理单元)或者GPU (图像处理单元)这样的处理器以及存储器。控制单元260根据程序的执行接收数据或显示图像。
[0050]服务器设备300是用于向通信终端200提供附加信息的服务器设备。这里，附加信息是指与由电波承载的图像相关的信息。附加信息包括示出了图像的位置的坐标信息。坐标信息包括与输入单元232提供的坐标信息相似的笛卡尔坐标下的X轴和I轴。此外，坐标信息对应于时间顺序的图像，使得可以确定在给定时间点处的坐标和图像之间的对应。更具体地，坐标信息的各个条目包括时间信息。时间信息包括协调的信息所对应于的日期和时间。时间信息可以被描述为标准时间(例如，日本标准时间)或描述为相对于TV节目的起始时间的时间。换言之，只要可以确定图像和坐标信息之间的对应，时间的格式是不受限的。
[0051]图3示出了服务器设备300的硬件构造。服务器设备300包括通信单元310、存储单元320以及控制单元330。通信单元310传送数据。通信单元310通过网络400向通信终端200发送例如附加信息。存储单元320存储数据。在本实施方式中，存储单元320在操作之前存储附加信息。控制单元330控制服务器设备300的操作。控制单元330控制附加信息的存储或传送。
[0052]应注意，可以响应于用户的属性针对多个用户准备针对单个TV节目或商业广告的多条附加信息。例如，服务器设备300可以存储针对男人的附加信息和针对女人的附加信息。此外，服务器设备300可以存储针对用户的兴趣或爱好的唯一的附加信息。
[0053]上面描述了图像显示系统10的构造。广播站100根据预定的时间表发送电波。由电波承载的图像示出了例如新闻、戏剧或动画这样的各种类型的TV节目。此外，由电波承载的图像可以包括TV节目以外的商业广告。
[0054]使用服务器设备300的服务提供商可以获得与TV节目相对应的附加信息或商业广告。服务器设备300将所获得的与TV节目或商业广告相对应的附加信息存储在存储单元320中。服务器设备300将附加信息发送至通信终端200。
[0055]通信终端200根据用户的指令接收电波，并且显示图像。用户选择要观看的频道(如果有多个频道)。通信终端200接收与由电波承载的TV节目和商业广告相对应的附加信息。在本实施方式中，通信终端200在TV节目或商业广告开始之前或者与TV节目或商业广告同时地接收附加信息。这里，在广播之前记录TV节目。在任何时间点要显示的图像都是已知的。换言之，TV节目排除了例如体育赛事这样的实况转播节目，其中，无法预测在赛事中将要发生什么(换言之，将要显示什么)。
[0056]在本实施方式中，通信终端200显示一图像，该图像示出了在由电波所承载的图像上，由包括在附加信息中的坐标信息所标识的位置。随后，由电波承载的图像被称为“主图像”。此外，基于附加信息所添加的图像被称为“附加图像”。应注意，附加图像不必限于运动影像，也可以是静止图像。
[0057]图4示出了通信终端200的功能性结构。作为控制单元260执行程序的结果，通信终端200包括数据获取单元261、叠加单元262以及执行单元263。数据获取单元261获取来自接收单元210的图像数据，获取来自通信单元220或存储单元250的附加信息，并且获取来自输入单元232的坐标信息。
[0058]叠加单元262在主图像上叠加(覆盖)附加图像。叠加单元262基于图像数据和附加信息来组合主图像和附加图像，使得附加图像覆盖在主图像上。叠加单元262在显示单元231上显示组合图像。以下，由叠加单元231通过组合主图像和附加图像素而生成的图像被称为“组合图像”。示出了附加图像的数据被包括在附加信息中。基于图像数据来显示附加图像。另选地，附加图像可以仅仅是指示了由坐标信息示出的位置的线或点。在这种情况下，附加信息可以不包括图像数据。
[0059]执行单元263响应于当显示由电波承载的图像时的用户输入来执行处理。更具体地，执行单元263将由输入单元232提供的坐标信息所示出的位置(换言之，由用户指示的位置)与由包括在附加信息中的坐标信息所示出的位置进行比较。执行单元263执行根据比较的结果而选择的多个处理中的一种处理。
[0060]应注意的是，附加信息可以包括与要由执行单元263执行的处理相对应的处理信息。在这种情况下，执行单元263基于处理信息来执行处理。此外，如果包括在附加信息中的坐标信息示出了多个位置，则执行单元263可以执行根据从多个位置中选择的位置而选择的多个处理中的一个处理。
[0061]图5示出了例示了用于由通信终端200显示图像的处理的流程图。在该处理中，通信终端200从存储单元250读取用户信息，并且将用户信息传送(在步骤Sal)至服务器设备300。可以与显示图像独立地传送用户信息。例如，当开启了通信终端200的电源时，可以传送用户信息。换言之，通信终端200可以在用户观看图像之前的日期传送用户信息。
[0062]接着，通信终端200开始接收附加信息(在步骤Sa2)以及电波(在步骤Sa3)。优选的是，通信终端200先于电波来接收附加信息。然而，通信终端200可以大约同时接收附加信息和电波。这里，服务器设备300可以基于通信终端200的用户信息来发送与通信终端200或用户相对应的附加信息。当接收到附加信息和电波时，通信终端200将由电波承载的主图像与对应于附加信息的附加图像进行组合，以生成组合图像。通信终端200在触摸屏230上显示(在步骤Sa4)组合图像。
[0063]图6示出了在触摸屏230上显示的图像的示例。在该示例中，显示单元231包括第一显示区域Al和第二显示区域A2。第一显示区域Al是用于显示组合图像的区域，第二显示区域A2是用于显示与组合图像相关的图像的区域。在该示例中，在第一显示区域Al中显示了女演员握持新的移动电话产品并且站在电视机前面。
[0064]图6(a)示出了用户是女性时所显示的图像的示例。在该示例中，通信终端200显示了附加图像Il和12。附加图像Il包括围绕女演员的面部的线(框)。附加图像12包括围绕女演员的衣服的线(框)。应注意的是，附加图像12可以被再分为多个附加图像，例如，针对衣服的附加图像，以及针对珠宝(例如，项链或戒指)的附加图像。附加图像Il和12可以具有使得用户可以容易地认出它们是附加图像的外观，例如，可以闪烁地显示这些线。
[0065]图6 (b)示出了用户是男性的情况下所显示的图像的示例。在该示例中，通信终端200显示除附加图像Il以外的附加图像13和14。附加图像Il与在图6 (a)中示出的情况相似。在用户是女性的情况下不显示附加图像13和14。附加图像13包括围绕女演员所握持的移动电话的线(框)。附加图像14包括围绕电视机的线(框)。
[0066]如上所述，根据与通信终端200或用户相关的信息，通信终端200可以显示不同的附加图像。尽管显示了不同的附加图像，但是例如附加图像Ii这样的一般的附加图像可以包括在图像中。
[0067]通信终端200在显示组合图像时等待用户的输入操作。更具体地，通过是否由触摸屏230提供了坐标信息，通信终端200 (在步骤Sa5)确定用户是否输入了确定位置的指令。此时，通信终端200还确定是否在由用户确定的位置上显示了附加图像。例如，在图6中，通信终端200确定用户是否在附加图像的边框内指定了某个位置。
[0068]如果在由用户指定的位置上显示了附加图像，换言之，如果由触摸屏230所提供的坐标信息所示出的位置与被包括在附加信息中的坐标信息所示出的位置(或区域)相同或者包括在后者中，则通信终端200 (在步骤Sa6)执行根据在由用户所确定的位置处的附加图像所确定的处理。在本实施方式中，通信终端200在第二显示区域A2中显示与所确定(或选择)的附加图像相关的图像。此刻，通信终端200可以通过使振动器振动或通过闪光来通知用户在步骤Sa6中的处理的执行。在这种情况下，通信终端200可以等待用户的输入操作。如果用户输入了开始处理的指令，则通信终端200可以开始步骤Sa6中的处理。
[0069]图7示出了在第二显示区域A2中所显示的图像的示例。图7 (a)是在用户选择了在图6 (b)中示出的附加图像13的图像的情况下的示例。在该示例中，通信终端200显示与移动电话产品相关的产品信息。这里，产品信息可以包括描述该产品的网页。由通信单元220接收示出了这种网页的数据。在这种情况下，附加信息包括示出了描述该产品的网页的URL (统一资源定位符)的信息作为处理信息。另选地，附加信息可以包括示出了该产品的说明书的数据作为处理信息。可以由提供商以外的该产品的提供商或第三方来提供产品信息。例如，产品信息可以是购买该产品的网站的或者描述该产品的评论的网站。应注意，所选择的附加信息不必一定与产品相关(例如，可以与人或自然环境相关)，并且与人或自然环境相关的信息可以显示在第二显示区域A2中。
[0070]用户在观看图像时可以多次指定位置。在这种情况下，如果用户指定了新的位置，则通信终端200可以响应于所指定的位置而更新在第二显示区域A2中所示出的图像。通信终端200可以存储示出了在第二显示区域A2中所显示的图像的数据，使得用户可以在响应于用户观看图像之后执行的输入操作来浏览信息。在用户完成了观看TV节目或商业广告之后，用户可以浏览第二显示区域A2中的信息。
[0071]图7 (b)示出了显示在第二显示区域A2中的图像的另一示例。在该示例中，通信终端200显示了与用户指定的位置相关的信息(图像)连同示出了指向该信息的链接的图像Ia、Ib、Ic和Id。图7 (b)示出了用户四次指定位置的示例。链接Ia对应于第一次指定，链接Ib对应于第二次指定，链接Ic对应于第三次指定，链接Id对应于第四次指定。如果用户确定了与链接Ia至Id中的一个相关的位置，则通信终端200在第二区域A2中显示与所确定出的链接相关的信息。如果用户指定了新的位置，则通信终端200更新显示在第二显示区域A2上的信息。换言之，链接Ia、Ib、Ic和Id以类似于网络浏览器中的书签的方式起作用。
[0072]应注意的是，当用户确定附加图像时，通信终端200可以在第二显示区域A2中显示组合图像的采集图像(或截屏)。在这种情况下，通信终端200可以显示主图像的采集图像(或截屏)而不是组合图像。此外，通信终端200可以在第二显示区域A2中显示多个缩略图，各自示出采集图像的缩略图。
[0073]此外，当显示采集图像时，通信终端200可以在生成采集图像之前和之后的预定时间记录主图像。在这种情况下，如果用户确定了某一缩略图，则通信终端200播放与所指定的缩略图相对应的图像(记录的图像)。在该示例中，在观看图像之后，用户能够观看用户希望再次观看的部分图像。这些处理中的每一个(显示缩略图和记录图像)是由执行能够单元263所执行的处理的另一示例。
[0074]如上所述，通信终端200可以通过电波以外的通信路径获得附加信息。因此，通信终端200可以先于接收电波而获得附加信息，或者取决于通信终端200的用户或通信终端来获得附加信息。此外，通过在附加信息中包括坐标信息以外的信息(例如，产品信息)，通信终端200可以提供比在主图像中示出的信息更加具体的信息。此外，通过提供示出了坐标信息的附加图像，可以响应于用户或装置的属性来改变该信息，由此用户可以容易地知道从哪里获得关于图像的更多信息。
[0075]应注意的是，可以不使用用户信息。如果当用户指定某一位置时不需改变附加图像或处理，则通信终端200可以不发送用户信息。在这种情况下，服务器设备300可以不存储与用户的属性相对应的多条附加信息。
[0076]此外，可以不显示附加图像。如果在一个画面上显示多个附加图像，则由于所显示的图像的复杂的性质而中断了主图像的观看。在不显示附加图像的情况下，用户无法容易地理解要确定从而显示产品信息的位置。因而，通信终端200能够向用户提供娱乐。
[0077]第二实施方式[0078]根据第二实施方式，图像显示系统10提供与关于第一实施方式所描述的服务不同的服务。本实施方式提供这样的服务，即，电波承载了视频游戏的图像；例如，提示用户玩视频游戏。
[0079]根据本实施方式的系统的构造与第一实施方式的系统的构造相同。因此，省略该构造的描述。将通过利用与用于描述第一实施方式的元素相同的标号来表示与第一实施方式相同的元素。
[0080]在本实施方式中，与第一实施方式的操作不同之处在于在用户确定某一位置之前一直不叠加附加图像。换言之，在本实施方式中，由坐标信息示出的位置在主图像上是不可见的。在本实施方式中，叠加单元262在与第一实施方式不同的时间将附加图像叠加在主图像上。更具体地，在本实施方式中，显示单元231在图像上输入指令以确定某一点之前不显示组合图像，而是在图像上输入指令以确定某一点之后显示组合图像。换言之，用于显示组合图像的处理是由执行单元263执行的处理的一个示例。
[0081]此外，本实施方式中的操作与第一实施方式中的操作的不同之处在于没有使用用
户信息。
[0082]图8示出了根据第二实施方式在触摸屏230中所显示的图像的一个示例。在该示例中，在显示区域上显示了地图，并且用户在玩一种属于寻宝类游戏的视频游戏，要在地图上的某一位置找到隐藏的道具。在显示单元231的显示区域上，在开始视频游戏之前定义了隐藏了道具的位置以及没有隐藏道具的位置。通信终端200根据包括在附加信息中的坐标信息来区分这些位置。换言之，附加信息包括在图像上示出了隐藏有(或没有隐藏)道具的位置的坐标信息。
[0083]在该示例中，在显示单元上示出的图像是静止图像。然而，在显示单元上示出的图像也可以是运动影像。此外，隐藏有道具的位置可以响应于经过的时段而改变。此外，隐藏有道具的位置可以在预定的时间消失(无法找到道具)，并且道具被隐藏的位置会在其他时间出现。
[0084]图9示出了由通信终端200执行的处理的流程图。在该处理中，通信终端200接收附加信息(在步骤Sbl)和电波(在步骤Sb2)。这些处理与第一实施方式中的步骤Sa2和Sa3中的处理相似。接着，通信终端200在触摸屏230上显示(在步骤Sb3)由电波承载的主图像。
[0085]通信终端200在显示主图像时等待用户的输入操作。更具体地，通过确定触摸屏230是否提供了坐标信息，通信终端200确定(在步骤Sb4)用户是否输入了指定位置的指令。如果确定用户输入了指定位置的指令，则通信终端200参考包括在附加信息中的坐标信息。通过比较包括在附加信息中的坐标信息与由触摸屏230提供的坐标信息，通信终端200 (在步骤Sb5中)确定所指定的位置是否是隐藏了道具的位置。
[0086]如果由用户指定的位置是隐藏道具的位置，则通信终端200在显示区域中的预定区域显示(在步骤Sb6)示出了道具隐藏在所指定的位置处所的信息。如果由用户指定的位置是没有隐藏道具的位置，则通信终端200显示(在步骤Sb7)示出了在指定的位置没有隐藏道具的信息。换言之，在步骤Sb6和Sb7，通信终端200将显示的图像从主图像切换至组合图像。
[0087]在步骤Sb6和Sb7，可以在与用户所指定的位置无关的位置(例如，显示区域的中心)显示信息，或者可以在靠近用户所指定的位置的位置处显示信息。这里，显示为附加图像的字符和图像是处理信息的示例。处理信息包括在连同示出了与坐标信息的关系的信息的附加信息中。应注意,通信终端200可以从画面中删除附加图像，并显示主图像。
[0088]根据以上实施方式，用户可以查明所指定的位置是否是正确的，而无需等待主图像的更新。此外，在用户不希望知道结果的情况下，用户可以选择不触摸触摸屏230。因此，用户可以响应于用户当时的偏好来选择查看图像的方式。
[0089]应注意的是，由本实施方式提供的服务可以不与视频游戏相关，只要这种服务与对用户无法看见坐标信息时所指定的位置做出响应的处理相关即可。此外，在本实施方式中，附加图像可以不叠加在主图像上。例如，和第一实施方式一样，触摸屏上的显示区域可以被划分为第一显示区域和第二显示区域。主图像可以显示在第一显示区域上，附加图像可以显示在第二显示区域上。在这种情况下，不执行通过叠加单元262所执行的叠加。
[0090]第三实施方式
[0091]在本实施方式中，图像显示系统10具有与第一实施方式中一样的构造，但提供与第一实施方式和第二实施方式中不同的服务。在本实施方式中所提供的服务与问卷的统计结果相关，其中，例如，多个用户回答了问题并且向各个用户通知问卷的结果。因此，本实施方式可以应用于无法预测将发生什么的实况转播节目的示例。
[0092]在以下情况中，与第一实施方式相同的兀件的描述将被省略。通过使用与用于描述第一实施方式的标号相同的标号来表不与第一实施方式相同的兀件。
[0093]图10示出了通信终端200中的控制单元260的功能性构造。控制单元260具有与第一实施方式相同的硬件构造，尽管由程序实现的功能与在第一实施方式和第二实施方式中的功能不同。除了数据获取单元261、叠加单元262和执行单元263以外，控制单元260还包括记录单元264。
[0094]当用户输入了指定位置的指令时，换言之，当输入单元232提供了坐标信息时，记录单元264记录由坐标信息示出的位置和时间。换言之,记录单元264记录由用户确定的时间和位置。记录单元264可以将数据记录在控制单元260的存储器中或存储单元250中。
[0095]图11示出了显示在触摸屏230上的图像的示例。在该示例中，在显示单元231的显示区域中显示了问题和应答选项I至3。如果用户希望选择选项1，则用户指定示出选项I的图像。
[0096]图12示出了在本实施方式中例示了由通信终端200执行的处理的流程图。在该处理中，通信终端200开始(在步骤Scl)接收电波。通信终端200显示(在步骤Sc2中)由电波承载的图像(换言之，主图像)。在该情况下，通信终端200等待由用户输入的指令操作，并且确定(在步骤Sc3中)用户是否输入了指定位置的指令。步骤Sc3中的处理与第二实施方式中的步骤Sb4的处理相似。通信终端200重复进行确定，直至由用户输入了指令为止。
[0097]如果用户输入了指定位置的指令，则通信终端200存储(在步骤Sc4)位置和接收到指令的时间。接着，通信终端200确定(在步骤Sc5)是否接收到包括坐标信息和时间信息的附加信息(在下文中，这种附加信息被称为“第一附加信息”)，直至通信终端200接收到第一附加信息为止。
[0098]在本实施方式中，第一附加信息包括根据由坐标信息示出的位置选择了哪一选项。在图11所示的示例中，第一附加信息包括示出了选项1、选项2或选项3的位置的信息。此外，如果存在多个问题，则第一附加信息可以包括示出了对应问题的数目的信息。
[0099]当接收到第一附加信息时，通信终端200可以通过将第一附加信息与在步骤Sc4中记录的信息进行比较来确定用户选择了哪一选项。通信终端200参考在步骤Sc4中所记录的信息，并且(在步骤Sc6中)向服务器设备300发送示出了用户的答案的信息。下面，在步骤Sc6中发送的信息被称为“反馈信息”。
[0100]如果存在多个问题，则反馈信息可以包括示出了当用户指定位置时的时间的信息，而不是示出了对应问题的数目的信息。即使存在多个问题，服务器设备300也可以确定答案对应于哪一问题。如果仅存在一个问题，则服务器设备300可以仅根据用户所指定的位置来识别用户选择的选项。
[0101]服务器设备300从多个通信终端200接收多项反馈信息。如果服务器设备300接收到数目大于预定数目的答案，或者用于回答问卷的预定时段，则服务器设备300基于反馈信息来整理(tally)答案。接着，服务器设备300发送示出了整理结果的信息作为第二附加信息。因而，各个通信终端200可以接收(在步骤Sc7)第二附加信息。当接收到第二附加信息时，通信终端200基于接收到的第二附加信息来显示(在步骤Sc8)附加图像。
[0102]第二附加信息是反映了来自多个通信终端200的多项附加信息的附加信息。除示出了要显示附加图像的位置和时间的坐标信息和时间信息以外，第二附加信息包括示出了示出为附加图像的字符和图像的数据。应注意的是，如果仅存在一个问题，则第二附加信息可以不包括时间信息。
[0103]图13示出了在本实施方式中显示在触摸屏230上的附加图像的示例。图13 (a)示出了在第一显示区域Al中显示为组合图像的附加图像。图13 (b)示出了在第二显示区域A2中没有显示为组合图像的附加图像的示例。在该示例中，第二附加信息可以不包括坐标信息。应注意，附加图像不限于该示例，并且可以许多用户来选择这些选项。
[0104]如上所述，根据本实施方式的通信终端200通过记录用户输入的记录单元264，即使在输入之前没有接收到附加信息(更具体地，第一附加信息)，也可以比较输入和附加信息。换言之，根据本实施方式的通信终端200，即使在查看图像时没有接收到附加信息，也可以执行比较。
[0105]此外，通过发送反馈信息并接收反映了所发送的反馈信息的附加信息(更具体地，第二附加信息)，通信终端200提供了对图像的更加交互的观看。应注意，服务器设备300可以根据用户的属性来整理答案。在这种情况下，第二附加信息根据用户的属性可以是不同的。根据该示例，用户可以根据例如性别或年龄等查明结果。
[0106]应注意，可以在用户的输入操作(换言之，步骤Sc3)之前接收第一附加信息。在这种情况下，通信终端200可以基于第一附加图像而不是主图像来显示组合图像。组合图像可以包括问题或者对问题的可选择应答(例如，图11中的选项I至3)。
[0107]变型例
[0108]本发明不限于上述实施方式，并且可以实现为其它实施方式。例如，可以根据以下变型例实现本发明。可以组合多个变型例。
[0109](I)触摸屏230是接收单元的示例。然而，接收单元不限于触摸屏230。接收单元可以是独立于显示单元的按钮(所谓的硬键)或者例如鼠标这样的定点装置。通常，接收单元可以不与显示单元分离，只要接收单元可以接收由用户输入的指令(由用户指定)。[0110](2)服务器设备300可以接收来自例如数据库而不是通信终端200这样的外部装置的用户信息。例如，如果用户的ID和用户的属性被包括在用户信息中，则通信终端200可以仅存储ID，并且数据库可以存储一组ID和属性。在这种情况下，通信终端200可以向服务器设备300仅发送ID，并且服务器设备300可以向数据库发送与对应于ID的属性相关的查询。
[0111](3)本发明不限于用户利用在电波中传送的图像来参加实时活动的实施方式。图像可以被记录并播放。在这种情况下，通信终端200可以存储示出了具有附加数据的图像的数据连同它们的关系。
[0112](4)本发明允许在电波中包括附加信息。换言之，本发明可以使用包括在电波中的附加信息以及经由网络一起提供的附加信息。如果附加信息包括共同地提供给所有用户的图像以及唯一地提供给某个用户的图像，则前者作为包括在电波中的附加信息被传送，后者作为经由网络提供的附加信息被传送。
[0113](5)本发明可以包括显示附加图像的实施方式以及不显示附加图像的实施方式。通信终端200可以执行仅与一种实施方式相关的处理，或者可以从与多个实施方式相关的处理中选择要执行的一个处理。在通信终端200可以执行与多个实施方式相关的处理的情况下，附加信息可以包括示出了要执行哪个处理的数据。数据示出了例如附加信息是否显示在第一实施方式中或者附加信息显示在第一显示区域Al和第二显示区域A2的哪个区域上。
[0114](6)本发明不仅可以实现为通信终端200或图像显示系统10，还可以实现为由通信终端200执行的程序或信息处理方法。通过经由例如因特网这样的网络进行下载或者通过例如光盘这样的记录媒介可以提供程序，以将程序安装在计算机上。此外，系统的构造不限于在图1中示出的示例，并且通信终端200和服务器设备300可以通过线缆连接。
【权利要求】
1.一种通信终端，该通信终端包括: 接收单元，其接收承载有图像的电波； 通信单元，其经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由所述接收单元接收的所述电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息，所述坐标信息对应于与所述图像有关的时间； 显示单元，其在显示区域上显示由所述接收单元接收的所述电波所承载的图像；输入单元，其接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及执行单元，其响应于第一位置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被所述显示单元显示在所述显示区域中时由所述接收单元接收到的指令所指定的位置，并且所述第二位置是具有由包括在所述通信单元接收到的所述图像中的所述坐标信息所表明的坐标的位置。
2.根据权利要求1所述的通信终端,其中， 所述服务器设备识别所述通信终端或所述通信终端的用户，并且 所述通信单元接收内容取决于所述通信终端或所述用户的所述附加信息。
3.根据权利要求 1或2所述的通信终端，其中， 所述附加信息包括与所述执行单元执行的处理相对应的处理信息，并且 所述执行单元基于所述处理信息来执行所述处理。
4.根据权利要求1至3中任意一项所述的通信终端，该通信终端还包括: 叠加单元，其将与所述接收单元接收到的所述附加信息相对应的图像叠加在所述接收单元接收到的电波所承载的图像上，其中， 所述显示单元显示所述叠加单元生成的组合图像。
5.根据权利要求1至4中任意一项所述的通信终端，该通信终端还包括: 记录单元，其在所述接收单元接收到指定位置的所述指令时，记录所指定的位置和接收到所述指令的时间，其中 所述执行单元参照由所述记录单元记录的位置和时间来比较该位置和所述坐标信息表明的位置。
6.根据权利要求1至5中任意一项所述的通信终端，其中 所述通信单元发送与所述接收单元接收到的所述指令所指定的位置相对应的反馈信息，并且接收反映了由包括所述通信终端在内的多个通信终端发送的所述反馈信息的所述附加信息。
7.一种图像显示系统，所述图像显示系统包括: 根据权利要求1至6中任意一项所述的通信终端；以及 服务器设备，其发送至少所述附加信息。
8.一种处理方法，所述处理方法包括以下步骤: 接收承载有图像的电波； 经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由接收到的电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息,所述坐标信息对应于与所述图像有关的时间； 在显示区域上显示由接收到的电波所承载的图像；接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及响应于第一位置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被显示在所述显示区域中时由接收到的指令所指定的位置，并且所述第二位置是具有由接收到的坐标信息所表明的坐标的位置。
9.一种使计算机执行处理的程序，所述处理包括以下步骤: 接收承载有图像的电波； 经由通信网络从服务器设备接收附加信息，所述附加信息是添加到由接收到的电波所承载的图像中的信息，并且所述附加信息包括表明了所述图像内的位置的坐标的坐标信息,所述坐标信息对应于与所述图像有关的时间； 在显示区域上显示由接收到的电波所承载的图像； 接收用户输入的指令，所述指令指定了所述显示区域内的位置；以及响应于第一位 置和第二位置的比较结果来执行处理，所述第一位置是当所述图像被显示在所述显示区域中时由接收到的指令所指定的位置，并且所述第二位置是具有由接收到的坐标信息所表明的坐标的位置。
【文档编号】H04N7/173GK103430536SQ201280012995
【公开日】2013年12月4日 申请日期:2012年9月7日 优先权日:2011年9月9日
【发明者】菊地大辅 申请人:株式会社Ntt都科摩