用于增强的电视交互的系统和方法
【专利摘要】本发明公开了用于增强的电视交互的系统和方法。例如，一种公开的方法包括：接收通知信息，所述通知信息指示与电视设备所显示的视频内容相关联的事件；确定与所述通知信息相关联的触觉效果；生成和发送触觉信号至触觉输出设备，所述触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。
【专利说明】用于增强的电视交互的系统和方法
【技术领域】
[0001]本公开总体上涉及触觉反馈，更具体涉及用于增强的电视交互的系统和方法。
【背景技术】
[0002]常规电视允许用户观看各种内容特征，诸如广播、有线、或者卫星节目、预先录制的表演和电影、以及玩视频游戏。这样的内容可提供给电视并被显示给一个或多个观看者或参与者。这样的节目常常包括与观看者想要观看的节目相关联或者取而代之的其他内容，诸如广告或紧急广播消息，这使得用户对电视或其他显示设备失去兴趣。或者，用户在欣赏特定节目时，可能感觉不到完全投入到节目中。
【发明内容】
[0003]根据本公开的实施例提供用于增强的电视交互的系统和方法。例如，一个公开的实施例包括具有如下步骤的方法:接收通知信息，所述通知信息指示与电视设备所显示的视频内容相关联的事件；确定与所述通知信息相关联的触觉效果；生成和发送触觉信号至触觉输出设备，所述触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。在另一实施例中，一种计算机可读介质包括用于使得处理器执行这样的方法的程序代码。
[0004]所提及的这些说明性实施例不限定或定义本发明，而是提供帮助对本发明进行理解的示例。在详细说明中探讨说明性实施例，详细说明进一步提供本发明的说明。通过研究本说明书可进一步理解由本发明的各个实施例提供的优点。
【专利附图】
【附图说明】
[0005]附图被合并到说明书中并且构成说明书的一部分，用于图示说明实施例的一个或多个示例，并且与示例实施例的描述一起，用来解释实施例的原理和实现。
[0006]图1A-C示出根据实施例的用于增强的电视交互的系统；
[0007]图2示出根据一个实施例的用于增强的电视交互的设备；
[0008]图3示出根据一个实施例的用于增强的电视交互的电视设备；
[0009]图4A-D和5示出根据实施例的用于增强的电视交互的系统；以及
[0010]图6-8示出根据实施例的用于增强的电视交互的方法。
【具体实施方式】
[0011]这里，在用于增强的电视交互的系统和方法的上下文环境中，描述了示例实施例。本领域普通技术人员将意识到，下面的描述只是说明性的而不意图以任何方式进行限制。对于从本公开受益的本领域技术人员来说，其他实施例将易于启示。现在，对示例实施例的实现方式详细进行参考，如附图中所示。相同的附图标记将在附图和下面的描述中通篇使用以指代相同或相似的项目。
[0012]为了清楚起见，未示出和说明本文所述实施方式的所有常规特征。当然，将认识到在任意这些实际实现方式的研发中，必须进行多种特定于实现方式的决定以便实现开发者的特定目的，例如与应用的兼容性以及商务相关的约束条件，以及这些特定目的将随实现方式以及开发者的不同而改变。
[0013]用于增强的电视交互的说明性系统
[0014]现在参看图1A，图1A示出了根据一个实施例的用于增强的电视交互的说明性系统。图1A示出了 “智能”电视110和手持平板计算设备120。用户正在观看电视110上的节目并且使用平板设备120作为控制电视的遥控器，诸如用来换频道、改变音量、寻找节目信息、录制和回放内容(诸如在数字视频记录器上)等等。在寻找到要观看的电视节目之后，用户换频道并开始观看节目。过了一会儿，电视节目被广告打断，用户将其注意力改变到其平板计算机上，在其中开始浏览因特网。同时，智能电视110在监视通过电视频道所接收到的内容流并且确定发生了广告打断，并且生成和发送触觉效果至用户的设备以指示广告开始。此时，用户拿着平板去厨房喝杯水并快速键入一封电子邮件。
[0015]随着智能电视110继续监视电视频道，在每次广告结束时其发送信号给用户的设备使得输出触觉效果。在几分钟之后，电视确定用户正观看的节目继续开始了。智能电视再次发送触觉信号给用户的平板，其使得平板输出强触觉效果给用户以指示电视节目将要重新开始，在此时，用户保存其电子邮件以便之后完成并且返回继续观看电视。
[0016]过了一会儿，用户选择观看之前在数字视频记录器(DVR)上录制的节目。她使用其平板来选择节目并开始其重放。过了一会儿，记录开始重放在录制节目的广播期间播放的广告。用户在其平板上选择快进功能以便快进通过广告。在她快进时，电视监视来自DVR的内容流，并且当每条广告结束时，智能电视发送触觉消息给平板以输出低强度触觉效果以指示广告结束。或者，如图1B中所示，在某些情况下，DVR (或二者)可以监视内容以提供触觉信号给平板。这样，当用户快进通过多条广告时，在每条广告结束后她都感觉到触觉效果。当智能电视确定最后一条广告结束并且电视节目继续开始时，智能电视发送高强度触觉信号给平板，平板输出触觉效果以指示电视节目继续开始。用户随后按下“播放”功能以返回重放到正常速度并且继续开始观看电视节目。这些实施例允许用户全面控制其自己的电视体验，但是提供了有帮助的触觉提示以允许其将其注意力在其他任务之间划分。这样的功能性在各种各样的背景下都会有用，并且可以检测附加的事件用来增强用户对这样的内容的欣赏。
[0017]现在参看图1C，示出了另一说明性实施例，其中，都在观看相同电视的不同用户使用多个设备。每个设备120建立与电视的通信并且能够从电视接收信息，诸如上面讨论的触觉效果，以指示商业广告结束。但是，在图1C中所示的系统中，当四个设备120a-d与电视交互时，只有I个设备120b能够控制电视。这样，设备120b的用户可以从电视接收额外的或者更强的效果，例如强调某些事件以提示用户动作，而不是简单地提供少量信息给具有设备120a、c、d的被动观看者。
[0018]给出说明性示例来向读者介绍这里所讨论的一般主题，且本公开不限于这些示例。下面的部分描述了用于增强的电视交互的系统和方法的各种额外非限制实施例和示例。
[0019]现在参看图2，图2示出了根据一个实施例的用于增强的电视交互的系统。在图2中所示的实施例中，系统200包括壳体210、处理器220、存储器230、触敏显示器250、触觉输出设备240、通信接口 260、扬声器270和传感器290。此外，系统200与触觉输出设备280通信，其可选地耦合到或合并到某些实施例中。处理器220与存储器230通信，在本实施例中，处理器220和存储器230都置于壳体210内。触敏显示器250，其包括触敏表面或与之通信，部分置于壳体210内，使得触敏显示器250的至少一部分暴露给系统200的用户。在某些实施例中，触敏显示器250可以不置于壳体210内。例如，系统200可以连接到置于另外壳体内的触敏显示器250或者与之通信。在某些实施例中，壳体210可以包括可以彼此滑动耦合、彼此枢轴耦合或彼此可释放地耦合的两个壳体。在另外的实施例中，系统200可以包括显示器或与之通信并且可以包括诸如鼠标、键盘、按钮、手柄、滑块控制、开关、轮子、滚轮、游戏杆、其他个人操作零件或其组合的其他用户输入设备并与之通信。
[0020]在某些实施例中，可以在系统200的一个或多个面上包括，或者在其内放置，一个或多个触敏表面。例如，在一个实施例中，触敏表面放置在系统200的后表面内或包括系统200的后表面。在另一实施例中，第一触敏表面放置在系统200的后表面内或包括系统200的后表面，第二触敏表面放置在系统200的侧表面内或包括系统200的侧表面。在某些实施例中，系统可以包括两个或多个壳体部件，诸如在蛤壳布置或在可滑动布置中。例如，一个实施例包括具有蛤壳配置的系统，触敏显示器置于蛤壳的每个部分中。而且，在系统200包括在系统200的一个或多个侧面上的至少一个触敏表面的实施例中或者在系统200与外部触敏表面通信的实施例中，显示器250可以包括或可以不包括触敏表面。在某些实施例中，一个或多个触敏表面可以具有柔性的触敏表面。在其他实施例中，一个或多个触敏表面可以是刚性的。在各种实施例中，系统200可以包括柔性和刚性触敏表面这二者。
[0021]在图2中所示的实施例中，触敏显示器250与处理器220通信并且被配置为提供信号给处理器220或存储器230，以及从处理器220或存储器230接收信号。存储器230被配置为存储程序代码和/或数据，以便由处理器220使用，处理器220被配置为执行存储在存储器230中的程序代码并且将信号发送至触敏显示器250以及从触摸显示器250接收信号。在图2中所示的实施例中，处理器220还与通信接口 260通信并且被配置为从通信接口 260接收信号以及向通信接口 260输出信号，从而与其他部件或设备通信，诸如一个或多个远程计算机或服务器。
[0022]此外，处理器220与触觉输出设备240和触觉输出设备280通信，并且进一步被配置为输出信号以使得触觉输出设备240或触觉输出设备280，或二者，输出一个或多个触觉效果。而且，处理器220与扬声器270通信并且被配置为输出信号使得扬声器270输出声音。在各种实施例中，系统200可以包括更少或额外的部件或设备，或与之通信。例如，诸如鼠标或键盘或二者的其他用户输入设备，或者额外的触敏设备，可以包括在系统200内或者与系统200通信。作为另一示例，系统200可以包括一个或多个加速度计、陀螺仪、数字罗盘和/或其他传感器和/或与之通信。
[0023]图2中所示的系统200的壳体210提供了对系统200的至少某些部件的保护。例如，壳体210可以是塑料壳，保护处理器220和存储器230免受外界项目诸如雨的影响。在某些实施例中，如果系统200被用户掉落的话，壳体210保护壳体210中的部件免受损坏。壳体210可以由任何合适材料制成，包括但不限于塑料、橡胶或金属。各种实施例可以包括不同类型的壳体或多个壳体。例如，在某些实施例中，系统200可以是便携设备、手持设备、玩具、游戏控制台、手持视频游戏系统、游戏板、游戏控制器、桌面计算机、电子书阅读器、便携多功能设备，诸如蜂窝电话、智能电话、个人数字助理(PDA)、笔记本计算机、平板计算机、数字音乐播放器等等。在其他实施例中，系统200可以嵌入在另一设备中，诸如腕表、其他珠宝、手套等等。这样，在实施例中，系统200是可穿戴的。
[0024]在图2中所示的实施例中，触觉输出设备240和280与处理器220通信并且被配置为提供一个或多个触觉效果。例如，在一个实施例中，当由处理器220向触觉输出设备240、触觉输出设备280、或二者提供激励信号时，各个触觉输出设备240、280基于激励信号输出触觉效果。例如，在所示的实施例中，处理器220被配置为传送包括模拟驱动信号的触觉输出信号至触觉输出设备240。在某些实施例中，处理器220被配置为传送高级命令至触觉输出设备280，其中，所述命令包括命令标识符和零或更多参数用来生成适当的驱动信号以使得触觉输出设备280输出触觉效果。在其他实施例中，不同信号和不同信号类型可发送至一个或多个触觉输出设备中的每个。例如，在某些实施例中，处理器可以传送低级驱动信号以驱动触觉输出设备输出触觉效果。这样的驱动信号可以由放大器放大或可以使用合适处理器或电路从数字转换为模拟信号或者从模拟转换为数字信号，以适应被驱动的特殊触觉输出设备。
[0025]为了生成振动效果，许多设备利用某些类型的致动器或触觉输出设备。已知的用于此目的的触觉输出设备包括电磁致动器，诸如偏心旋转质量(“ERM”),其中偏心质量由电机移动，诸如线性谐振致动器(“LRA”)，其中附接到弹簧的质量被来回驱动，或者“智能材料”，诸如压电、电活性聚合物或形状记忆合金。触觉输出设备还宽泛地包括其他设备，诸如那些使用静电摩擦(ESF)、超声表面摩擦(USF)的设备，或那些通过超声触觉变换器引起声辐射压力的设备，或那些使用触觉基底以及柔性或形变表面的设备，或那些使用空气喷嘴提供诸如气泡的凸起触觉输出的设备，等等。
[0026]在其他实施例中，一个或多个部件的变形可用来产生触觉效果。例如，可以输出一个或多个触觉效果来改变表面的形状或表面的摩擦系数。在实施例中，通过创建用于改变表面上的摩擦的静电力和/或超声力来产生一个或多个触觉效果。在其他实施例中，透明变形元件的阵列可用于产生触觉效果，诸如一个或多个区域包括智能凝胶。触觉输出设备还宽泛地包括非机械或非振动设备，诸如那些使用静电摩擦(ESF)、超声表面摩擦(USF)的设备，或那些通过超声触觉变换器引起声辐射压力的设备，或那些使用触觉基底以及柔性或形变表面的设备，或那些使用空气喷嘴提供诸如气泡的凸起触觉输出的设备，等等。在包括能够生成摩擦或变形效果的触觉输出设备240、280的某些实施例中，触觉输出设备240或280可以覆盖在触敏显示器上或者耦合到触敏显示器250，使得摩擦或变形效果可被施加于被配置为由用户触摸的触敏表面。在某些实施例中，系统的其他部分可以提供这样的力，诸如壳体部分，其可以由用户接触或在耦合到系统的分别的触敏输入设备中。2011年4月 22 日提交、题为 “Systems and Methods for Providing Haptic Effects”、在此通过引用并入的共同待审的美国专利申请N0.13/092，484描述了可以产生一个或多个触觉效果的方式以及描述了各种触觉输出设备。
[0027]将认识到，任何类型的输入合成方法可用来从一个或多个触觉效果信号生成交互参数，包括但不限于下面的表I中所列出的合成示例的方法。
[0028]表1-合成的方法
[0029]
【权利要求】
1.一种方法，包括: 接收通知信息，所述通知信息指示与由电视设备显示的视频内容相关联的事件； 确定与所述通知信息相关联的触觉效果； 生成和发送触觉信号至触觉输出设备，所述触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。
2.如权利要求1所述的方法，进一步包括: 接收辅助信息，所述辅助信息与所述视频内容相关联；以及 生成和发送视频信号至辅助显示设备。
3.如权利要求2所述的方法，进一步包括: 监视所述辅助信息； 检测与所述辅助信息相关联的事件；以及 生成和发送第二触觉信号至触觉输出设备，所述第二触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。
4.如权利要求1所述的方法，进一步包括: 生成输出信号；以及 发送所述输出信号至远程设备。
5.如权利要求4所述的方法，进一步包括从输入设备接收输入，并且其中，所述输入包括用户的感测的生理状况，并且控制信号是基于所述感测的生理状况。
6.如权利要求4所述的方法，其中，控制信号是基于与所述视频内容相关联的信息以及来自社交网络账号的信息。
7.如权利要求1所述的方法，其中，所述通知信息包括与社交网络站点的用户的状态以及所述视频内容相关联的信息。
8.如权利要求1所述的方法，进一步包括生成和发送信号至扬声器，音频信号是基于所述通知信息。
9.一种方法，包括: 监视由设备接收的内容流，所述内容流包括待由电视设备显示的视频和音频数据； 检测所述内容流内的事件；以及 生成和发送与所述事件相关联的通知信号至辅助设备。
10.如权利要求9所述的方法，进一步包括发送所述通知信号至多个辅助设备。
11.如权利要求9所述的方法，其中，所述辅助设备是第一辅助设备，并且进一步包括生成和发送第二通知信号至第二辅助设备。
12.如权利要求9所述的方法，进一步包括发送辅助信息至所述辅助设备，所述辅助信息与所述内容流相关联并且被配置为由所述辅助设备可视地显示。
13.如权利要求9所述的方法，其中，所述第二设备包括智能电话或遥控器。
14.如权利要求9所述的方法，其中，所述通知信号包括触觉效果或音频效果。
15.一种计算机可读介质，包括用于使得处理器执行方法的程序代码，所述程序代码包括: 用于接收通知信息的程序代码，所述通知信息指示与由电视设备显示的视频内容相关联的事件；用于确定与所述通知信息相关联的触觉效果的程序代码； 用于生成和发送触觉信号至触觉输出设备的程序代码，所述触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。
16.如权利要求15所述的计算机可读介质,进一步包括: 用于接收辅助信息的程序代码，所述辅助信息与所述视频内容相关联；以及 用于生成和发送视频信号至辅助显示设备的程序代码。
17.如权利要求16所述的计算机可读介质,进一步包括: 用于监视所述辅助信息的程序代码； 用于检测与所述辅助信息相关联的事件的程序代码；以及 用于生成和发送第二触觉信号至触觉输出设备的程序代码，所述第二触觉信号被配置为使得所述触觉输出设备输出所述触觉效果。
18.如权利要求15所述的计算机可读介质,进一步包括: 用于生成输出信号的程序代码；以及 用于发送所述输出信号至远程设备的程序代码。
19.如权利要求18所述的计算机可读介质，进一步包括用于从输入设备接收输入的程序代码，并且其中，所述输入包括用户的感测的生理状况，并且控制信号是基于所述感测的生理状况。
20.如权利要求18所述的计算机可读介质，其中，控制信号是基于与所述视频内容相关联的信息以及来自社交网络账号的信息。
21.如权利要求15所述的计算机可读介质，其中，所述通知信息包括与社交网络站点的用户的状态以及所述视频内容相关联的信息。
22.如权利要求15所述的计算机可读介质，进一步包括用于生成和发送信号至扬声器的程序代码，音频信号是基于所述通知信息。
23.一种计算机可读介质，包括用于使得处理器执行方法的程序代码，所述程序代码包括: 用于监视由设备接收的内容流的程序代码，所述内容流包括待由电视设备显示的视频和音频数据； 用于检测所述内容流内的事件的程序代码；以及 用于生成和发送与所述事件相关联的通知信号至辅助设备的程序代码。
24.如权利要求23所述的计算机可读介质，进一步包括用于发送所述通知信号至多个辅助设备的程序代码。
25.如权利要求23所述的计算机可读介质，其中，所述辅助设备是第一辅助设备，并且进一步包括用于生成和发送第二通知信号至第二辅助设备的程序代码。
26.如权利要求23所述的计算机可读介质，进一步包括用于发送辅助信息至所述辅助设备的程序代码，所述辅助信息与所述内容流相关联并且被配置为由所述辅助设备可视地显不O
27.如权利要求23所述的计算机可读介质，其中，所述第二设备包括智能电话或遥控器。
28.如权利要求23所述的计算机可读介质，其中，所述通知信号包括触觉效果或音频效果。
【文档编号】H04N21/472GK104053065SQ201410097449
【公开日】2014年9月17日 申请日期:2014年3月14日 优先权日:2013年3月14日
【发明者】丹尼·格雷特, 帕梅拉·皮门特尔, 埃里克·热尔韦, 文森特·莱韦斯克, 阿伦·卡佩卢斯, 常咪娜, 丹尼尔·帕克, 大卫·比恩鲍姆, 蒋里, 斯蒂芬·兰克 申请人:伊梅森公司