在多个设备上提供内容的制作方法
【专利说明】在多个设备上提供内容
[0001] 相关申请
[0002] 本申请要求2013年3月14日提交的标题为"Providing Content on Multiple Devices (在多个设备上提供内容）"的美国专利申请号13/829, 156的优先权，所述专利申 请以引用方式整体并入本文。
[0003] 发明背景
[0004] 家庭与迅速增加的计算设备诸如台式机、平板电脑、娱乐系统和便携式通信设备 的有线联系变得越来越紧密。随着计算设备的发展，已引用许多不同的方式以允许用户与 这些设备进行交互，诸如通过机械装置（例如，键盘、鼠标等）、触摸屏、运动和手势。用于与 计算设备进行交互的另一种方式是通过用户对设备讲话并且作为应答设备向用户输出音 频。然而，在一些实例中，最佳的是以非单独音频的形式输出特定内容。
[0005] 附图简述
[0006] 参照附图描述【具体实施方式】。在图中，附图标记最左边的数字表示所述附图标记 首次出现的图。在不同图中使用相同的附图标记指示类似或相同的组件或特征。
[0007] 图1示出设置在家庭环境中的说明性语音交互计算体系结构。所述体系结构包括 物理地位于家庭中的语音控制设备、连同能够向所述设备提供语音命令的用户。所述设备 还能够将音频输出回至用户，并且指示在环境内的另一个设备为用户输出视觉内容。
[0008] 图2描绘用于接收第一语音命令、作为响应在第一设备上输出音频内容、接收请 求接收视觉内容的第二语音命令、以及响应于第二语音命令在第二设备上输出视觉内容的 示例性过程的流程图。
[0009] 图3A-3C描绘图1的语音控制设备可输出音频内容并且指示具有显示能力的另一 个设备输出视觉内容的相应方式。
[0010] 图4示出具有显示能力的设备可向图3A-3C的用户指示设备具有供用户查看的视 觉内容的示例性方式。
[0011] 图5描绘用于接收音频信号、识别其中的话音、以及作为响应致使第一设备输出 第一内容并且致使第二设备输出第二内容的示例性过程的流程图。
[0012] 图6描绘用于在第一设备上可听地输出内容以及响应于识别出请求转换具有显 示能力的设备的内容输出的语音命令而在第二设备上视觉地输出内容的示例性过程的流 程图。
[0013] 图7描绘用于在第一设备处接收第一语音命令、在第一设备处输出可听内容、在 第一设备处接收第二语音命令、以及作为响应指示存储在第二设备上的应用程序显示与第 一语音命令相关联的视觉内容的示例性过程的流程图。
[0014] 图8示出在图1的语音控制设备中实施的所选择功能组件的框图。
【具体实施方式】
[0015] 本公开部分地描述用于接收来自用户的语音命令以及作为响应使用第一设备向 用户提供可听内容并且使用第二设备向用户提供视觉内容的技术。在一些实例中，第一设 备包括用于产生包括用户话音的音频信号的麦克风、和用于响应于识别到的所述话音中的 语音命令而输出可听内容的扬声器。然而，第一设备可能不包括用于显示图形内容的显示 器。因此，第一设备可以被配置用于识别包括显示器且邻近第一设备的设备。第一设备随 后可指示这些其他设备中的一个或多个输出与用户的语音命令相关联的视觉内容。
[0016] 例如，设想用户将以下语音命令提供至解码所述语音命令的第一设备："谁是本杰 明·富兰克林？"。作为响应，第一设备可获得关于本杰明?富兰克林的内容，诸如关于本 杰明·富兰克林最著名事迹的概述。另外，第一设备或另一个中间设备可指示第二邻近的 设备显示关于本杰明?富兰克林的另外信息，诸如详细说明关于本杰明?富兰克林的生平 的另外细节的网页。第一设备可响应于用户的初始语音命令或响应于用户发出随后的语音 (例如，"请将这个信息移动到我的平板电脑"）而提供这个指令。在一个实例中，第一设备 可以识别具有显示能力、与发出语音命令的用户相关联并且与第一设备和用户在同一个环 境内的一个或多个设备。例如，第一设备可以指示用户的电话、用户的平板电脑或膝上型计 算机、用户的台式计算机、用户的电子书阅读器、或用户的任何其他客户端计算设备来显示 关于本杰明?富兰克林的视觉内容。
[0017] 在一些实例中，第一设备在用户发出语音命令时自动提供这种指令。例如，第一设 备可仅指示用户的平板计算设备在第一设备输出可听内容之前、之后或同时显示关于本杰 明?富兰克林的细节。在其他实例中，所述设备可响应于接收到来自用户的另外语音命令 而提供这种指令。例如，在完成输出本杰明?富兰克林的概述之后，第一设备可以可听地输 出以下询问："您想要在您的平板电脑上看到另外的信息吗？"如果用户肯定地回答，那么 所述设备可将显示另外内容的指令提供至第二设备。在另一个实例中，用户可以在第一设 备输出可听内容之前、同时或之后仅发出请求。例如，用户可以陈述以下内容："请将这个信 息移动到我的平板电脑。"
[0018] 另外，第二设备可以任意数量的方式显示这个信息。在一些实例中，第二设备存储 专门配置用于与第一设备进行交互的应用程序（例如，"伴随应用程序")。这个伴随应用程 序因此被配置用于接收这些类型的指令并且显示与用户的指令相关联的适当信息。例如， 这个应用程序可以显示导向到包括关于本杰明?富兰克林的信息的网站、应用程序或其他 目的地的一个或多个链接。另外或作为替代，应用程序可直接引入并且显示这个信息，诸如 关于本杰明?富兰克林的详细信息。
[0019] 在一些实例中，所述应用程序还可显示如由第一设备或另一个设备所解码的语音 命令的一个或多个解释。通过这样做，用户可以矫正语音命令，这可有助于训练用于对随后 的音频信号（包括来自用户的话音）执行话音辨识的话音辨识模块。用户可以选择验证语 音命令是否被正确地解释。在应用程序显示语音命令的一个或多个解释的实例中，应用程 序还可以显示与每个解释相关联的相应搜索结果。所述搜索结果可包括网络链接、到本地 存储在设备上内容或应用程序的链接、图像、视频等。
[0020] 不管第二设备是否存储有专门配置用于与第一设备进行交互的应用程序，或第二 设备是否使用浏览器或其他上下文特定的应用程序来显示信息，用户都可以多种方式访问 这个信息。在一些实施方案中，第二设备在接收来自第一设备的指令时被唤醒并且直接致 使显示信息（或如果第二设备已经被唤醒仅致使显示信息）。在其他实例中，第二设备可以 在第二设备的"锁定屏幕"上显示与用户的语音命令相关联的内容（例如，关于本杰明?富 兰克林的细节）。此后，当用户对设备解锁时，第二设备可显示关于主题的更多细节（例如， 在上述应用程序上、在关于本杰明·富兰克林的网页上等）。在另一个实例中，第二设备可 以仅在设备的通知区域或通知托盘中显示通知。例如，第二设备可以在设备接收文本消息、 电子邮件、电话呼叫、语音邮件等时所显示的通知旁边显示通知。第二设备随后可以在用户 从通知区域中选择通知时显示所有视觉信息。
[0021] 虽然以上实例描述了从输出可听内容到输出视觉内容的转换，但本文所述的技术 可以从显示视觉内容转换到输出可听内容、从在第一设备上显示视觉内容转换到在第二设 备上显示视觉内容、或从在第一设备上输出可听内容转换到在第二设备上输出可听内容。 在这些实例中，用户可通过语音命令、激活物理或软按钮、手势，通过鼠标点击等启动转换。
[0022] 另外，虽然以上实例描述了用户将内容从与用户相关联的一个设备转换到与同一 个用户相关联的另一个设备，但在其他实例中，用户可以将内容转换到与另一个用户相关 联的设备。例如，设想第一用户正在通过第一设备收听或查看报纸中的文章。第一用户可 以例如通过语音命令请求通过将文章转换到与第二用户相关联的设备来共享文章。该技术 随后可以将内容或访问内容的通知提供到第二用户的设备，所述设备可以在第二用户的请 求的情况下显示或以其他方式输出内容。
[0023] 以上和以下描述的设备和技术可以在多种不同的体系结构和情境中实施。以下描 述一个非限制性和说明性实施方案。应明确指出的是，虽然这些技术是参照语音控制设备 进行描述的，但这些技术可以应用于任何其他类型的能够捕获音频的客户端计算设备。
[0024] 图1示出设置在包括用户104的家庭环境102中的说明性语音交互计算体系结构 100。体系结构100还包括用户104可与之进行交互的电子语音控制设备106。在所示的实 施方案中，语音控制设备106定位在家庭环境102的房间内的桌子上。在其他实施方案中， 可以将它放置或安装在任意数量的位置中（例如，天花板、墙壁、灯具中、桌子下面、椅