用于混合媒体叙事消费的交互式方法和装置的制造方法
【专利说明】用于混合媒体叙事消费的交互式方法和装置
[0001]相关申请的交叉引用
[0002]本申请要求2013年3月19日提交的美国临时申请N0.61/803，309的优先权，并要求2013年5月8日提交的美国发明申请N0.13/857，550的优先权，该申请的全部公开被通过引用结合到本文中。
[0003]在以下专利申请中公开了相关主题，其与本申请是共同所有且共同待决的，并且其全部内容由此通过引用被结合到本文中:题为“SYSTEM TO GENERATE A MIXEDMEDIA EXPERIENCE”的2013年3月19日提交的美国临时申请N0.61/803, 312和题为“SYSTEM TO GENERATE A MIXED MEDIA EXPERIENCE” 的 2013 年 4 月 5 日提交的美国申请N0.13/857，567 (代理人档案号 CS41314)。
技术领域
[0004]本发明涉及一种用于呈现用超过一个媒体可表达的叙事的各部分的交互式方法和装置。
【背景技术】
[0005]叙事或故事一般地可用于在计算设备上的电子呈现，诸如膝上计算机或平板计算机或蜂窝式电话，并且越来越可用超过一个表达媒体来获得。例如，叙事可作为电子书(e-book)、音频书、视频、电视节目和/或连环漫画/书、以叙事序列布置的一组动画片而可用。通常，将在单个、消费者选择的媒体中呈现整个叙事，例如音频书。然而，随着叙事以不同表达媒体的形式的可用性增加，对当用不同媒体来呈现时比较叙事或叙事的一部分、或者对体验叙事的多媒体呈现的兴趣已增加。
【附图说明】
[0006]图1是根据实施例的混合媒体呈现系统的框图。
[0007]图2是根据实施例的用两个媒体表达的叙事的分段和将各段链接的过程的框图。
[0008]图3是根据实施例的混合媒体叙事呈现过程的流程图。
[0009]图4是根据实施例的用于呈现混合媒体叙事的示例性用户的计算设备的框图。
[0010]图5是根据实施例的用户的计算设备显示用于混合媒体叙事呈现的交互式用户界面的第一实施例的前视图。
[0011]图6是根据实施例的用户的计算设备显示用于混合媒体叙事呈现的交互式用户界面的第二实施例的前视图。
[0012]图7是根据实施例的用于识别叙事的段的示例性段表。
[0013]图8是根据实施例的用于识别叙事段的链接的示例性映射表。
[0014]图9是根据实施例的启用用于混合媒体叙事呈现的用户界面的示例性程序数据。
[0015]图10是根据实施例的按照用户所选择的顺序和型式来启用混合媒体叙事的各段的呈现的示例性程序数据。
[0016]图11是根据实施例的用于计算设备启用用于混合媒体叙事的不同呈现模式的选择的示例性界面。
[0017]图12是根据实施例的用于计算设备启用表达媒体内的段的特定类别的选择的示例性界面。
[0018]图13是根据实施例的用于计算设备启用用于呈现叙事段的设备的选择的示例性界面。
[0019]图14是根据实施例的用于将混合媒体叙事呈现为游戏的用于计算设备的示例性界面。
【具体实施方式】
[0020]可用一个或多个媒体来表达叙事或故事。例如，一般地将叙事表达为视频、电子书(e-book)、音频书、电视节目和/或连环漫画册/条带、以叙事序列布置的一组动画片。在实施例中，提供了用于呈现包括用相应的用户可选择的表达媒体呈现的部分的叙事的方法和装置。
[0021]实施例提供了一种呈现包括多个连续可呈现叙事段的叙事的方法，用所述多个表达媒体可呈现的至少一个段包括呈现用于计算设备的用户界面，该用户界面包括:媒体可用性指示符，该媒体可用性指示符指示表达媒体用于呈现所述叙事的段的可用性；以及媒体选择器，该媒体选择器可被计算设备的用户操作成选择所述多个表达媒体中的一个以用于呈现叙事段；以及用用户选择的表达媒体来呈现叙事的段。
[0022]另一实施例提供了一种用于呈现包括多个连续可呈现叙事段的叙事的装置，至少一个段用所述多个表达媒体可呈现，包括:计算机可访问存储器，该计算机可访问存储器用于存储程序指令和数据；数据处理单元，该数据处理单元根据存储在存储器中的程序指令可操作成呈现用户界面，该用户界面使得用户能够通过选择叙事段中的一些而构建叙事，每一个段用所选表达媒体可表达；以及输出设备，该输出设备被通信连接到数据处理单元以向用户呈现所述叙事的所选段，每个段在相应的用户选择的表达媒体中呈现。
[0023]详细地参考其中用相同参考标号来识别类似部分的附图且更特别地参考图1，混合媒体叙事呈现系统20 —般地包括可通信连接到用户的计算设备26的混合媒体呈现系统22，包括混合媒体呈现模块24，仅以示例的方式，该计算设备26可包括膝上型计算机、平板计算机或蜂窝式电话。混合媒体呈现系统22包括数据处理单元28，该数据处理单元28被布置成根据存储在存储器30中的一组程序指令和数据来执行程序。数据处理单元28被布置成与远程计算设备通信，诸如用户的计算设备26，并与混合媒体呈现模块24的混合媒体呈现存储器32通信，采取一个或多个表达媒体形式的一个或多个叙事段被存储在该混合媒体呈现存储器32中。
[0024]叙事一般地包括叙事段序列。例如，数字视频通常包括多个连续场景，每个包括连续帧或图像和可包括对话、音乐和音响效果的音频轨道。文本或音频形式的书一般地包括一系列章节，每个通常包括多个段落，其中的每一个进而包括包含主题及支持句子和对话的一个或多个句子。还参考图2，在混合媒体叙事呈现系统22中，将例如视频之类的叙事表达存储在叙事数据库34中。数据处理单元28命令从叙事数据库34恢复叙事表达，例如媒体1，视频62的音频轨道，并将该叙事表达发射到媒体协调器36。媒体协调器36定义构成叙事表达的连续段64，例如视频音频轨道段62，并使识别并描述段的元数据与每一个段相关联。同样地，媒体协调器可能将视频的场景或视频的图像部分的场景或视频书或电子书的主题和背景句子和对话分段。
[0025]在混合媒体呈现系统22中，可将分段叙事表达发射到自动化媒体互换建议模块38或媒体互换创作门户40。在自动化媒体互换建议模块38中，数据处理单元28分析多个媒体表达的各段，例如叙事的第一媒体表达62的段64和描述相应的段的元数据，并将第一媒体表达的各段与第二媒体表达66 (例如，音频书)的各段68和关联元数据相比较，以确定第一媒体表达的哪些段可取代第二媒体表达的各段。自动化媒体互换建议模块向所述多个叙事表达的每个段添加元数据70，将第一表达62的段64链接到第二媒体表达66中的叙事的一个或多个对应段68，并且反之亦然。例如，可将包含人物对话的视频音频轨道的各段链接到音频书或电子书的各段，其中，对人物进行引用，使得视频演员的对话能够取代表达人物的对话的叙事者的对话或文本。系统提供了多个粒度水平，实现了采取叙事的不同媒体和多个媒体表达形式的段的映射和取代，诸如来自一个视频表达的场景取代第二视频表达的场景或者视频场景或图像或音响效果到电子书的章节或段落和/或几分钟的音频书的链接，从而允许在输出叙述音频或音响效果和/或在第二或划分显示器上呈现电子书文本的同时进行视频场景或图像的同时呈现。
[0026]在媒体互换创作门户40中，对开发混合媒体叙事感兴趣的创作者42可手动地将叙事分段和/或添加元数据70，从而将叙事表达的各段链接到第二叙事表达的各段，第二叙事表达已被分段并存储在混合媒体呈现系统的存储器中。
[0027]当所述多个叙事表达的各段已经在自动化媒体互换建议模块38或媒体互换创作门户40中被链接时，包括将不同媒体表达的各段链接的段描述性元数据的分段叙事被存储在混合媒体呈现模块数据库32中。还参考图7，叙事的每个媒体表达的各段被作为段表300中的记录而存储在混合媒体呈现模块数据库32中。示例性段表300中的每个记录表示指定叙事或故事的一个媒体表达的段，并可包括段标识302、叙事标识304、版本或媒体标识306、起始点308和结束点310。还参考图8，存储在混合媒体呈现模块数据库中的映射表320用映射标识326来映射存储在数据库中的任何两个段322、324之间的关系。
[0028]还参考图3，混合媒体叙事呈现100通常以从用户的计算设备26发射102到混合媒体呈现系统22的数据处理单元28的用于可用叙事和媒体的菜单的请求开始。还参考图4，用户的计算设备26可以是能够与混合媒体呈现系统22通信并用由用户选择的一个或多个表达媒体来向用户呈现叙事的任何计算设备。仅以示例的方式，用户的计算设备可能是膝上型计算机、平板计算机、移动电话、电视或电子书阅读器。用户的计算设备26 —般地包括处理单元150、系统存储器1