信息处理设备、记录介质和信息处理系统的制作方法
【专利摘要】提供了一种信息处理设备、记录介质和信息处理系统，该信息处理系统获取主体的捕获图像数据并且基于传感器时间信息将图像数据的多个时间点与事件信息的多个时间点相关联，该事件信息是基于传感器设备以时间序列获取的传感器信息而获取的并且指示传感器设备的操作的发生。
【专利说明】信息处理设备、记录介质和信息处理系统
[0001] 对相关申请的交叉引用
[0002] 该申请要求2013年3月22日提交的日本优先权专利申请JP2013-060061的权益， 其全部内容通过引用合并于此。
【技术领域】
[0003] 本公开涉及一种信息处理设备、记录介质和信息处理系统。
【背景技术】
[0004] 如果人希望改进体育运动技能，则重要的是对他的/她的表演客观地进行分析并 且在做体育运动时具有自我提升意识。在一种广泛传播的自我提升的方式的示例中，以静 止或运动图像来记录表演，并且在表演之后观看静止或运动图像，使得弄清待改进的点等。 这样的静止或运动图像由除成像设备的用户之外的人拍摄，但是通常由用户自身拍摄，这 样的拍摄称为所谓的自拍。
[0005] 在这样的情况下，例如，如果可以从静止或运动图像的内容提取拍摄了特定用户 或用户的特定表演的部分，则可以在短时间中回顾表演从而弄清用于改进的点。换言之，如 果可以从内容自动检测用户期望的场景，则增强了内容搜索效率。因此，可以有效地将内容 用于改进表演。
[0006] 在诸如专业体育运动转播的商业内容中已提出了在内容中自动检测用户期望的 场景的技术。例如，JP2011-223287A描述了通过基于内容图像或音频特征量进行学习而自 动检测用户感兴趣的场景(突出场景）的技术。
【发明内容】
[0007] 然而，不容易将如JP2011-223287A中描述的技术应用于用户为了改进他的/她的 体育运动技能提升而拍摄的内容。根据上述技术，例如，当内容是足球比赛时，基于通过提 取示出场地的线或球的轨迹的图像的特征量或者表示口哨或欢呼的音频的特征量而执行 的学习来检测突出场景。然而，用户拍摄的内容呈现了各种表演场地，并且通常没有口哨和 欢呼。此外，内容还包括明显不必要的场景，诸如由收集已飞出球场的球而导致的表演的中 断。因此，以与商业内容相同的方式学习特征量是困难的，并且是无效率的。
[0008] 为此，需要这样一种技术，其用于通过使用与上述技术不同的技术而在例如用户 为了改进他的/她的体育运动技能而拍摄的内容中以高精度检测用户的期望场景。鉴于上 述情形，期望提供新颖且改进的、并且可以提取与用户的体育运动表演状态相对应的场景 的信息处理设备、记录介质和信息处理系统。
[0009] 根据本公开的实施例，提供了一种信息处理系统，其获取主体的捕获图像数据，并 且将图像数据的多个时间点与基于传感器时间信息的事件信息的多个时间点相关联，该事 件信息是基于由传感器设备以时间序列获取的传感器信息而获取的，并且指示传感器设备 的操作的发生。
[0010] 根据上述本公开的实施例，可以以较高精度提取与用户的体育运动表演状态相对 应的场景。
【专利附图】
【附图说明】
[0011] 图1是示出根据本公开的第一实施例的信息处理系统的概况的图；
[0012] 图2是用于说明在根据本公开的第一实施例的信息处理系统中可能发生的时间 固定值偏差的示例的图；
[0013] 图3是用于说明在发生如图2的示例中的固定值偏差的状态下表演事件与表演图 像之间的时间标记偏差的图；
[0014] 图4是用于说明在根据本公开的第一实施例的信息处理系统中可能发生的时间 线性偏差的示例的图；
[0015] 图5是用于说明本公开的第一实施例中的调整时间偏差的方法的图；
[0016] 图6是示出根据本公开的第一实施例的传感器设备和成像设备的示意功能配置 的框图；
[0017] 图7是用于说明由本公开的第一实施例中的传感器设备指示时间的示例的图；
[0018] 图8是用于说明本公开的第一实施例中的传感器设备获取时间的示例的图； [0019] 图9是示出本公开的第一实施例中的在图像捕获时的处理的示例的流程图；
[0020] 图10是示出本公开的第一实施例中的在图像捕获之后的处理的示例的流程图；
[0021] 图11是示出根据本公开的第二实施例的传感器设备和成像设备的示意功能配置 的框图；
[0022] 图12是示出本公开的第二实施例中的图像捕获时的处理的示例的流程图；
[0023] 图13是示出本公开的第二实施例中的图像捕获之后的处理的示例的流程图；
[0024] 图14是示出根据本公开的第三实施例的传感器设备和成像设备的示意功能配置 的框图；
[0025] 图15是示出本公开的第三实施例中的图像捕获之后的处理的示例的流程图；
[0026] 图16是用于说明本公开的第三实施例中的时间序列调整处理的图；
[0027] 图17是示出根据本公开的第三实施例的计算时间序列调整参数的处理的示例的 流程图；
[0028] 图18是示出根据本公开的第四实施例的信息处理系统的概况的图；
[0029] 图19是示出根据本公开的实施例的传感器设备的硬件配置的示例的图；以及
[0030] 图20是示出根据本公开的实施例的信息处理设备的硬件配置的示例的图。
【具体实施方式】
[0031] 下文中，将参照附图详细描述本公开的优选实施例。注意，在该说明书和附图中， 具有基本上相同的功能和结构的结构元件以相同的附图标记来表示，并且省略这些结构元 件的重复说明。
[0032] 将按以下顺序给出描述。
[0033] 1.第一实施例
[0034] 1-1.系统配置
[0035] 1-2.时间偏差
[0036] 1-3.装置配置
[0037] 1-4.时间序列调整处理
[0038] 2.第二实施例
[0039] 2-1.功能配置
[0040] 2-2.时间序列调整处理
[0041] 3.第三实施例
[0042] 3-1.功能配置
[0043] 3-2.时间序列调整处理
[0044] 3-3.时间序列调整处理
[0045] 4.第四实施例
[0046] 5.硬件配置
[0047] 6.补充说明
[0048] (1.第一实施例）
[0049] (1-1.系统配置）
[0050] 首先，将参照图1描述根据本公开的第一实施例的信息处理系统的配置。
[0051] 图1是示出根据本公开的第一实施例的信息处理系统的概况的图。参照图1，信息 处理系统10包括传感器设备100和成像设备200。
[0052] (传感器设备）
[0053] 传感器设备100由做体育运动的用户佩戴或者附接到由用户使用的体育运动装 备。当由用户佩戴时，可将传感器设备1〇〇的形状设为例如如图中所示的手镯一样以直接 附接到用户的身体。当附接到体育运动装备(在网球的情况下，诸如球拍、网球服、鞋子或腕 带)时，传感器设备100可围绕装备的轴部等缠绕、缝在布上或附接到布、或者预先构建在装 备中。
[0054] 这里，传感器设备100获取用于指示做体育运动的用户的行为的传感器信息。由 传感器信息指示的用户的行为可以是例如用户或装备的物理运动(诸如位置、速度或加速 度)。为了获取这样的传感器信息，例如，传感器设备100包括至少一个传感器。传感器检 测例如加速度、角速度、振动、温度、时间或位置(诸如由经度和纬度表示的地面上的位置或 者相对于球场等的位置)。传感器设备100例如累积如此获取的传感器信息。当用户例如 在表演结束之后连接传感器设备1〇〇和成像设备200时，所累积的传感器信息可以被传送 到成像设备200。
[0055] (成像设备）
[0056] 成像设备200捕获体育运动的表演图像。表演图像可以是至少部分地包括做体育 运动的用户以及附接到用户或用户的装备的传感器设备1〇〇的运动图像。成像设备200放 置在例如用户做体育运动的球场附近，并且捕获表演图像。所捕获的表演图像的数据至少 暂时存储在成像设备200中。此后，例如，当用户在表演结束之后连接传感器设备100和成 像设备200时，成像设备200可以接收在表演图像被拍摄的同时由接收传感器设备100获 取的传感器信息。
[0057] 这里，基于所接收的传感器信息，成像设备200检测用户所做的体育运动中的表 演事件的发生并且生成与该表演事件对应的表演事件信息。例如，成像设备200基于表演 事件信息从表演图像提取场景，并且生成摘要图像。这使得能够生成仅包括例如由用户指 定的表演事件的场景的摘要图像。另外，例如，成像设备200基于表演事件信息设置附加信 息，诸如表演图像中的章节信息。这有利于例如在用户观看表演图像时搜索期望表演事件 的场景。
[0058] 注意，成像设备200可将表演图像上载到图中未示出的服务器，其中表演图像例 如包括摘要图像和设置在表演图像中的附加信息。替选地，可采用以下配置。具体地，成像 设备200将捕获的表演图像上载到服务器，并且传感器设备100也将传感器信息上载到服 务器。如上所述，服务器执行表演事件的发生的检测、基于表演事件信息的摘要图像的生成 以及附加信息的设置。
[0059] (1-2.时间偏差）
[0060] 接下来，将参照图2至图5描述在本公开的第一实施例中发生的时间偏差。
[0061] (固定值偏差）
[0062] 图2是用于说明在根据本公开的第一实施例的信息处理系统的示例中可能发生 的时间固定值偏差的图。图2示出了基准时间T°、传感器设备100中的时间T 1和成像设备 200中的时间Τ2。基准时间Τ°是用作现实世界中的基准的时间(诸如标准时间)。时间Τ 1是 由构建在传感器设备100中的时钟定义的时间。时间Τ2是由构建在成像设备200中的时 钟定义的时间。
[0063] 如图所示，在基准时间Τ°、时间Τ1和时间Τ2之间存在恒定偏差。例如，当基准时间 Τ°在t°Q=12:00:00时，时间Τ1在基准时间Τ°之后五秒的4=12:00:05并且时间Τ 2在基准 时间Τ°之前五秒的6=11:59:05。例如在对传感器设备100和成像设备200中的每个执行 初始时间设置时发生该偏差。除了受稍后要描述的线性偏差影响以外，每个偏差的量保持 恒定，直到时间被重置为止(在图中所示的示例中，时间Τ 1快五秒，并时间Τ2慢五秒)。这样 的时间偏差在该说明书中也被称为固定值偏差。
[0064] 该固定值偏差可以引起传感器设备100获取的传感器信息的时间标记与成像 设备200捕获的表演图像的时间标记之间的偏差。在图2的示例中，当基准时间Τ°在 (=12:10:00时，成像设备200开始捕获表演图像。此时，传感器设备100中的时间Τ 1在 6=12:10:05,并且成像设备200中的时间Τ2在1^=12:09:55。因此，在正捕获表演图像的 同时，传感器设备100中的时间Τ 1与成像设备200中的时间Τ2之间保持十秒的偏差。
[0065] 图3是用于说明在发生如图2的示例中的固定值偏差的状态下在表演事件与表演 图像之间的时间标记偏差的图。图3示出了以下情况下的传感器设备100与成像设备200 之间的时间标记偏差。在捕获到表演图像之后，成像设备200基于从传感器设备100接收 的传感器信息而生成表演事件信息，并且将该表演事件信息与表演图像相关联。
[0066] 由于基于传感器设备100获取的传感器信息来生成表演事件信息，因此在表演事 件信息指示的表演事件发生时的时间标记是基于传感器设备1〇〇中的时间Τ1的时间标记。 另一方面，表演图像是由成像设备200捕获的，因此表演图像的时间标记是基于成像设备 200中的时间Τ2的时间标记。这里，如上所述，在正捕获表演图像的同时，在时间Τ 1与时间 Τ2之间保持十秒的偏差。
[0067] 然而，当将表演事件信息与表演图像相关联时，用于识别表演图像的哪个部分与 表演事件信息所指示的表演事件相对应的唯一方式是基于它们各自的时间标记在表演事 件信息与表演图像之间执行匹配。这里，例如，假设表演事件在与时间T1中的12:17:05和 时间T 2中的12:16:55相对应的时间（基准时间T°中的12:17:00)发生的情况，如图3所 示。出于以上原因，尽管在表演图像中的时间标记12:16:55 (Ρ1)处得到表演事件，但是表 演事件信息指示表演事件在时间标记12:17:05 (Ρ2)处发生。因此，例如，当通过基于表演 事件信息而从表演图像中提取场景来生成摘要图像时，在表演事件的实际发生之后十秒的 场景被提取为表演事件的场景。该延迟在图中以参考字母D来表示。
[0068] 这里，例如，在通过利用摘要图像或章节信息进行搜索等来提取表演图像的场景 并且然后将该场景再现的情况下，用户在没有不自然感觉的情况下可以接受的时间偏差不 会这样大，并且例如上至大约0. 1秒。另外，一些类型的表演事件通常具有大约数秒的短持 续时间。因此，例如，如在上述示例中相当于不小于十秒的偏差的发生不仅使得用户感到不 自然，而且还可能导致表演事件的场景的无用再现。
[0069] 因此，在本实施例中，传感器设备100中的时间Τ1以如稍后要描述的特定形式记 录在表演图像中。当传感器信息稍后被传送到成像设备200时，在由成像设备200基于传 感器信息生成的表演事件信息的时间序列与表演图像的时间序列之间进行调整。从而可以 将表演事件信息指示的表演事件发生的定时与在表演图像中得到表演事件的定时同步。
[0070] (线性偏差）
[0071] 图4是用于说明在根据本公开的第一实施例的信息处理系统中可能发生的时间 线性偏差的示例的图。与上述图2 -样，图4示出了基准时间Τ°、传感器设备100中的时间 Τ1和成像设备200中的时间Τ2。
[0072] 在图中所示的示例中，基准时间Τ°、时间Τ1和时间Τ2在基准时间Τ°处于 七°。=12:00:00时的时间点相互同步，S卩，在时间以。=12:00:00且在时间t2Q=12:00:00相 互同步。然而，随着时间过去，在这些时间之间发生偏差。更具体地，在基准时间T°在 4=13:00:00的时间点，时间Τ 1在t\=12:59:59并且比基准时间Τ°慢一秒。另外，在同一 时间点，时间Τ2在〖^=13:00:01并且比基准时间Τ°快一秒。这样的偏差是例如由用于在 传感器设备100和成像设备200的每个中构建的时钟的晶体振荡器的振荡频率误差而引起 的。当电压被施加到晶体振荡器时，晶体振荡器以大致恒定的振荡频率振荡。然而，由于晶 体的个体差别、周围温度等，振荡频率具有例如关于原始指定的振荡频率上至大约150ppm (百万分率）的误差。
[0073] 这样的误差可以使得由使用晶体谐振器的时钟定义的时间偏离标准时间高达大 约每小时一秒。在图4的示例中，想到了如图中所示的这样的偏差出于以下原因而发生：用 于定义时间T 1的传感器设备100的时钟的晶体振荡器的振荡频率略慢于原始定义的振荡 频率；以及用于定义时间T2的成像设备200的时钟的晶体振荡器的振荡频率略高于原始定 义的振荡频率。每个晶体振荡器的振荡频率是暂时恒定的。因此，除非周围温度大大改变， 否则时间T 1与时间T2之间的偏差量随时间过去而增加。这样的时间偏差在本说明书中也 称为线性偏差。
[0074] (偏差调整方法）
[0075] 图5是用于说明本公开的第一实施例中的用于调整时间偏差的方法的图。如至此 所描述的，在根据本实施例的信息处理系统10中所包括的传感器设备100中的时间T 1与成 像设备200中的时间T2之间可能发生两种类型的时间偏差，即固定值偏差和线性偏差。图 5示出了由固定值偏差和线性偏差的组合引起的时间偏差的模型。注意，在图中所示的模 型中，X轴表示传感器设备100中的时间，而y轴表示成像设备200中的时间。传感器设备 100中的时间X与成像设备200中的时间y之间的关系被表示为y=ax+b。
[0076] 这里，"a"表示时间X与时间y之间的线性偏差。如在上述图4的示例中那样，在 由于成像设备200中的时间y比传感器设备100中的时间X过得快而发生线性偏差的情况 下，时间X具有比时间y高的每小时改变率，因此关系a>l成立。相反，如在图5的示例中 那样，在由于成像设备200中的时间y比传感器设备100中的时间X过得慢而发生线性偏 差的情况下，时间X具有比时间y低的每小时改变率，因此关系a〈l成立。在时间X与时间 y之间没有发生线性偏差的情况下，关系a=l成立。
[0077] 相较之下，"b"表示时间X与时间y之间的固定值偏差。如在图2的示例中那样， 在成像设备200中的时间y比传感器设备100中的时间X过得慢的情况下，关系b〈0成立。 这是由于当时间X到达特定时间（在图5的示例中，x=0)时，时间y尚未到达该特定时间。 相反，如在图5的示例中那样，在成像设备200中的时间y比传感器设备100中的时间X过 得快的情况下，关系b>0成立。这是由于当时间X到达特定时间时，时间y到达该特定时间 之后的时间点。在时间X与时间y之间没有发生固定值偏差的情况下，关系b=0成立。
[0078] 因此，如果指定了 a和b的值，则在将如图5所示的固定值偏差和线性偏差纳入考 虑的情况下，下述时间标记组X1可以被转换为下述时间标记组Y 12 :时间标记组X1是基于传 感器设备100中的时间X而提供的表演事件信息的集合{x^x^，…，xU的元素，而时间标 记组Y 12是基于成像设备200中的时间y而提供的表演图像的集合{y'，/%，…，y12n}的元 素。
[0079] 在本实施例中，将以特定形式记录的传感器设备100中的时间X记录在表演图像 中，将时间X与成像设备200中的时间y (S卩，在记录时间X时的时间点处表演图像的时间 标记）进行比较，从而指定上述a和b的值。当传感器信息稍后被传送到成像设备200时， 这实现了将表演事件信息的时间标记组转换为成像设备200中的表演图像的时间标记组。 注意，稍后将详细描述将时间X记录在表演图像中的处理以及指定a和b的值的处理。
[0080] (1-3.装置配置）
[0081] 接下来，将参照图6描述包括在根据本公开的第一实施例的信息处理系统中的设 备的功能配置。
[0082] 图6是示出根据本公开的第一实施例的传感器设备和成像设备的示意功能配置 的框图。在下文中，将参照图6描述每个设备的功能配置。注意，稍后将描述用于实现功能 的硬件配置。
[0083] (传感器设备）
[0084] 传感器设备100包括传感器101、预处理单元103、存储单元105、时钟107和驱动 器109。在稍后要描述的变型例中，传感器设备100还可包括分析单元111。
[0085] 传感器101检测例如加速度、角速度、振动、温度、时间或位置。更具体地，传感器 101可包括例如加速度传感器、角速度传感器、振动传感器、温度传感器、压力传感器(包括 按压开关）或GPS (全球定位系统）接收器。
[0086] 预处理单元103执行由传感器101检测的数据的预处理。预处理可以是例如对所 检测的数据进行放大或者滤除具有等于或低于阈值的值的数据。注意，取决于传感器ιο? 的类型，数据可被提供到存储单元105而不必通过预处理单元103。
[0087] 存储单元105暂时将由传感器101检测的且由预处理单元103根据需要而处理的 数据作为传感器信息存储在其中。此时，传感器信息与由时钟107提供的时间标记一起存 储。
[0088] 这里，存储在存储单元105中的传感器信息稍后通过图中未示出的通信单元被传 送到成像设备200。在本实施例中，传感器信息不是在生成时由传感器设备100实时地传送 到成像设备200,而是稍后传送。这适用于例如传感器设备100不包括用于无线通信的通信 装置以使得装置较小或较轻或者以减小功耗的情况，或者传感器设备100包括通信装置但 是不在获取传感器信息的同时频繁执行通信的情况。
[0089] 时钟107定义传感器设备100中使用的时间。时钟107基于例如初始设置的时间 和晶体谐振器的振荡频率而定义时间。如上所述，由初始时间设置而导致的偏差可引起在 基准时间或诸如成像设备200的其它设备中的时间与时钟107定义的传感器设备100中的 时间之间的固定值偏差。另外，晶体谐振器的振荡频率的误差可引起线性偏差。
[0090] 驱动器109驱动被配置成通过使用光或声音而指示传感器设备100中的时间的输 出装置，该输出装置包括诸如LED (发光二极管）的灯、诸如IXD (液晶显示器）的显示器、扬 声器等。例如，当时钟107到达预定时间时，驱动器109驱动输出装置来使用预定用于指示 时间的模式。例如，驱动器109以预定颜色或图案来点亮灯，在显示器上显示指示时间的字 符或代码，或者使得扬声器以预定振荡频率或以预定振荡模式来发出声音。
[0091] (成像设备）
[0092] 成像设备200包括成像单元201、存储单元203、时钟205和分析单元207。成像设 备200还可包括输出单元209。
[0093] 成像单元201包括用于捕获图像的成像装置和透镜、其驱动电路等。成像单元201 捕获做体育运动的用户的图像，其中该用户具有用户佩戴的传感器设备1〇〇或具有传感器 设备1〇〇所附接的装备。该图像是上述表演图像。因此，表演图像不仅示出了作为主体的 用户而且还示出了用户直接或间接佩戴的传感器设备100。
[0094] 存储单元203将成像单元201捕获的表演图像的数据暂时或持续存储在其中。此 时，表演图像的数据与由时钟205提供的时间标记一起存储。当稍后通过未示出的通信单 元从传感器设备100接收到传感器信息时，表演图像的数据可以被提供到用于识别与表演 事件对应的场景的分析单元207。存储单元203还可将在分析单元207的分析结果被反 映在其上的情况下所生成的摘要图像存储在其中，或者再次存储包括附加信息的表演图像 (诸如章节图像)。
[0095] 时钟205定义在成像设备200中使用的时间。时钟205基于例如初始设置的时间 和晶体谐振器的振荡频率而定义时间。如上所述，由初始时间设置而导致的偏差可引起在 基准时间或诸如传感器设备100的其它设备中的时间与由时钟205定义的成像设备200中 的时间之间的固定值偏差。另外，晶体谐振器的振荡频率的误差可引起线性偏差。
[0096] 在捕获到表演图像之后，分析单元207对通过未示出的通信单元从传感器设备 100接收的传感器信息进行分析，从而检测作为成像单元201的主体的用户所做的体育运 动中的表演事件的发生，并且生成与该表演事件对应的表演事件信息。此外，基于用于指示 在捕获表演图像时的至少一个时间点处的传感器设备100中的时间的信息，分析单元207 在表演事件信息的时间序列与表演图像的时间序列之间进行调整，从而精确地识别与表演 事件信息所标识的表演事件相对应的表演图像中的场景。分析单元207可基于分析结果从 表演图像提取一个或多个场景，以生成仅包括所指定的表演事件的一个或多个场景的摘要 图像。分析单元207还可基于分析结果，在表演图像中设置与表演事件对应的附加信息(诸 如章节信息)。替选地，分析单元207也可将分析结果作为与表演图像分开的数据存储在存 储单元203中。
[0097] 这里，表演事件被定义为体育运动的表演中具有特定含义的动作的单位。例如，在 网球的情况下，可以定义诸如"挥动"、"跳跃"、"击球"和"在球场内移动"的表演事件。分 析单元207通过使用机器学习或模式识别来分析传感器信息，从而检测预先定义的表演事 件的发生。此外，分析单元207例如通过根据需要进一步参考传感器信息而生成表演事件 信息，同时将关于检测到其发生的表演事件的详细信息添加到该表演事件信息。表演事件 信息可以包括例如作为表演事件的开始时间和结束时间的时间标记信息。
[0098] 表1在以下示出了表演事件的定义的示例。表演事件可以以按体育运动或按类型 以这种方式来定义。同一类型的表演事件可被更具体地分类。注意，这里示出的表演事件 是示例，并且可以定义其它各种体育运动中的各种类型的表演事件。
[0099] [表 1]
[0100]
【权利要求】
1. 一种信息处理系统，包括： 电路，被配置成： 获取主体的捕获图像数据；以及 基于传感器时间信息将所述图像数据的多个时间点与事件信息的多个时间点相关联， 所述事件信息是基于由传感器设备以时间序列获取的传感器信息而获取的并且指示所述 传感器设备的操作的发生。
2. 根据权利要求1所述的信息处理系统，其中， 所述电路被配置成基于在所述图像数据中检测到的所述传感器设备的预定操作来获 取所述传感器时间信息。
3. 根据权利要求2所述的信息处理系统，其中， 所述预定操作与由所述传感器设备的时钟定义的时间一致。
4. 根据权利要求2所述的信息处理系统， 其中，所述预定操作指示所述传感器设备检测到事件的发生。
5. 根据权利要求1所述的信息处理系统，其中， 所述电路被配置成基于在正捕获所述图像数据时从所述传感器设备接收的信息而获 取所述传感器时间信息。
6. 根据权利要求5所述的信息处理系统，其中， 从所述传感器设备接收的信息是与所述图像数据相关联的元数据。
7. 根据权利要求1所述的信息处理系统，其中， 所述电路被配置成基于至少一个时间点的所述传感器时间信息，调整所述图像数据的 所述多个时间点与所述事件信息的所述多个时间点之间的固定值偏差。
8. 根据权利要求1所述的信息处理系统，其中， 所述电路被配置成基于至少两个时间点的所述传感器时间信息，调整所述图像数据的 所述多个时间点与所述事件信息的所述多个时间点之间的线性偏差。
9. 根据权利要求1所述的信息处理系统，其中， 所述电路被配置成通过将在所述图像数据中检测到的第一事件组的发生时间与由所 述事件信息定义的第二事件组的发生时间进行比较，将所述图像数据的所述多个时间点与 所述事件信息的所述多个时间点相关联。
10. 根据权利要求9所述的信息处理系统，其中， 所述电路被配置成设置用于修改所述事件信息的所述多个时间点的参数，以获得所述 第一事件组的发生时间与所述第二事件组的发生时间之间的最高相关。
11. 根据权利要求10所述的信息处理系统，其中， 所述电路被配置成通过下述方式中的至少一个来设置用于修改所述事件信息的所述 多个时间点的参数：对所述事件信息的所述多个时间点进行偏移，以及对所述事件信息的 所述多个时间点的长度进行改变。
12. 根据权利要求1所述的信息处理系统，其中， 所述传感器时间信息指示在正捕获所述图像数据时的时间点的所述传感器设备中的 时间。
13. 根据权利要求1所述的信息处理系统，其中，所述信息处理系统包括： 所述传感器设备，被配置成以时间序列获取所述传感器信息并且执行与时间一致的预 定操作；以及 成像设备，包括所述电路。
14. 根据权利要求1所述的信息处理系统，还包括： 服务器，包括被配置成进行将所述图像数据的所述多个时间点与所述事件信息的所述 多个时间点相关联的电路。
15. -种记录有程序的非暂态计算机可读记录介质，所述程序使得计算机： 获取主体的捕获图像数据；以及 基于传感器时间信息将所述图像数据的多个时间点与事件信息的多个时间点相关联， 所述事件信息是基于由传感器设备以时间序列获取的传感器信息而获取的并且指示所述 主体的动作中的事件的发生。
16. -种信息处理系统，包括： 电路，被配置成： 获取主体的第一图像数据和所述主体的第二图像数据；以及 通过将在所述第一图像数据中检测到的第一事件组的发生时间与在所述第二图像数 据中检测到的第二事件组的发生时间进行比较，将所述第一图像数据的多个时间点与所述 第二图像数据的多个时间点相关联。
17. 根据权利要求16所述的信息处理系统，还包括： 第一图像捕获设备，被配置成捕获所述主体的所述第一图像数据。
18. 根据权利要求17所述的信息处理系统，还包括： 第二图像捕获设备，被配置成捕获所述第二图像数据。
19. 根据权利要求16所述的信息处理系统，还包括： 服务器，包括被配置成进行将所述第一图像数据的所述多个时间点与所述第二图像数 据的所述多个时间点相关联的电路。
【文档编号】G06T7/00GK104063708SQ201410097088
【公开日】2014年9月24日 申请日期:2014年3月14日 优先权日:2013年3月22日
【发明者】松永英行, 山下功诚 申请人:索尼公司