可佩戴式终端的制作方法

专利名称：可佩戴式终端的制作方法
技术领域：
本发明涉及一种可佩戴式终端。
背景技术：
可佩戴式终端是指像衣服、包、笔及手表那样能够穿戴在身体上使用 的终端，近年来，可佩带式终端不断轻巧化，具备麦克风或摄像机的终端 已经不足为奇。作可佩带式终端，例如可佩带式摄像机能够进行自动摄影， 能够以声音作为触发，按下快门或开始动画摄影(参照专利文献l)。
专利文献1:日本特开2004-356970号公报
但是，作为近年产品开发的趋势，研讨了在可佩带式终端中追加简档 制作功能的技术。
简档制作功能是指，佩戴可佩戴式终端的用户在参加聚会或团体旅行 等活动时，将由可佩戴式终端自动收集的数据作为构成要素来使用，制作 该活动的回忆录或资料等来作为所谓的活动的"简档"的功能。由于在可 佩戴式终端中安装有摄像机及麦克风，因此能够使用由该可佩戴式终端收 集到的影像数据、声音数据，来作为简档制作时的数据素材。
但是，在该简档制作功能中，虽然能够对用户周围存在的景象进行摄 影并将其作为简档的构成要素，但是却很难把参加该活动的自己的身姿加 入到简档的数据素材中去。究其原因，是因为一般在可佩带终端中取得的 是对面方向的图像信息。也就是说，简档制作时能够使用的数据素材，仅 限于由可佩带终端自身收集到的数据，并且由可佩戴式终端取得的数据存 在极限，因此存在通过该功能制作的简档的表现范围狭窄的问题。

发明内容
本发明的目的在于提供一种可佩带式终端，通过使用参加活动的自己 的身姿等来作为数据素材，能够拓宽制作简档时的表现范围。
为了解决上述课题，本发明涉及一种可佩戴式终端，在多个人参加的 活动中，被戴在参加该活动的人物的身体上，其特征在于，该可佩戴式终 端具备请求单元，对规定范围内存在的多个可佩戴式终端发送请求信号， 并接收对请求信号的响应；以及通信单元，基于接收到的响应，决定作为 通信对方的一个以上的可佩戴式终端，并执行与决定出的可佩带式终端之 间的数据通信；上述数据是由被决定作为通信对方的可佩戴式终端收集的 数据，并在制作上述活动的简档时作为该简档的构成要素。
发明效果
本发明通过具有上述结构，在活动的其他参加者佩戴上述那样能够发 送响应的可佩戴式终端时，能够在这些其他参加者所佩戴的可佩戴式终端 中确定作为通信对方的可佩戴式终端，并把从该通信对方处接收的数据作 为简档的构成要素。因此，即使是从自身的可佩戴式终端不可取得的数据 素材，只要是从活动的其他参加者所佩戴的可佩戴式终端可取得的数据素 材，就能够从该其他参加者所佩戴的可佩戴式终端取得该数据素材，并在 简档制作时发挥作用，因此，能够拓宽制作简档时的表现范围。
另外，上述活动是指包含会议、讲座、进餐、站着闲谈、团体旅行、 聚会等的概念。
这里，也可以是，上述通信单元针对上述多个可佩戴式终端的每一个， 基于接收到的响应，判断是否是与本终端属于同一个会话集团的可佩戴式 终端，并将被判断为属于同一个会话集团的可佩戴式终端决定为通信对方。
这里，也可以是，上述响应包括由接受了请求信号的各可佩戴式终端 取得的声音信息；上述通信单元包括重叠率计算单元，该重叠率计算单元 计算接收到的各可佩戴式终端的声音信息中的发声区间与本终端的声音信 息中的发声区间之间的重叠率；被判断为与本终端属于同一个会话集团的 可佩戴式终端是上述多个可佩带终端中与本终端的声音信息中的发声区间 之间的重叠率在规定的阈值以内的可佩戴式终端。
由此，由于能够确定与该可佩带式终端涉及的用户进行会话的用户所 涉及的可佩戴式终端，因此能够取得更有效果的数据作为简档的构成要素。
另外，本申请权利要求书中的重叠率计算单元对应实施方式中的同一 会话集团检测部。
这里，也可以是，上述声音信息中的发声区间包括作为规定期间元音
持续的部分的会话中的附和；上述重叠率计算单元除去上述附和的区间来 计算重叠率。
由此，由于从重叠率中除去了因进行附和而发声区间重叠的区间，因 此能够提高决定进行上述会话的用户涉及的可佩戴式终端的准确度。
这里，也可以是，上述响应包括接受了请求信号的各可佩戴式终端的 位置信息；上述通信单元包括距离计算单元，该距离计算单元根据接收到 的各可佩戴式终端的位置信息和本终端的位置信息，分别计算该可佩戴式 终端与本终端之间的距离；被判断为与本终端属于同一个会话集团的可佩 戴式终端是上述多个可佩戴式终端中与本终端的距离在规定的阈值以内的 可佩戴式终端。
由此，能够取得有效的数据来作为简档的构成要素。
另外，本申请权利要求书中的距离计算单元对应实施方式中的同一会 话集团检测部。
这里，也可以是，上述响应包括接受了请求信号的各可佩戴式终端的 方位信息；上述通信单元包括方位变化量计算单元，该方位变化量计算单 元根据接收到的各可佩戴式终端的方位信息，计算每规定时间的方位信息 的变化量；被判断为与本终端属于同一个会话集团的可佩戴式终端是上述 多个可佩戴式终端中与本终端的方位变化量之差在规定的范围内的可佩戴 式终端。
由此，能够取得有效的数据来作为简档的构成要素。
另外，本申请权利要求书中的方位变化量计算单元对应实施方式中的
同一会话集团检测部。
此外，即使通过与决定出的可佩戴式终端之间的数据通信能够取得数
据，但是在制作简档时使用者自己进行编辑作业是非常繁杂的，多数需要
付出大量的劳动。
这里，优选上述活动的简档的制作由本终端来进行，上述通信单元向 上述一个以上的可佩戴式终端发送所制作的简档。
由此，不需要可佩戴式终端涉及的使用者自己进行编辑作业，能够容 易地制作例如该可佩戴式终端涉及的用户的简档、或只摄有说话者的简档等。另外，能够与作为上述通信对方的一个以上的可佩戴式终端一起共用 所制作的简档。
这里，也可以是，上述收集到的数据是图像；在上述决定出的可佩戴 式终端中，基于各说话者涉及的可佩戴式终端与摄有该说话者的图像的可 佩戴式终端之组，来制作上述简档。
由此，能够制作总是映有说话者的简档。
这里，也可以是，使用由上述决定出的可佩戴式终端中说话者涉及的 可佩戴式终端收集的声音，来制作上述简档。
由此，即使在本终端中由于与说话者涉及的可佩戴式终端之间的位置 关系等的影响而不能够收集清晰的声音的情况下，也能够通过使用由说话 者涉及的可佩戴式终端收集的声音，来制作清晰声音的简档。
这里，也可以是，上述可佩戴式终端具备记录单元，该记录单元记录 与上述决定出的可佩戴式终端相关的数据。
由此，能够基于所记录的数据在需要时制作简档。
这里，也可以是，上述服务器装置包括聚类单元，该聚类单元取得表 示上述多个可佩戴式终端的位置的位置信息，并基于取得的位置信息将上 述多个可佩戴式终端聚类成多个群集；上述通信单元按照各群集进行作为 上述通信对方的一个以上的可佩戴式终端的决定。
由此，由于在由上述形成单元进行集团形成之前基于位置信息粗略地 进行了聚类，因此，在对多个可佩戴式终端进行处理时，能够大量地削减 形成各会话集团时的运算量。


图1是表示出了用户佩戴可佩戴式终端的状态的图。 图2是表示出了在佩戴可佩戴式终端的用户在附近存在多个人的情形 的图。
图3是表示出了存在多个可佩戴式终端时相互间的通信状况的图。
图4是表示可佩戴式终端的外观的图。
图5是表示可佩戴式终端的摄影方向的图。
图6是表示使用了红外广角摄像机和红外线标签的位置检测系统的
图7是表示通信顺序的图。
图8是表示从各可佩戴式终端接收到的数据的图。 图9是表示从本地服务器400接收到的数据的图。 图10是表示可佩戴式终端100的硬件结构的图。 图11是表示可佩戴式终端100的功能模块的图。 图12是表示终端ID列表的图。 图13是表示同一会话集团检测处理的流程的图。 图14是表示同一会话集团检测处理的流程的图。 图15是表示制作处理的流程的图。 图16是表示制作处理的流程的图。
图17是示意地表示各说话者的说话定时及通过哪个终端取得各说话
时的说话者的图像的图。
图18是表示了各说话者的说话定时、作为图像取得对象的终端的终端
ID及取得图像之间的关系的图。
图19是示意地表示制作的简档的图。
图20是表示简档信息的内部结构的图。
图21是表示出了服务器集中管理型的通信状况的图。
图22是表示制作服务器500的功能模块的图。
图23是表示同一会话集团检测部520的内部结构的图。
图24是表示可佩戴式终端600的功能模块的图。
图25是表示制作服务器的处理流程的图。
图26是表示聚类处理的流程的图。
图27是表示同一会话集团检测处理2的流程的图。
图28 (a)是表示俯视某个时间上21个人的位置时的图形。
图28 (b)是表示由聚类部521进行聚类之后的结果的图。
图28 (c).是表示每个人的对会话的积极性及朝向的图。
图28 (d)是表示检测到会话集团之后的结果的图。
图28 (e)是表示所有参加者被分到某个会话集团后的结果的图。
图29是表示制作处理2的流程的图。
图30是表示终端ID列表2的图。 符号说明
100 100h、 600 600f可佩戴式终端
101 CPU
102 ROM
103 RAM 104麦克风
105、 108A/D变换器
106、 109编码器 107摄像机
110电子罗盘 111存储卡 112通信部
121、 601摄像部
122、 602拾音部
123佩戴者方向声音取得部 124非佩戴者方向声音取得部
125、 603方位检测部
126、 540说话定时提取部
127、 510、 604通信部
128、 520同一会话集团检测部
129、 550被摄体检测部
130、 560摄影条件判断部
131、 580制作部
132、 570、 605记录部 200红外线标签
300红外广角摄像机 400本地服务器 500制作服务器 521聚类部
522群集内会话集团检测部 523说话信息计算部 524适合度计算部
具体实施方式
(实施方式l) <概要〉
首先，说明本发明涉及的可佩戴式终端的概要。
在本发明中，如图1所示，用户佩戴可佩戴式终端100，如图2所示， 假定为佩戴可佩戴式终端的用户在附近存在多个人的情况。作为上述用户 存在多个人的情况，例如可以考虑到会议、讲座、进餐、站着闲谈、团体 旅行、聚会等各种情况。这里，认为是在附近存在的多个人的用户中存在 进行会话的集团(会话集团)的情况。当然，这样的会话集团可以存在多 个，也可存在没有参加到会话中的人物。另外，这里所说的会话，不是一 个人长时间(例如1分钟以上)持续说话的情况，而是指适当地交换说话 者的情况。
如图3所示，图2所示的可佩戴式终端100、 100a、 100b、 100c、 100d、 100e、 100f、 100g、 100h通过通信网络互相连接。这里，设通信网络为无 线LAN。图3是表示存在多个可佩戴式终端时的相互间的通信状况的图。 在图3中例示了如下情况，即，佩戴可佩戴式终端100 100h的人物分别 存在于通信范围内，形成由可佩戴式终端100 100e构成的会话集团1和 由可佩戴式终端100f、 100g构成的会话集团2，佩戴可佩戴式终端100h的 人物虽然没有被包含在这些会话集团中，但是却共用场地。
如图4所示，各可佩戴式终端包括摄像机和麦克风，由它们取得的图 像及声音记录在记录介质中。通过佩戴具有该结构的可佩戴式终端，能够 很好地取得各佩戴者的声音，但是， 一般不能够对佩戴者自己进行摄影， 如图5所示，将取得对面方向的图像信息。
本发明涉及的可佩戴式终端100的特征在于，从多个人佩戴的可佩戴 式终端(可佩戴式终端100a 100h)中决定出作为通信对方的一个以上的 可佩戴式终端、即与本终端涉及的用户属于同一会话集团的用户涉及的可 佩戴式终端(在如3的例子中是指可佩戴式终端100a 100e)，不经过注册 及认证，与决定出的可佩戴式终端进行数据通信。并且，简档制作时，由
这些可佩戴式终端摄影的图像及声音成为该简档的构成要素。
由此，即使不能够对佩戴者自己进行摄影，也能够取得佩戴该可佩戴
式终端100的用户的影像或摄有会话集团中的说话者的影像等。 以上是可佩戴式终端100的概要。
接着，说明检测各可佩戴式终端的位置的方法。 〈位置检测方法〉
作为检测各可佩戴式终端的位置的方法，提出有各种各样的方法，在 这里使用采用了红外广角摄像机和红外线标签的位置检测方法。具体而言， 在该方法中，使佩戴可佩戴式终端的用户佩戴红外线标签，取得由红外线 广角摄像机摄影的图像中的红外线标签来作为亮点，通过将所取得的亮点 在图像中的坐标变换到实际空间坐标的坐标变换，决定红外线标签的三维 位置。将所决定的红外线的三维位置视为可佩戴式终端的位置。
图6是使用了红外广角摄像机和红外线标签的位置检测系统。该位置 检测系统包括各用户佩戴的可佩戴式终端100 100h、未图示的各用户佩 戴的红外线标签200 200h、 6台红外广角摄像机300a 300f及本地服务 器400。
红外线标签200~200h是由产生红外线的LED和控制其闪烁的装置构 成的红外产生标识器。例如，如图1所示，具有姓名牌形状，戴在用户的 胸部。
红外广角摄像机300a 300f包括取得动态图像的摄像机、遮挡可视光 而使红外区域的光通过的滤光器及广角镜头。
本地服务器400处理由6台红外广角摄像机300a 300f得到的图像， 计算各红外线标签200 200h (可佩戴式终端100 100h)的位置，并管理 计算出的位置信息。更详细地讲，基于红外广角摄像机3OOa 300f的设置 位置，将红外线图像上的各亮点的位置变换为实际空间坐标，将变换后的 各亮点的坐标即红外线200a 200h的位置视为各可佩戴式终端的位置，存 储到存储装置并进行管理。
可佩戴式终端100如上述那样具有无线LAN通信功能，能够通过从本 地服务器400接收各可佩戴式终端100 100h的位置信息来取得它们的位 置信息。另外，也可以是，本地服务器400向各可佩戴式终端100 100h 发送各自的位置信息，可佩戴式终端100从各可佩戴式终端100a 100h取 得位置信息。
接着，参照附图，更详细地说明本发明涉及的可佩戴式终端100。
<通信顺序>
说明可佩戴式终端100进行同一会话集团检测处理及简档制作处理时 的通信顺序。可佩戴式终端100首先在检测出属于同一会话集团的可佩戴 式终端时，向处于通信范围内的可佩戴式终端100a 100h、以及本地服务 器400发送轮询，并接收来自各个的应答。图8表示从各可佩戴式终端接 收的数据。如图8所示，接收数据包括各可佩戴式终端的终端ID、方位 信息及声音信息。图9表示从本地服务器400接收的数据。如图9所示， 接收数据包括各可佩戴式终端的终端ID及位置信息。当接到应答时，进 行同一会话集团检测处理，检测属于同一会话集团的可佩戴式终端。接着， 与属于同一会话集团的各可佩戴式终端之间依次确立连接，取得由各可佩 戴式终端所取得的图像或声音等。然后，使用取得的图像或声音等进行简 档制作处理，制作简档，并向属于同一会话集团的各可佩戴式终端发送所 制作的简档。可佩戴式终端100每当经过规定的时间就进行上述处理，动 态地进行变化的会话集团的检测，并使用由属于检测到的会话集团的可佩 戴式终端所取得的图像或声音，来制作简档。 <结构>
接着，说明可佩戴式终端100的硬件结构。图10是表示可佩戴式终端 100的硬件结构的图。可佩戴式终端100包括CPU101、ROM102、RAM103、 麦克风104、摄像机107、 A/D变换器105、 108、编码器106、 109、电子 罗盘IIO、存储卡lll及通信部(无线LAN接口) 112。
CPUIOI、 ROM102及RAM103构成计算机系统，保存在ROM102中 的程序被读入到CPUIOI，通过使程序和硬件资源协作来达到功能的实现。
电子罗盘110利用地磁场判断方位，检查终端所朝向的方向。
存储卡111是用于记录简档信息等的可移动媒体。
通信部112向各可佩戴式终端及本地服务器400发送轮询，并接收来 自各可佩戴式终端的应答(终端ID、方位信息及声音信息)以及来自本地 服务器400的应答(终端ID、可佩戴式终端100 100h的位置信息)。在 检测到属于同一会话集团的可佩戴式终端之后，通信部112为了取得作为 简档的构成要素的图像或声音，与属于同一会话集团的可佩戴式终端进行 P2P通信。
接着，说明可佩戴式终端100的内部结构。图ll是表示可佩戴式终端 100的功能模块的图。可佩戴式终端100包括摄像部121、拾音部122、
方位检测部125、说话定时提取部126、通信部127、同一会话集团检测部 128、被摄体检测部129、摄影条件判断部130、制作部131及记录部132。
摄像部121由CCD或CMOS构成，具有将外部的光变换成电信号、 将变换后得到的电信号向制作部131输出的功能。
如图4所示，拾音部122包含4个麦克风，具有对从各麦克风取得的 声音信号进行A/D变换、将变换后得到的信号向说话定时提取部126及同 一会话集团检测部128输出的功能。更详细地讲，拾音部122包括佩戴 者方向声音取得部123及非佩戴者方向声音取得部124。
佩戴者方向声音取得部123进行指向性控制，以便能够以高S/N比收 集来自可佩戴式终端100的佩戴者的嘴边方向的佩戴者的声音。就图4的 麦克风的配置例而言，能够通过使用对各麦克风的声音信号进行减法运算 的减法型阵列麦克风的指向性控制法来实现上述指向性控制。
非佩戴者方向声音取得部124进行指向性控制，以便能够以高S/N比 来收集来自可佩戴式终端100的佩戴者的嘴边以外方向的各种环境音。就 图4的麦克风的配置例而言，能够通过使用对各麦克风的声音信号进行加 法运算的加法型阵列麦克风的指向性控制法来实现上述指向性控制。
方位检测部125包括电子罗盘110等，具有检测可佩戴式终端100的 方位并向同一会话集团检测部128输出的功能。
说话定时提取部126从佩戴者方向声音取得部123接收声音信号，从 接收到的声音信号中检测说话，并提取检测到的说话的说话定时。具体而 言，求取在佩戴者方向声音取得部123中收集的、佩戴可佩戴式终端100 的用户的声音区间的始端及终端时刻。作为提取方法，可以考虑到有例如 使用声音能量的提取方法或使用倒谱的提取方法、使用统计方法的声音区 间提取方法等。根据被要求的提取准确度或成本，采取任一种方式都可以。
通信部127包括天线，具有通过该天线接收从其他可佩戴式终端 100a 100h或本地服务器400发送来的数据、或将由制作部131制作的简 档等发送给其他可佩戴式终端100a 100h的功能。另外，将接收到的图像 送出给被摄体检测部129,将接收到的位置信息、方位信息及声音信息送出 给同一会话集团检测部128。作为无线通信方式，这里使用IEEE802,llg的 无线LAN。无线LAN中的电波强度可以自由设定，由此能够决定通信范 围。
同一会话集团检测部128通过通信部127向各终端请求方位信息及声 音信息的发送以及向本地服务器400请求可佩戴式终端100 100h的位置 信息的发送，并从通信部127取得可佩戴式终端100a 100h的方位信息及 声音信息和可佩戴式终端100 100h的位置信息。另夕卜，从方位检测部125 取得本终端的方位信息，从拾音部122取得在本终端所收集的声音信息。 此外，使用位置信息、方位信息及声音信息来检测属于同一会话集团的可 佩戴式终端。后述具体的处理流程。
被摄体检测部129接受从通信部127发送的图像，并从各个图像中检 测出被摄体，并将检测结果送出给摄影条件判断部130。
摄影条件判断部130从被摄体检测部129接受被摄体的检测结果，判 断所接受的被摄体的摄影条件的好坏。具体而言，基于说话者涉及的终端 的位置信息或方位信息等、以及其他各终端的位置信息或方位信息等，求 取由其他终端将上述说话者作为被摄体而捕捉的图像，判断其中摄影条件 最好的图像。摄影条件最好是指，例如作为对象的说话者被较大较清晰地 摄影的情况、或能够在顺光的条件下确切地掌握被摄体且被摄体不被其他 物体遮挡而被准确地取景等的情况。在后述的流程中说明具体内容。
制作部131使用由检测出的属于同一会话集团的可佩戴式终端取得的 影像或声音，来制作与属于同一会话集团的用户相关的简档。例如，从属 于同一会话集团的终端取得的影像中，选择摄有同一会话集团中的说话者 并且根据摄影条件判断部130的判断结果为摄影条件最好的图像，组合所 选择的图像和对应于该图像的本终端100所收集的声音，由此来制作摄有 说话者的影像。
另外，从属于同一会话集团的终端取得的影像中，选择摄有本终端100 涉及的用户且根据摄影条件判断部130的判断结果为摄影条件最好的图像。 然后，组合所选择的图像和对应于该图像的本终端100所收集的声音，由 此来制作本终端IOO涉及的用户的简档。
记录部132包括存储卡111或RAM103等，将制作的简档记录到存储 卡111,或将由本终端100取得的图像和声音与同一会话集团检测部128 的结果建立关联并记录到RAM103。图12是表示终端ID列表的图。终端
ID列表是将本终端和构成同一会话集团的终端的终端ID与声音、图像及 时间建立关联的列表。这里，终端IDaaa、 bbb、 ccc、 ddd及eee构成同一 会话集团。另外，终端IDaaa、 bbb、 ccc、 ddd及eee分别是可佩戴式终端 100a、 100b、 100c、 100d及100e的终端ID。
由此，能够根据声音信号及图像信号确定属于同一会话集团的可佩戴 式终端，或能够根据时间信息确定属于同一会话集团的终端以及其图像或 声音。例如，能够用于日后检索交换过会话的人物或由图像想起人物的姓 名这样的用途。
接着，说明同一会话检测部128中的处理。 <同一会话集团检测处理>
图13、14是表示同一会话集团检测处理的流程的图。可佩戴式终端100 通过每隔一定时间执行图13、 H所示的处理，动态地检测属于同一会话集 团的可佩戴式终端。这里，设每隔3分钟进行处理。在本流程图中，i是确 定一个可佩戴式终端的变量。首先，同一会话集团检测部128向各终端请 求方位信息、声音信息的发送(步骤S101)。接着，向本地服务器400请 求各终端及本终端的位置信息的发送(步骤S102)。从接受了请求的各终 端及本地服务器400发送响应，通信部127接收该响应。同一会话集团检 测部128判断通信部127是否接收了响应(方位信息、声音信息及位置信 息)(步骤S103)。当已接收(步骤S103:是)时，接着，从方位检测部 125及拾音部122取得本终端的方位信息及声音信息(步骤S104)。取得本 终端的方位信息及声音信息之后，初始化i (步骤S105)，对各终端进行以 下的处理(步骤S106 109)。
首先，根据取得的位置信息计算本终端与该终端之间的距离(步骤 S106)。例如，设该终端为终端100a,由图9可知各自的位置信息是pl(xl， yl， zl)、 p21 (x2， y2， z2)，所以两点间的距离是
[数式1〗
<formula>formula see original document page 16</formula>
其中，由于没有必要特别考虑z方向，因此，设置zl及z2为同一值。接 着，判断两点间的距离是否在规定的范围内。这里，设规定的范围是5m， 判断两点间的距离是否在5m以内(步骤S107)。
当两点间的距离大于5m时，判断作为本终端的环境音是否混入有该 终端的声音(步骤S108)。具体而言，比较该终端的佩戴者方向声音取得 部所取得的声音和本终端的非佩戴者方向声音取得部124所取得的声音， 判断声音的开始和结束是否一致。当一致时，判断为混入有该终端的声音。 这是考虑到该终端涉及的用户使用扩音器等的情况。即，即使两点间的距 离超过5m，由于存在本终端的佩戴者自身听到该终端涉及的用户的声音的 可能性，因此，例外地判断为存在属于同一会话集团的可能性，并继续处 理。
当两点间的距离在5m以内(步骤S107:是)、或者判断为作为本终端 的环境音混入有该终端的声音时(步骤S108:是)，对本终端和该终端分 别计算移动率信息(步骤S109)。根据每规定的时间(这里为3分钟)的 移动距离和方位的变化量，来计算移动率信息。计算出移动率信息之后， 判断两终端是否都处于停止(步骤SllO)。这是由于如果两终端都处于停 止，则属于同一会话集团的可能性高。具体而言，判断移动距离和方向的 变化量是否是0。
当判断为在移动(步骤S110:否)时，判断两终端是否都朝同一方向 移动。这是由于，即使在移动，但只要朝同一方向移动，属于同一会话集 团的可能性就很高。具体而言，判断两终端的位置信息和方位信息的变化 量是否相同。当相同时，判断为在朝同一方向移动。
当判断为两终端都处于静止(步骤S110:是)时、或当判断为两终端
都在朝同一方向移动时(步骤S111:是)时，判断两终端是否都存在发声
区间(步骤S112)。
当步骤S112为"否"时，判断在一方的终端是否存在发声区间(步骤 S114)。当在一方的终端存在发声区间(步骤S114:是)时，判断作为一 方的终端的环境音是否混入有另一方的终端的声音(步骤S115)。
当判断为两终端都不存在发声区间(步骤S114:否)时，判断两终端
是否都混入有作为环境音的同一第三者的声音(步骤S116)。具体而言， 比较本终端的非佩戴者方向声音取得部124所取得的声音和该终端的非佩 戴者方向声音取得部所取得的声音，判断声音的开始和结束是否一致。这 是因为即使两终端都不存在声音区间，但是当本终端和该终端中混入有同 一第三者声音时，存在两者在听到某说话者的声音的可能性，因此，被认 为是同一会话集团。
当两终端都存在发声区间(步骤S112:是)时，判断各自的发声区间
的重叠率是否在5%以内(步骤S113)。当判断为在5%以内(步骤S113: 是)时、以及当判断为作为一方的终端的环境音混入有另一方的终端的声 音(步骤S115:是)或两终端都混入有作为环境音的同一第三者的声音(步
骤sii6:是)时，判断为本终端与该终端属于同一会话集团(步骤sin)。
当步骤S108、 111、 113、 115、 116分别判断为否定时，判断为本终端 与该终端不是同一会话集团(步骤S118)。
使该终端的终端ID与判断结果相对应地存储(步骤S119)，判断i是 否是最后(步骤S120)，如果不是最后则对i计数l (步骤S121)，移至步 骤S106。当i为最后时，结束同一会话集团检测处理。 <制作处理>
图15、 16是表示制作处理的流程的图。这里，说明联结摄有同一会话 集团中的说话者的图像来制作一个流的处理。在本流程图中，i是确定说话 者涉及的终端以外的、同一会话集团中的一个可佩戴式终端的变量，j是确 定一个说话区间的变量。首先，向被判断为属于同一会话集团的各可佩戴 式终端请求图像信息的发送(步骤S201)。当从各可佩戴式终端接收图像 信息(步骤S202:是)时，初始化j (步骤S203)。初始化j之后，确定该 说话区间中的说话者涉及的终端(步骤S204)，并初始化i (步骤S205)。 判断说话者终端和该终端是否朝着同一方向(步骤S206)。具体而言，通 过两终端的方位信息进行判断。这是因为，如果两终端朝着不同方向，则 面对面的可能性很高，存在取得良好的说话者图像的可能性。
当两终端朝着不同方向(步骤S206:否)时，判断两终端之间的距离 是否为2m以上(步骤S207)。当两终端之间的距离不足2m (步骤S207: 否)时，则中间不存在障碍物，能够取得良好的图像的可能性极高，因此， 选择该终端的图像作为用于简档制作的候选图像(步骤S209)。当两终端 的距离在2m以上(步骤S207:是)时，判断在两终端之间是否存在障碍 物(步骤S208)。具体而言，关于障碍物有无的判断，除了根据位置信息 判断同一会话集团内的该终端和说话者终端之间是否存在第三者终端之 外，还要分析由该终端取得的图像，判断能否检测出面部图像。在能够检 测出面部图像时，判断为没有障碍物。当判断为没有障碍物(步骤S208: 否)时，选择该终端的图像作为用于简档制作的候选图像(步骤S209)。
当判断为说话者终端和该终端朝着同一方向(步骤S206)时、或选择 该终端的图像作为候选时，判断i是否为最后(步骤S210)。当不是最后时， 对i计数l (步骤S211)，移至步骤S206。当i是最后时，基于评价函数，从选择的候选中决定最后使用哪些图像。这里，评价函数使用F=f (d， r， snr)。这里，d是说话者的面部的角度、r是两终端之间的距离、snr是图像 的鲜明程度。根据说话者终端和该终端的方位信息来计算d,越接近正面评 价越高。根据说话者终端和该终端的位置信息来计算r，越近评价越高。根 据对比度或S/N比等来计算snr,越鲜明评价越高。
接着，判断j是否为最后(步骤S213)，当不是最后时，对j计数l (步 骤S214)，移至步骤S204。当j是最后时，取得与各图像对应的区间的声 音(步骤S215)，制作组合各图像和声音后的影像(步骤S216)。向属于同 一会话集团的各终端发送所制作的影像(步骤S217)。各终端接收影像， 并记录接收到的影像。由此，能够共用在同一会话集团制作的影像。 〈具体例〉
接着，说明具体例。图17是示意地表示各说话者的说话定时及通过哪 个终端取得各说话时的说话者的图像的图。第一段表示终端IOO涉及的用 户的说话定时。第二段表示终端100a涉及的用户的说话定时。第三段表示 终端100c涉及的用户的说话定时。第四段表示所决定的图像取得终端ID。 该图示出了在时刻tl t2、 t7 t8期间，终端100c涉及的用户在说话，此 时的上述用户的图像使用由终端IDOOO的终端(可佩戴式终端100)取得 的图像。同样，在时刻t3 t4、 tll tl2期间，终端IOO涉及的用户在说话， 图像使用由终端IDccc的终端(可佩戴式终端100c)取得的图像；在时刻 t5 t6、 t9 tl0期间，终端100a涉及的用户在说话，图像使用由终端IDeee 的终端(可佩戴式终端100e)取得的图像。
图18是对应图17的图，是示出了各说话者的说话定时、作为图像取 得对象的终端的终端ID及取得图像之间的关系的图。通过记录该图所示的 表，可以知道某个场景的影像是从哪个终端取得的影像。
图19是示意地表示制作的简档的图。通过组合由可佩戴式终端100取 得的声音和由在各说话定时决定的图像取得终端取得的图像，能够制作总 是摄有说话者的流。
图20是表示简档信息的内部结构的图。简档信息包括播放列表信息、 声音文件及图像文件。
定义播放列表的播放列表信息包括表示声音文件的声音文件链接信 息、表示对应的图像文件的图像文件链接信息、播放开始时刻及播放结束
时刻。由此，能够使声音信息和多个图像信息相链接。 声音文件是保存有本终端的声音信息的文件。
图像文件是保存有由属于同一会话集团的可佩戴式终端取得的图像信 息的文件。
如上所述，根据本实施方式，可佩戴式终端100取得可佩戴式终端 100 100h的位置信息、方位信息及声音信息，并从取得的各个信息中检测 属于同一会话集团的可佩戴式终端。就图3的例子而言，检测出可佩戴式 终端100a 100e (会话集团1)。因此，没有必要预先注册取得数据的可佩 戴式终端。另外，不劳烦用户动手，就能够使用属于会话集团1的可佩戴 式终端所摄影的图像或声音，制作总是摄有说话者的影像。 (实施方式2)
在实施方式1中说明了如下结构，即，可佩戴式终端IOO检测提供简 档所需图像的可佩戴式终端，并从检测到的可佩戴式终端取得图像，使用 所取得的图像卖现简档的制作(P2P型的ad-hoc (自组织分组无线网络) 模式)。
相对于此，在本实施方式中说明如下结构，即，如图21所示，统一管 理、控制多个可佩戴式终端的制作服务器高效地决定共用图像或声音的会 话集团(会话集团1 k)，使用由属于各会话 集团的可佩戴式终端取得的图 像或声音，制作每个会话集团的简档，通过通信，向属于各会话集团的可 佩戴式终端发送所制作的简档(服务器集中管理型的服务器模式)。 <通信顺序>
说明服务器集中管理型中的通信顺序。基本上与图7所说明的通信顺 序相同。
〈制作服务器的结构〉
接着，说明制作服务器500的内部结构。图22是表示制作服务器的功 能模块的图。制作服务器500包括通信部510、同一会话集团检测部520、 说话定时提取部540、被摄体检测部550、摄影条件判断部560、记录部570 及制作部580。.
通信部510接收从各可佩戴式终端发送的方位信息和声音信息、以及 从本地服务器400发送的各可佩戴式终端的位置信息。将接收到的方位信
息、声音信息、位置信息送出到同一会话集团检测部520，将声音信息送出 到说话定时提取部540及记录部570。另外，从检测到的属于同一会话集团 的可佩戴式终端接收图像信息，并送出到记录部570。进而，向各可佩戴式' 终端发送所制作的简档。
如图23所示，同一会话集团检测部520包括聚类部521、群集内会 话集团检测部522、说话信息计算部523及适合度计算部524。
聚类部521从通信部510接收各可佩戴式终端的位置信息，基于接收 到的各可佩戴式终端的位置信息，将多个可佩戴式终端聚类成规定的群集 数kO。向群集内会话集团检测部522发送聚类的结果。这里，利用k-means
进行聚类。后述具体的处理流程。
群集内会话集团检测部522从聚类部521接收聚类的结果。在各群集
中，根据各终端的声音信息计算说话的重叠度，并对应计算出的重叠度、 位置信息及方位信息，检测出k个同一会话集团。向说话信息计算部523 送出检测结果。
说话信息计算部523具有从群集内会话集团检测部522接受同一会话 集团的检测结果、计算属于各会话集团内的说话者的说话信息(说话时间 率、说话者交换频率)的功能。说话时间率是指某个人说话的时间在交换 会话时间整体内所占据的比例。对各说话者计算说话时间率。说话者交换 频率是指每单位时间产生的、会话集团内发生的说话者交换的次数。
进而，根据这些说话信息，计算会话集团的会话活跃度，将计算出的 会话活跃度送出到适合度计算部524。如下这样定义会话活跃度，即，各说 话者的说话时间率越均等、并且说话者交换频率越高，则视为会话越活跃， 取值最大。
适合度计算部524从聚类部521接受位置信息，从说话信息计算部523 接受会话活跃度及方位信息，根据位置信息和方位信息计算移动率信息。 另外，当在各群集内存在不属于会话集团的人并且在同一群集内存在多个 会话集团时，针对不属于会话集团的人，计算对各会话集团的会话集团适 合度。如下这样定义会话集团适合度，即，根据该人的位置信息、方位信 息、移动率、及作为对象的会话集团的会话活跃度来计算会话集团适合度， 越接近会话集团的位置、越朝向会话集团的方向、越向会话集团的方向移 动、会话集团的活跃性越高，则视为适合度越高，取值越大。结果，不属 于会话集团的人将属于会话集团适合度最高的集团。
对于说话定时提取部540、被摄体检测部550、摄影条件判断部560及 制作部580，与实施方式1所说明的说话定时提取部126、被摄体检测部129、 摄影条件判断部130及制作部131相同。
记录部570适当记录通过通信部510接收到的、由各终端取得的声音 信息及图像信息。另外，记录由制作部580制作的简档。 〈可佩戴式终端的结构〉
说明可佩戴式终端600的内部结构。图24是表示可佩戴式终端600的 功能模块的图b可佩戴式终端包括摄像部601、拾音部602、方位检测部 603、通信部604及记录部605。
摄像部601、拾音部602及方位检测部603与实施方式1所说明的摄像 部121、拾音部122及方位检测部125相同。
通信部604向制作服务器500发送方位信息和声音信息，另外，由制 作服务器接收简档。将接收到的简档送出给记录部605。
记录部605将由通信部604送出的简档记录到记录介质。 〈制作服务器的动作〉
使用图25 27来说明制作服务器500的处理流程。首先，制作服务器 500向各可佩戴式终端请求方位信息及声音信息的发送(步骤SS301)。向 本地服务器400请求各可佩戴式终端的位置信息的发送(步骤S302)。当 接收到了方位信息、声音信息及位置信息(步骤S303:是)时，进行聚类 处理(步骤S304),将各终端分类为多个群集。当分类结束时，在各群集 中，进行同一会话集团检测处理2 (步骤S305)，检测出同一会话集团。在 各同一会话集团中，进行制作处理(步骤S306)，制作简档。另外，对于 制作处理，与实施方式1所说明的图15、 16示出的制作处理相同。 〈聚类处理〉
接着，说明聚类处理。图26是表示聚类处理的流程的图。在该流程图 中，i是表示一个终端的变量，j是表示一个群集的变量，n是终端数，k是 群集数。首先,对各终端xi (i-i…n)随机分配群集(步骤S401)，根据 分配到的终端，计算各群集的中心Vj (j-j…k)(步骤S402)。在计算中使
用分配到的终端的各要素的平均(重心)。初始化i、 j (步骤S403)，计算 该终端xi与该群集的中心Vj之间的距离(步骤S404)。判断是否是j=k (步骤S405)，当不是j-k时、对j计数l (步骤S406),移至步骤S404。 当j-k时、根据随机分配的群集来判断是否存在距离较近的群集(步骤 S407)。当存在距离较近的群集时，将该终端xi重新分配给中心最近的群 集(步骤S408)。在重新分配之后或者当步骤S407为"否"时，判断是否 是i-n (步骤S409)，当不是i-n时，对i计数1 (步骤S410)，移至步骤 S404。当上述处理中全部的终端xi的群集的分配没有发生变化时，结束处 理(步骤S411:是)。否则，根据新分配的群集再次计算群集的中心Vj， 重复上述处理(移到步骤S402)。这样，对位置较近的终端彼此之间渐渐 进行聚类。
〈同一会话集团检测处理2 〉
接着，说明同一会话集团检测处理2。图27是表示同一会话集团检测 处理2的流程的图。在本流程图中，j是表示一个群集的变量。首先，在各 群集中，根据各群集内的各终端的声音信息计算说话重叠度(步骤S501)。 基于计算的说话重叠度、位置信息及方位信息，检测同一会话集团(步骤 S502)。具体而言，在各群集中，对属于该群集的可佩戴式终端组合进行图 13、 14中的步骤S106 117的处理。当判断为被判断为同一会话集团的 可佩戴式终端的每个互为同一会话集团时，上述可佩戴式终端的每个成为 同一会话集团。例如，就图21的例子而言，会话集团1意味着判断为可佩 戴式终端600和600a、 600a和600b、 600b和600分别为同一会话集团。
接着，按照各会话集团计算说话信息(步骤S503),根据计算出的说 话信息，计算各会话集团的会话活跃度(步骤S504)。计算出会话活跃度 之后，初始化j (步骤S505)，判断在该群集内是否存在不属于会话集团的 人、以及该群集内是否有多个会话集团(步骤S506)。当判断为肯定时， 计算对各会话集团的会话集团适合度(步骤S507)，判断为归属于其中会 话集团适合度最高的会话集团(步骤S508)。并且判断该群集内是否还存 在不属于会话集团的人(步骤S509)。当存在不属于会话集团的人时，移 至步骤S507。当不存在不属于会话集团的人时，或步骤S506的判断为否 定时，判断j是否为最后(步骤S510)，当j不是最后时对j计数l (步骤 S511)，移至步骤S506。当j为最后时，结束处理。
〈同一会话集团检测处理2的具体例>
图28 (a)是俯视某时刻21个人的位置时的图形。在该图中没有图示， 但是，设定通过与图6同样的系统取得各终端的位置信息。图28 (b)表示 由聚类部521进行聚类之后的结果。这里，群集数是3。图28 (c)表示各 人对会话的积极性及朝向。图28 (d)表示由群集内会话集团检测部522 检测到会话集团之后的结果。这里表示了，在群集1中检测到会话集团1-1、 会话集团1-2两个会话集团，在群集2中检测到会话集团2-l、会话集团2-2 两个会话集团，在群集3中检测到会话集团3 —个会话集团。图28 (e)表 示最终所有参加者被分到某个会话集团的结果。从该图可知，会话集团1-1、 会话集团1-2分别被扩大，会话参加频率少的人或没有参加会话的人被包 含到各个会话集团中。
如上所述，根据本实施方式，制作服务器500将作为管理对象的可佩 戴式终端分类成群集，按照群集决定会话集团，使用由属于各会话集团的 可佩戴式终端取得的图像或声音，能够简单地制作每个会话集团的简档。 另外，通过采取先根据位置信息进行粗略的聚类的方法，在一次处理多人 数时，能够减少寻找各会话集团时的试行次数，能够大幅度縮减运算量。 (实施方式3)
在实施方式1及2中，根据说话区间的重叠度进行了属于同一会话集 团的可佩戴式终端的检测，但是，本实施方式不仅使用说话区间的重叠度， 还能够检测对说话者的附和并将其使用在同一会话集团检测处理中。本实 施方式说明将附和用于同一会话集团检测处理中的情形。这里所指的附和 是指"哎 ""哦 ""嗯 "等包含元音长音的词。附和大多是这样的元 音长音，并且其本身大多就是一个客套话。因此，例如使用倒谱或LPC系 数等表示以元音为特征的数值的参数进行元音检测，根据其延续时间例如 200msec以上、2sec以内这样的条件判断方法，能够简单地进行附和检测。 当然，附和检测方法不限定在这里列举的方法。
在会话中，附和大多数重叠插入在对方的说话区间。例如，说话者A 正在说话，倾听该说话的下一个说话者B进行附和的模式。因而，在说话 者A、 B的会话重叠、并且说话者B的说话是在说话者B的说话区间的开 头且是附和的情况下，该说话不被视为重叠区间，由此，减少了说话重叠
时间，有望提高作为同一会话集团的检测性能。
另外，也经常有当说话者A的说话结束时、说话者B将附和覆盖在对 方的说话上并接着由说话者B单独进行说话的模式。这是将附和作为连接 来继续会话的会话技巧，当出现这种模式时，也能够判断为说话者A、 B 是同一会话集团的可能性极高。因此，当检测到这种模式时，即使说话的 重叠比例达到卯 95%,也可以将其判断为是同一会话集团。
如上所述，根据本实施方式，能够通过检测附和来提高同一会话集团 的检测准确度。 (补充)
以上基于实施方式说明了本发明涉及的可佩戴式终端，但是本发明不 局限于上述实施方式。
在上述实施方式中作为检测各可佩戴式终端的位置的方法，使用了红 外线标签及红外广角摄像机，但是不局限于此。例如可以使用GPS进行位 置检测，可以利用超声波进行位置检测，可以利用无线LAN进行位置检测， 可以利用RF-ID标签进行位置检观!I,也可以使用除此之外的方法进行位置 检测。另外，例如使用GPS进行位置检测时，从各可佩戴式终端取得各自 的位置信息。
在上述实施方式中设定可佩戴式终端是摄像机型，但也可以是表型、 笔型、眼睛型等。
在上述实施方式中设定为如图1所示那样佩戴可佩戴式终端，但是并 不局限于此，也可以是用别针将终端别在胸前，或者做成眼睛状戴着，或 者做成耳机那样的形状戴在身上。
在上述实施方式中，作为通信方式使用了无线LAN，但可以是蓝牙 (Bluetooth),也可以利用其他通信方式。只要是能够传输图像、声音、位 置及方向等信息就可以，无线通信、有线通信、利用IP网的数据包通信等 任何方式都可以。
在上述实施方式中，使用了声音信息、位置信息及方位信息进行同一 会话集团的检测，但是也可以只使用声音信息进行同一会话集团的检测。 由于能够取得声音的范围大致为几米，距离再远就不能够收集到声音，因 此，根据能否收集到声音，能够推测一定程度的距离。即，当不能够收集
到声音时，发出该声音的用户涉及的可佩戴式终端不被视为同一会话集团。 另外，也可以根据声音信息和位置信息进行同一会话集团的检测，也可以 根据声音信息和方位信息进行同一会话集团的检测。
在上述实施方式中，检测了属于同一会话集团的可佩戴式终端，但是 不局限于会话集团。例如可以检测在某地点共用兴趣对象的可佩戴式终端， 也可以检测只是位置较近的可佩戴式终端。
在上述实施方式中，在某说话者的说话定时取得该说话者的图像的终 端是根据评价函数所决定的一个终端，但是也可以决定评价高的多个终端， 组合由该多个终端取得的图像来制作简档。由此，能够获得来自各种角度 的影像。
在上述实施方式中，制作部131连接组合总是摄有说话者的影像来制 作简档，但是也可以制作只摄有特定人物的一个流。例如，当制作可佩戴 式终端100的用户涉及的影像时，不考虑说话定时，该可佩戴式终端100 只要组合根据评价函数选择的摄有自身的图像和由该终端100取得的声音 就可以。具体而言，如以下的流程所述。
图29是表示制作处理2的流程的图。在本流程图中，i是确定一个可 佩带终端的变量。首先，向被判断为属于同一会话集团的各可佩戴式终端 请求图像信息的发送(步骤S601)。当从各可佩戴式终端接收图像信息(步 骤S602:是)时，初始化i (步骤S603)。初始化i之后，判断本终端与该 终端是否朝向同一方向(步骤S604)。
当两终端朝向不同方向(步骤S604:否)时，判断两终端之间的距离 是否为2m以上(步骤S605)。当两终端之间的距离不到2m (步骤S605: 否)时，选择该终端的图像作为用于简档制作的候选图像(步骤S607)。 当两终端之间的距离在2m以上(步骤S605:是)时，判断两终端之间是 否存在障碍物(步骤S606)。当判断为不存在障碍物(步骤S606:否)时， 选择该终端的图像作为用于简档制作的候选图像(步骤S607)。
当判断为本终端和该终端朝向同一方向(步骤S604:是)时，在判断 为两终端之间存在障碍物(步骤S606:是)时或步骤S607的处理之后， 判断i是否为最后(步骤S608)。当i不是最后时，对i计数1 (步骤S609)， 并移至步骤S604。当i为最后时，基于评价函数从所选择的候选中决定最
终使用哪些图像。然后，取得与图像对应的区间的声音(步骤S611),制 作组合了图像和声音的影像(步骤S612)。
在上述实施方式中，基于评价函数选择了在简档中使用的图像，但也 可使用从较近图像开始依次逐步选择的简单方法。
在上述实施方式中，对于障碍物的有无的判断，除了根据位置信息判 断同 一会话集团内的该终端和说话者终端之间是否存在第三者终端之外， 还有分析由该终端取得的图像、如果能够检测出面部图像则判断为没有障 碍物的方法，但还可以是，判断检测出的面部图像和本终端与该终端形成 的方向矢量是否能够匹配，如果能够匹配则判断为没有障碍物。
在上述实施方式中设定评价函数为F-f(d， r， snr)，但是不局限于此，
也可以将连续选择同一画面而引起的冗余度(越连续选择越冗余，越不好) 作为评价对象。根据时间长度来计算该冗余度。
在上述实施方式中，当位置及方位的变化量相同时，图13的步骤Slll 判断为在向同一方向移动，但是，也可以是当本终端的位置及方位的变化 量和该终端的位置及方位的变化量在规定的范围内时，判断为在向同一方 向移动。
在上述实施方式中，从属于同一会话集团的可佩戴式终端取得图像信 息来制作简档，但是也可以取得声音信息，也可以取得与会话有关的曰志， 例如，当由可佩戴式终端进行视频摄影时，虽是同一会话集团但处于距离 较远位置的人的说话声音有时基本上没有进入到由该终端收集的声音中， 但是，通过使用由该说话者涉及的终端收集到的声音，能够记录清晰的声 音。另外，通过使用彼此的会话日志，能够记录清晰的会话。
另外，也可以不是实时地从属于同一会话集团的可佩戴式终端取得数 据(图像、声音、日志等)。
在上述实施方式中，每隔一定间隔实施会话集团检测处理，但是也可 以当各可佩戴式终端的位置信息每次呈现变化之际实施。另外，当位置信 息有变化时，应当按照可佩戴式终端涉及的用户所属的会话集团来提供共 用的影像。例如，在图2中，可佩戴式终端100b的用户取得停留在会话集 团1期间为止的会话影像，对于之后加入到会话集团2的会话影像，只取 得加入时间以后的影像就可以。另外，当中途加入会话时，由于考虑到有
时想了解之前的会话集团的会话内容，在这种情况下，可佩戴式终端还可 以具备短时间播放会话集团中过去进行过的会话内容的构造。
在上述实施方式l中，构成同一会话集团的终端的终端ID与声音、图 像、时间相关联地记录，但是如图30所示，也可以一并记录各终端的方位 信息、位置信息、由各终端取得的声音等。由此，所摄影的影像的方位及 位置作为记录被留下，因此，例如能够使用方位信息来判别逆光的有无， 或者根据位置信息来自动记录是在哪里记录的影像。
在上述实施方式1中，可佩戴式终端IOO进行了属于同一会话集团的 可佩戴式终端的检测和简档的制作，但是也可以构成为可佩戴式终端100 进行上述可佩戴式终端的检测，另外包含进行简档制作的服务器。
在上述实施方式1中，可佩戴式终端IOO进行同一会话集团检测处理 及简档制作处理，但是，也可以是例如在会话开始时最先说话的人所佩戴 的终端代表会话成员进行同一会话集团检测处理或简档制作处理。另外， 也可以是，到同一会话集团检测处理为止由各终端每隔各自规定的一定间 隔来单独常时实施，对于简档制作处理，最先说话的人所佩戴的终端作为
代表进行该处理，也可以是会话成员中的任意某一个终端作为代表进行处 理，也可以是说话时间较长的终端作为代表进行处理。
在上述实施方式2中，基于位置信息进行了聚类，但是可以是，使用 各终端的方位信息向朝向的方向移动该人物的重心位置、或者使用移动率 信息向该人物朝向的方向移动该人物的重心位置，从而给集团整体的位置 重心带来影响。另外，也可以是群集数kO随着检测到的参加人数而改变， 例如，参加人数越多则使群集数kO越多。
在上述实施方式2中，即使是没有说话的人，也通过求取适合度使其 从属于某个会话集团，但对于完全没有说话的人，没有必要如图28 (e)所 示牵强地判断其属于哪个会话集团，也可以在图28 (d)终止判断。
另外，对于是否是同一会话集团，并不局限于上述实施方式l、 2所说 明的同一会话集团检测处理，也可以是说话的重叠度越小、位置越近、以 及越互相面对、则越判断为同一会话集团的方法。
在上述实施方式2中构成为，向可佩戴式终端发送由制作服务器500 制作的简档、接收到所发送的简档的可佩戴式终端将其存储，但也可以是，
可佩戴式终端具备影像播放部，制作服务器通过流处理将简档送出。另外， 当可佩戴式终端不具备取景器时，也可以只当作传感器终端。
在上述实施方式中，使用声音的重叠度检测了同一会话集团，但也可 以根据使用由拾音部取得的声音信息进行声音识别，根据所识别的文字信 息和作为由通信部取得的其他终端的声音识别结果的文字信息，来检测同 一会话集团。例如，当各个文字信息中以一定频率以上含有关键字时，可 以当作是同一会话集团。
如图2所示，在上述方式中说明了各种人物正随意地进行会话时的终 端配置例子(聚会型的终端配置)，但是，本发明也能够适应于很多人物面 对一个人物进行会话时的终端配置(学校型)或对于一个物品很多人排队 边鉴赏边进行会话时的终端配置(鉴赏型)。
在上述实施方式中，实施方式2的服务器集中管理型的情况下设定服 务器装置进行聚类处理，但是在实施方式1的P2P型的ad-hoc模式的情况 下，可佩戴式终端也可以进行聚类处理。
产业的实用性
本发明适用于附近存在的多个人分别佩戴可佩戴式终端的情形。
权利要求
1、一种可佩戴式终端，在多个人参加的活动中，被戴在参加该活动的人物的身体上，其特征在于，具备请求单元，对规定范围内存在的多个可佩戴式终端发送请求信号，并接收对请求信号的响应；以及通信单元，基于接收到的响应，决定作为通信对方的一个以上的可佩戴式终端，并执行与决定出的可佩带式终端之间的数据通信；上述数据是由被决定作为通信对方的可佩戴式终端收集的数据，并在制作上述活动的简档时作为该简档的构成要素。
2、 如权利要求1所述的可佩戴式终端，其特征为， 上述通信单元针对上述多个可佩戴式终端的每一个，基于接收到的响应，判断是否是与本终端属于同一个会话集团的可佩戴式终端，并将被判 断为属于同一个会话集团的可佩戴式终端决定为通信对方。
3、 如权利要求2所述的可佩戴式终端，其特征为， 上述响应包括由接受了请求信号的各可佩戴式终端取得的声音信息； 上述通信单元包括重叠率计算单元，该重叠率计算单元计算接收到的各可佩戴式终端的声音信息中的发声区间与本终端的声音信息中的发声区 间之间的重叠率；被判断为与本终端属于同一个会话集团的可佩戴式终端是上述多个可 佩带终端中与本终端的声音信息中的发声区间之间的重叠率在规定的阈值 以内的可佩戴式终端。
4、 如权利要求3所述的可佩戴式终端，其特征为， 上述声音信息中的发声区间包括作为规定期间元音持续的部分的会话中的附和；上述重叠率计算单元除去上述附和的区间来计算重叠率。
5、 如权利要求3所述的可佩戴式终端，其特征为， 上述响应包括接受了请求信号的各可佩戴式终端的位置信息； 上述通信单元包括距离计算单元，该距离计算单元根据接收到的各可佩戴式终端的位置信息和本终端的位置信息，分别计算该可佩戴式终端与 本终端之间的距离；被判断为与本终端属于同一个会话集团的可佩戴式终端是上述多个可 佩戴式终端中与本终端之间的距离在规定的阈值以内的可佩戴式终端。
6、 如权利要求5所述的可佩戴式终端，其特征为， 上述响应包括接受了请求信号的各可佩戴式终端的方位信息； 上述通信单元包括方位变化量计算单元，该方位变化量计算单元根据接收到的各可佩戴式终端的方位信息，计算每规定时间的方位信息的变化被判断为与本终端属于同一个会话集团的可佩戴式终端是上述多个可 佩戴式终端中与本终端的方位变化量之差在规定的范围内的可佩戴式终端。
7、 如权利要求2所述的可佩戴式终端，其特征为， 由本终端进行上述活动的简档的制作，上述通信单元向上述一个以上的可佩戴式终端发送所制作的简档。
8、 如权利要求7所述的可佩戴式终端，其特征为， 上述收集到的数据是图像；在上述决定出的可佩戴式终端中，基于各说话者涉及的可佩戴式终端 与摄有该说话者的图像的可佩戴式终端之组，来制作上述简档。
9、 如权利要求7所述的可佩戴式终端，其特征为，使用由上述决定出的可佩戴式终端中说话者涉及的可佩戴式终端收集 的声音，来制作上述简档。
10、 如权利要求2所述的可佩戴式终端，其特征为， 上述可佩戴式终端具备记录单元，该记录单元记录与上述决定出的可佩戴式终端相关的数据。
11、 一种方法，其特征为，包括请求步骤，对规定范围内存在的多个可佩戴式终端发送请求信号，并接收对请求信号的响应；以及通信步骤，基于接收到的响应，决定作为通信对方的一个以上的可佩戴式终端，并执行与决定出的可佩带式终端之间的数据通信；上述数据是由被决定作为通信对方的可佩戴式终端收集的数据，并在制作上述活动的简档时作为该简档的构成要素。
12、 一种计算机可读取的程序，其特征为，使计算机执行包括请求步 骤和通信步骤的处理，该请求步骤为，对规定范围内存在的多个可佩戴式终端发送请求信号， 并接收对请求信号的响应；该通信步骤为，基于接收到的响应，决定作为通信对方的一个以上的 可佩戴式终端，并执行与决定出的可佩带式终端之间的数据通信；上述数据是由被决定作为通信对方的可佩戴式终端收集的数据，并在 制作上述活动的简档时作为该简档的构成要素。
13、 一种服务器装置，在多个人参加的活动中，与被戴在参加该活动 的人物身体上的可佩戴式终端进行数据通信，其特征在于，具备请求单元，对规定范围内存在的可佩戴式终端发送请求信号，并接收 对请求信号的响应；通信单元，基于接收到的响应，决定作为通信对方的一个以上的可佩 戴式终端，并执行与决定出的可佩带式终端之间的数据通信；制作单元，使用由作为上述通信对方而决定出的可佩戴式终端所收集 的数据，来制作上述活动的简档；以及发送单元，向上述一个以上的可佩戴式终端发送所制作的简档。
14、 如权利要求13所述服务器装置，其特征为， 上述服务器装置包括聚类单元，该聚类单元取得表示上述多个可佩戴式终端的位置的位置信息，并基于取得的位置信息将上述多个可佩戴式终 端聚类成多个群集；上述通信单元按照各群集进行作为上述通信对方的一个以上的可佩戴 式终端的决定。
全文摘要
一种可佩戴式终端，在多个人参加的活动中，被戴在参加该活动的人物的身体上，其特征在于，该可佩戴式终端具备请求单元，对规定范围内存在的多个可佩戴式终端发送请求信号，并接收对请求信号的响应；以及通信单元，基于接收到的响应，决定作为通信对方的一个以上的可佩戴式终端，并执行与决定出的可佩带式终端之间的数据通信；上述数据是由被决定作为通信对方的可佩戴式终端收集的数据，并在制作上述活动的简档时作为该简档的构成要素。
文档编号H04N5/225GK101390380SQ20078000673
公开日2009年3月18日 申请日期2007年2月21日 优先权日2006年2月28日
发明者三崎正之, 山内真树, 川西亮一, 河村岳 申请人:松下电器产业株式会社