数据库产生方法、程序、设备和图像内容记录设备的制作方法

文档序号:6614147阅读:304来源:国知局
专利名称:数据库产生方法、程序、设备和图像内容记录设备的制作方法
技术领域
本发明涉及适合于用在硬盘记录器上的数据库产生方法,数据库 产生程序,数据库产生设备和图像内容记录设备,所述硬盘记录器用 于记录各种图像数据,比如摄像机的拾取图像数据,地波数字广播节 目等。
背景技术
相关技术中的硬盘记录器是可得到的,该硬盘记录器不仅记录电 视广播节目,而且自动产生管理这些电视广播节目的管理列表。硬盘 记录器把表示电视广播节目的标题、内容等等的文本信息记录到所述 管理列表中,以致可被用于列表显示、搜索电视广播节目等等。
如上所述的这些硬盘记录器以文本信息的形式从通过地波数字
广播分发的广播信号中获得表示电视广播节目的排片日程表、标题和 内容等等的EPG(电子节目指南)信息。
在日本专利公开No.2003-36259中提出了另一种硬盘记录器。该 硬盘记录器获得流式内容所具有的文本信息,以便把该信息记录到管 理通过因特网等分发的流式内容的管理列表中,并利用该信息进行搜 索等等。

发明内容
顺便提及,硬盘记录器被配置成不仅能够把地波数字广播节目和 流式内容记录成图像内容,而且能够把私人数据,比如摄像机拾取的 拾取图像数据和用户独自编辑的编辑数据等记录成图像内容。但是, 由于这样的私人数据并不具有添加于其中的表示标题或内容的文本
信息,因此硬盘记录器具有难以获得表示私人数据的内容(substance) 的文本信息的问题。
于是,需要提供一种能够容易地产生与图像内容关联的内容字符 信息的数据库的数据库产生方法、数据库产生程序、数据库产生设备 和图像内容记录设备。
按照本发明的一个方面,提供一种数据库产生方法,包括从图像 内容中选择某些图像,各作为代表该图像内容的典型图像的典型图像 选择步骤,使显示设备显示典型图像的显示处理步骤,允许用户输入 与典型图像对应的输入图像文本信息的操作输入步骤,和数据库产生 步骤,所述数据库产生步骤彼此关联地登记按照预定提取方法从典型 图像提取的典型特征信息和在操作输入步骤输入的图像文本信息,从 而产生数据库,以便通过利用按照提取方法从任意图像内容提取的每 个图像的任意图像特征信息,获得与该任意图像内容具有的图像对应 的内容字符信息。
借助该数据库产生方法,通过使用户执行输入与显示的典型图像 对应的图像文本信息的简单操作,能够产生数据库。
按照本发明的另一实施例,提供一种图像内容记录设备,包括记 录图像内容的记录部分,从图像内容中选择某些图像,各作为代表该 图像内容的典型图像的典型图像选择部分,使显示设备显示典型图像 的显示处理部分,允许用户输入与典型图像对应的输入图像文本信息 的操作输入部分,和数据库产生部分,所述数据库产生部分被配置成 彼此关联地登记按照预定提取方法从典型图像提取的典型特征信息 和由操作输入部分输入的图像文本信息,从而产生数据库,以便通过 利用按照提取方法从任意图像内容提取的每个图像的任意图,特征 信息,获得与该任意图像内容具有的图像对应的内容字符信息。
借助该图像内容记录设备,通过使用户执行输入与显示的典型图 像对应的图像文本信息的简单操作,能够产生数据库。
借助该数据库产生方法和图像内容记录设备,通过如上所述使用 户执行输入与显示的典型图像对应的图像文本信息的简单操作,能够 产生数据库。从而,能够容易地产生与图像内容关联的内容字符信息 的数据库。
结合附图,根据下面的说明和附加权利要求,本发明的上述和其 它目的、特征和优点将变得明显,附图中,相同的部分或元件用相同 的附图标记表示。


图1是表示应用本发明的实施例的硬盘记录器的一般结构的方
框图2是表示硬盘记录器的数据库产生处理的功能块的方框图3是表示文本输入屏幕图像的示意图4是表示键盘屏幕图像的示意图5是图解说明图2中所示的图像文本数据库的示图6是表示硬盘记录器的候选标题获取处理的功能块的方框图7是图解说明图6中所示的拾取图像数据管理列表的示图8A和8B是表示候选标题文本的显示屏幕图像的示意图9是图解说明硬盘记录器的图像文本数据库产生处理的流程
图io是图解说明硬盘记录器的候选标题显示处理的流程图。
具体实施例方式
l、硬盘记录器的一般结构
首先参考图l,图中表示了应用本发明的实施例的硬盘记录器。 硬盘记录器用l概括表示,并且一般被配置成以致它能够把从摄像机 (未示出)输入的拾取图像数据记录成视频内容,并接收和记录地波数
字广播的电视广播节目。
在硬盘记录器l中,由未示出的CPU(中央处理器)、ROM(只读 存储器)和RAM(随机存取存储器)形成的控制部分2全面控制整个硬 盘记录器1。控制部分2把保存在ROM或者硬盘驱动器4中的基本 程序、数据库产生程序和候选标题显示程序等等装入RAM中,并根 据这些程序执行各种处理或者后面说明的文本数据库产生处理和候 选标题显示处理。
如果从用户操纵的外部遥控器30发出请求,那么硬盘记录器1 通过遥控器接口 10获得遥控器30产生的操作信号,并把获得的信号 供给控制部分2。
例如,如果从遥控器接口 IO供给表示记录由与外部接口 11连接 的摄像机(未示出)保存的拾取图像数据的记录请求的操作信号,那么 控制部分2执行拾取图像数据的记录处理。
具体地说,控制部分2控制硬盘驱动器4把通过外部接口 11从 摄像机(未示出)输入的拾取图像数据记录成录制的图像拾取数据。此 时,控制部分2把由序列号等构成的拾取图像数据ID添加到录制的 图像拾取数据中。
此外,控制部分2以与拾取图像数据ID关联的方式登记添加到 拾取图像数据中的图像拾取日期和时间信息,以及输入信息,从而以 管理列表的形式产生下面详细说明的拾取图像数据管理列表43。图像 拾取日期和时间信息表示图像拾取的日期和时间,编辑的日期和时间 等等。同时,输入信息表示外部接口 11的通过其输入拾取图像数据 的一个输入端子。控制部分2产生的拾取图像数据管理列表43被记 录到闪速存储器5中。
此外,如果从遥控器接口 10供给表示再现记录在硬盘驱动器4 中的录制图像拾取数据的再现请求的操作信号,那么控制部分2执行 录制图像拾取数据的再现处理。
具体地说,控制部分2从硬盘驱动器4读取用户指定的录制图像 拾取数据,并把该录制图像拾取数据中的再现图像数据和声音数据分
别传给声音解码器12和声音解码器13。
控制部分2按照预定解码算法利用声音解码器12解码再现图像 数据。此外,控制部分2借助图像信号处理电路14,执行把解码的再 现图像信号DP转换成模拟信号的处理,混合处理等等,随后把所得 到的信号发给图像输出端子16。从而,控制部分2控制与图像输出端 子16连接的显示设备(未示出)根据再现图像信号DP显示图像。
此外,控制部分2按照预定的解码方法通过声音解码器13解码 声音数据,通过数-模转换器15把解码的声音信号转换成模拟信号。 随后,控制部分2把得到的信号传给声音输出端子17。从而,控制部 分2控制与声音输出端子17连接的扬声器(未示出)输出基于该声音数 据的声音。
这样,硬盘记录器1记录和再现图像内容。比如从外部接口 11 输入的拾取图像数据。
另外,如果从遥控器接口 IO发出供给表示记录正在广播的电视 广播节目的画面记录请求的操作信号,那么控制部分2接收正在广播 的电视广播节目,并执行电视广播节目的记录处理。
具体地说,控制部分2控制调谐器21选择和接收所选频道的频 带的数字广播信号,并把数字广播信号传给解调器22。控制部分2控 制解调器22解调数字广播信号,控制解扰器23解扰解调的数字广播 信号。随后,控制部分2控制多路分用器24把解扰的数字广播信号 分成广播图像数据包、声音数据包和信息包。随后,控制部分2把广 播图像数据和声音数据作为录制节目记录到硬盘驱动器4。
此外,当将要结束记录处理时,控制部分2登记从内部时钟25 获得的电视广播节目的记录日期和时间,从EPG(电子节目指南)信息 提取的录制节目的标题信息,和表示录制节目的内容的节目文本信息 等等,从而产生录制节目管理列表。这样产生的录制节目管理列表被 记录到闪速存储器5中。
此外,如果从遥控器接口 10发出表示显示记录到硬盘驱动器4 中的录制节目的列表的显示请求的操作信号,那么控制部分2从闪速 存储器5读取录制节目管理列表。随后,控制部分2根据录制节目管 理列表产生图像数据,并把产生的图像数据传给声音解码器12。从而, 控制部分2执行和录制图像拾取数据的再现处理类似的处理,从而控 制显示设备(未示出)根据录制节目管理列表显示节目表。
这样,除了通过外部接口 11输入的拾取图像数据的记录处理和 再现处理之外,硬盘记录器1执行把正在广播的电视广播节目记录成 录制节目的处理。另外,硬盘记录器1能够响应用户的需求,根据利 用EPG信息自动产生的录制节目管理列表,控制显示设备显示包括 录制节目管理列表的标题信息等等的节目表。
2、图像文本数据库的产生
顺便提及,表示拾取图像数据的标题和内容的文本信息未被加入 如上所述通过外部接口 11输入的拾取图像数据中。于是,在录制拾 取图像数据的时候,现有技术的硬盘记录器难以自动把建议表现录制 的图像拾取数据的内容,或者拾取图像数据的内容的标题的文本信息 自动登记到拾取图像数据管理列表43中。
各种技术已众所公知。表现图像特征的特征信息提取自诸如拾取 图像数据之类的图像数据,并且提出了 一种利用特征信息能够确定图 像之间的相似性的方法。在多个图像彼此相似的情况下,认为图像表 现的内容基本彼此相同。于是,认为表现图像之一的内容的文本信息 也表现确定为相似的其它图像的内容的可能性较高。
因此,认为如果硬盘记录器1具有记录与图像的特征信息对应的 图像文本信息的数据库,那么硬盘记录器1可使用特征信息来检测与 由录制图像拾取数据保持的图像类似的图像,并把与所检测图像的特 征信息对应的图像文本信息用作提示录制图像拾取数据的内容的内 容字符信息。
于是,本实施例的硬盘记录器1被配置成产生其中记录与图像的 特征信息对应的图像文本信息TX。下面说明产生图像文本数据库42 的数据库产生处理。在该数据库产生处理中,硬盘记录器l的控制部 分2执行数据库产生程序,从而实现如图2中所示的功能块。
硬盘记录器1被配置成以致当它执行记录在硬盘驱动器(图l)中 的录制图像拾取数据的再现处理时,与该再现处理同时地执行数据库 产生处理。
具体地说,硬盘记录器1的控制部分2把图像解码器12解码的 再现图像信号DP提供给图像信号处理电路14,控制显示设备(未示 出)根据再现图像信号DP显示图像。此外,控制部分2控制图像解码 器12把再现图像信号DP提供给如图2中所示的控制部分2的图像分 析部分31和典型图像选择部分33。
图像分析部分31从再现图像信号DP提取再现图像特征数据 DS,作为表示形成记录的图像拾取数据的帧图像的特征的特征信息。 随后,图像分析部分31把该特征信息提供给标识符应用部分32和典 型图像选择部分33。
具体地说,当收到再现图像信号DP时,图像分析部分31把包 括在该再现图像信号DP中的每个帧图像分成5行x5列矩阵的25个 区域。随后,图像分析部分31计算每个区域的亮度信号(Y信号)的 DCT(离散余弦变换)系数。随后,图像分析部分31把对应于这25个 区域的DCT系数表示成一个25阶向量,并把该25阶向量定义成单 个帧图像单元的再现图像特征数据DS。
例如,如果序列号被应用于拾取图像数据独有的拾取图像数据 ID,从而产生特征信息标识符Tid,并且特征信息标识符Tid被加入 再现图像特征数据DS中,那么标识符应用部分32把特征信息标识符 Tid和再现图像特征数据DS供给闪速存储器5的特征数据记录部分 41,以便临时记录到RAM(未示出)中。
当收到添加特征信息标识符Tid的再现图像特征数据DS时,特 征数据记录部分41在特征信息标识符Tid与再现图像特征数据DS相 互关联的状态下,把所有的再现图像特征数据DS记录成累积特征数 据DSa。
同时,典型图像选择部分33从图像分析部分31供给的再现图像 特征数据DS中选择典型特征数据DSr,并把选择的数据DSr传给标
识符指定部分34。
具体地说,典型图像选择部分33计算作为前后两个再现图像特 征数据DS之间的向量的距离(下面称为前-后数据距离),并检测其间
据DS的组合。
此时,如果检测到其间所述前-后数据距离大于预定的场景变化 阈值的再现图像特征数据DS的組合,那么典型图像选择部分33确定 后面的再现图像特征数据DS所基于的帧图像表现出自前面的再现图 像特征数据DS所基于的帧图像的场景变化。随后,典型图像选择部 分33把后面的再现图像特征数据DS定义成典型特征数据DSr。
这里,诸如拾取图像数据之类的图像内容一般由多个块构成,每 一块包括彼此类似的图像。于是,通过检测场景变化,典型图像选择 部分33能够把从代表每一块的每个图像提取的再现图像特征数据DS 确定为典型特征数据DSr。
当从典型图像选择部分33收到典型特征数据DSr时,标识符指 定部分34相互对照添加特征信息标识符Tid的再现图像特征数据DS 和典型特征数据DSr。标识符指定部分34把与典型特征数据DSr相 符的再现图像特征数据DS的特征信息标识符Tid指定成典型特征数 据DSr的特征信息标识符Tid(下面称为典型特征信息标识符Tidr)。 随后,标识符指定部分34把典型特征信息标识符Tidr传给文本添加 部分35和典型图像选择部分33。
随后,如果录制的拾取图像数据的再现处理结束,那么典型图像 选择部分33利用典型特征信息标识符Tidr,指定用作典型特征lt据 DSr的提取源的再现图像特征数据DS(下面称为典型图像数据PDr)。 随后,典型图像选择部分33叠加该典型图像数据PDr和从ROM(未 示出)读出的图像数据,从而产生文本输入图像数据PDn,并把文本 输入图像数据PDn传给图像信号处理电路14。
从而,硬盘记录器1能够控制显示设备(未示出)显示文本输入屏 幕图像50。
在文本输入屏幕图像50上,基于典型图像数据PDr的典型图像 51被显示,并且显示句子"Please input words representative of the substance of the image"。从而,硬盘记录器1允许用户把与典型图像 51对应的图像文本信息TX输入显示在文本输入屏幕图像50的底部 的文本输入区52中。
此时,在文本输入屏幕图像50上,光标被置于键盘按钮53上, 键盘按钮53位于显示在屏幕图像50的右侧的三个按钮中的顶部。用 和其它按钮的颜色不同的颜色显示光标所位于的键盘按钮。
这里,如果在光标被置于键盘按钮3上的状态下,按下遥控器 30的确定按钮(未示出),那么典型图像选择部分33控制显示设备根 据从ROM(未示出)读取的图像数据,显示如图4中所示的键盘屏幕图 像60。
在键盘屏幕图像60上,类似于在文本输入屏幕图像50上一样, 文本输入栏52被显示在屏幕图像60的下部,光标被置于返回按钮61 或者键盘按钮组62上,在所述键盘按钮组62上,按照日语音节表的 顺序以列表形式示出平假名。
典型图像选择部分33(图2)允许用户利用遥控器30(图l)的方向 键和确定按钮(均未示出)选择键盘按钮62之一,从而用户能够输入与 典型图像51对应的图像文本信息TX。
另外,如果在光标被置于键盘屏幕图像60的返回按钮61上的状 态下,按下遥控器30的确定按钮,那么典型图像选择部分33控制显 示设备再次显示文本输入屏幕图像50(图3)。
从而,如果按下遥控器30的方向键(未示出),并且从遥控器接 口 10供给操作信号,那么典型图像选择部分33顺序把置于键盘按钮 53上的光标移动到确定按钮54和停止按钮55。
这里,如果在光标被置于确定按钮54上的状态下按下遥控器 30(图l)的确定按钮(未示出),那么控制部分2(图2)把输入的图像文本 信息TX供给文本添加部分35。
文本添加部分35把用户输入的图像文本信息TX和从标识符指
定部分34供给的典型特征信息标识符Tidr登记到闪速存储器5的图 像文本数据库42(图2)中。
从而,如图5中所示,控制部分2能够产生其中相互关联地登记 典型特征信息标识符Tidr和图像文本信息TX的图像文本数据库42。 此外,如果使用图像文本数据库42,那么控制部分2能够利用由和在 数据库产成处理类似的提取方法,从任何图像内容提取的特征信息, 得到与该图像内容对应的内容字符信息。
另一方面,如果在光标被置于停止按钮55(图3)上的状态下,按 下遥控器30的确定按钮(未示出),那么控制部分2停止数据库产生处 理。
从而,由于硬盘记录器1能够响应用户的思想状态(state of mind),允许用户确定是否要执行数据库产生处理,因此在不坚持要 求用户输入图像文本信息的情况下,硬盘记录器能够避免使用户感到 图像文本信息TX的输入麻烦。
应注意典型图像选择部分33可被配置成以致它选择与能够容易 地和诸如人或物之类文本信息关联的图像对应的再现图像特征数据 DS,随后从数据DS内选择典型特征数据DSr。这种情况下,典型图 像选择部分33被配置成以致和人或物对应的区域被显示成比周围区 域更明亮,以使用户明白他/她应输入与所述人或物对应的内容,以及 使用户正确地输入表示典型图像51的内容的图像文本信息TX。
这样,与再现处理同时地,硬盘记录器1从再现图像信号DP中 提取再现图像特征数据DS,把提取的数据记录到特征数据记录部分 41中,并从再现图像特征数据DS中选择均代表场景的典型图像数据 DPr。随后,在再现处理结束之后,硬盘记录器1控制显示设备显示 基于典型图像数据DPr的典型图像51 ,允许用户输入与典型数据DPr 对应的图像文本信息TX。此外,硬盘记录器1相互关联地登记与典 型图像数据DPr对应的典型特征信息标识符Tidr和图像文本信息 TX。从而,硬盘记录器1能够产生用于获得与图像对应的内容字符信 息的图像文本数据库42。3、候选标题的显示
下面说明利用上述图像文本数据库42执行的候选标题显示处理 (候选标题获取处理和列表屏幕图像显示处理)。在候选标题显示处理 中,硬盘记录器1的控制部分2执行候选标题显示程序,从而实现图 6中所示的功能块。
3-1、候选标题的获取
当对从外部设备,比如摄像机等输入的输入拾取图像数据进行记 录处理时,硬盘记录器1的控制部分2与记录处理同时地执行候选标 题获取处理。
具体地说,控制部分2把通过外部接口(图l)输入的输入拾取图 像数据记录到硬盘驱动器4(图l)中,把图像解码器12从输入的拾取 图像数据中解码的输入图像信号TP供给图像分析部分31 。
图像分析部分31借助和数据库产生处理中类似的处理,从输入 图像信号TP中提取每个帧图像的输入图像特征数据TS,并把输入图 像特征数据TS供给特征数据对照部分62。
当收到输入图像特征数据TS时,特征数据对照部分62从图像 文本信息TX与之关联的累积特征数据DSa中,选择到输入图像特征 数据TS的距离最小的累积特征数据DSa。
具体地说,特征数据对照部分62相互对照记录在闪速存储器5 的特征数据记录部分41中的累积特征数据DSa和输入图像特征数据 TS,从而按照到输入图像特征数据TS的距离的升序检测例如20条 累积特征数据DSa。随后,特征数据对照部分62确定检测到的累积 特征数据DSa是否登记在图像文本数据库42中。
这里,特征数据对照部分62相互对照检测的累积特征数据DSa 的特征信息标识符Tid和图像文本数据库42的典型特征信息标识符 Tidr。随后,如果任意检测到的累积特征数据DSa被登记在图像文本 数据库42中,那么特征数据对照部分62选择到输入图像特征数据 TS的距离最小的累积特征数据DSa作为最小累积特征数据DSan。
此外,特征数据对照部分62确定最小累积特征数据DSan和输
入图像特征数据TS之间的距离是否小于预定的相似性阈值。如果最 小累积特征数据DSan和输入图像特征数据TS之间的距离小于预定 的相似性阈值,那么特征数据对照部分62确定基于输入图像特征数 据TS的帧图像和基于最小累积特征数据DSan的帧图像彼此相似。 随后,特征数据对照部分62把最短距离的累积特征数据DSan的典型 特征信息标识符Tidr传给文本获取部分63。
当从图像文本数据库42获得与典型特征信息标识符Tidr对应的 图像文本信息TX时,文本获取部分63临时把图像文本信息TX作为 内容字符信息TXc保存在RAM(未示出)中。随后,结束当前输入图 像特征数据TS的处理,开始基于输入图像信号TP的下一个输入图 像特征数据TS的产生。此时,如果多次获得相同的内容字符信息 TXc,那么文本获取部分63计数获取的次数。
随后,在控制部分2结束在记录处理中,关于图像拾取图像数据 的所有录制图像数据TS获取内容字符信息TXc的 一 系列处理之后, 文本获取部分63从图像文本数据库42中,按照获取次数的降序选择 IO条内容字符信息TXc。随后,文本获取部分63把选择的信息登记 到拾取图像数据管理列表43中,如图7中所示。
从而,控制部分2能够选择内容字符信息TXc,所述内容字符信 息TXc表示在输入拾取图像数据中图像拾取时间相当长,并且在输入 拾取图像数据中表现出很高比率的帧图像,并把选择的内容字符信息 TXc确定为候选标题文本TI。从而,提示其记录处理已结束的录制拾 取图像数据的内容的可能性高的那些内容字符信息TXc可被登记成 4矣选标题文本TI。
另一方面,当相互对照检测的累积特征数据DSa的特征信息标 识符Tid和图像文本数据库42的典型特征信息标识符Tidr时,如果 检测到的累积特征数据DSa都没有登记在图像文本数据库42中,那 么特征数据对照部分62结束当前关于输入图像特征数据TS的处理, 开始基于下一输入图像信号TP的输入图像特征数据TS的产生。
此外,如果确定最小累积特征数据DSan和输入图像特征数据
TS之间的距离超过预定的相似性阈值,那么由于基于输入图像特征 数据TS的帧图像和基于最小累积特征数据DSan的帧图像彼此不相 似,因此特征数据对照部分62结束当前关于输入图像特征数据TS的 处理,并开始基于下一输入图像信号TP的输入图像特征数据TS的 产生。
这样,在硬盘记录器l中,当进行拾取图像数据的记录处理时, 从输入图像信号TP提取输入图像特征数据TS,从登记在图像文本数 据库42中的累积特征数据DSa中,指定与输入图像特征数据TS最 接近的最小累积特征数据DSan。此外,获得与最小累积特征数据DSan 对应的图像文本信息TX,作为代表用作输入图像特征数据TS的提取 源的帧图像的内容的内容字符信息TXc,并且该内容字符信息TXc 被登记成提示录制的拾取图像数据的内容的候选标题文本TI。
从而,硬盘记录器1能够把提示录制的拾取图像数据的内容的候 选标题文本TI登记到拾取图像数据管理列表43中,而不要求用户执 行任何操作。
应注意在硬盘记录器1被这样配置,以致当进行拾取图像数据的 记录处理时,加入输入的拾取图像数据中的图像拾取日期和时间信 息,以及表示拾取图像数据通过外部接口 11的哪个输入端子被输入 的输入信息被自动登记到拾取图像数据管理列表43(图7)中。
此外,由于与拾取图像数据的记录处理同时进行候选标题获取处 理,因此基本在输入的拾取图像数据的记录处理结束的同时,硬盘记 录器1能够把内容字符信息TXc登记到拾取图像数据管理列表43中。
因此,在输入的拾取图像数据的记录处理结束的时候,其中将登 记拾取图像数据的标题的标题区Ct和其中选择的图像将被登记成缩 略图的缩略图区Cs是空白的,相关信息被登记在拾取图像数据ID区 Ci,拾取图像日期和时间信息区Cd,候选标题区Ca和输入信息区 Ce中。
3-2、拾取图像数据表屏幕图像的显示
当对所有指定的拾取图像数据完成了图像数据的记录处理,或者
当响应用户对遥控器30的操作,从遥控器接口 IO收到请求显示拾取 图像数据表屏幕图像70的操作信号时,硬盘记录器1的控制部分2(图 l)按照候选标题显示程序执行表屏幕图像显示处理。
具体地说,控制部分2的标题添加部分64(图6)根据拾取图像数 据管理列表43产生表图像数据DL,并把产生的表图像数据DL传给 图像信号处理电路14,从而拾取图像数据表屏幕图像70被显示在显 示设备(未示出)上,如图8A或8B中所示。
参见图8A,在拾取图像数据表屏幕图像70上,图像拾取日期和 时间信息及输入信息分别根据拾取图像数据管理列表43,被显示在图 像拾取日期和时间信息显示区72及输入信息显示区73中。
如果某一标题被登记在拾取图像数据管理列表43(图7)中,那么 录制的拾取图像数据的该标题被显示在输入信息显示区73中。但是, 如果没有标题被登记,那么输入信息显示区73保持空白,什么也不 显示。
在图A中,当光标被置于位于最高级的录制拾取图像数据上时, 标题添加部分64用和周围区域的颜色不同的颜色显示位于拾取图像 数据表屏幕图像70的最高级的录制拾取图像数据。随后,如果用户 按下遥控器30(图l)的方向键(未示出),并且响应所述按下操作,从遥 控器接口 IO发出操作信号,那么标题添加部分64依次把光标移动到 下一级的录制拾取图像数据。
随后,如果在光标被置于各级录制拾取图像数据之一上的时候, 遥控器30(图l)的确定按钮(未示出)被按下,那么标题添加部分64(图 6)借助下拉方法,使关于光标指定的录制拾取图像数据的候选标题文 本TI被显示成子屏幕75,并把光标置于候选标题文本TI之一上。
另外,标题添加部分64按照在候选标题获取处理中,从图像文 本数据库42获得候选标题文本TI的次数的降序,从子屏幕75的上 方开始显示候选标题文本TI。
从而,硬盘记录器l按照作为与录制拾取图像数据的帧图像的内 容对应的内容字符信息TXc,获得候选标题文本TI的次数的降序,
即,按照在录制拾取图像数据的图像之中,与次数的降序对应的顺序,
显示候选标题文本TI。于是,硬盘记录器1能够向用户呈现提示录制 拾取图像数据的内容的可能生相当高的那些候选标题文本TI。从而, 硬盘记录器1能够使显示设备显示提示录制拾取图像数据的内容的文 本信息,而不必有意再现录制的拾取图像数据。
注意显示在子屏幕75的右下部的标记v表示在子屏幕下面存在 不同的一个或多个候选标题文本TI。从而,如果按下遥控器30的向 下方向键,那么标题添加部分64滚动子屏幕75,从而存在于子屏幕 75之下的候选标题。
此外,如果在光标被置于一个候选标题,例如"Mt.Fuji"上的状 态下下,按下遥控器30的确定按钮,那么标题添加部分64使标题 "Mt.Fuji,,被显示在拾取图像数据管理列表43的标题区Ct中,并使标 题"Mt.Fuji"被显示在拾取图像数据表屏幕图像70的输入信息显示区 73中。
从而,硬盘记录器1能够使用户借助从多个候选标题中选择一个 候选标题的简易操作,确定一个标题。于是,硬盘记录器能够允许标 题被登记到图像文本数据库42中,而不要求用户手动输入标题。
顺便提及,如果"Mt.Fuji"被选为标题,那么标题添加部分64目 前显示的,并且具有典型图像51的录制的拾取图像数据中选择与 "Mt.Fuji"对应的图像,并使该图像被显示在缩略图显示区71中。
如果根据目前显示的录制的拾取图像数据确定存在与"Mt.Fuji" 关联地登记的典型特征信息标识符Tidr,那么标题添加部分64从图 像文本数据库42内选择显示的典型特征信息标识符Tidr之一,并把 选择的典型特征信息标识符登记到拾取图像数据管理列表43的缩略 图区Cs中。此外,标题添加部分64使与典型特征信息标识符Tidr 对应的图像以缩略图的形式被显示在缩略图显示区71中。
另一方面,如果根据目前显示的录制的拾取图像数据确定不存在 与"Mt.Fuji"关联地登记的典型特征信息标识符Tidr,那么标题添加 部分64根据另外的录制的拾取图像数据选择与"Mt.Fuji"关联的典型
特征信息标识符Tidr之一。随后,标题添加部分64检测与该典型特 征信息标识符Tidr代表的累积特征数据DSa最相似的输入特征提取 数据TS,指定检测的输入特征提取数据TS的特征信息标识符Tid, 把指定的特征信息标识符Tid登记到拾取图像数据管理列表43的缩 略图区Cs中。此外,标题添加部分64使与该典型特征信息标识符 Tidr对应的图像以缩略图的形式被显示在缩略图显示区71中。
此外,如果在拾取图像数据管理列表43中没有设置任何标题, 并且在缩略图区Cs中没有登记任何典型特征信息标识符Tidr,那么 标题添加部分64使任意图像,比如登记的拾取图像数据的第一帧的 图像被显示在缩略图显示区71中。
从而,由于标题添加部分64能够使与用户选择的代表拾取图像 数据的内容的标题对应的典型图像数据PDr被显示成缩略图,因此代 表拾取图像数据的内容的图像可被显示在缩略图显示区71中。
另外,如果当光标被置于标题输入按钮76上的时候,按下遥控 器30的确定按钮,那么标题添加部分64使键盘屏幕图像60(图4)被 显示,以致用户能够输入任意标题。
从而,标题添加部分64能够允许用户参考显示的候选标题文本 TI,并按照用户的喜好输入任意标题。此外,即使用户不同意显示的 候选标题文本TI,标题添加部分64也能够允许用户对录制的拾取图 像数据设置用户赞成的标题。
这样,当硬盘记录器显示拾取图像数据表屏幕图像时,硬盘记录 器1使在候选标题获取处理中登记的候选标题文本TI被显示在子屏 幕75上,从而用户能够从候选标题文本TI中选择拾取图像数据的标 题。
从而,硬盘记录器1允许用户利用选择显示的候选标题文本TI 之一的简易操作,确定录制的拾取图像数据的标题。从而,用户能够 简易地执行把标题输入图像文本数据库42中的操作。
4、图像文本数据库产生处理过程
下面参考图9的流程图,说明按照数据库产生程序执行的数据库
产生过程。
响应用户对遥控器30(图l)的操作,硬盘记录器1的控制部分2 开始记录在硬盘驱动器4中的录制拾取图像数据的再现处理。在进入 再现处理之后,控制部分2从开始步骤进入数据库产生过程RT1,并 前进到步骤SP1的处理。在步骤SP1,控制部分2根据从图像数据12 供给的再现图像信号DP,产生再现图像特征数据DS。随后,处理进 入步骤SP2。
在步骤SP2,控制部分2把特征信息标识符Tid加到再现图像特 征数据DS中,并把特征信息标识符Tid记录到闪速存储器5的特征 数据记录部分41(图2)中。之后,处理进入步骤SP3。
在步骤SP3,控制部分2确定供给的再现图像特征数据DS是否 包括场景变化,从而确定再现图像特征数据DS是典型特征数据DSr。 如果获得否定的结果,那么控制部分使处理返回步骤SP1,开始下一 个再现图像特征数据DS的处理。
另一方面,如果在步驟SP3获得肯定的结果,那么控制部分2 进入步骤SP4的处理。在步骤SP4,控制部分2指定典型特征数据 DSr的典型特征信息标识符Tidr,并把典型特征信息标识符Tidr临 时保存在RAM(未示出)中。之后,处理进入步骤SP5。
在步骤SP5,控制部分2确定再现的录制拾取图像数据的所有再 现图像信号DP的处理是否都已结束。如果获得否定的结果,那么控 制部分使处理返回步骤SP1,开始下一个再现图像信号DP的处理。
另一方面,如果在步骤SP5获得肯定的结果,那么这表示录制 的拾取图像数据的再现处理已结束。这种情况下,控制部分2使处理 进入步骤SP6。
在步骤SP6,控制部分2利用记录在RAM中的典型特征信息标 识符Tidr指定典型图像数据DPr,并使显示设备(未示出)显示包括基 于典型图像数据DPr的典型图像51的文本输入屏幕图像50(图3)。 之后,处理进入步骤S7。
在步骤SP7,在用户输入图像文本信息TX之前,控制部分2等
待。如果输入了图像文本信息TX,那么处理进入步骤SP8。
在步骤SP8,控制部分2把在步骤SP7输入的图像文本信息TX 与典型特征信息标识符Tidr相互关联地登记到图像文本数据库42中 (图5)。之后,处理进入步骤SP9。
在步骤SP9,控制部分2确定记录在RAM中的所有典型特征数 据DSr的处理是否都已结束。如果获得否定的结果,那么控制部分2 使处理返回步骤SP6,开始下一个典型特征数据DSr的处理。
另一方面,如果在步骤SP9获得肯定的结果,那么控制部分2 使处理进入步骤SPIO,在步骤SPIO,控制部分2结束该处理。
应注意控制部分2对录制的拾取图像数据重复一次数据库产生 处理。在对相同的录制的拾取图像数据进行一次以上的拾取图像数据 的再现处理的情况下,在该拾取图像数据的第二次或以后的再现处理 中不执行数据库产生处理。
此外,如果在执行第二次或者以后的录制的拾取图像数据的再现 处理的时候,响应用户的操作,发出表示输入与正被显示的图像对应 的图像文本信息TX的输入请求的操作信号,那么控制部分2把正被 显示的屏幕图像确定为典型图像,并执行步骤SP6-SP10的处理。
这种情况下,控制部分2不必从正被显示的图像数据中提取再现 图像特征数据,不过可在步骤SP8,指定与当前显示的图像数据对应 的特征信息标识符Tid,并把该特征信息标识符Tid确定为典型特征 信息标识符Tidr。
5、候选标题显示处理过程
下面参考图IO的流程图,说明按照数据库产生程序执行的候选 标题显示处理过程。
响应用户对遥控器30(图)的操作,硬盘记录器1的控制部分2开 始从外部设备(未示出),比如与外部接口 11连接的摄像机输入的输入 拾取图像数据的记录处理。在进入记录处理之后,控制部分2通过开 始步骤进入候选标题处理过程RT2,并使处理进入步骤SP21。在步 骤SP21,控制部分2根据从图像数据12供给的图像信号TP,产生
输入特征提取数据TS。之后,处理进入步骤SP22。
在步骤SP22,控制部分2对照在步骤SP21产生的输入特征提取 数据TS和记录在闪速存储器5的特征数据记录部分41(图6)中的累积 特征数据DSa。之后,处理进入步骤SP23,在步骤SP23,控制部分 2从累积特征数据DSa中选择登记在图像文本数据库42中,并且具 有到输入特征提取数据TS的最短距离的最小累积特征数据DSan。之 后,处理进入步骤SP24。
在步骤SP24,控制部分2确定最小距离是否小于预定的相似性阈值。
如果获得否定的结果,那么这表示具有最小距离的最小累积特征 数据DSan和输入特征提取数据TS并不彼此相似。这种情况下,控 制部分2使处理返回步骤SP21,开始下一再现图像信号DP的处理。
另一方面,如果在步骤SP24获得肯定的结果,那么这表示最小 累积特征数据DSan和输入特征提取数据TS彼此相似。这种情况下, 控制部分2使处理进入步骤SP25。
在步骤SP25,控制部分2从图像文本数据库42获得与最小累积 特征数据DSan对应的内容字符信息TXc,并把内容字符信息TXc作 为与输入图像信号TP对应的内容字符信息TXc临时保存在RAM(未 示出)中。之后,处理进入步骤SP26。
在步骤SP26,控制部分2确定关于正在进行记录处理的输入拾 取图像数据中的所有录制图像特征数据TP的处理是否结束。如果获 得否定的结果,那么控制部分2使处理返回步骤SP21,开始对下一 图像信号TP的处理。
另一方面,如果步骤SP26获得肯定的结果,那么这表示所有输 入图像数据的记录处理已结束。这种情况下,控制部分2使处理进入 步骤SP27。
在步骤SP27,控制部分2确认内容字符信息TXc的获取次数, 按照获取次数的降序选择10条内容字符信息TXe作为候选标题文本 TI。随后,控制部分2把选择的候选标题文本TI登记到拾取图像数据管理列表43(图7)中,之后处理进入步骤SP28。
在步骤SP28,控制部分2使显示设备(未示出)根据拾取图像数据 管理列表43,显示拾取图像数据表屏幕图像70(图8),它是录制的拾 取图像数据的表格。随后,处理进入步骤SP29。这种情况下,响应 用户的操作,控制部分2控制显示设备在子屏幕75A中显示候选标题 文本TI(参见图8B)。
在步骤S29,控制部分2等待用户选择录制的拾取图像数据的标 题。在用户选择了标题之后,处理进入步骤SP30。
在步骤SP30,控制部分2把在步骤SP29中选择的标题登记到图 像文本数据库42(图7)中。之后,处理进入步骤SP31,在步骤SP31, 控制部分2结束该处理。
应注意如果在未执行对输入的拾取图像数据的记录处理的时候, 响应用户对遥控器30的操作,发出表示显示拾取图像数据表屏幕图 像70(图8)的请求的操作信号,那么控制部分2执行步骤SP28-SP31 的表屏幕图像显示处理。另外,在对于输入的拾取图像数据的记录处 理中,控制部分2可执行步骤SP21-SP27的候选标题获取处理,随后 在除去表屏幕图像显示处理的时候,使处理直接进入步骤SP31。
6、操作和效果
具有上述结构的硬盘记录器1从图像内容的拾取图像数据中选 择某一图像数据作为代表拾取图像数据的典型图像数据DPr,并在显 示设备上显示基于典型图像数据DPr的典型图像51,以致用户能够 输入与典型图像51对应的图像文本信息TX。此外,硬盘记录器l相 互关联地登记按照利用亮度的预定提取方法从典型图像数据PDr提 取的典型特征数据DSr,和图像文本信息TX,从而自动产生图像文 本数据库42,图像文本数据库42允许利用按照和用于典型特征数据 DSr的方法相同的方式,从任意图像内容,比如录制的拾取图像数据 提取的输入图像特征数据TS,获取与录制的拾取图像数据的图像对 应的内容字符信息TXc。
从而,由于硬盘记录器l能够利用输入图像特征数据TS从图像 文本数据库获得内容字符信息TXc,因此与拾取图像数据的图像对应 的文本信息,即,提示拾取图像数据的内容的文本信息可被自动作为 候选标题文本TI被登记在拾取图像数据管理列表43中。
此时,对于每个场景,硬盘记录器l从拾取图像数据中选择适合 于与图像文本信息TX建立关联的典型图像51,并允许用户输入关于 该典型图像51的图像文本信息TX。从而,如果用户执行夺显示在显 示设备上的典型图像51 ,输入与典型图像51对应的图像文本信息TX 的简单操作,那么能够容易地产生图像文本数据库42。
此外,当硬盘记录器1同时执行数据库产生处理和拾取图像数据 再现处理时,在结束拾取图像数据再现处理之后,它能够立即显示典 型图像51。从而不同于按照用户的请求执行典型图像的显示时,用户 不必等待典型图像的选择的处理时间(步骤SP1-SP5)结束。
此外,由于硬盘记录器1在拾取图像数据再现处理结束之后显示 典型图像51,因此典型图像51能够允许用户输入图像文本信息TX, 同时允许用户在欣赏拾取图像数据之后立即欣赏拾取图像数据的后 效。从而,硬盘记录器1能够避免因图像文本信息TX的输入操作而
使用户感到压力。
此外,在用户记忆拾取图像数据的内容的时候,硬盘记录器1
能够允许用户在拾取图像数据的再现处理之后直观地确认典型图像 51。从而,硬盘记录器l能够允许用户利用简单的操作输入与典型图 像51对应的恰当图像文本信息TX,而不必使用户想起典型图像51 的内容。
此外,硬盘记录器1利用按照和用于提取典型特征数据DSr的 提取方法相同的方法,从拾取图像数据产生的再现图像特征数据DS , 选择典型图像51。从而,不同于使用声音数据来提取典型图像51的 方法,从拾取图像数据提取再现图像特征数据DS的处理的次数可被 限制为一次,于是,能够降低控制部分2的处理负荷。
此外,硬盘记录器1把从拾取图像数据产生的所有再现图像特征 数据DS记录到特征数据记录部分41中。从而,另外当按照用户的请
求,与当前显示的图像对应的图像文本信息TX被登记到图像文本数 据库42中时,不必从正被显示的图像中再次提取图像特征数据DS。 另外,可以利用再现图像特征数据DS执行各种处理,例如摘要再现。
此外,由于执行拾取图像数据的记录处理和再现处理的硬盘记录 器1产生图像文本数据库42,因此硬盘记录器1允许在图像文本数据 库上反映每个用户的图像的喜好或倾向。从而,硬盘记录器l允许每 个用户使用图像文本数据库42从拾取图像数据的图像中获得准确地 提示拾取图像数据的内容的文本信息。
具有上述结构的硬盘记录器1控制从拾取图像数据内选择的典 型图像51被显示,并且使用户输入与典型图像51之一对应的图像文 本信息TX,同时硬盘记录器1产生其中相互关联地登记与典型图像 51对应的图像文本信息TX和典型特征数据DSr的图像文本数据库 42。从而,硬盘记录器1能够使用图像文本数据库42获得与图像对 应的内容字符信息TXc。于是,即使硬盘记录器1不使用户输入拾取 图像数据的内容,它也能够根据拾取图像数据的图像,获得与图像内 容的图像对应的内容字符信息,作为提示拾取图像数据的内容的文本 信息。从而,能够实现借助其能够容易地产生将与图像内容关联的内 容字符信息的数据库的数据库产生方法、数据库产生程序、数据库产 生设备和图像内容记录设备。
7、修改
虽然,在上面说明的实施例中,与典型图像选择部分33选择的 典型特征数据DSr对应的所有图像作为典型图像51被显示在显示设 备上,按照本发明的实施例,图像的显示方式并不局限于此,相反, 与过去显示的典型图像51并不相似的那些图像可被显示成典型图像 51。
这种情况下,硬盘记录器1相互对照选择的典型特征数据DSr 和累积特征数据DSa,并把其到登记在图像文本数据库42中的所有 累积特征数据DSa的距离大于预定的显示阈值的那些典型特征数据 DSr作为典型图像51显示在显示设备上。显示阈值可被设置成等于
或者不同于相似性阈值的值。
从而,能够避免显示对于其预期将输入相同的图像文本信息TX 的图像,因为该图像数据最接近登记在图像文本数据库42中的某一 累积特征数据DSa。从而,硬盘记录器1能够避免用户反复输入相同 单词的情况,从而能够最大限度地避免使用户感到对于输入操作的压 力。
此外在上面说明的实施例中,虽然与拾取图像数据的再现处理同 时地执行数据库产生处理,不过按照本发明的实施例,数据产生处理 的执行并不局限于此,相反可以其它方式执行数据产生处理,例如单 独地或者与记录处理同时地执行数据产生处理。
在与记录处理同时执行数据库产生处理的情况下,在硬盘记录器 1执行候选标题获取处理(图6)的时候,它利用标识符添加部分32把 特征信息标识符Tid添加到由图像分析部分31提取的输入特征数据 TS中,随后把带特征信息标识符Tid的特征数据TS原样记录到特征 数据记录部分41中。同时,硬盘记录器1利用典型图像选择部分33 选择典型特征数据DSr,并把由标识符指定部分34指定的典型特征 信息标识符Tidr记录到闪速存储器5或硬盘驱动器4中。
从而,利用按照用户的请求,从典型图像51中选择对应的典型 图像数据PDr,并使显示设备根据典型图像数据PDr显示典型图像 51的简单处理,硬盘记录器1也能够根据其再现处理还未被执行的拾 取图像数据,在任何时候快速地在显示设备上显示典型图像51,以致 用户能够输入图像文本信息TX。
此外,在大于预定条数的图像文本信息TX被登记在图像文本数 据库42中的情况下,数据库产生处理可被省略,或者可响应用户的 请求执行数据库产生处理。
此外,在上面说明的实施例中,虽然硬盘记录器l使用户关于显 示的所有典型图像51输入图像文本信息TX,不过按照本发明的实施 例,图像文本信息TX的输入并不局限于此。例如,可在文本输入屏 幕图像50上设置一个跳越按钮,以致如果在光标被置于跳越按钮上 的状态下,按下遥控器30的确定按钮,那么关于正被显示的典型图 像51的处理被停止,显示下面的典型图像51。
从而,如果难以为显示的典型图像51准备图像文本信息TX, 即,难以用字符表现,那么用户可选择不向该典型图像51添加图像 文本信息TX。从而,能够避免把不适合于图像文本数据库42的图像 文本信息TX登记到图像文本数据库42中,能够避免使用户感到考虑 与典型图像51对应的图像文本信息TX方面的负担。
此外,在上述实施例中,虽然所有特征数据TS被记录到特征数 据记录部分41中,不过按照本发明的实施例,再现图像特征数据DS 的记录并不局限于此,但是至少需要记录典型特征数据DSr。另外在 这种情况下,能够预期与上面所述的效果类似的效果。
此外,在上面说明的实施例中,虽然再现图像特征数据DS从图 像分析部分31供给典型图像选择部分33,不过按照本发明的实施例, 这种再现图像特征数据DS的供给并不局限于此,相反添加特征信息 标识符Tid的再现图像特征数据DS可从标识符添加部分32被供给典 型图像选择部分33。从而,不需要利用标识符指定部分34指定与典 型特征数据DSr对应的典型特征信息标识符Tidr的处理,能够减轻 控制部分2处理负荷。
此外,在上面说明的实施例中,当硬盘记录器1按照用户的请求, 允许用户输入当前显示图像的图像文本信息TX时,使用记录在特征 数据记录部分41中的累积特征数据DSa。但是,按照本发明的实施 例,累积特征数据DSa的使用并不局限于此,相反,累积特征数据 DSa可用在各种处理中,例如摘要再现时再现部分的选择。
此外,在上面说明的实施例中,由图像拾取数据ID和序列号形 成的特征信息标识符Tid被添加到再现图像特征数据DS中。但是, 按照本发明的实施例,特征信息标识符Tid的添加并不局限于此,相 反如果录制的拾取图像数据和特征信息标识符Tid相互关联,那么可 以使用特征信息标识符Tid的任何添加方法。
此外,在上面说明的实施例中,虽然根据拾取图像数据为每个帧
图像产生再现图像特征数据DS,不过按照本发明的实施例,再现图 像特征数据DS的产生并不局限于此,相反可为每个场图像产生再现 图像特征数据DS。
此外,在上面说明的实施例中,虽然根据拾取图像数据的所有帧 图像产生再现图像特征数据DS,不过按照本发明的实施例,再现图 像特征数据的产生并不局限于此,相反可以几帧一组地产生再现图像
特征数据DS。
此外,在上面说明的实施例中,虽然提取再现图像特征数据DS, 以便选择典型图像51,不过按照本发明的实施例,典型图像51的选 择并不局限于此,相反可以使用各种选择方法。例如,在开始再现处 理之后,可在每个预定的一段时间之后选择典型图像51。
另外,在上面说明的实施例中,每个帧图像的亮度(Y)被用于利 用DC系数,根据录制的图像数据TP产生输入图像特征数据TS。不 过,按照本发明的实施例,输入图像特征数据TS的产生并不局限于 此,相反,图像的颜色(Cr、 Cb),声音数据等可被用于产生输入图像 特征数据TS,或者如上提及的这种数据和信息可被恰当地组合,从 而产生输入图像特征数据TS。
另外,可以根据由8x8像素构成的各个块的DC分量的平均值产 生输入图像特征数据TS,或者利用诸如分形轮廓(fractal contour)提 取法之类的方法从录制的图像数据TP中提取表示人或物的轮廓的人 物识别特征或物体标识特征,并把提取的特征确定为输入图像特征数 据TS。
另外,在上面说明的实施例中,虽然检测场景变化以选择典型图 像51,不过,按照本发明的实施例,检测的对象并不局限于此。例如, 可根据由基于声音数据的特征数据DS产生的直方图检测高于预定阈 值的特征数据DS,以致与检测的特征数据DS对应的图像被确定为典 型图像51。可从中检测与文本信息对应的特征的再现图像特征数据 DS可被确定为典型特征数据DSr,其中文本信息如利用缩小屏幕图 像数据检测的场景变化或相似图像的频率、相似图像的持续时间或者 人体识别特征或物体识别特征。
此外,在上面说明的实施例中,虽然为每个图像提取再现图像特
征数据DS,并且一个静止图像被选为典型图像51,不过按照本发明 的实施例,典型图像51的选择并不局限于此。例如, 一个单元的预 定时间内的运动向量可被提取为再现图像特征数据DS,以致运动画 面被选为典型图像51。这种情况下,控制部分2把代表运动画面的典 型特征信息标识符Tidr登记到图像文本数据库42中。
此外,在上面说明的实施例中,记录和再现诸如拾取图像数据之 类的图像内容的硬盘记录器l执行数据库产生处理。但是,按照本发 明的实施例,数据库产生处理的执行并不局限于此,相反各种信息处 理设备,比如个人计算机、摄像机或与网络连接的服务器可执行数据 库产生处理。
此外,在上面说明的实施例中,硬盘记录器l使用图像文本数据 库42获得与诸如拾取图像数据之类的图像内容的图像对应的内容字 符信息TXc。但是,按照本发明的实施例,内容字符信息TXc的获取 并不局限于此,相反,图像文本数据库42可被用于获得与各种图像 内容,比如静止画面对应的内容字符信息TXc。
此外,在上面说明的实施例中,虽然图像文本数据库42被记录 到硬盘记录器1的闪速存储器5中,不过按照本发明的实施例,图像 文本数据库42的记录并不局限于此,相反,图像文本数据库42可被 记录到硬盘驱动器4中。此外,硬盘记录器1不必必需具有图像文本 数据库42,相反可通过网络共享图像文本数据库42。
这种情况下,图像文本数据库42和登记在图像文本数据库42 中的典型特征数据DSr被记录到服务器中,每个硬盘记录器通过网络 访问服务器。从而,当与硬盘记录器产生图像文本数据库42的备选 情况相比,可以登记与数量更多的典型图像51对应的图像文本信息 TX,以致在候选标题获取处理中,能够获得对应于更多近似图像的内 容字符信息TXc,并且能够减轻用户的输入图像文本信息TX的负荷。
此外,在上面说明的实施例中,虽然具有记录和再现功能的硬盘
记录器l执行数据库产生处理,不过按照本发明的实施例,数据库产 生处理的执行并不局限于此。具体地说,在具有图像内容的记录和再 现功能的计算机,具有记录功能的记录设备,或者具有记录功能和再 现功能的记录和再现设备执行数据库产生处理的情况下,可预期与上 面说明的实施例的效果相似的效果。
此外,在上面说明的实施例中,虽然自动分发的电视广播节目或 者通过外部接口 11输入的拾取图像数据被记录,不过按照本发明的 实施例,记录的对象并不局限于此,相反,通过因特网下载的图像内 容可纟皮记录。
此外,在上面说明的实施例中,虽然数据库产生程序等被预先保
存在ROM或硬盘驱动器4中,不过按照本发明的实施例,数据库程 序等的来源并不局限于此。具体地说,数据库程序等可从外部存储介 质,比如记忆棒(Sony公司的注册商标)安装到闪速存储器5等中。另 外,数据库产生程序等可通过USB(通用串行总线)、以太网(商标)、 或者诸如IEEE(电气和电子工程师协会)802.11a/b/g之类无线电 LAN(局域网)从外部获得,或者通过地面数字电视广播或BS电视广 播分发。
此外,在上面说明的实施例中,作为数据库产生设备的硬盘记录 器1由充当典型图像选择部分和显示处理部分的典型图像选择部分 33,充当操作输入部分的遥控器30和遥控器接口 10,和充当数据库 产生部分的文本添加部分35形成。但是,按照本发明的实施例,硬 盘记录器l的组件并不局限于此,相反,本发明的实施例的数据库产 生设备可由各种其它配置的典型图像选择部分、显示处理部分、操作 输入部分和数据库产生部分形成。
虽然利用具体术语说明了本发明的优先实施例,不过这样的说明 只是出于举例说明的目的,在不脱离下述权利要求的精神或范围的情 况下可做出各种变化和修改。
权利要求
1、一种数据库产生方法,包括从图像内容中选择某些图像,各作为代表该图像内容的典型图像的典型图像选择步骤;使显示设备显示典型图像的显示处理步骤;允许用户输入与典型图像对应的图像文本信息的操作输入步骤;和数据库产生步骤,彼此关联地登记按照预定提取方法从典型图像提取的典型特征信息和在操作输入步骤输入的图像文本信息,从而产生数据库,以便通过利用按照提取方法从任意图像内容提取的每个图像的任意图像特征信息,获得与该任意图像内容具有的图像对应的内容字符信息。
2、 按照权利要求1所述的数据库产生方法,其中在典型图像选 择步骤,利用按照提取方法从图像内容产生的运动画面特征信息选择 典型图像。
3、 按照权利要求1所述的数据库产生方法,其中在典型图像选 择步骤,为每个场景变换选择典型图像。
4、 按照权利要求1所述的数据库产生方法,其中在数据库产生 步骤,彼此关联地登记图像文本信息和表示典型特征信息的典型特征 信息标识符。
5、 按照权利要求1所述的数据库产生方法,其中在典型图像选 择步骤,按照提取方法从图像内容产生的所有运动画面图像特征信息 被记录在预定的记录部分中,并利用运动画面图像特征信息选择典型 图像。
6、 按照权利要求1所述的数据库产生方法,其中在典型图像选 择步骤,按照提取方法从图像内容提取的所有运动画面图像特征信息 被记录在预定的记录部分中,并利用动态画面图像特征信息选择典型 图像;和在数据库产生步骤,典型特征信息标识符和图像文本信息被记录 在数据库中,从而相互关联地记录典型特征信息和图像文本信息。
7、 按照权利要求1所述的数据库产生方法,其中图像内容被记 录在预定的记录部分中;并且数据库产生方法还包括与典型图像选择步骤同时地再现记录在记录部分中的图像内容 的再现步骤。
8、 按照权利要求7所述的数据库产生方法,其中在显示处理步 骤,当再现步骤的处理结束时,典型图像被显示在显示设备上。
9、 按照权利要求1所述的数据库产生方法,还包括按照用户的请求,允许用户输入与用户选择的选择图像对应的图 像文本信息的任意输入步骤;和彼此关联地登记按照提取方法从选择图像中提取的选择特征信 息和图像文本信息的任意登记步骤。
10、 按照权利要求9所述的数据库产生方法,其中在任意登记步 骤,从记录部分获得与选择图像对应的运动画面特征信息,作为选择 特征信息。
11、 按照权利要求1所述的数据库产生方法,其中在操作输入步 骤,响应来自用户的操作输入,停止包括典型图像选择步骤、显示处 理步骤、操作输入步骤和数据库产生步骤的数据库产生处理。
12、 按照权利要求1所述的数据库产生方法,其中并行于图像内 容的记录处理,执行特征信息提取处理。
13、 按照权利要求1所述的数据库产生方法,其中在典型图像选 择步骤,利用从图像内容具有的声音数据提取的声音特征信息,选择 典型图像。
14、 按照权利要求l所述的数据库产生方法,其中在典型图像选 择步骤,利用运动画面特征信息选择所述某些图像,并且所述某些图 像中与用作已登记在数据库中的典型特征信息的提取源的典型图像 不相似的一个图像被选为新的典型图像。
15、 按照权利要求1所述的数据库产生方法,其中在操作输入步骤,响应来自用户的操作输入,省略涉及正被显示的任意典型图像的 操作输入步骤和数据库产生步骤,并显示下一个或几个典型图像。
16、 一种使计算机执行下述步骤的数据库产生程序 从图像内容中选择某些图像,各作为代表该图像内容的典型图像的典型图像选择步骤;使显示设备显示典型图像的显示处理步骤;允许用户输入与典型图像对应的图像文本信息的操作输入步骤;和数据库产生步骤,彼此关联地登记按照预定提取方法从典型图像 提取的典型特征信息和在操作输入步骤输入的图像文本信息,从而产 生数据库,以便通过利用按照提取方法从任意图像内容提取的每个图 像的任意图像特征信息,获得与该任意图像内容具有的图像对应的内 容字符信息。
17、 一种数据库产生设备,包括被配置成从图像内容中选择某些图像,各作为代表该图像内容的典型图像的典型图像选择部分;被配置成使显示设备显示典型图像的显示处理部分; 被配置成允许用户输入与典型图像对应的图像文本信息的操作输入部分;和数据库产生部分,被配置成彼此关联地登记按照预定提取方法从 典型图像提取的典型特征信息和由所述操作输入部分输入的图像文 本信息,从而产生数据库,以便通过利用按照提取方法从任意图像内 容提取的每个图像的任意图像特征信息,获得与该任意图像内容具有 的图像对应的内容字符信息。
18、 一种图像内容记录设备,包括 被配置成记录图像内容的记录部分;被配置成从图像内容中选择某些图像,各作为代表该图像内容的 典型图像的典型图像选择部分;被配置成使显示设备显示典型图像的显示处理部分;被配置成允许用户输入与典型图像对应的图像文本信息的操作输入部分;和数据库产生部分,被配置成彼此关联地登记按照预定提取方法从 典型图像提取的典型特征信息和由所述操作输入部分输入的图像文 本信息,从而产生数据库,以便通过利用按照提取方法从任意图像内 容提取的每个图像的任意图像特征信息,获得与该任意图像内容具有 的图像对应的内容字符信息。
全文摘要
本发明提供一种数据库产生方法,包括从图像内容中选择某些图像,各作为代表该图像内容的典型图像的典型图像选择步骤;使显示设备显示典型图像的显示处理步骤;允许用户输入与典型图像对应的图像文本信息的操作输入步骤;和数据库产生步骤,所述数据库产生步骤彼此关联地登记按照预定提取方法从典型图像提取的典型特征信息和在操作输入步骤输入的图像文本信息,从而产生数据库,以便通过利用按照提取方法从任意图像内容提取的每个图像的任意图像特征信息,获得与该任意图像内容具有的图像对应的内容字符信息。
文档编号G06F17/30GK101169794SQ20071018168
公开日2008年4月30日 申请日期2007年10月24日 优先权日2006年10月24日
发明者宫本胜 申请人:索尼株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1