内容字符信息获取方法、程序、设备和视频内容记录设备的制作方法

文档序号:7666292阅读:103来源:国知局
专利名称:内容字符信息获取方法、程序、设备和视频内容记录设备的制作方法
技术领域
本发明涉及获得表示出视频内容的内容的字符信息的内容字符 信息获取方法,内容字符信息获取程序,内容字符信息获取设备和视 频内容记录设备。
背景技术
相关技术的硬盘记录器被配置成不仅记录电视广播节目,而且自 动产生管理这些电视广播节目的管理列表,以便把表示标题和内容的 文本信息记录到所述管理列表中,从而把管理列表用于广播节目的列 表显示和搜索这些节目。
这些硬盘记录器还被配置成以文件信息的形式从在地面数字广 播中分发的广播信号中获得表示电视广播节目的排片日程表、标题和 内容的EPG(电子节目指南)信息。
一些上面提及的硬盘记录器被配置成获得流式内容的文本信息, 以便把通过因特网分发的流式内容记录到管理列表中供搜索之用(例 如,如日本专利特许公开No.2003-36259中公开的那样)。

发明内容
应注意硬盘记录器被配置成不仅把地面数字广播节目和流式内 容记录成视频内容,而且还把私人内容,比如摄像机拍摄的成像数据 和用户独自通过编辑任务获得的编辑数据记录成视频内容。但是,这 些私人数据未被附加表示出标题和内容的文本信息,以致现有技术的 硬盘记录器难以获得表示出私人数据的内容的文本信息。
于是,本发明致力于解决与现有技术的方法和设备相关的上述及 其它问题,通过提供配置成获得表示出视频内容的内容的内容字符信 息的内容字符信息获取方法,内容字符信息获取程序,内容字符信息 获取设备和视频内容记录设备,解决所提出的问题,所述字符信息表 示出视频内容的内容。
在执行本发明时并且按照本发明的一个方面,提供一种内容字符
信息获取方法。所述方法由下述步骤构成按照预定提取算法,提取 表示构成视频内容的图像的内容特征信息;从数据库中检测与内容特
征信息类似的指定图像特征信息,在所述数据库中,按照提取算法从 指定图像提取的指定图像特征信息与表示出该指定图像的内容的图
像文本信息关联;和从数据库获得与在检测步骤中检测的指定图像特 征信息关联的图像文本信息,作为表示出从中提取内容特征信息的图 像的内容的内容字符信息。
从而,可从数据库获得表示出构成视频内容的每个图像的内容字 符信息。
在执行本发明时并且按照本发明的另 一方面,提供一种视频内容 记录设备。所述设备由下述组件构成记录器,所述记录器被配置成 记录从外部设备供给的视频内容;特征信息提取器,所述特征信息提 取器被配置成按照预定提取算法,提取表示构成视频内容的图像的内 容特征信息;特征信息检测器,所述特征信息检测器被配置成从数据 库中检测与内容特征信息类似的指定图像特征信息,在所述数据库 中,按照提取算法从指定图像提取的指定图像特征信息与表示出该指 定图像的内容的图像文本信息关联;文本获取器,所述文本获取器被 配置成从数据库获得与特征信息检测器检测的指定图像特征信息关 联的图像文本信息,作为表示出从中提取内容特征信息的图像的内容
的内容字符信息。
从而,可从数据库获得表示出构成视频内容的每个图像的内容字 符信息。
如上所述和按照本发明,可从数据库获得表示出构成视频内容的 每个图像的内容的内容字符信息,从而实现配置成获得表示视频内容 的内容的内容字符信息的内容字符信息获取方法,内容字符信息获取 程序,内容字符信息获取设备和视频内容记录设备。


参考附图,根据实施例的下述说明,本发明的其它目的和方面将
变得显而易见,其中
图l是图解说明硬盘记录器的整体配置的方框图2是图解说明数据库生成处理的功能块的方框图3图解说明文本输入屏幕;
图4图解说明键盘屏幕;
图5图解说明图像文本数据库的结构;
图6是图解说明候选标题获取处理的功能块的方框图7图解说明成像(imaged)数据管理列表的结构; 图8A和8B图解说明候选标题文本的屏幕;
图9是表示图像文本数据库生成处理的流程图IO是表示候选标题显示处理的流程图。
具体实施例方式
下面参考附图通过实施例更详细地说明本发明。 (l)硬盘记录器的整体配置
现在参考图1,附图标记l表示硬盘记录器。该硬盘记录器被配 置成以从摄像机(未示出)接收的视频内容的形式记录成像数据,并接 收和记录在地面数字广播上传送的电视广播节目。
就硬盘记录器1来说,基于CPU(中央处理器)的控制器2,均未
示出的ROM(只读存储器)和RAM(随机存取存储器)共同控制整个硬 盘记录器l。控制器2把操作程序、数据库生成程序和候选标题显示 程序从ROM或者硬盘驱动器4装入RAM中,从而执行基于这些程 序的处理以及后面说明的文本数据库生成处理和候选标题显示处理。
如果用户通过外部遥控器30发出请求,那么硬盘记录器l通过 遥控器接口 10获得遥控器30产生的操作信号,并把接收的操作信号 供给控制器2。
例如,当从遥控器接口 10供给表示记录保存在与外部接口 11 连接的摄像机(未示出)中的成像数据的请求的操作信号时,控制器2 执行记录接收的成像数据的处理。
即,控制器2把通过外部接口 11从摄像机(未示出)输入的输入 成像数据记录到硬盘驱动器4,作为记录的成像数据。此时,控制器 2把由序列号等构成的成像数据ID附到该记录的图像数据上。
此外,通过与成像数据ID关联,控制器2通过登记附到成像数 据上的表示成像日期和编辑日期的成像日期信息,以及表示成像数据 输入自外部接口 11的哪个输入端子的输入信息,产生将被记录到闪 速存储器5的成像数据管理列表43(后面说明)。
当从遥控器接口 10供给表示再现记录到硬盘驱动器4的成像数 据的请求的操作信号时,控制器2执行再现记录的成像数据的处理。
即,控制器2从硬盘驱动器4读取用户指定的记录的成像数据, 同时,在读取的记录的成像数据中,把再现的视频数据传给视频解码 器12,把音频数据传给音频解码器13。
控制器2按照预定的解码算法通过视频解码器12解码再现的视 频数据,通过视频信号处理电路14对所得到的解码的再现视频数据 DP进行数-模转换和混合,并通过输出端子16传送处理后的信号。 从而,控制器2把基于再现的视频信号DP的视频图像显示在与视频 输出端子16连接的显示监视器(未示出)上。
另外,控制器2按照预定的解码算法通过音频解码器13解码音 频数据,通过数-模转换器15把解码的音频信号转换成模拟信号,并
把转换后的信号传给音频输出端子17。从而,控制器2能够从与音频 输出端子17连接的扬声器(未示出)基于该音频数据的声音。
如上所述,硬盘记录器1被配置成记录和再现通过外部接口 11 输入的诸如成像数据之类的视频内容。
另外,当从遥控器接口 IO供给表示记录目前正在播出的电视广 播节目的请求的操作信号时,控制器2接收指定的电视广播节目,同 时,执行记录接收节目的处理。
即,控制器2通过调谐器21以选择的频带接收数字广播信号, 并把接收的信号传给解调器22。控制器2通过解调器22解调该数字 广播信号,通过解扰器23解扰解调的数字广播信号,通过多路分用 器24把解扰信号分成广播视频数据包、广播音频数据包和EPG(电子 节目指南)信息包。随后,控制器2把广播视频数据和广播音频数据记 录到硬盘驱动器4作为录制节目。
此外,在结束记录处理时,控制器2通过登记从内部时钟25获 得的每个电视广播节目的记录日期,从EPG信息提取的每个录制节 目的标题信息,和表示每个录制节目的内容的节目文本信息,创建录 制节目管理列表,并把产生的列表记录到闪速存储器5中。
当从遥控器接口 10供给表示显示记录到硬盘驱动器4的录制节 目的列表的请求的操作信号时,控制器2从闪速存储器5读取录制节 目管理列表,根据该列表产生图像数据,并把产生的图像数据传给视 频解码器12。从而,控制器2借助基本上和再现录制的成像数据相同 的处理,把基于录制节目管理列表的节目列表显示在显示监视器上。
从而,除了通过外部接口 11输入的成像数据的记录和再现之外, 硬盘记录器1把正在广播的每个电视广播节目记录成录制节目,并响 应用户请求,根据利用EPG信息自动产生的录制节目管理列表,在 显示监视器上显示包括录制节目管理列表的标题信息等在内的节目 列表。
(2)产生图像文本数据库
由于通过外部接口 11输入的成像数据未被附上如上所述表示成
像数据的标题和内容的文本信息,因此在记录成像数据的阶段,现有
技术的硬盘记录器不能自动向成像数据管理列表43登记诸如表示表 现录制成像数据的内容和成像数据的内容的标题之类的文本信息。
应注意从诸如成像数据之类视频数据提取表示每个图像的特征 或特性的特征信息的各种技术已众所公知,并且提出了利用所述特征 信息来确定图像之间的相似性的技术。如果两个或者更多的图像彼此 相似,那么认为这些图像表现的内容基本相同,从而,表示这些图像 之一的内容的文本信息也很可能表现其它图像的内容。
于是,如果硬盘记录器1具有登记有与图像的特征信息对应的图 像文本信息的数据库,那么通过利用特征信息,图像硬盘记录器l能 够检测与保存在记录的图像数据中的图像类似的图像,从而把与检测 的图像的特征信息对应的图像文本信息用作表示记录的成像数据的 内容的内容字符信息。
从而,按照本发明的一个实施例的硬盘记录器1被配置成产生其 中登记与每个图像的特征信息对应的图像文本信息TX。下面说明生 成图像文本数据库42的处理。在该数据库生成处理中,硬盘记录器1 的控制器2被配置成通过执行数据库生成程序,实现图2中所示的功 能块。
在执行再现记录到硬盘驱动器4(图l)的记录成像数据的处理时, 硬盘记录器1与该再现处理同时地执行生成数据库的处理。
即,硬盘记录器1的控制器2把视频解码器12解码的再现视频 信号DP提供给视频信号处理电路14,从而把基于该再现的视频信号 DP的图像显示在显示监视器(未示出)上,同时,把再现的视频信号 DP提供给控制器2中的图像分析块31和典型图像选择块33。
图像分析块31从再现的视频信号DP提取再现视频特征数据 DS,作为表示形成记录的成像数据的每个帧图像的特征的特征信息,
选择块33。
更具体地说,当供给再现视频信号DP时,图像分析块3r把包
括在该再现视频信号DP中的每个帧图像分成5x5=25个区域,并计 算每个区域的亮度信号(或者Y信号)的DCT(离散余弦变换)系数。随 后,图像分析块31把这25个区域的DCT系数表示成一个25级(degree) 向量,该向量是基于帧图像的再现视频特征数据DS。
上,产生、特征信息标识符Tid,并把产生的特征信息标识符Tid附到 再现视频特征数据DS上,从而把这些再现视频特征数据DS和特征 信息标识符Tid供给闪速存储器5的特征数据记录块41,并临时记录 到RAM(未示出)中。
当供给了附加特征信息标识符Tid的再现视频特征数据DS时, 特征数据记录块41在特征信息标识符Tid与再现视频特征数据DS关 联的状态下,把所有的再现视频特征数据DS记录成累积的特征数据 DSa。
另一方面,典型图像选择块33从图像分析块31供给的再现视频 特征数据DS中选择典型特征数据DSr,并把选择的数据DSr传给标 识符识别块34。
即,典型图像选择块33计算作为连续的两条再现视频特征数据 DS之间的向量的距离(下面称为前-后距离),以便检测该前-后距离等 于或超过预定的场景变化阈值的再现视频特征数据DS的組合。
此时,当检测到该前-后距离等于或超过预定的场景变化阈值的 再现视频特征数据DS的组合时,典型图像选择块33确定在这两条连 续的特征数据中,后面的再现视频特征数据DS所基于的帧图像的场 景变化自前面的再现视频特征数据DS所基于的帧图像,从而使后面 的再现视频特征数据DS成为典型特征数据DSr。
一般来说,诸如成像数据之类的动画内容由多块类似图像构成。 于是,通过检测场景变化,典型图像选择块33能够把从代表每一块 的图像提取的再现视频特征数据DS设置成典型特征数据DSr。
当从典型图像选择块33供给典型特征数据DSr时,标识符识别 块34对照典型特征数据DSr匹配附加特征信息标识符Tid的再现视
频特征数据DS,并把与典型特征数据DSr匹配的再现视频特征数据 DS的特征信息标识符Tid识别成典型特征数据DSr的特征信息标识 符Tid(下面称为典型特征信息标识符Tidr),把该典型特征信息标识 符Tidr传给文本附加块35和典型图像选择块33。
当完成记录的成像数据的再现时,典型图像选择块33利用典型 特征信息标识符Tidr识别从中提取典型特征数据DSr的再现视频特 征数据DS(下面称为典型图像数据PDr),把该典型图像数据PDr叠 加到从ROM(未示出)读取的图像数据上,从而产生文本输入图像数据 PDn,并把产生的文本输入图像数据PDn传给视频信号处理电路14。
从而,如图3中所示,硬盘记录器1能够在显示监视器(未示出) 上显示文本输入屏幕50。
在该文本输入屏幕50上,显示基于典型图像数据PDr的典型图 像51, 同时,显示消息"Enter the word that indicates the contents of this image",从而提示用户把与典型图像51对应的图像文本信息TX 输入在文本输入屏幕50的底部所示的文本输入框52中。
此时,在文本输入屏幕50上,光标被置于键盘按钮53上,键盘 按钮53位于在右侧所示的三个按钮中的顶部。用和表示其它两个按 钮的颜色不同的颜色表示光标所指的键盘按钮。
在光标被置于鍵盘按钮3上的情况下,按下遥控器30的输入按 钮(未示出)导致典型图像选择块33根据从ROM(未示出)读取的图像 数据,在显示监视器上显示键盘屏幕60,如图4中所示。
在键盘屏幕60上,如同在文本输入屏幕50上一样,文本输入框 52被显示在底部,同时,光标被置于返回按钮61或者键盘按钮组62 上,在所述键盘按钮组62中,按照日漆音节表排列平假名字符。
典型图像选择块33(图2)使用户利用光标按钮和输入按钮(均未 示出)选择键盘按钮组62中的必需按钮,从而输入典型图像51和对应 的图4象文本信息TX。
另外,当在光标被置于键盘屏幕60上的返回按钮61的情况下, 按下遥控器30的输入按钮时,典型图像选择块33再次在显示监枧器
上显示文本输入屏幕50(图3)。
随后,当按下遥控器30的光标按钮(未示出),以便从遥控器接 口 IO供给对应的操作信号时,典型图像选择块33顺序把光标从键盘 按钮53移动到输入按钮54和停止按钮55。
当在光标被置于输入按钮54上的情况下按下遥控器30(图l)的 输入按钮(未示出)时,控制器2(图2)把输入的图像文本信息TX供给 文本附加块35。
文本附加块35把用户输入的图像文本信息TX和从标识符识别 块34供给的典型特征信息标识符Tidr登记到闪速存储器5的图像文 本数据库42(图2)中。
从而,如图5中所示,控制器2能够产生相互关联地登记典型特 征信息标识符Tidr和图像文本信息TX的图像文本数据库42。通过 利用生成的图像文本数据库42,控制器2能够利用通过和在数据库生 成处理中使用的相同提取方法,从视频内容提取的特征信息,得到与 指定视频内容对应的内容字符信息。
另一方面,如果在光标被置于停止按钮55(图3)上的情况下,按 下遥控器30的输入按钮(未示出),那么控制器2停止数据库生成处理。
随后,硬盘记录器1能够按照用户的思想状态(state of mind), 确定是否执行数据库生成处理,从而在并不强制输入图像文本信息 TX的情况下,硬盘记录器1能够避免用户感到图像文本信息TX的 输入麻烦。
应注意在再现视频特征数据DS中,图像分析块31提取和易于 响应诸如人物或物体之类的文本信息的图像对应的再现视频特征数 据DS,从而从选择的再现视频特征数据DS中选择典型特征数据DSr。 这种情况下,在典型图像51中,图像分析块31只把与人或物体对应 的区域显示成比周围区域明亮,从而使用户易于明白与该人或物体对 应的内容的输入,以使用户正确地输入表示典型图像51的内容的图 像文本信息TX。
从而,与再现处理同时地,硬盘记录器1从再现视频信号DP中
提取再现视频特征数据DS,把提取的再现视频特征数据DS记录到特 征数据记录块41,同时,从再现视频特征数据DS中选择表现每个场 景的典型图像数据DPr。随后,在再现处理结束之后,把基于典型图 像数据DPr的典型图像51显示在显示监视器上,以使用户输入与典 型数据DPr对应的图像文本信息TX,同时,相互关联地登记与典型 图像数据DPr对应的典型特征信息标识符Tidr和图像文本信息TX, 从而生成用于获得与图像对应的内容字符信息的图像文本数据库42。 (3)显示候选标题
下面说明通过利用上面说明的图像文本数据库42执行的候选标 题显示处理(候选标题获取处理和列表屏幕显示处理)。在候选标题显 示处理中,硬盘记录器1的控制器2执行候选标题显示程序,从而实 现图6中所示的功能块。
(3-l)获取候选标题
在记录从外部设备,比如摄像机输入的输入成像数据时,硬盘记 录器1的控制器2同时执行候选标题获取处理。
即,控制器2把通过外部接口 ll(图l)输入的输入成像数据记录 到硬盘驱动器4,同时,把输入的成像数据中,由视频解码器12解码 的输入视频信号TP供给图像分析块31。
图像分析块31借助和数据库生成处理中基本相同的处理,从输 入视频信号TP中提取每个帧图像的输入视频特征数据TS,并把提取 的输入视频特征数据TS供给特征数据匹配块62。
当被供给输入视频特征数据TS时,特征数据匹配块62选择图 像文本信息TX与之关联的累积特征数据DSa中,相对于输入视频特 征数据TS具有最小距离的累积特征数据DSa。
更具体地说,特征数据匹配块62对照输入视频特征数据TS,匹 配图像文本信息TX与之关联的累积特征数据DSa,从而按照离输入 视频特征数据TS的距离的升序检测20条累积特征数据DSa。随后, 特征数据匹配块62确定所检测的累积特征数据DSa是否被登记在图 像文本数据库42中。 .
特征数据匹配块62对照图像文本数据库42的典型特征信息标识 符Tidr,匹配所检测的累积特征数据DSa的特征信息标识符Tid。如 果发现所检测的累积特征数据DSa包含登记在图像文本数据库42中 的累积特征数据DSa,那么特征数据匹配块62选择登记的累积特征 数据DSa中,离输入视频特征数据TS的距离最小的累积特征数据 DSa作为最小累积特征数据DSan。
此外,特征数据匹配块62确定最小累积特征数据DSan和输入 视频特征数据TS之间的距离是否小于预定的相似性阈值。如果认为 该距离低于预定的相似性阈值,那么特征数据匹配块62确定基于输 入视频特征数据TS的帧图像类似于基于最小累积特征数据DSan的 帧图像,从而把该最小累积特征数据DSan所拥有的典型特征信息标 识符Tidr传给文本获取块63。
当从图像文本数据库42获得与典型特征信息标识符Tidr对应的 图像文本信息TX时,文本获取块63临时把获得的图像文本信息TX 保存在RAM(未示出)中,作为内容字符信息TXc,同时,结束当前输 入视频特征数据TS的处理,从而开始根据下一个输入视频信号TP 产生输入视频特征数据TS。此时,如果两次或更多次获得相同的内 容字符信息TXc,那么文本获取块63计数获取的数目。
随后,当控制器2结束获取正被记录的输入成像数据所拥有的所 有输入视频特征数据TS的内容字符信息TXc的一系列处理时,文本 获取块63从图像文本数据库42中,按照获取的降序选择临时保存在 RAM中的内容字符信息TXc中的10条内容字符信息TXc,从而把 选择的内容字符信息TXc登记到成像数据管理列表43中,如图7中 所示。
从而,控制器2选择内容字符信息TXc,所述内容字符信息TXc 表示出输入成像数据中成像时间方面相当长,并且成像时间与输入成 像数据的比率较高的帧图像,为了使选择的内容字符信息TXc成为候 选标题文本TI,把在其记录处理已结束的录制成像数据的内容的指示 方面较高的内容字符信息TXc登记为候选标题文本TI。
另一方面,如果在对照图像文本数据库42的典型特征信息标识 符Tidr匹配检测的累积特征数据DSa的特征信息标识符Tid之后, 没有发现在图像文本数据库42中登记的检测的累积特征数据DSa, 从而特征数据匹配块62结束当前输入视频特征数据TS的处理,从而 开始基于下一输入视频信号TP的输入视频特征数据TS的产生。
如果特征数据匹配块62确定最小累积特征数据DSan和输入视 频特征数据TS之间的距离超过预定的相似性阈值,那么它指出基于 输入视频特征数据TS的帧图像和基于最小累积特征数据DSan的帧 图像不相似。从而,特征数据匹配块62结束当前输入视频特征数据 TS的处理,并开始基于下一输入视频信号TP的输入视频特征数据 TS的生成。
从而,就硬盘记录器l来说,在记录成像数据的处理中,输入视 频特征数据TS提取自输入视频信号TP;在登记在图像文本数据库 42中的累积特征数据DSa中,识别与输入视频特征数据TS最接近的 最小累积特征数据DSan;获得与最小累积特征数据DSan对应的图像 文本信息TX,作为表示从其提取输入视频特征数据TS的帧图像的内 容的内容字符信息TXc;并且该内容字符信息TXc被登记成表示录制 成像数据的内容的候选标题文本TI。
从而,硬盘记录器1能够把表示出录制成像数据的内容的候选标 题文本TI登记到成像数据管理列表43中,而不用用户执行任何操作。
应注意在记录成像数据时,硬盘记录器1在成像数据管理列表 43(图7)中自动登记成像数据ID,附于输入的成像数据上的成像日期 信息,和表示出成像数据是通过外部接口 11的哪个输入端子输入的 输入信息。
此外,由于与成像数据的记录同时地进行候选标题获取处理,因 此在输入的成像数据的记录结束时,硬盘记录器1能够几乎同时地把 内容字符信息TXc登记到成像数据管理列表43中。
于是当输入的成像数据的记录已结束时,成像数据管理列表43 包含用于登记成像数据的标题的空白标题框Ct,和用于登记选为缩略
图的图像的空白缩略图框Cs,登记信息的成像数据ID框Ci,成像日 期信息框Cd,候选标题框Ca和输入信息框Ce。 (3-2)显示成像数据列表屏幕
当对所有指定的成像数据完成了图像数据记录处理,或者当用户 通过遥控器30从遥控器接口 10供给了请求显示成像数据列表屏幕70 的操作信号时,硬盘记录器1的控制器2(图l)执行候选标题显示程序 指令的列表屏幕显示处理。
即,控制器2的标题附加块64(图6)根据成像数据管理列表43 产生列表图像数据DL,并把产生的数据DL传给视频信号处理电路 14,从而在显示监视器(未示出)上显示成像数据列表屏幕70,如图8 中所示。
成像数据列表屏幕70根据成像数据管理列表43,分别在成像日 期信息显示区72和输入信息显示区73中显示成像日期信息和输入信 息。
如果标题被登记在成像数据管理列表43(图7)中,那么输入信息 显示区73显示录制成像数据的标题;如果没有标题被登记,那么输 入信息显示区73保持空白。
如果把光标置于显示在成像数据列表屏幕70的顶部的录制成像 数据上,那么标题附加块64改变该录制成像数据的周围区域的颜色, 随后显示该数据。当用户操纵遥控器30(图l)的光标按钮(未示出),从 遥控器30供给对应的操作信号时,标题附加块64顺序把光标下移到 后面的录制成像数据。
当在光标被置于一条录制成像数据上的情况下,操纵遥控器 30(图l)的输入按钮(未示出)时,标题附加块64(图6)以基于下拉菜单 的子屏幕75的形式显示和光标所位于的录制成像数据有关的候选标 题文本TI,并把光标置于候选标题文本TI之一上。
另外,标题附加块64被配置成按照在候选标题获取处理中,从 图像文本数据库42获得候选标题文本TI的次数的降序,从子菜单75 的顶部开始显示候选标题文本TI。
从而,硬盘记录器1能够按照作为与录制成像数据拥有的帧图像
的内容对应的内容字符信息TXc而获得候选标题文本TI的次数的降 序,即,按照这些文本对应于更多图像的顺序,显示候选标题文本 TI,从而向用户呈现表现出录制成像数据的内容的可能性更高的候选 标题文本TI,于是,这种配置便于在显示监视器上显示表示出录制成 像数据的内容的文本信息,而不必麻烦地再现录制的成像数据。
应注意在子菜单75的右下方所示的三角形符号表示在子菜单中 下面还有更多的候选标题文本TI。当操纵遥控器30的向下光标按钮 时,标题附加块64向下滚动子菜单75,从而显示更多的候选标题。
此外,当在光标被置于一个候选标题,例如"Mt.Fuji,,上的情况 下,按下遥控器30的输入按钮时,标题附加块64把标题"Mt.Fuji" 登记到成像数据管理列表43的标题框Ct中,同时,在成像数据列表 屏幕70的标题显示区73中显示标题"Mt.Fuji"。
从而,硬盘记录器1能够使用户借助简单的选择操作,从两个或 者更多的候选标题中确定所需的标题,从而把标题登记到成像文本数 据库42中,而不会以不便的操作烦扰用户。
例如,如果标题选择"Mt.Fuji",那么标题附加块64从典型图像 51被显示的录制成像数据中选择与"Mt.Fuji"对应的图像,并在缩略 图显示区71中显示选择的图像。
即,如果找到登记成基于正被显示的录制图像数据,与"Mt,Fuji" 关联的典型特征信息标识符Tidr,那么标题附加块64从图像文本数 据库42选择这些标识符之一,以便把选择的标识符登记到成像数据 管理列表43的缩略图框Cs中,同时,以缩略图的形式在缩略图显示 区71中显示与登记的标识符对应的图像。
另 一方面,如果没有找到登记成基于正被显示的录制图像数据, 与"Mt.Fuji,,关联的典型特征信息标识符Tidr,那么标题附加块64根 据另一录制的成像数据选择与"Mt.Fuji"关联的一个典型特征信息标 识符Tidr,检测与该典型特征信息标识符Tidr代表的累积特征数据 DSa最相似的输入视频特征数据TS,以识别检测的输入视频特征数
据TS的特征信息标识符Tid,把识别的特征信息标识符Tid登记到 成像数据管理列表43的缩略图框Cs中,并以缩略图的形式在缩略图 显示区71中显示与该典型特征信息标识符Tidr对应的图像。
此外,如果在成像数据管理列表43中没有设置任何标题,并且 在缩略图框Cs中没有登记任何典型特征信息标识符Tidr,那么标题 附加块64在缩略图显示区71中显示录制的图像数据中的指定图像(例 如,第一帧的图像)。
从而,标题附加块64能够以缩略图的形式显示与用户选择的表 示出成像数据的内容的标题对应的典型图像数据PDr,从而把表示出 图像数据的内容的图像显示在缩略图显示区71中。
另外,当在光标被置于标题输入按钮76上的情况下,按下遥控 器30的输入按钮时,标题附加块64显示键盘屏幕60(图4),以便让 用户输入所需的标题。
从而,标题附加块64能够关于正被显示的候选标题文本TI,输 入用户偏爱的任何标题,同时,如果显示的候选标题文本TI被用户 拒绝,对录制的成像数据设置用户偏爱的标题。
从而,在显示成像数据列表屏幕时,硬盘记录器l被配置成在子 菜单75上显示由候选标题获取处理登记的候选标题文本TI,从而让 用户从这些候选标题文本TI中选择所需的标题。
从而,硬盘记录器l可使用户利用简单的选择操作,从显示的候 选标题文本TI中确定录制的图像数据的所需标题,从而简化把标题 输入成像数据管理列表43中的作业。
(4)生成图像文本数据库的过程
下面参考图9中所示的流程图,说明按照数据库生成程序的指令 执行的数据库生成过程。
当用户通过遥控器30(图1)开始记录到硬盘驱动器4上的录制成 像数据的再现时,硬盘记录器1的控制器2进入数据库生成过程RT1 的开始步骤,随后进入步骤SPl,在步骤SP1中,根据从视频解码器 12供给的再现视频信号DP产生再现视频特征数据DS,之后过程进
入步骤SP2。
在步骤SP2,控制器2把特征信息标识符Tid附到再现视频特征 数据DS上,并把再现视频特征数据DS和特征信息标识符Tid记录 到特征数据记录块41(图2),之后过程进入步骤SP3。
在步骤SP3,控制器2按照是否存在任意场景变化,确定供给的 再现视频特征数据DS是否是典型特征数据DSr。如果确定结果是否 定的,那么过程返回步骤SP1,开始下一个再现视频特征数据DS的 处理。
如果步骤SP3中的确定结果是肯定的,那么过程进入步骤SP4。 在步骤SP4,控制器2识别典型特征数据DSr的典型特征信息标识符 Tidr,并把典型特征信息标识符Tidr临时保存在RAM(未示出)中, 随后过程进入步骤SP5。
在步骤SP5,控制器2确定再现的录制成像数据中的所有再现视 频信号DP的处理是否都已结束。如果确定结果是否定的,那么过程 返回步骤SP1,在步骤SP1中,控制器2开始下一个再现视频信号 DP的处理。
另一方面,如果步骤SP5中的确定结果是肯定的,那么它表示 录制成像数据再现处理已结束,随后过程进入步骤SP6。
在步骤SP6,控制器2利用记录到RAM中的典型特征信息标识 符Tidr识别典型数据DPr,并把包含基于识别的典型数据DPr的典 型图像51的文本输入屏幕50(图3)显示在显示监视器(未示出)上,之 后过程进入步骤S7。
当用户在步骤SP7中输入图像文本信息TX时,过程进入步骤
SP8。
在步骤SP8,控制器2使在步骤SP7中输入的图像文本信息TX 与典型特征信息标识符Tidr相关联,并把这些信息和标识符登记到 图像文本数据库42中(图5),之后过程进入步骤SP9。
在步骤SP9,控制器2确定记录到RAM中的所有典型特征数据 DSr的处理是否都已结束。如果确定结果是否定的,那么过程返回步
骤SP6,在步骤SP6,控制器2开始下一个典型特征数据DSr的处理。 另一方面,如果步骤SP9中的响应是肯定的,那么过程进入步
骤SPIO,在步骤SP10中,控制器2结束上面提及的处理。
应注意控制器2被配置成对每条录制的成像数据只进行一次这
样的数据库生成处理。于是,如果将对录制的成像数据进行两次或更
多次的成像数据再现处理,那么在第二次和后续的成像数据再现处理
中,不执行数据库生成处理。
在对于录制的成像数据的第二次或者后续再现处理中,如果操作
信号请求输入与正被显示的图像对应的图像文本信息TX,那么控制
器2使用正被显示的屏幕作为典型图像,从而执行步骤SP6-SP10的处理。
这种情况下,控制器2不必从正被显示的图像数据中提取再现视 频特征数据。于是,在步骤SP8中,控制器2可识别与正被显示的图 像数据对应的特征信息标识符Tid,把识别的该标识符用作典型特征 信息标识符Tidr。
(5)候选标题显示处理的过程
下面参考图10中所示的流程图,说明将按照数据库生成程序的 指令执行的候选标题显示处理的过程。
当用户通过遥控器30(图)开始记录从与外部接口 11连接的外部 设备,比如摄像机(未示出)输入的输入图像数据的处理时,硬盘记录 器1的控制器2进入候选标题处理过程RT2的开始步骤,之后过程进 入步骤SP21。在步骤SP21中,控制器2根据从视频解码器12供给 的输入视频信号TP,产生输入视频特征数据TS,之后过程进入步骤 SP22。
在步骤SP22,控制器2对照记录到闪速存储器5的特征数据记 录块41(图6)的累积特征数据DSa,匹配在步骤SP21中产生的输入视 频特征数据TS,之后过程进入步骤SP23。在步骤SP23,控制器2从 累积特征数据DSa中选择登记在图像文本数据库42中,并且具有离 输入视频特征数据TS的最短距离,即最小距离的最小累积特征数据
DSan,之后过程进入步骤SP24。
在步骤SP24,控制器2确定最小距离是否小于预定相似性阈值。
如果步骤SP24中的确定结果是否定的,那么表示在具有最小距 离的最小累积特征数据DSan和输入视频特征数据TS之间不存在相 似性,之后过程返回步骤SP21,在步骤SP21,控制器2开始下一输 入视频信号TP的处理。
另一方面,如果步骤SP24的确定结果是肯定的,那么表示在最 小累积特征数据DSan和输入视频特征数据TS之间存在相似性,之 后过程进入步骤SP25。
在步骤SP25,控制器2从图像文本数据库42获得与最小累积特 征数据DSan对应的内容字符信息TXc ,并把获得的信息临时保存在 RAM(未示出)中,作为与输入视频信号TP对应的内容字符信息TXc , 之后过程进入步骤SP26。
在步骤SP26,控制器2确定所有输入视频信号TP的处理是否 已结束。如果确定结果是否定的,那么过程返回步骤SP21,在步骤 SP21,控制器2开始下一输入视频信号TP的处理。
另一方面,如果步骤SP26中的确定结果是肯定的,那么表示记 录输入的成像数据的处理已结束,之后过程进入步骤SP27。
在步骤SP27,控制器2检查获得内容字符信息TXc的次数,按 照获取的降序选择10条内容字符信息TXc作为候选标题文本TI,并 把选择的候选标题文本TI登记到成像数据管理列表43(图7)中,之后 过程进入步骤SP28。
在步骤SP28,控制器2根据成像数据管理列表43,在显示监视 器上显示成像数据列表屏幕70(图8),成像数据列表屏幕70是录制的 成像数据的列表,之后过程进入步骤SP29。此时,控制器2按照用 户的指令在子屏幕75A上显示候选标题文本TI。
在步骤S29,当用户选择了录制的成像数据的标题时,过程进入 步骤SP30。
在步骤SP30,控制器2把在步骤SP30中登记的标题登记到成像
文本数据库42(图7)中,之后过程进入步骤SP31,在步骤SP31中, 控制器2结束上面提及的处理。
应注意如果用户通过遥控器30从遥控器接口 IO供给表示显示成 像数据列表屏幕70(图8)的操作信号,那么控制器2执行步骤 SP28-SP31的列表屏幕显示处理。另外对于控制器2来说,可行的是 在输入图像数据记录处理中,只执行步骤SP21-SP27的候选标题获取 处理,并通过跳过列表屏幕显示处理到达步骤SP31。
(6)操作和效果
在上面说明的结构中,硬盘记录器l根据亮度,按照预定的特征
入视频特征数据TS,所述输入视频特征数据TS是表示该图像的特征 的内容特征信息,并从图像文本数据库42中检测与输入视频特征数 据TS类似的累积特征数据DSa,按照和输入视频特征数据TS的提 取方法相同的提取方法从作为指定图像的典型图像数据PDr提取的 典型特征数据DSr与表示出典型图像数据PDr的内容的图像文本信 息TX被相互关联地登记在所述图像文本数据库42中。此外,作为表 示出从其提取输入视频特征数据TS的图像(或者输入视频信号TS)的 内容的内容字符信息TXc,硬盘记录器1从图像文本数据库42获得 与检测的累积特征数据DSa对应的图像文本信息TX。
从而,在上面提及的结构中,与相似的最小累积特征数据DSan 的关系指示输入成像数据拥有的每个图像的内容,从而硬盘记录器1 能够自动获得表示出输入成像数据的内容的可能性高的内容字符信 息TXc,而不会用任何操作烦扰用户。
此外,硬盘记录器1从图像文本数据库42检测与输入视频特征 数据TS最类似的最小累积特征数据DSan,从而获得与该最小累积特 征数据DSan对应的内容字符信息TXc,从而根据输入视频信号TS, 有选择地获得示出每个图像的内容的可能性较高的图像文本信息 TX,作为内容字符信息TXc。
此外,在记录通过外部接口 ll从外部设备,比如摄像机供给的
输入成像数据时,硬盘记录器1从构成该输入成像数据的每帧图像中
提取输入视频特征数据TS,以执行候选标题获取处理,从而在结束 输入成像数据记录处理的时候,获得内容字符信息TXc。于是,对于 录制的成像数据来说,硬盘记录器1任何时候都能够使用该内容字符 信息。
另外,通过把内容字符信息TXc登记到成像数据管理列表43中, 硬盘记录器1能够把该内容字符信息TXc显示成录制的图像数据的候 选标题,并把该内容字符信息TXc用作搜索录制成像数据的内容的关 键字,从而提高用户便利性。
在上面说明的结构中,按照获取的次数的降序在成像数据管理列 表43中登记预定数量(例如IO条)的内容字符信息TXc,以致录制成 像数据拥有的大量图像正确地示出录制成像数据的内容,从而使硬盘 记录器1可以有选择地按照适合于作为录制成像数据的标题和关键字 的概率更高的降序,把内容字符信息TXc登记到成像数据管理列表 43中。
此外,硬盘记录器1能够把登记在成像数据管理列表43中的内 容字符信息TXc显示在显示监视器上,作为候选标题文本TI,所述 候选标题文本TI是表示录制成像数据的内容的候选标题,以使用户 在不再现该录制成像数据的情况下识别该录制成像数据的内容,从而 便于用户记起或预测录制成像数据的内容。
另外,硬盘记录器1可让用户从显示的候选标题文本TI中选择 一个候选标题文本TI,同时把选择的候选标题文本TI作为录制成像 数据的标题登记到成像数据管理列表43中,从而便于用户通过仅仅 选择显示的候选标题文本TI之一,对录制成像数据设置所需的标题, 而不会以标题的确定和不便的输入操作烦扰用户。
另外,硬盘记录器1能够从数据库生成处理产生的图像文本数据 库42获得内容字符信息TXc,在所述数据库生成处理中,用户自己 设置对应于典型图像51的图像文本信息TX,从而允许获取按照用户 偏爱登记的图像文本信息TX作为内容字符信息TXc。
这种情况下,获得输入的成像数据的人受限,以致不同于未指定
用户生成的图像文本数据库42的使用,相互类似的再现视频特征数 据DS和基于图像的图像文本信息TX被登记在图像文本数据库42中, 从而允许硬盘记录器1显著提高获得的内容字符信息TXc表示出基于 输入视频特征数据TS的每个图像的内容的概率。
如上所述以及按照上面说明的结构,硬盘记录器1能够从图像文 本数据库42获得与类似于输入成像数据拥有的图像类似的典型图像 数据DPr对应的图像文本信息TX,作为表示出成像数据所拥有的图 像的内容的内容字符信息TXc,从而实现被配置成获得表示出输入成 像数据的内容的内容字符信息TXc的内容字符信息获取方法,内容字 符信息获取程序,内容字符信息获取设备和视频内容记录设备,在所 述图像文本数据库42中,从指定视频内容提取的典型特征数据DSr 和表示出典型特征数据DSr所基于的典型图像数据DPr的内容的图 像文本信息TX相互关联。
(7)其它实施例
在本发明的上述实施例中,对照所有累积特征数据DSa匹配输 入视频特征数据TS,以检测低于预定相似性阈值的累积特征数据 DSa ,并确定检测到的累积特征数据DSa是否登记在图像文本数据库 42中,以检测登记在图像文本数据库42中,并与输入视频特征数据 TS类似的累积特征数据DSa。但是,另外可行的是只对照登记在图 像文本数据库42中的累积特征数据DSa来匹配输入视频特征数据 TS,以确定低于相似性阈值的累积特征数据DSa,从而检测相似的累 积特征数据DSa。
在上面说明的实施例中,从获得的内容字符信息TXc中选择IO 条(它是预定的登记数目)内容字符信息TXc,以便登记在成像数据管 理列表43中。但是,另外可行的是把所有获得的内容字符信息TXc 登记到成像数据管理列表43中。
此外,在上述实施例中,获得内容字符信息TXc的次数被计数, 以便按照获取计数的降序把内容字符信息TXc登记到成像数据管理
列表43中。但是,另外可行的是按照获取的顺序,或者按照匹配时 的相关值的降序,登记内容字符信息TXc。
在按照相关值的降序登记内容字符信息TXc时,特征数据匹配 块62计算这些相关值,并且当对照累积特征数据DSa匹配输入视频 特征数据TS时,把计算的值临时保存在RAM中。随后,文本获取 块63通过从与相关值高的累积特征数据DSa对应的一个内容字符信 息TXc开始,把内容字符信息TXc登记到成像数据管理列表43中。 从而,控制器2能够优先把正确表示出由输入视频信号TP表现的每 个图像的内容的概率较高的内容字符信息TXc登记到成像数据管理 列表43中。
另外,对于控制器2来说,可行的是计算通过把获取计数乘以与 相关值一致的相关系数而获得的相乘值以及每个内容字符信息TXc 的相乘值的总和,从而按照相乘值的总和的降序把内容字符信息TXc 登记到成像数据管理列表43中。从而,通过既考虑内容字符信息TXc 的获取计数,又考虑输入视频特征数据TS和累积特征数据DSa之间 的相关值,控制器2能够按照与录制成像数据所拥有的图像的比率一 致的正确优先顺序,把每个图像的正确的内容字符信息TXc登记到成 像数据管理列表43中。
此外,在上述实施例中,在相似的累积特征数据DSa中,只有 与最小累积特征数据DSan对应的一条内容字符信息TXc被登记在成 像数据管理列表43中。但是,另外可行的是登记两条或者更多条的 内容字符信息TXc。
在上述实施例中,确定与离输入视频特征数据TS的距离最小的 最小累积特征数据DSan对应的图像最类似于记录的视频数据TP。但 是,另外可取的是确定和与输入视频特征数据TS的相关值最高的累 积特征数据DSa对应的图像最类似于输入视频信号TP。
在上述实施例中,在响应用户请求,把图像文本信息TX输入显 示的图像中时,使用记录到特征数据记录块41的累积特征数据DSa。 但是,另外可取的是把累积特征数据DSa用于各种处理操作,比如将
按照摘要再现方式再现的一部分的选择。
在上述实施例中,由成像数据ID和序列号构成的特征信息标识 符Tid被附到再现视频特征数据DS上。但是,另外可行的是使用任 意其它的附加特征信息标识符Tid的方法,只要录制成像数据和特征 信息标识符Tid相互关联。
在上述实施例中,内容字符信息TXc被登记在成像数据管理列 表43中,作为提供候选标题的候选标题文本TI。但是,另外可行的 是把内容字符信息TXc登记成搜索关键字。
在上述实施例中,输入视频特征数据TS产生自每个帧图像的输 入成像数据。但是,另外可行的是产生每个场图像的输入视频特征数 据TS。
在上述实施例中,输入视频特征数据TS产生自输入成像数据的 所有帧图像。但是,另外可行的是几帧一组地产生输入视频特征数据 TS。
在上述实施例中,如果在成像数据管理列表43的标题框Ct中没 有登记任何标题,那么成像数据列表屏幕70的标题显示框73保持空 白。但是,另外可取的是把首先登记在成像数据管理列表43中的候 选标题文本TI显示在标题显示框73中。
从而,硬盘记录器1能够显示表示出录制成像数据的内容的候选 标题文本TI,以使用户直观地识别录制成像数据的内容,而不必使用 户选择一条录制成像数据,并把选择的数据显示在子菜单75上。
此外,在本发明的上述实施例中,在显示的成像数据中,只有与 用户选择的标题对应的图像被显示在缩略图显示区71中。但是,另 外可取的是从未显示的其它成像数据中选择与标题对应的图像,并显 示选择的图像。
在上述实施例中,在选择将显示在缩略图显示区71中的图像的 时候,如果与用户选择的标题对应的典型特征信息标识符Tidr未被 登记在成像数据管理列表43中,那么检测和对应于该标题的一条典 型特征数据DSr最相似的输入视频特征数据TS。但是,另外可取的
是在相似的输入视频特征数据TS中,选择指定的输入特征数据TS, 以便把选择的输入视频特征数据TS显示在缩略图显示区71上。
在上述实施例中,基于与所选标题对应的输入视频特征数据TS 的图像作为缩略图被显示在缩略图显示区71中。但是,另外可取的 是总是把录制成像数据的第一帧图像显示成缩略图。另外,并不总是 必须在成像数据列表屏幕70上显示缩略图。
在上述实施例中,缩略图显示区71,成像日期信息显示区72, 标题显示区73和输入信息显示区74被排列在成像数据列表屏幕70 上。但是,另外可取的是按照将自动生成的成像数据管理列表43的 项目,适当地改变将在成像数据列表屏幕70上显示的项目。
在上述实施例中,图像文本数据库42被记录到闪速存储器5中。 但是,另外可取的是把图像文本数据库42记录到硬盘驱动器4。
在上述实施例中,硬盘记录器l执行数据库生成处理。但是,对 于硬盘记录器1来说,另外可取的是只执行获取内容字符信息TXc 的处理。这种情况下,硬盘驱动器l通过利用默认安排的图像文本数 据库42执行标题显示处理,并使用通过网络共享的图像文本数据库 42。
在上述实施例中,获取内容字符信息TXc的处理与记录输入的 成像数据的处理同时进行。但是,另外可取的是单独地或者与再现处 理一起执行该获取处理。
在上述实施例中,图像文本数据库42由数据库生成处理生成。 但是,另外可取的是绘制正确地表示出任意选择的图像文本信息TX 的内容的图像,并使用其中从该绘制图像提取的特征信息与图像文本 信息TX相互关联的图像文本数据库42。
在上述实施例中,输入视频特征数据TS提取自摄像机作为视频 内容获得的输入成像数据。但是,另外可取的是从由各种动画数据, 比如电视广播节目和游戏软件播放屏幕,和静止图像数据,比如照片 构成的视频内容提取内容特征信息。
在上述实施例中,为录制的成像数据显示候选标题文本TI。但
是,另外可取的是为电视广播节目显示候选标题文本TI。这种配置允 许硬盘记录器1让用户从显示的候选标题文本TI中选择用户偏爱的 标题,而不是附到每个电视广播节目上的现有标题,从而也允许通过 简化的操作对电视广播节目设置用户偏爱的标题。
在上述实施例中,具有记录和再现能力的硬盘记录器1执行数据 库生成处理。但是,当由具有视频内容记录和再现能力的计算机,只 具有记录能力的记录设备,或者只具有记录和再现能力的记录/再现设 备执行数据库生成处理时,可获得基本相同的效果。
在上述实施例中,自动分发的电视广播节目和通过外部接口 11 输入的成像数据被记录。但是,另外可取的是记录可从因特网网站下 载的视频内容。
在上述实施例中,数据库生成程序等被预先保存在ROM或硬盘 驱动器4中。但是,另外可取的是把数据库生成程序等等从外部存储 介质,比如记忆棒(Sony公司的商标)安装到闪速存储器5。另一方面, 数据库生成程序等可通过USB(通用串行总线)、以太网(商标)、 IEEE(电气和电子工程师协会)802.11a/b/g无线LAN(局域网)从外部 获得,或者在地面数字电视广播或BS数字电视中分发。
在上述实施例中,硬盘记录器1具有由作为特征信息提取块的图 像分析块31,作为指定图像特征信息检测块的特征数据匹配块62, 和作为文本获取块的文本获取块63构成的内容字符信息获取设备。 但是,另外可取的是用各种其它配置的特征信息提取块、指定图像特 征信息检测块和文本获取块构成按照本发明的内容字符信息获取设 备。
本发明适合于配置成执行各种处理操作,例如动画内容的记录、 再现和编辑的各种信息处理设备。
虽然利用具体术语说明了本发明的优先实施例,不过这样的说明 只是出于举例说明的目的,在不脱离下述权利要求的精神或范围的情 况下可做出各种变化和修改。
本领域的技术人员应明白取决于设计要求和其它因素,可产生各
种修改、组合、子组合和变更,只要它们在附加权利要求或其等同物 的范围内。
权利要求
1、一种内容字符信息获取方法,包括下述步骤按照预定提取算法,提取表示构成视频内容的图像的内容特征信息;从数据库中检测与所述内容特征信息类似的指定图像特征信息,在所述数据库中,按照所述提取算法从指定图像提取的所述指定图像特征信息与表示出所述指定图像的内容的图像文本信息关联;和从所述数据库获得与在检测步骤中检测的所述指定图像特征信息关联的所述图像文本信息,作为表示从中提取所述内容特征信息的所述图像的内容的内容字符信息。
2、 按照权利要求1所述的内容字符信息获取方法,其中在检测 步骤中,在类似于所述内容特征信息的所述指定图像特征信息中,检 测与所述内容特征信息最相似的所述指定图像特征信息。
3、 按照权利要求2所述的内容字符信息获取方法,其中在检测 步骤中,当所述指定图像特征信息被表示成向量时,离表示所述内容 特征信息的向量的距离最小的所述指定图像特征信息被检测为与所 述内容特征信息最相似的所述指定图像特征信息。
4、 按照权利要求1所述的内容字符信息获取方法,其中所述视 频内容从预定的外部设备供给,并被记录到预定的记录器中,在提取 步骤中,内容特征信息提取自构成从所述外部设备供给的所述视频内 容的所述图像。
5、 按照权利要求1所述的内容字符信息获取方法,还包括下述步骤把所述内容字符信息登记到配置成管理所述视频内容的管理列 表中。
6、 按照权利要求5所述的内容字符信息获取方法,其中在登记 步骤中,在获取步骤获得的所述内容字符信息中,按照获取计数的降 序,依据预定的登记数目把所述选择的内容字符信息登记到所述管理列表中。
7、 按照权利要求5所述的内容字符倌息获取方法,其中在检测 步骤中,计算所述检测的指定图像特征信息和所述内容特征信息之间 的相关值,并且在登记步骤中,按照所述相关值的降序,把在获取步 骤中获得的所述内容字符信息登记到所述管理列表中。
8、 按照权利要求5所述的内容字符信息获取方法,还包括下述步骤把登记在所述管理列表中的所述内容字符信息显示在显示设备 上,作为表示所述视频内容的内容的候选标题。
9、 按照权利要求8所述的内容字符信息获取方法,其中在候选 标题显示步骤中,显示一个列表屏幕,在所述列表屏幕上,在列表中 显示所述视频内容,如果用户从在列表中显示的所述视频内容中选择 一条视频内容,那么与选择的一条视频内容对应的所述内容字符信息 作为候选者被显示在所述显示设备上。
10、 按照权利要求8所述的内容字符信息获取方法,还包括下述步骤用户从显示在所述显示设备上的所述内容字符信息中选择一条 所述内容字符信息;和把在选择步骤中选择的所述一条内容字符信息作为所述视频内 容的标题登记到所述管理列表中。
11、 按照权利要求10所述的内容字符信息获取方法,其中在候 选标题显示步骤中,显示一个列表屏幕,在所述列表屏幕上,在列表 中显示所述视频内容,如果在登记步骤中,所述标题被登记在所述管 理列表中,那么把所述标题显示在所述列表屏幕上,如果所述标题未 被登记在所述管理列表中,那么按照预定选择算法选择的一条内容字 符信息被显示成所迷标题。
12、 按照权利要求11所述的内容字符信息获取方法,其中在候 选标题显示步骤中,选择在获取步骤中最频繁获得的所述内容字符信 息,从而提供所述一条内容字符信息。
13、 一种配置成使计算机执行下述步骤的内容字符信息获取程序按照预定提取算法,提取表示构成视频内容的图像的内容特征信息;从数据库中检测与所述内容特征信息类似的指定图像特征信息, 在所述数据库中,按照所述提取算法从指定图像提取的所述指定图像 特征信息与表示所述指定图像的内容的图像文本信息关联;和从所述数据库获得与在检测步骤中检测的所述指定图像特征信 息关联的所述图像文本信息,作为表示从中提取所述内容特征信息的 所述图像的内容的内容字符信息。
14、 一种内容字符信息获取设备,包括 特征信息提取器,所述特征信息提取器被配置成按照预定提取算法,提取表示构成视频内容的图像的内容特征信息;特征信息检测器,所述特征信息检测器被配置成从数据库中检测 与所述内容特征信息类似的指定图像特征信息,在所述数据库中,按 照所述提取算法从指定图像提取的所述指定图像特征信息与表示所述指定图像的内容的图像文本信息关联;和文本获取器,所述文本获取器被配置成从所述数据库获得与所述所述特征信息检测器检测的所述指定图像特征信息关联的所述图像文本信息,作为表示从中提取所述内容特征信息的所述图像的内容的内容字符信息。
15、 一种视频内容记录设备,包括记录器,所述记录器被配置成记录从外部设备供给的视频内容; 特征信息提取器,所述特征信息提取器被配置成按照预定提取算法,提取表示构成视频内容的图像的内容特征信息;特征信息检测器,所述特征信息检测器被配置成从数据库中检测与所述内容特征信息类似的指定图像特征信息,在所述数据库中,按照所述提取算法从指定图像提取的所述指定图像特征信息与表示所述指定图像的内容的图像文本信息关联; 文本获取器,所述文本获取器被配置成从所述数据库获得与所述 特征信息检测器检测的所述指定图像特征信息关联的所述图像文本 信息,作为表示从中提取所述内容特征信息的所述图像的内容的内容字符信息;和登记器,所述登记器被配置成把所述内容字符信息登记到管理列 表中,所述管理列表被配置成管理记录到所述记录器的所述视频内 容。
全文摘要
本发明提供一种内容字符信息获取方法,包括下述步骤按照预定提取算法,提取表示构成视频内容的图像的内容特征信息,从数据库中检测与内容特征信息类似的指定图像特征信息,在所述数据库中,按照提取算法从指定图像提取的指定图像特征信息与表示该指定图像的内容的图像文本信息关联,和从数据库获得与在检测步骤中检测的指定图像特征信息关联的图像文本信息,作为表示从中提取内容特征信息的图像的内容的内容字符信息。
文档编号H04N5/92GK101170672SQ20071018168
公开日2008年4月30日 申请日期2007年10月24日 优先权日2006年10月24日
发明者宫本胜 申请人:索尼株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1