记录和/或重放系统的制作方法

文档序号:7606488阅读:123来源:国知局
专利名称:记录和/或重放系统的制作方法
技术领域
本发明涉及一种记录和/或重放系统。更具体地,本发明涉及对时间序列信息(如运动图像数据)编码和解码的记录和/或重放系统、信息产生设备、记录设备和重放设备,并涉及它们的处理方法以及使计算机执行所述方法的程序。
背景技术
迄今为止,已经知道具有以下功能的设备类型,所述功能为使用GPS(全球定位系统)获得当前位置信息并提供位置信息与地图信息之间的相关性,由此在地图上显示当前位置。近年来,已经提出具有GPS功能的上述类型的成像设备,如数码照相机。在此类成像设备中,在捕捉图像以及与图像捕捉位置相应的位置信息的同时,使图像和位置信息互相关联并接着记录它们。
另外,已经提出这样一种成像设备,其中,在单独的成像设备中,当根据位置信息而在地图上显示图标并选择该图标时,显示链接到该图标的图像(例如,参见未经审查的日本专利申请公开号2001-189905(图8))。这使用户能容易地知道捕捉图像时所处的地点。

发明内容
根据以上描述的先前技术,使静止图像与位置信息互相关联,并且,根据位置信息而在地图上显示图标,从而显示链接到该图标的图像。在进行比较时,在诸如运动图像的时间序列信息的情况下,位置信息随着时间序列信息的内容而改变,对于各个时间序列信息,必须核实位置信息。
然而,当执行诸如在记录介质中记录时间序列信息或通过使用传输介质而传输信息的操作时,使用把信息编码为预定格式的技术,以提高记录效率或传输效率。因此,会发生不希望有的情形不一定以时间序列顺序布置时间序列信息(如运动图像)中的各个单元信息块。
例如,当通过使用MPEG(运动图像专家组)方案对运动图像编码时,执行预测编码和数据压缩。预测编码利用图像帧的信息块之间或运动图像的单元图像之间的相互关系,并且数据压缩利用DCT(离散余弦变换)。在此情况下,各个帧的图像分成以下三类图像中的任一类I图像(帧内编码图像)、P图像(预测编码图像)、以及B图像(双向预测编码图像)。I图像代表可通过屏幕内编码而获得的屏幕,并且以与原始屏幕相同的顺序编码。P图像代表可通过屏幕之间前向预测编码而获得的屏幕,并且相似地,以与原始屏幕相同的顺序编码。然而,B图像代表通过双向预测编码获得的屏幕,并且在对I图像和P图像编码之后插入到I图像与P图像之间。因此,以与原始屏幕不同的顺序对B图像编码。从而,在双向预测的情况下,在参考I图像或P图像之后,通过置换或重排而定位B图像。
相应地,在重排各个单元信息块,即时间序列信息的情况下,产生难以提供各个单元信息块与位置信息之间相关性的问题。
相应地,本发明根据位置信息而使编码时间序列信息的各个单元信息和与之对应的位置信息相互关联,并且,在地图上提供时间序列信息的轨迹。
为了实现以上目的,根据本发明权利要求1的信息产生设备包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉时所处位置的位置信息;对运动图像数据编码的运动图像编码部件;以及多路复用部件,所述多路复用部件通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息互相关联而执行多路复用。这产生以下效果编码运动图像数据的各个单元图像与相应的位置信息互相关联,由此使得能在解码的情况下在地图上显示运动图像数据的轨迹。
根据本发明的权利要求2,如权利要求1所述的信息产生设备进一步包括产生系统时间的系统时间产生部件,其中,多路复用部件增加相应单元图像及其位置信息所共有的系统时间,由此使单元图像与位置信息互相关联。这产生以下效果根据系统时间执行关联,由此使得能在解码的情况下在地图上显示运动图像数据的轨迹。
根据权利要求3的信息产生设备包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉时所处位置的位置信息;对运动图像数据编码的运动图像编码部件;产生系统时间的系统时间产生部件;多路复用部件,对于通过增加至少一个单元图像和与所述单元图像对应的位置信息所共有的系统时间到其而编码的运动图像数据,所述多路复用部件通过使单元图像与位置信息互相关联而执行多路复用;以及在记录介质中记录多路复用数据的记录部件。这产生以下效果编码运动图像数据的各个单元图像与相应的位置信息互相关联,由此使得能在解码的情况下在地图上显示运动图像数据的轨迹。
根据本发明权利要求4的重放设备包括图像解码部件,对于编码运动图像数据和与运动图像数据的至少一个单元图像相对应的位置信息互相关联的数据,所述图像解码部件对运动图像数据执行解码;以及显示部件,所述显示部件使位置信息与运动图像数据的代表性图像互相关联,并且在地图上执行其显示,其中,所述位置信息与解码运动图像数据相关联。这产生以下效果对编码运动图像数据解码,并且,通过使之与代表性图像相关联而显示运动图像数据的轨迹。
根据本发明的权利要求5,如权利要求4所述的重放设备进一步包括从外部接收操作的操作输入部件,其中,当通过操作输入部件输入代表性图像的规格时,显示部件以单元图像显示运动图像数据。这产生以下效果通过指定出现在地图上的代表性图像而从单元图像显示运动图像数据。
根据本发明权利要求6的重放设备包括图像解码部件,对于编码运动图像数据和与运动图像数据的至少一个单元图像相对应的位置信息互相关联的数据,所述图像解码部件对运动图像数据执行解码;以及叠加部件,所述叠加部件通过叠加根据解码运动图像数据重放的运动图像和指示与重放运动图像相应的位置信息的地图而执行显示。这产生以下效果一看就能核实运动图像和指示与运动图像相应位置信息的地图。
根据本发明的权利要求7,如权利要求6所述的重放设备进一步包括用于获得地图的通信部件。这产生以下效果即使在不总是拥有全部地图时也获得和显示必需的地图。
根据本发明的权利要求8,在如权利要求6所述的重放设备中,地图包含与相应区域有关的著名地点信息。这产生以下效果在地图上核实景点,并且,容易获得著名地点信息。
根据本发明权利要求9的重放设备包括分离部件,对于通过共存的时间而互相关联编码运动图像数据中至少一个单元图像和与单元图像相对应的位置信息并由此多路复用它们的数据,所述分离部件使运动图像数据和位置信息互相分离;对分离的运动图像数据解码的图像解码部件;输出部件,所述输出部件输出分离的位置信息和解码运动图像数据的单元图像,其中,所述解码运动图像数据包括位置信息所共有的时间;以及叠加部件,所述叠加部件通过叠加指示输出位置信息的地图和包含输出单元图像的运动图像而执行显示。这产生以下效果对从多路复用数据分离的运动图像数据进行解码,显示运动图像数据的重放屏幕和给出运动图像数据轨迹的地图。
根据本发明权利要求10的记录和/或重放系统包括用于在记录介质中记录包含运动图像数据的数据的记录设备和用于对在记录介质所记录的数据中包括的运动图像数据执行重放的重放设备,所述系统的特征在于,其中,记录设备包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉时所处位置的位置信息;对运动图像数据编码的运动图像编码部件;多路复用部件,所述多路复用部件通过使编码运动图像数据中至少一个单元图像和与所述单元图像对应的位置信息互相关联而执行多路复用;以及在记录介质中记录多路复用数据的记录部件,重放设备包括分离部件,所述分离部件把记录在记录介质中的数据分离为编码运动图像数据和位置信息;对编码运动图像数据解码的图像解码部件;输出部件,所述输出部件输出分离的位置信息和与位置信息相关联的运动图像数据的单元图像;以及叠加部件,所述叠加部件通过叠加指示输出位置信息的地图和包含输出单元图像的运动图像而执行显示。这产生以下效果在记录设备中,运动图像数据的各个单元图像和与单元图像相应的位置信息互相关联并记录在记录介质中;以及,在重放设备中,互相叠加并显示指示位置信息的地图和运动图像。
根据本发明权利要求11的方法包括捕捉运动图像并由此产生运动图像数据的步骤;获得指示运动图像被捕捉时所处位置的位置信息的步骤;对运动图像数据编码的步骤;通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤;以及输出多路复用数据的步骤。这产生以下效果编码运动图像数据的各个单元图像与相应的位置信息互相关联,由此使得能在解码的情况下在地图上显示运动图像数据的轨迹。
根据本发明权利要求12的方法包括捕捉运动图像并由此产生运动图像数据的步骤;获得指示运动图像被捕捉时所处位置的位置信息的步骤;对运动图像数据编码的步骤;通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤;以及在记录介质中记录多路复用数据的步骤。这产生以下效果编码运动图像数据的各个单元图像与相应的位置信息互相关联,由此使得能在重放的情况下在地图上显示运动图像数据的轨迹。
根据本发明权利要求13的方法包括对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。这产生以下效果一看就能核实运动图像和指示与运动图像相应位置信息的地图。
根据本发明权利要求14的方法包括对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;当不拥有与位置信息相应的地图时,获得地图的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。这产生以下效果即使在不总是拥有全部必需的地图时也获得和显示必需的地图。
根据本发明权利要求15的程序使计算机执行捕捉运动图像并由此产生运动图像数据的步骤;获得指示运动图像被捕捉时所处位置的位置信息的步骤;对运动图像数据编码的步骤;以及通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤。这产生以下效果编码运动图像数据的各个单元图像与相应的位置信息互相关联,由此使得能在解码的情况下在地图上显示运动图像数据的轨迹。
根据本发明权利要求16的程序使计算机执行对于编码运动图像数据和与运动图像数据的至少一个单元图像相对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。这产生以下效果一看就能核实运动图像和指示与运动图像相应位置信息的地图。
根据本发明权利要求17的程序使计算机执行对于编码运动图像数据和与运动图像数据的至少一个单元图像相对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;当不拥有与位置信息相应的地图时,获得地图的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。这产生以下效果即使在不总是拥有全部必需的地图时也获得和显示必需的地图。


图1示出根据本发明实施例的移动装置100的配置实例。
图2示出根据本发明实施例的编码/解码电路21的编码功能的配置实例。
图3示出根据本发明实施例的数据结构实例。
图4示出根据本发明实施例的编码/解码电路21的解码功能的配置实例。
图5示出根据本发明实施例的作为用于盘49的格式实例的DVD视频格式的数据结构。
图6示出根据本发明实施例的文件管理表实例。
图7示出根据本发明实施例的屏幕显示实例。
图8示出根据本发明实施例的显示控制器部分36的配置实例。
图9是根据本发明实施例的通过叠加形成的屏幕显示实例。
图10为根据本发明实施例的通过叠加形成的另一屏幕显示实例。
图11示出根据本发明实施例的位置信息历史的显示图案。
图12示出根据本发明实施例的位置信息历史的另一显示图案。
图13示出根据本发明实施例的移动装置之间实时显示的操作实例。
图14描述根据本发明实施例的移动装置与用户之间的交互式操作。
图15示出根据本发明实施例的用于显示盘的全部内容的处理程序。
图16示出根据本发明实施例的用于显示文件的内容的处理程序。
具体实施例方式
以下结合附图详细描述本发明的实施例。
图1示出根据本发明实施例的移动装置100的配置实例。移动装置100具有照相机部分10、记录和/或重放处理部分20以及控制器部分30。GPS模块50和通信装置60连接到移动装置100。GPS模块50从多个GPS卫星接收无线电波,由此计算当前位置的经度和纬度。通信装置60与其它移动装置通信,由此执行数据的发送和接收,其中,所述数据包括运动图像数据。GPS模块50和通信装置60每一个都例如包括射频(或“RF”)部分、中频(或“IF”)部分、以及模拟-数字(或“AD”)转换器部分,但可配置为共享各个部分的一部分或全部。
照相机部分10具有光学部件11、照相机控制器部分12、信号转换器部分13、图像捕捉信号处理部分14、音频输入部分15、以及音频信号处理部分16。光学部件11例如包括用于捕捉图像对象的镜头组、光圈控制机构、聚焦控制机构、变焦机构、快门机构、闪光灯机构、以及运动模糊校正机构。照相机控制器部分12从控制器部分30接收控制信号,由此产生控制信号,并把信号提供给光学部件11。通过把产生的控制信号提供给光学部件11,该部分执行控制操作,如直接变焦控制、快门控制以及曝光控制。
信号转换器部分13例如配置以诸如CCD(电荷耦合器件)的图像捕捉装置,其中,在图像捕捉装置的图像平面上形成通过光学部件11的图像。响应于快门操作,信号转换器部分13接收从控制器部分30提供的图像检索定时信号,接着把在图像平面上形成的图像对象图像转换为图像捕捉信号,并接着把该信号提供给图像捕捉信号处理部分14。
根据从控制器部分30接收的控制信号,图像捕捉信号处理部分14对图像捕捉信号执行诸如γ校正和AGC(自动增益控制)的处理。另外,控制器部分15执行把图像捕捉信号转换为数字图像信号的处理。音频输入部分15在图像捕捉过程中收集图像对象周围部分的音频。来自音频输入部分15的音频信号提供给音频信号处理部分16。音频信号处理部分16根据从控制器部分30接收的控制信号而执行诸如音频信号校正和AGC的处理,并且另外执行把音频信号转换为数字信号的处理。
记录和/或重放处理部分20具有编码/解码电路21、盘接口23、输出处理部分24、以及缓冲存储器25。在本实施例中,尽管考虑盘49是用作记录和/或重放对象的记录介质,然而,它只是一个实例。例如,如以下描述的,可以使用存储卡43。
编码/解码电路21具有编码功能对从照相机部分10接收的如图像信号和音频信号的输入,以及从GPS模块50接收的位置信息,进行编码,并多路复用所述输入,并把它们转换为压缩数据。进一步地,编码/解码电路21具有解码功能从压缩数据分离图像信号、音频信号和位置信息,并接着对它们解码。作为各个压缩数据的格式,例如可使用MPEG-2PS(程序流)格式。
进一步地,根据来自控制器部分30的控制信号,编码/解码电路21执行处理,如自动白平衡控制、曝光校正控制、以及相应于从图像捕捉信号处理部分14接收的图像信号的数字变焦比例因子的变焦放大控制。
盘接口23从编码/解码电路21接收压缩数据,并接着把数据写到盘49中。另外,盘接口23从盘49读取压缩数据,并接着把数据提供给编码/解码电路21。根据从控制器部分30接收的控制信号,输出处理部分24把从编码/解码电路21接收的压缩数据例如提供给控制器部分30和输出终端27-29。缓冲存储器25例如配置以SDRAM,并且作为在编码/解码电路21中执行编码或解码的工作区。
控制器部分30配置以处理器31、ROM 33(只读存储器)、RAM34(随机存取存储器)、用于连接操作输入部分41的操作输入接口35、用于连接显示部分42的显示控制器部分36、用于安装存储卡43的存储卡接口37、用于连接通信装置60的通信接口38、以及通过系统总线32连接的时钟电路39。
处理器31管理控制器部分30的整个处理,并且使用RAM 34作为工作区。在ROM 33中例如写用于控制照相机部分10的程序、以及例如执行图像信号和音频信号的记录控制和重放控制的程序。
连接到操作输入接口35的操作输入部分41在显示部分42中具有多个键。所述键例如包括在显示部分42中的用于在拍摄模式和其它模式如重放模式之间切换的模式切换模式键、变焦控制键、曝光控制键、快门键、运动图像拍摄键、以及显示控制键。操作输入接口35把来自操作输入部分41的操作信号传送给处理器31。处理器31确定在操作输入部分41中已经操作哪个键,并且根据确定结果而执行控制处理。
连接到显示控制器部分36的显示部分42例如配置以LCD(液晶显示器),并且在处理器31的控制下,例如显示从照相机部分10接收的图像信号、从盘49读取的图像信号、或通过通信装置60接收的图像信号。另外,如下所述,显示部分42根据与图像信号相关的位置信息而显示地图。作为位置信息,指示获得相关图像信号时所处的经度和纬度。相应地,可根据位置信息中的经度和纬度而显示指示。
存储卡接口37把来自编码/解码电路21的压缩数据写到存储卡43中。另外,存储卡接口37从存储卡43读取压缩数据,并且向编码/解码电路21提供压缩数据。
时钟电路39产生例如代表秒、分钟、小时、天、月和年的时间信息。时钟电路39配置为产生具有秒钟小数点之后精度等级的信息,以便能计数图像的帧单元。
图2示出根据本发明实施例的编码/解码电路21的编码功能的配置实例。编码功能具有缓冲器2101-2103、图像编码部分2110、音频编码部分2120、位置信息处理部分2130、缓冲器2119、2129和2139、多路复用部分2140、以及系统时间产生器部分2150。
缓冲器2101-2103每一个都用作编码/解码电路21的输入缓冲器。缓冲器2101储存从图像捕捉信号处理部分14接收的图像信号。缓冲器2102储存从音频信号处理部分16接收的音频信号。缓冲器2103储存从GPS模块50接收的位置信息。另外,缓冲器2101向图像编码部分2110提供图像信号。缓冲器2102向音频编码部分2120提供音频信号。缓冲器2103向位置信息处理部分2130提供位置信息。
图像编码部分2110具有重排部分2111、压缩编码部分2112、以及可变长度编码部分2113。图像编码部分2110提供由至少一个I图像、多个P图像和多个B图像形成的GOP(图像组)的配置,作为运动图像数据的单元图像,并且以GOP的单元作为一个段而执行压缩处理。
如上所述,在B图像的双向预测编码的情况下,重排部分2111执行重排,以便在参考I图像或P图像之后,定位B图像。
对于I图像,压缩编码部分2112执行帧内编码处理,以执行数据压缩。对于P图像,压缩编码部分2112使用与前一I图像或后一P图像的相互关系而执行帧内编码处理,由此执行数据压缩。对于B图像,压缩编码部分2112使用与前一和后一I图像或P图像的相互关系而执行帧内编码处理,由此执行数据压缩。在P图像中,还有执行帧内编码处理的图像部分。
可变长度编码部分2113例如使用霍夫曼码来执行可变长度编码处理。可变长度编码处理的结果提供给缓冲器2119。
音频编码部分2120以预定数量的音频信号为单位执行压缩编码,所述信号单位称作帧。由此压缩编码的音频信号提供给缓冲器2129。
位置信息处理部分2130输出具有与图像信号各个帧相应的定时的位置信息。位置信息提供给缓冲器2139。
多路复用部分2140对各个图像信号、音频信号和位置信息打包,以便多路复用它们。在此情况下,为多个分组设置包头,由此配置该包。多路复用部分2140产生的多路复用数据(即MPEG-2PS格式的数据)由盘接口23写在盘49上。
系统时间产生器部分2150产生系统时间基准值(系统时钟基准(SCR)),并且把该值提供给多路复用部分2140。系统时间基准值被记录成多路复用部分2140所添加包头的一项。具体地,系统时间基准值包括在多路复用数据的各个包内。接着,在解码的情况下,系统时间基准值用于使系统时间同步。
另外,系统时间基准值提供在设置称作PTS(表现时间戳)和DTS(解码时间戳)的时间戳的情况下所使用的时间基准。时间戳PTS是用于重放输出的时间管理信息,并且指示何时产生设置有该时间戳的单元图像的重放输出。时间戳DTS是用于解码的时间管理信息,并且指示何时对设置有该时间戳的单元图像解码。
在各个包中,时间戳PTS和DTS每一个都被记录为各个分组的分组头的一项。如上所述,由于I图像和P图像必须在B图像之前发送给编码流,因此,解码顺序和产生重放输出的顺序互不相同。因此,为了区别,互相独立地提供时间戳PTS和时间戳DTS。因而,当时间戳PTS和时间戳DTS互相匹配时,不设置时间戳DTS,从而,在分组头中记录时间戳PTS。
另外,当一个单元图像因为分组的尺寸限制而分割成多个分组时,只在第一分组的分组头中记录时间戳,在随后划分的各个分组的分组头中不记录时间戳。
为发生顺序重排的图像信号的分组设置时间戳DTS。因此,例如,在不执行顺序重排的音频信号或位置信息的情况下,不使用时间戳DTS,而是只设置时间戳PTS。
图3示出根据本发明实施例的数据结构实例。图3(a)示出原始图像的单元图像与位置信息块之间的关系。在此实例中,对于运动图像712,GOP 710配置以15个帧的单元图像(B1-P15),并且,根据各个单元图像而获得位置信息块711(POS1-POS15)。
在单元图像712中,I3代表I图像;B1、B2、B4、B5、B7、B8、B10、B11、B13和B14分别代表B图像;并且,P6、P9、P12、P15分别代表P图像。各个后缀数字是序号集,与图像类型无关。在位置信息块711中,POS1-POS15分别代表与后缀号所标识的图像帧(单元图像)相应的位置信息块。也就是说,位置信息块POS1-POS15分别是与相同后缀号所标识的图像帧相应的位置信息块。
图3(a)的原始图像的单元图像712由图像编码部分2110的重排部分2111重排成如图3(b)的单元图像722所示的图像顺序。与此相比,不改变位置信息块的顺序,图3(b)所示位置信息块721具有与图3(a)的位置信息块711相同的顺序。因此,只利用此顺序,不能知道各个图像与各个位置信息之间的相关性。
基于以上理由,在多路复用部分2140中,在各个单元图像和各个位置信息上添加时间戳PTS,其中,时间戳PTS是重放输出的时间管理信息。在图3(b)中,PTS 723代表各个位置信息721的时间戳PTS,并且,PTS 724代表各个单元图像722的时间戳PTS。重放输出具有原始帧顺序,并且,各个后缀号与时间戳PTS 724基本相同。时间戳PTS 723和PTS 724互相关联,位置信息与各个单元图像互相相关,从而,可进行关联,以便能识别出该位置信息与哪一个单元图像相对应。
另外,为各个单元图像722设置时间戳DTS 725。如上所述,时间戳DTS是用于解码的时间管理信息块,在压缩数据中(即在MPEG-2PS格式中),单元图像以时间戳DTS的顺序排列。当与时间戳PTS 724匹配时,不设置时间戳DTS 725。相应地,在图3(b)所示的实例中,为I图像和P图像设置时间戳DTS 725,但不为B图像设置。
图3(c)示出在已经多路复用图3(b)所示的各个数据之后的数据结构。导航包731(NV_PCK)布置在与各个GOP相应的包组的头,并且保存重放管理信息,如数据搜索信息(如在跳转情况下指定所述处理将要跳转到的扇区的控制信息)。在以下描述的DVD格式中,与一个GOP相对应的包组称作“视频对象单元(VOBU)”。
包组732(V_PCK_I3)保存与单元图像I3相对应的图像数据。DVD格式中包的尺寸为每个包2048字节,从而,当图像数据的尺寸超过包尺寸时,对数据划分,以保存在多个包中。包733(P_PCK1)保存与位置信息POS1相对应的位置信息。包组734(V_PCK_B1)保存与单元图像B1相对应的图像数据。包735(P_PCK2)保存与位置信息POS2相对应的位置信息。
因而,在编码情况下,单元图像与具有重排顺序的位置信息多路复用。在图3(c)所示实例中,以在包组732和包组734之间布置包733的方式执行多路复用。然而,只要在单元图像之间或在位置信息块之间不发生互换,因此,可以以任何其它的方式执行多路复用。相应地,例如,可在包组732之前或在包组734之后布置包733。另外,可统一布置位置信息块721。
另外,在图3的实例中,尽管所有单元图像都保存相应的位置信息,但单元图像与位置信息之间的对应关系不必是一一对应的。例如,可以每N个单元图像保存相应的位置信息块(N自然数),或可替换地,以一个GOP为单位保存位置信息块。
尽管在图3中未示出音频信号,但以与前述情形相同的方式可另外地多路复用音频信号。
图4示出编码/解码电路的解码功能的配置实例。解码功能具有分离器部分2160、系统时间保存部分2170、缓冲器2161、缓冲器2163、图像解码部分2171、音频解码部分2172、位置信息处理部分2173、缓冲器2181-2183以及控制部分2190。
分离器部分2160从多路复用数据(即MPEG-2PS格式的数据)分离图像信号、音频信号和位置信息。分别在缓冲器2161-2163中保存图像信号、音频信号和位置信息。另外,分离器部分2160从各个包分离包头和分组头,并且,把它们的头信息提供给系统时间保存部分2170和控制部分2190。
系统时间保存部分2170保存用于解码功能的系统时间(系统时钟(STC))。系统时间保存部分2170根据在从分离器部分2160提供的包头中包含的系统时钟基准(SCR)值而确定保存在系统时间保存部分2170中的系统时间(STC)。系统时间(STC)提供给控制部分2190。
在控制部分2190的控制下,图像解码部分2171以按照时间戳DTS的顺序对保存在缓冲器2161中的图像信号解码,由此恢复成以帧为单位的图像数据,并接着把该数据输出给缓冲器2181。在控制部分2190的控制下,音频解码部分2172对保存在缓冲器2162中的音频信号解码,由此恢复成音频数据,并接着把该数据输出给缓冲器2182。在控制部分2190的控制下,位置信息处理部分2173再现与以帧为单位的图像数据(单元图像)相对应的位置信息,并接着把该信息输出给缓冲器2183。
控制部分2190分析从分离器部分2160提供的头信息,提取时间戳PTS和DTS,并且控制解码处理,并重放图像信号、音频信号和位置信息的输出。在图像解码部分2171中,单元图像以按照时间戳DTS的顺序解码,并保存在缓冲器2181中。然而,根据控制部分2190的控制,以按照时间戳PTS的顺序从缓冲器2181输出单元图像的数据。控制部分2190执行控制,从而,也以按照时间戳PTS的顺序提供缓冲器2182和2183的输出。
另外,控制部分2190执行控制,从而,从缓冲器2181-2183输出给输出处理部分24的图像信号、音频信号和位置信息的时间戳PTS在定时上互相同步。更具体地,以从系统时间保存部分2170提供的系统时间(STC)与各个分组头的时间戳PTS匹配的定时,从缓冲器2181-2183向输出处理部分24分别输出图像信号、音频信号和位置信息。从而,使与压缩数据中顺序不同的图像信号的单元图像和位置信息互相关联,并且显示。
图5示出根据本发明实施例的DVD视频格式的数据结构,其中,所述DVD视频格式作为用于盘49的格式实例。从盘的径向观察,盘49的记录区按以下次序分段为读入区801、文件管理区802、数据记录区803和读出区804。
从读入区一侧看,文件管理区802包括UDF(通用盘格式)区和VMG(视频管理器)区。UDF区和VMG区每一个都是管理信息的记录区,所述管理信息例如用于管理例如记录在DVD中的图像数据的文件。UDF区支持UDF标准和ISO 9660标准,由此使计算机读取DVD。VMG区是用于DVD管理信息的记录区。
数据记录区803是例如用于图像信号和音频信号的记录区,其中,以被定义为视频标题组(VTS)811的数据组为单位记录数据。各个视频标题组820配置以视频标题组信息(VTSI)821、视频标题组菜单(VTSM_VOBS用于VTSM的视频对象组)822、视频标题组标题(VTSTT_VOBS用于VTS中标题的视频对象)823、以及备份(VTSI(BUP)VTSI的备份)824。
视频标题组信息(VTSI)821是与视频标题组相对应的控制信息。视频标题组菜单(VTSM_VOBS)822具有用于视频标题组中各类菜单的内容。视频标题组标题(VTSTT_VOBS)823具有用于再现标题的内容。备份(VTSI(BUP))824是视频标题组信息821的备份拷贝。
在视频标题组标题(VTSTT_VOBS)823中,基于作为读/写单位的视频对象单元(VOBU)而记录MPEG-2PS格式的压缩数据。VOBU例如包括与一个GOP相应的图像信号、以及与一个GOP相应的音频信号。因而,以一个GOP为单位访问DVD。
视频对象单元(VOBU)配置以多个包841。包841一般配置以一个或多个分组。然而,在本实例中,假设一个包包含一个分组。更具体地,一个包具有在分组之前添加的包头851,并且,分组具有包头852和包数据853(数据体)。在DVD视频格式中,指定一个包的尺寸为2048字节(与一个扇区相对应)。
包头851包含包起始码861以及系统时钟基准值(SCR)862,其中,包起始码861代表包的开始。如上所述,系统时钟基准值(SCR)862基于系统时间产生器部分2150。根据MPEG-2PS,时钟用27MHz指示,从而,系统时钟基准值(SCR)862用包头851中的42位表示。
包头852只配置在一个秘密的分组,并且具有分组起始码分组871、标记873、PTS 875、DTS 876以及其它域877。分组起始码分组871代表分组的开始,并且包括标识流的流标识符。标记873表示随后的PTS 875和DTS 876是否存在。更具体地,“10”代表只存在PTS875,并且,“11”代表存在PTS 875和DTS 876。
如上所述,PTS 875和DTS 876分别是代表重放输出定时和解码定时的时间戳。控制部分2190查找PTS 875和DTS 876,由此控制解码和重放输出。在包头852中,PTS 875和DTS 876每一个都用33位表示。
在此情况下,虽然结合适合1个秘密分组的实例进行描述,但也可适合2个秘密分组。例如,多个位置信息块每一个都可与将要储存在一个包中的各个时间戳PTS配对。另外,尽管已经描述适合DVD视频格式的实例,但也可适合其它格式。例如,在DVD-VR格式中,位置信息可包含在位于VOBU顶上的包RDI_PCK的RDI_数据区的RDI分组中。
图6示出根据本发明实施例的文件管理表的实例。在DVD视频格式中,在文件管理区802中保存文件管理表。可替换地,在数据记录区803的预定位置中保存该表,或者通过使用预定的文件名而保存该表。文件管理表包含与记录在盘49中的各个文件有关的属性数据,包括创建日期891、更新日期892、标题893、关键词894、以及起始地址895。
创建日期891指示相应文件的创建日期。更新日期892指示相应文件的更新日期。标题893由用户设定,以标识相应文件的内容。关键词894由用户任意设定,用于检索相应的文件。这些内容可作为用作检索相应文件的标识条件。
起始地址895指示相应文件的起始地址,并且具体地,指示盘49中的扇区或地址。从而,文件管理表与各个文件相关联。
利用由此提供的文件管理表,可有效地检索记录在盘40上的文件的内容,可减少在盘49上寻找所必需的时间量。当不使用文件管理表时,必须顺序地检索盘49上的文件。然而,利用文件管理表统一管理这些文件使得能减少检索所必需的时间。
图7示出根据本发明实施例的屏幕显示实例。屏幕显示实例是盘49的内容在地图上的显示。在实例中,假设在盘49中包括两个文件,并且,在显示部分42上,拍摄时位置的历史作为位置信息块311和312出现在地图上。标题313和314表示由位置信息块311和312代表的各个文件的标题。
在显示实例上,当通过操作输入部分41在位置信息311的任何部分上提供指明或指定,如鼠标的点击时,执行与位置信息311相应的文件的重放。例如,当点击位置信息311的起始位置(箭头的尾端)时,从与位置信息311相应的文件的开头执行重放。另外,当点击位置信息311的中间部分时,从与点击位置相应的场景的位置开始执行运动图像信号的重放。
另外,在位置信息312的图像的起始位置和结束位置之间显示图标315-317。图标315-317每一个都指示在相应位置上的各个图像,并且例如,在相应GOP中的I图像可用作代表性图像。当指定图标315-317中的任一个时,从与该图标相应的场景(单元图像)的位置执行图像信号的重放。
为了显示图标,考虑各种方法,如以预定间距显示图标的方法;指定图标数以相同间距显示图标的方法;以及在任意指定位置显示图标的方法。
因而,通过在地图上显示位置信息,可借助对用户友好的地图来管理记录在记录介质上的运动图像,从而,可提高产品可用性。由此,运动图像的索引变得容易。
图8示出根据本发明实施例的显示控制器部分36的配置实例。在显示部分42上不仅显示如图7所示的地图,而且显示运动图像信号的重放屏幕。在此情况下,优选不仅分开显示运动图像和地图,而且同时显示两者。为此,在显示控制器部分36中设置叠加电路361,从而,在显示运动图像的运动图像平面342上叠加给出的与地图相关的信息的地图平面341,并接着在显示部分42上显示叠加图像。在图9和10中示出显示实例。
图9为根据本发明实施例的通过叠加形成的屏幕显示实例。在显示实例中,以地图平面341叠加在运动图像平面342上的方式执行显示。
地图平面341用箭头标记显示,以指示已经捕捉到正在运动图象平面342上重放的运动图像的路线。在显示实例中,在从地图平面341上箭头标记的起点(尾端)到箭头标记终点(前端)的范围内,显示记录在文件中的全部运动图像数据的路线,并且,通过箭头中图案的变化而表示当前的重放位置。更具体地,出现在地图平面341上的箭头标记的图案段与当前重放位置相对应。由此,用户能容易地知道运动图像的图像捕捉路线,并进一步能在视觉上核实当前正在重放的全部图像的位置。
在显示实例中,通过出现在地图平面341上的箭头标记这样指示全部运动图像数据的路线。然而,不必如此指示全部运动图像数据,但是,可通过箭头指示实际的重放部分。在此情况下,出现在地图平面341上的箭头标记与运动图像平面342上运动图像的重放同步地延伸。
图10为根据本发明实施例的通过叠加形成的另一屏幕显示实例。在显示实例中,以在地图平面341上叠加运动图像平面342的方式执行显示。可根据通过操作输入部分41发出的指令,在图9的显示实例与图10的显示实例之间进行转换。例如,可以设想以下情形在图9的显示状态下,当需要更详细的显示时,指定转换到图10的显示实例。
在图10的显示实例中,尽管在屏幕的左上角部分中布置指示地图平面上重放位置的箭头标记,但是,例如,箭头标记的前端可位于屏幕的中心。在如上所述箭头标记与运动图像的重放同步延伸的显示布置中,发生不希望有的在地图平面341下隐藏箭头标记的情形。然而,在箭头标记的前端始终位于屏幕中心的显示布置中,不会发生不希望有的在地图平面341下隐藏箭头标记的情形,并且,用户能容易地核实当前正在重放的位置。
图11示出根据本发明实施例的位置信息历史的显示图案。在捕捉运动图像的情况下,根据各个图像的各个内容的特性,所述历史可以有很大的不同。例如,当运动范围与图11所示“北海道旅行”或“九州旅行”的情形一样宽时,即使在大区域地图中也可充分地表示图像捕捉路线。然而,在图像捕捉路线集中在相对局部的范围内的情况下,也不能在大区域地图中充分地表示图像捕捉路线。
接着,例如,与在图11的“行走1”的情形中一样,在路线局限于相对于正在显示的地图区域的较窄区域的情况下,不用箭头表示路线,而是显示圆形指示。圆形指示的尺寸可设定得与运动距离的最大值成正比。可替换地,根据包括在该区域中的文件数量而设定尺寸。只有当通过操作输入部分41选择区域时(当在该区域上存在鼠标指针时),才可显示与圆形指示相应的标题。
作为确定是否执行圆形指示的基准,按如下所述设定。例如,在尺寸为M(垂直)×N(水平)的地图中,当垂直运动范围的最大宽度小于M/k,且同时当水平运动范围的最大宽度小于N/k时,所述历史用圆形指示。对于设置为基准的k,可选择范围在从约10到约20内的值。可替换地,当通过相加垂直运动距离的最大宽度的平方与水平运动距离的最大宽度的平方而获得的值小于(M2+N2)/k2时,用圆形指示所述历史。
图12示出根据本发明实施例的位置信息历史的另一显示图案。在图11的地图中,当通过操作输入部分41指定具有“观看棒球、步行、婚礼”指示的圆形部分时(例如,通过鼠标点击),以图12所示的放大地图形式显示地图。
在显示实例中,对于在相对较宽范围内存在的路线,如在“步行”的情况下,相对于作为基准的地图区域,通过箭头标记显示位置信息。另一方面,例如,对于位于基本不变位置或限制在局部区域的“观看棒球”或“婚礼”的情况,与图11相似地显示圆形指示。用于确定是否显示圆形指示的基准与图11的情形相同。
在图12所示情形中,箭头标记和圆形指示每一个都与一个文件对应。因此,当通过操作输入部分41指定任一个指示时,开始相应文件的重放。当指定(点击)箭头标记指示时,发生与图7情形相似的情形从与点击位置相应的场景(单元图像)的位置开始执行文件中的运动图像信号的重放。另一方面,指定圆形指示,从文件的预定位置(例如顶部)开始执行运动图像信号的重放。
以此方式,在本发明的实施例中,根据在地图上显示的位置信息而可在视觉上管理包含运动图像数据的文件。
图13示出根据本发明实施例的在移动装置之间执行实时显示的实例。根据本发明,通过通信装置60,不仅可实时执行记录在盘49中的编码数据的重放,而且可实时执行编码数据(即,MPEG-2 PS)的通信。
在移动装置111和121之间通信的过程中,移动装置111的屏幕显示由移动装置121捕捉的运动图像112,并且,地图113包括所述装置的当前位置。而且如描述性显示114所示,在地图113上显示代表移动装置111和121当前位置的标记。另外,当移动装置111或121在通信过程中运动时,用粗线指示轨迹。具体地,显示代表在粗线前端的当前位置的标记,其中,所述粗线代表运动轨迹。
移动装置121的屏幕相似地显示移动装置111所捕捉的运动图像122、以及彼此之间当前位置的地图123。该屏幕使移动装置111和121的用户能互相识别他们通信伙伴的表达,并且容易核实互相的位置关系。
以上情形可以使每个移动装置的屏幕不仅显示从伙伴移动装置发送的运动图像,而且显示自身移动装置所捕捉的图像(如,移动装置121中的捕捉图像125),由此使其能核实图像的质量。另外,图13示出以大尺寸显示运动图像的情形,然而,所述布置可以使得与图10实例中一样,所述显示适当地转换为在大尺寸地图中显示地图或只显示地图。
因而,根据本发明的实施例,有可能在记录介质中记录包含运动图像数据的文件,并使用它们。不仅如此,而且有可能以位置信息与运动图像信号相关联并通过通信装置60发送位置信息的方式在地图上实时核实与通信伙伴的位置关系。
现在将在下面描述根据本发明实施例的地图获得方法。
当在本发明中显示的地图范围未确定时,将要准备的地图范围预先不知道。这是因为用户的运动范围不可预测。因此,对于在日本使用的移动装置,应该准备覆盖日本全部角落的详细地图。这些地图可预先设置在各个移动装置中,但也能以下述方式通过通信从外部获得。
为了简化描述,在此设想以下情形从无线电波区域A运动到无线电波区域B,其中,无线电波区域A接收基站A产生的无线电波,无线电波区域B则接收基站B产生的无线电波。当已经进入接收基站A所产生无线电波的无线电波区域A时,具有根据本发明实施例的移动装置的用户建立与基站A的通信,以便与之连接。在此情况下,从基站A向移动装置发送其范围比基站A所产生无线电波的最终范围稍大一些的地图数据,从而,装置接收该地图数据。接着,当已经运动到来自基站A和基站B的无线电波混合流通的无线电波区域C时,移动装置与基站A通信,由此从基站B接收无线电波。当无线电波的强度变得比基站A的无线电波更高时,发生转换无线电波频道的越区切换(handover),由此把通信转换到基站B。接着,从基站A向移动装置发送其范围比从基站A所产生的无线电波的最终范围稍大一些的地图数据,从而,装置接收该地图数据。
另外,对于地图的类型,有可能考虑与在从广阔区域如日本全局地图到诸如覆盖详细部分的地方地图的地图的范围内的各个阶段对应的地图。对于相同层的地图,设定稍大一些的范围,以允许边界区域互相重叠。对于重叠部分,执行处理,以使移动装置除去较晚获得的地图的重叠部分,执行匹配,并且,在匹配之后把地图作为新地图而储存到存储器中。
所述方法可以使当通过通信获得地图时,所述地图是刚好在图像之前的状态下捕捉的接收到的图像。可替换地,所述方法可以使在任何时间接收地图,并且,在移动装置开机的状态下适当地放弃不必要的地图。在后一情况下,可根据临时记录存储器的区域而在任何时间重写接收的地图。
地图可包括与地图范围内著名地点指南有关的信息。在此情况下,当在文件管理表的关键词894中登记具有靠近指南中著名地点的位置的位置信息的文件名时,在将来检索时就可使用该文件名。另外,可与地图一起接收包括著名地点指南的运动图像数据的文件,由此把该文件作为独立文件而登记到文件管理表中。在此情况下,可进行布置,使得通过在地图上点击著名地点指南的图标等而重放著名地点指南的运动图像数据。
在本发明的实施例中,尽管在编码数据中保存位置信息,但是,位置信息的范围可以预先登记在文件管理表中。
接下来,下面描述根据本发明实施例的操作。
图14描述根据本发明实施例的在移动装置与用户之间的交互式操作。最开始,用户在移动装置100中插入包含根据本发明实施例的位置信息的盘49,或可替换地,通过操作输入部分41发出用于安装或重装盘49的请求(201)。作为响应,移动装置100从盘49读取结合图6描述的文件管理表,在地图上给出与文件管理表中各个文件相应的位置信息,并在显示部分42上显示地图(101)。
在显示部分42上显示的地图上,用户通过使用操作输入部分41而指定位置信息的指示(如上所述的箭头标记指示或圆形指示)(202)。作为响应,移动装置100访问包含在盘49内的相应文件,由此执行从预定位置重放运动图像信号(103)。因而,用户可在地图上容易地从位置信息访问运动图像。
图15示出根据本发明实施例的显示盘全部内容的处理程序。也就是说,图15示出处理101的程序。根据文件管理表,移动装置100以视频对象单元(VOBU)为单位读取盘49中文件的内容,并且,编码/解码电路21执行解码处理(步骤S911)。从而,可获得与运动图像信号相关的位置信息。
接着,确定由此获得的位置信息的范围是否落在先前获得的地图的范围内(步骤S912)。如果确定该范围未落在先前获得的地图的范围内,那么装置就通过通信装置60获得必需的地图(步骤S913)。
移动装置100在地图上给出视频对象单元的位置信息(步骤S914)。接着,重复步骤S911-S914的处理,直到在文件结尾完成最后一个视频对象单元为止(步骤S915)。
在文件结尾完成处理(步骤S915)时,移动装置100提取保存在文件管理表中的标题893,并且,把标题设置在地图上的位置信息上(步骤S916)。如果存在后续的文件(步骤S917),操作就转移到后续文件的处理(步骤S918)。
如果不存在后续的文件(步骤S917),移动装置100就在显示部分42上显示包含位置信息的地图,其中,所述位置信息已经被给出到此时间(步骤S919)。
图16示出根据本发明实施例的显示文件内容的处理程序。也就是说,图16描述图14所示处理103的程序。移动装置100从指定文件的预定屏幕执行解码处理(步骤S931)。从而,可获得与运动图像信号相关的位置信息。当指定箭头标记指示时,上述预定屏幕参考与指示位置相应的屏幕。在与圆形指示相应的文件的情况下,例如,可指定预定屏幕为文件的第一屏幕。
接着,确定由此获得的位置信息的范围是否落在先前获得的地图的范围内(步骤S932)。如果确定该范围未落在所拥有地图的范围内,那么装置就通过通信装置60获得必需的地图(步骤S933)。
移动装置100在地图上给出视频对象单元的位置信息(步骤S934),并且,在显示部分42上显示地图和运动图像(步骤S935)。移动装置100重复上述处理,直至运动图像数据结束或直到用户指定重放终止为止(步骤S936)。
以此方式,根据本发明的实施例,在编码/解码电路21中,为运动图像信号的单元图像和位置信息设置时间戳PTS,并且使单元图像和位置信息互相关联。从而,根据位置信息而在地图上显示运动图像的图像捕捉轨迹。
如上所述,已经结合使用GPS获得位置信息的实例而描述本发明的实施例。然而,为替代使用GPS,可以以从三个基站接收无线电波并由此进行三点位置确定的方式指定位置信息。在此情况下,可通过测量信号(无线电波中图像的域同步信号)到达之前所用的时间量,而实施距离测量。
另外,虽然本发明的实施例代表体现本发明的一个实例,并且具有与权利要求中的发明定义项的相关性,但是,如下所述,本发明不局限于此,而是只要不偏离本发明的范围和精神,就可作出各种修改和替换。
具体地,在权利要求1中,图像捕捉部件例如对应于照相机部分10。位置信息获得部件例如对应于GPS模块50。运动图像编码部件例如对应于图像编码部分2110。另外,多路复用部件例如对应于多路复用部分2140。
在权利要求2中,系统时间产生部件例如对应于系统时间产生器部分2150。
在权利要求3中,图像捕捉部件例如对应于照相机部分10。位置信息获得部件例如对应于GPS模块50。运动图像编码部件例如对应于图像编码部分2110。系统时间产生部件例如对应于系统时间产生器部分2150。多路复用部件例如对应于多路复用部分2140。记录部件例如对应于盘接口23或存储卡接口37。
在权利要求4中,图像解码部件例如对应于图像解码部分2171。显示部件例如对应于显示部分42。
在权利要求5中,操作输入部件例如对应于操作输入部分41。
在权利要求6中,图像解码部件例如对应于图像解码部分2171。叠加部件例如对应于叠加电路361。
在权利要求7中,通信部件例如对应于通信装置60。
在权利要求9中,分离部件例如对应于分离器部分2160。图像解码部件例如对应于图像解码部分2171。输出部件例如对应于控制器部分3290和缓冲器2181和2183。叠加部件例如对应于叠加电路361。
在权利要求10中,图像捕捉部件例如对应于照相机部分10。位置信息获得部件例如对应于GPS模块50。运动图像编码部件例如对应于图像编码部分2110。多路复用部件例如对应于多路复用部分2140。记录部件例如对应于盘接口23。分离部件例如对应于分离器部分2160。图像解码部件例如对应于图像解码部分2171。输出部件例如对应于控制器部分3290和缓冲器2181和2183。叠加部件例如对应于叠加电路361。
在权利要求11或15中,捕捉运动图像并由此产生运动图像数据的步骤例如对应于照相机部分10的处理。获得指示运动图像被捕捉时所处位置的位置信息的步骤例如对应于GPS模块50的处理。对运动图像编码的步骤例如对应于图像编码部分2110的处理。通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息互相关联而执行多路复用的步骤例如对应于多路复用部分2149的处理。输出多路复用数据的步骤例如对应于盘接口23或通信接口38的处理。
在权利要求12中,捕捉运动图像并由此产生运动图像数据的步骤例如对应于照相机部分10的处理。获得指示运动图像被捕捉时所处位置的位置信息的步骤例如对应于GPS模块50的处理。对运动图像编码的步骤例如对应于图像编码部分2110的处理。通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息互相关联而执行多路复用的步骤例如对应于多路复用部分2149的处理。在记录介质中记录多路复用数据的步骤例如对应于盘接口23或存储卡接口37的处理。
在权利要求13或16中,对于通过使编码运动图像数据和与运动图像数据的各个单元图像相应的位置信息之间关联而创建的数据而对运动图像数据解码的步骤例如对应于步骤S931。在地图上给出位置信息的步骤例如对应于步骤S934。与地图一起显示运动图像的步骤例如对应于步骤S935,其中,所述运动图像包括与位置信息相关联的单元图像。
在权利要求14或17中,对于通过使编码运动图像数据和与运动图像数据的至少一个单元图像相应的位置信息之间关联而创建的数据而对运动图像数据解码的步骤例如对应于步骤S931。当不拥有与位置信息相应的地图时获得地图的步骤例如对应于步骤S933。在地图上给出位置信息的步骤例如对应于步骤S934。与地图一起显示运动图像的步骤例如对应于步骤S935,其中,所述运动图像包括与位置信息相关联的单元图像。
结合本发明实施例描述的处理步骤或程序可被视为包括一系列步骤的方法。可替换地,处理步骤或程序可被认为是使计算机执行一系列处理步骤的程序以及记录该程序的记录介质。
工业应用性从以上描述显而易见,根据本发明,可在以下方面获得优点编码时间序列信息的各个单元图像与位置信息互相关联,并且,可根据位置信息而在地图上显示时间序列信息的轨迹。
权利要求
1.一种信息产生设备,特征在于包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉的位置的位置信息;对运动图像数据编码的运动图像编码部件;以及多路复用部件,所述多路复用部件通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息互相关联而执行多路复用。
2.如权利要求1所述的信息产生设备,特征在于还包括产生系统时间的系统时间产生部件,其中,多路复用部件增加相应单元图像及位置信息所共有的系统时间到所述系统时间中,由此使单元图像与位置信息互相关联。
3.一种记录设备,特征在于包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉的位置的位置信息;对运动图像数据编码的运动图像编码部件;产生系统时间的系统时间产生部件;多路复用部件,对于通过增加至少一个单元图像和与所述单元图像对应的位置信息所共有的系统时间到所述系统时间中而编码的运动图像数据,所述多路复用部件通过使单元图像与位置信息互相关联而执行多路复用;以及在记录介质中记录多路复用数据的记录部件。
4.一种重放设备,特征在于包括图像解码部件,对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,所述图像解码部件对运动图像数据执行解码;以及显示部件,所述显示部件使位置信息与运动图像数据的代表性图像互相关联,并且在地图上执行其显示,其中,所述位置信息与解码运动图像数据相关联。
5.如权利要求4所述的重放设备,特征在于还包括从外部接收操作的操作输入部件,其中,当通过操作输入部件输入代表性图像的规格时,显示部件以单元图像显示运动图像数据。
6.一种重放设备,特征在于包括图像解码部件,对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,所述图像解码部件对运动图像数据执行解码;以及叠加部件,所述叠加部件通过叠加根据解码运动图像数据重放的运动图像和指示与重放的运动图像相应的位置信息的地图而执行显示。
7.如权利要求6所述的重放设备,特征在于还包括用于获得地图的通信部件。
8.如权利要求6所述的重放设备,特征在于地图包含与相应区域有关的著名地点信息。
9.一种重放设备,特征在于包括分离部件,对于通过共存的时间互相关联编码运动图像数据中至少一个单元图像和与单元图像对应的位置信息并由此多路复用的数据,所述分离部件使运动图像数据和位置信息互相分离;对分离的运动图像数据解码的图像解码部件;输出部件,所述输出部件输出分离的位置信息和解码运动图像数据的单元图像,其中,所述解码运动图像数据包括位置信息所共有的显示时间;以及叠加部件,所述叠加部件通过叠加指示输出位置信息的地图和包含输出单元图像的运动图像而执行显示。
10.一种包括记录设备和重放设备的记录和/或重放系统,其中,所述记录设备用于在记录介质中记录包含运动图像数据的数据,所述重放设备用于对在记录介质所记录数据中包括的运动图像数据执行重放,所述系统的特征在于记录设备包括图像捕捉部件,所述图像捕捉部件捕捉运动图像,由此产生运动图像数据;位置信息获得部件,所述位置信息获得部件获得指示运动图像被捕捉的位置的位置信息;对运动图像数据编码的运动图像编码部件;多路复用部件,所述多路复用部件通过使编码运动图像数据中至少一个单元图像和与所述单元图像对应的位置信息互相关联而执行多路复用;以及在记录介质中记录多路复用数据的记录部件;以及重放设备包括分离部件,所述分离部件把记录在记录介质中的数据分离为编码运动图像数据和位置信息;对编码运动图像数据解码的图像解码部件;输出部件,所述输出部件输出分离的位置信息和与位置信息相关联的运动图像数据的单元图像;以及叠加部件,所述叠加部件通过叠加指示输出位置信息的地图和包含输出单元图像的运动图像而执行显示。
11.一种方法,特征在于包括捕捉运动图像由此产生运动图像数据的步骤;获得指示运动图像被捕捉的位置的位置信息的步骤;对运动图像数据编码的步骤;通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤;以及输出多路复用数据的步骤。
12.一种方法,特征在于包括捕捉运动图像由此产生运动图像数据的步骤;获得指示运动图像被捕捉的位置的位置信息的步骤;对运动图像数据编码的步骤;通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤;以及在记录介质中记录多路复用数据的步骤。
13.一种方法,特征在于包括对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。
14.一种方法,特征在于包括对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;当不拥有与位置信息相应的地图时,获得地图的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。
15.一种程序,特征在于使计算机执行捕捉运动图像由此产生运动图像数据的步骤;获得指示运动图像被捕捉的位置的位置信息的步骤;对运动图像数据编码的步骤;通过使与编码运动图像数据中至少一个单元图像对应的各个位置信息相关联而多路复用的步骤;以及输出多路复用数据的步骤。
16.一种程序,特征在于使计算机执行对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。
17.一种程序,特征在于使计算机执行对于编码运动图像数据和与运动图像数据的至少一个单元图像对应的位置信息互相关联的数据,对运动图像数据执行解码的步骤;当不拥有与位置信息相应的地图时,获得地图的步骤;在地图上给出位置信息的步骤;以及与地图一起显示运动图像的步骤,其中,所述运动图像包含与位置信息相关的单元图像。
全文摘要
在编码过程中,未编码运动图像(712)按次序交换,获得具有时间戳(DTS 725)的编码运动图像(722)。通过GPS等向运动图像的每个单元图像提供所述单元图像被捕捉时所处位置的各个位置信息。通过向单元图像和位置信息提供各个公共时间戳(PTS724,PTS723),而使每个单元图像与各个位置信息相关联。以此方式,在对编码的多路复用数据(731-735)解码的过程中,确定与各个单元图像相关的每个位置信息。以此方式,编码运动图像的每个单元图像与其各个位置信息相关联,并且,在地图上基于此位置信息可显示运动图像的尾端。
文档编号H04N5/91GK1799257SQ20048001541
公开日2006年7月5日 申请日期2004年3月24日 优先权日2003年6月3日
发明者有留宪一郎, 伊达修, 匂坂晃裕 申请人:索尼株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1