专利名称：记录和再现设备以及记录和再现方法
技术领域：
本发明涉及一种记录和再现设备以及记录和再现方法，并且适合于在例如记录和再现声音信息和图像信息时应用。
背景技术：
在传统上提出了这样一种电子照相机，其同时记录声音并且拍摄静止图像，并且建立声音和静止图像之间的时间关系，以便在再现声音的时候与声音内容并行地再现静止图像(例如，参见日本专利公开No.2001-69453)。
发明内容
这样配置的电子照相机仅仅建立声音和静止图像之间的时间关系，并且再现声音和静止图像。因此，不能预先掌握与静止图像相关联的时间点的声音内容。
本发明是鉴于上面要点而提出的，并且期望提出一种可以改善搜索容易度的记录和再现装置以及记录和再现方法。
根据本发明的实施例，提供了一种记录和再现设备，包括声音采集装置，用于采集外部声音，并且输出对应于声音采集结果的声音信息；拍摄装置，用于对外界进行拍摄，并且输出对应于拍摄结果的图像信息；记录装置，用于以消息单元将声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与声音信息的对应文件相关联地将图像信息记录到该记录介质上；显示装置，用于显示基于与各个声音信息文件相关联的图像信息的图像；以及再现装置，用于再现与通过预定第二外部操作在由显示装置显示的图像当中选择的图像相关联的声音信息文件；其中记录装置针对每个声音信息文件将基于与该文件相关联的图像信息的图像之一设置为该文件的代表性图像。
这样，该记录和再现设备可以自动地设置每个消息的代表性图像而无需复杂的用户操作，并且在根据代表性图像预先可视且直观地掌握每个消息的声音内容之后执行再现。
根据本发明的另一个实施例，提供了一种记录和再现方法，包括第一步骤，用于以消息单元将通过采集外部声音而获得的声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与声音信息的对应文件相关联地将通过对外界进行拍摄而获得的图像信息记录到该记录介质上；第二步骤，用于显示基于与各个声音信息文件相关联的图像信息的图像；以及第三步骤，用于再现与通过预定第二外部操作在所显示的图像当中选择的图像相关联的声音信息文件；其中在第一步骤中，针对每个声音信息文件，将基于与该文件相关联的图像信息的图像之一设置为该文件的代表性图像。
这样，该记录和再现方法可以自动地设置每个消息的代表性图像而无需复杂的用户操作，并且在根据代表性图像预先可视且直观地掌握每个消息的声音内容之后执行再现。
根据本发明的这些实施例，以消息单元将通过采集外部声音而获得的声音信息转换成文件，并且将这些文件记录到预定记录介质上，响应于预定第一外部操作与声音信息的对应文件相关联地将通过对外界进行拍摄而获得的图像信息记录到该记录介质上，显示基于与各个声音信息文件相关联的图像信息的图像，再现与通过预定第二外部操作在所显示的图像当中选择的图像相关联的声音信息文件，并且针对每个声音信息文件，将基于与该文件相关联的图像信息的图像之一设置为该文件的代表性图像。
这样，可以自动地设置每个消息的代表性图像而无需复杂的用户操作，并且可以在根据代表性图像预先可视且直观地掌握每个消息的声音内容之后执行再现。因此，可以改善搜索容易度。
图1是根据本实施例的具有照相机的IC记录器的外部结构的透视图；图2是根据本实施例的具有照相机的IC记录器的外部结构的另一透视图；图3是根据本实施例的具有照相机的IC记录器的外部结构的另一透视图；图4A、4B和4C是摄像机盖的旋转状态的示意图；图5是根据本实施例的具有照相机的IC记录器的电路配置的方框图；图6是消息文件夹(message folder)选择屏幕等的组成的概要的平面图；图7是示出具有摄像机的IC记录器的数据结构的示意图；图8是示出消息文件夹管理文件的数据结构的示意图；图9是示出图像管理文件的数据结构的示意图；以及图10是代表性图像自动设置处理过程的流程图。
具体实施例方式
以下将参照附图详细描述本发明的一个实施例。
(1)根据本实施例的具有照相机的IC记录器的结构在图1到3中，标号1在总体上表示根据本实施例的具有照相机的IC记录器。CCD(电荷耦合器件)照相机3所附连的LCD盖部件4被安置成可以沿着向上的方向在主体部分2的上部上滑动，其中主体部分2在总体上是圆形的，但是在垂直方向上是长形的。
在主体部分2的后表面2A的上部的左侧和右侧形成声音采集孔5A和5B，并且麦克风20A和20B(图5)以对应于这些声音采集孔的方式居于主体部分2内。这样，这些麦克风20A和20B可以通过对应的声音采集孔5A和5B采集外部声音。
记录按钮6A被安置在主体部分2的前表面2B的中间位置。按记录按钮6A可以开始记录由麦克风20A和20B采集的外部声音的操作。
此外，由高分辨率彩色液晶显示器形成的LCD7被安置在主体部分2的前表面2B的上方位置处，如图3所示。实况图(live view)按钮6B被安设在LCD7之下。通过在LCD盖部件4被设成打开状态并且LCD盖部件4的照相机盖8被设成打开状态时按实况图按钮6B，可以在LCD7上显示由CCD照相机3拍摄的活动图像，其中通过如图3所示沿着向上的方向拉出LCD盖部件4来将LCD盖部件4设成打开状态，并且通过如后所述旋转LCD盖部件4的照相机盖8以便暴露CCD照相机3来将照相机盖8设成打开状态。
照相机快门按钮6C被安设在实况图按钮6B的左侧以及主体部分2的前表面2B的中间位置。通过在活动图像被显示在LCD7上的状态下按照相机快门按钮6C，可以从显示在LCD7上的活动图像捕获按照相机快门按钮6C时刻的一帧静止图像，并且将其存储。
另一方面，菜单按钮6D被安设在主体部分2的右侧表面2C上。通过按菜单按钮6D，可以在LCD7上显示预定菜单屏幕。另外，调节杆(jog level)6E被安置在主体部分2的右侧表面2C上且在菜单按钮6D之下。通过操作调节杆6E使得调节杆6E沿着上方向、下方向、左方向或右方向倾斜，或者按调节杆6E，可以从显示在菜单屏幕内的各个可选项中选择期望可选项，或者可以将可选项设为选定对象。
此外，停止按钮6F被安置在主体部分2的右侧表面2C上且在调节杆6E之下，并且音量按钮6G被安置在停止按钮6F之下。按停止按钮6F可以停止记录操作或再现操作。在再现操作期间按音量按钮6G的上侧或下侧可以升高或降低此时从扬声器32(图5)输出的再现声音的音量，其中扬声器32被安置在LCD7的后侧。
此外，语音升高开关6H被安置在主体部分2的右侧表面2C上且在音量按钮6G之下。当在再现操作期间将语音升高开关6H设成打开状态，则可以以高音量级别输出以低音量级别记录的声音，同时按原样保持在记录操作的时候以高音量级别记录的声音的音量。
另一方面，电源连接器9被安置在主体部分2的左侧表面2D上。通过将成套电源的插头插入到电源连接器9中，可以将电源电压提供给具有照相机的IC记录器1，或者可以对包括在具有照相机的IC记录器1中的未在附图中示出的电池充电。
另外，USB(通用串行总线)连接器10被安置在主体部分2的左侧表面2D上且在电源连接器9之下。具有照相机的IC记录器1可以通过USB连接器10以USB方式连接到外部设备如个人计算机等。这样，具有照相机的IC记录器1可以将存储在具有照相机的IC记录器1中的记录声音的声音数据和记录图像的图像数据输出到以USB方式连接的外部设备，并且捕获从外部设备提供的声音数据和图像数据。
附带地，充电LED(发光二极管)11在充电的时候点亮，并且操作LED12在记录操作的时候以及在再现操作的时候点亮，并且充电LED11和操作LED12被安设在主体部分2的前表面2B上且在LCD7的正下方。这样，用户可以容易地根据充电LED11和操作LED12的开/关状态而有保证地检测是否执行充电、记录等。
此外，麦克风插口13和耳机插口14被安置在主体部分2的下侧表面2E上。这样，通过将未在图中示出的外部麦克风的输出插头插入到麦克风插口13中，可以捕获和记录由麦克风采集的外部声音。通过将未在图中示出的耳机的外部输入插头插入到耳机插口14中，可以通过耳机听在再现操作的时候再现的记录声音。
LCD盖部件4的外部形状被选择成如图1和2所示在关闭状态下覆盖主体部分2的LCD7的大约2/3。从而，未使用时的具有照相机的IC记录器1可以通过将LCD盖部件4设成关闭状态来通过LCD盖部件4保护LCD7，而使用时的具有照相机的IC记录器1通过沿着上方向拉出LCD盖部件4来暴露LCD7以便允许用户观看显示在LCD7上的菜单屏幕等，从而将LCD盖部件4设成如图3所示的打开状态。
圆柱形的照相机盖8可旋转地被安置在LCD盖部件4的上部处，并且上述CCD照相机3附连到照相机盖8的预定位置，使得CCD照相机3的光轴与照相机盖8的中心轴垂直。
在这种情况下，照相机盖8可以在从如图4A所示CCD照相机3隐藏在LCD盖部件4内的旋转位置(以下将该旋转位置称作起点位置)到如图4C所示CCD照相机3的光轴与主体部分2的前表面2B的法线方向基本上一致的旋转位置(以下将该旋转位置称作终点位置)的范围内以箭头“a”的方向或者与之相反的方向旋转。
从而，具有照相机的IC记录器1通过将照相机盖8设成关闭状态来保护未使用时的CCD照相机3，其中在该关闭状态下，照相机盖8如图4A所示位于起始位置处。通过以箭头“a”的方向旋转照相机盖8从而将照相机盖8从该状态改变到打开状态，其中如图4B所示在主体部分2的后表面2A侧上暴露CCD照相机3，可以在观看显示在LCD7上的活动图像时拍摄期望图像。通过以箭头“a”的方向将照相机盖8旋转到终点位置从而进一步从该状态改变照相机盖8，则还可以在观看显示在LCD7上的活动图像时拍摄用户自身的面部，如图4C所示。
附带地，宏开关6I被安置在照相机盖8中。通过将宏开关6I设成打开状态，可以设置宏模式，其中该模式可以处理CCD照相机3靠近拍摄对象的特写拍摄。在这种情况下，宏开关6I被选择成安置在与CCD照相机3的位置偏离180°的位置。从而，根据显示在LCD上的活动图像来确定宏模式的必要性，并且当确定宏模式必要时，用户可以容易地将宏开关6I设成打开状态。
(2)具有照相机的IC记录器1的内部配置图5示出了具有照相机的IC记录器1的内部配置。
当具有照相机的IC记录器1被通电时，麦克风20A和20B采集外部声音，并且通过放大器21将所得到的声音信号S1发送到AD(模拟-数字)/DA(数字-模拟)转换器22。AD/DA转换器22顺序地对从麦克风20A和20B提供的声音信号S1执行数字转换处理，并且顺序地将所得到的声音数据D1发送到数据处理和控制单元23。
数据处理和控制单元23包括微型计算机配置的控制单元28，包括在总体上控制具有照相机的IC记录器1的CPU(中央处理单元)24、存储各种程序的ROM(只读存储器)25、作为CPU24的工作存储器的RAM(随机存取存储器)26、以及内置定时器27；以及DSP(数字信号处理器)29，具有后面将要描述的压缩和解压缩声音数据D1和图像数据D3的功能。
当操作形成操作控制部件6的上述记录按钮6A、实况图按钮6B、照相机快门按钮6C、菜单按钮6D、调节杆6E、停止按钮6F、音量按钮6G、语音升高开关6H以及宏开关6I之一时，将对应于该操作的操作输入信号S2从操作控制部件6提供到数据处理和控制单元23的控制单元28。
控制单元28还被提供来自安设在LCD盖部件4内的对应传感器(未示出)的LCD盖状态信号S3和照相机盖状态信号S4，其中LCD盖状态信号S3表示LCD盖部件4的关闭状态(图1和图2)或者打开状态(图3)，而照相机盖状态信号S4表示照相机盖8的关闭状态(图4A)或打开状态(图4B和4C)。
这样，控制单元28中的CPU24根据操作输入信号S2识别用户操作的操作内容，并且根据LCD盖状态信号S3和照相机盖状态信号S4检测LCD盖部件4和照相机盖8的目前状态。CPU24根据识别和检测的结果以及存储在ROM25中的各种控制程序来执行对应的各种控制处理。
实际上，当根据操作输入信号S2而识别出操作控制部件6的记录按钮6A被按时，CPU24根据LCD盖状态信号S3和照相机盖状态信号S4来确定LCD盖部件4和照相机盖8的状态，并且当检测到LCD盖部件4和照相机盖8中的至少一个处于关闭状态时，CPU24对应地将操作模式改变成声音记录模式，并且控制DSP29。这样，此时，DSP29在CPU24的控制下根据预定音频压缩系统如LPEC(索尼公司的注册商标)等对从AD/DA转换器22提供的声音数据D1执行音频压缩处理，并且顺序地将所得到的压缩声音数据D2存储在闪存30中。
当此后根据操作输入信号S2识别到停止按钮6F被按时，CPU24控制DSP29对从AD/DA转换器22提供的声音数据D1停止音频压缩处理。同时，CPU24在由用户在此时选择的文件夹内创建新消息文件夹(图7中的“03072400”到“03072408”)。CPU24将压缩声音数据D2转换成采用与在现有IC记录器中采用的音频文件格式相同的文件格式的文件。CPU24将这样获得的声音文件存储在消息文件夹中。CPU24存储将用于该消息文件夹的管理信息存储在后面将要描述的管理文件MSF(图8)中。
当根据LCD盖状态信号S3和照相机盖状态信号S4检测到LCD盖部件4和照相机盖8处于打开状态时，CPU24将操作模式改成照相机模式，并且控制CCD照相机3启动CCD照相机3。结果，顺序地从CCD照相机3输出此时由CCD照相机3正在拍摄的场景的图像信号S5，并且将其提供给数据处理和控制单元23。
然后，当根据操作输入信号S2在该状态下识别出实况图按钮6B被按时，CPU24对应地控制DSP29。这样，DSP29此时顺序地对从CCD照相机3提供的图像信号S5执行数字转换，并且将所得到的图像数据D3发送到LCD7。结果，在LCD7上实时地显示此时由CCD照相机3正在拍摄的场景的活动图像，其中该活动图像的图像基于图像数据D3。
此外，当此后根据操作输入信号S2在该状态下识别出照相机快门按钮6C被按时，CPU24对应地控制DSP29。这样，DSP29此时捕获照相机快门按钮6C被按时刻的一帧静止图像的图像数据D3，其图像根据图像数据D3来获得，根据预定图像压缩系统例如JPEG(联合图像专家组)对所捕获的图像数据D3执行图像压缩处理，然后将所得到的压缩图像数据D4存储到闪存30中。
然后，CPU24在此时由用户选择的文件夹内创建新消息文件夹。CPU24将压缩图像数据的图像文件存储在消息文件夹中。CPU24将用于该消息文件夹的管理信息存储在管理文件MSF中。
另一方面，当根据操作输入信号S2识别出操作控制部件6的记录按钮6A被按时，CPU24根据LCD盖状态信号S3和照相机盖状态信号S4确定LCD盖部件4和照相机盖8的状态，并且当检测到LCD盖部件4和照相机盖8都处于打开状态时，CPU24将操作模式改成声音记录和图像记录模式，并且对应地控制DSP29。
此时，如同在上述声音记录模式中一样，DSP29顺序地对从AD/DA转换器22提供的声音数据D1执行预定音频压缩处理，然后将所得到的压缩声音数据D2存储在闪存30中。另外，如同在上述照相机模式中一样，DSP29此时对从CCD照相机3提供的图像信号S5执行数字转换，并且将所得到的图像数据D3发送到LCD7。结果，实时地在LCD7上显示由CCD照相机3正在拍摄的场景的活动图像，其图像基于图像数据D3。
此外，当此后根据操作输入信号S2在该状态下识别出照相机快门按钮6C被按时，CPU24对应地控制DSP29。如同在照相机模式中一样，DSP29此时捕获照相机快门按钮6C被按时刻的一帧静止图像的图像数据D3，其图像根据从CCD照相机3提供的图像信号S5来获得，并且对所捕获的图像数据D3执行图像压缩处理。
然后，DSP29将通过这样的图像压缩处理而获得的压缩图像数据D4存储在闪存30中作为图像的压缩图像数据D4，以便用作以后搜索照相机快门按钮6C被按时刻的标记(以下将该图像称作书签图像)，使得压缩图像数据D4与此时正在顺序地存储在闪存30中的压缩声音数据D2的对应位置相关联。
当此后根据操作输入信号S2识别出停止按钮6F被按时，CPU24在此时由用户选择的文件夹内创建新消息文件夹。CPU24将压缩声音数据D2的声音文件和如上所述与该声音文件相关联的压缩图像数据D4的图像文件存储在该消息文件夹中。CPU24将用于该消息文件夹的管理信息存储在管理文件MSF中。
这样，具有照相机的IC记录器1不仅能够相互独立地记录声音和静止图像，而且可以与正被记录的声音相关联地记录作为书签图像的静止图像。
具有照相机的IC记录器1允许根据与声音相关联地这样记录的书签图像搜索期望消息文件夹。
实际上，当按调节杆6E并且CPU24根据操作输入信号S2识别出显示用于在期望文件夹内再现期望消息文件夹的屏幕(以下将该屏幕称作消息文件夹选择屏幕)或者显示用于在该消息文件夹内选择期望书签图像的选择屏幕(以下将该屏幕称作书签图像选择屏幕)的命令时，CPU24从ROM25读取对应的图像数据D3，然后将图像数据D3发送到LCD7，从而显示如图6所示的消息文件夹选择屏幕33或者具有与LCD7上的消息文件夹选择屏幕33类似的组成的书签图像选择屏幕34(图6)。
在这种情况下，为了在LCD7上显示消息文件夹选择屏幕33，CPU24从闪存30读取针对该文件夹内的每个消息文件夹预先设置的代表性书签图像(以下被称作代表性图像)的图像文件(压缩图像数据D4)，使DSP29对压缩图像数据D4进行解码，并且根据所得到的图像数据D3创建预定大小的缩略像P1到P6。
然后，如图6所示，CPU24针对消息文件夹选择屏幕33内的各个消息文件夹显示这样获得的缩略像P1到P6的列表。附带地，对于仅包括声音而不包括静止图像的消息文件夹，显示预定图标而非缩略像。
当此后以上方向、下方向、左方向或右方向操作调节杆6E以移动在消息文件夹选择屏幕33内与缩略像P1到P6一起显示的光标从而指示和选择期望缩略像P，然后按调节杆6E以便将此时的缩略像P设为选定对象时，CPU24根据消息管理文件从闪存30读取对应消息文件夹内的声音文件(压缩声音数据D2)，并且使DSP29对压缩声音数据D2进行解码。
结果，从DSP29输出通过这样的解码处理而获得的声音数据D1，以便在AD/DA转换器22中进行模拟转换。通过放大器31将所得到的声音信号S6提供给扬声器32。从而，此时，从扬声器32输出基于声音信号S6的声音。
类似地，为了在LCD7上显示书签图像选择屏幕34(图6)，CPU24根据消息管理文件从闪存30读取对应消息文件夹内的各个书签图像的图像文件(压缩图像数据D4的片断)，使DSP29对压缩图像数据D4的片断进行解码，并且根据所得到的图像数据D3的片断创建预定大小的缩略像P1到P6。然后，CPU24针对书签图像选择屏幕34内的各个书签图像显示这样获得的缩略像P1到P6的列表。
当此后操作调节杆6E以选择书签图像选择屏幕34内的缩略像P1到P6之一时，CPU24从闪存30读取在对应的声音文件中与缩略像P1到P6的原始书签图像相关联的声音部分之后的压缩声音数据D2，然后使DSP29对压缩声音数据D2进行解码。
结果，从DSP29输出通过这样的解码处理而获得的声音数据D1，以便在AD/DA转换器22中进行模拟转换。通过放大器31将所得到的声音信号S6提供给扬声器32。从而，基于声音信号S6，从扬声器32输出与用户在选定消息文件夹中选择的书签图像对应的声音位置之后的声音。
这样，具有照相机的IC记录器1使得有可能根据消息文件夹的代表性图像或者消息文件夹内的每个书签图像而快速且容易地访问期望消息文件夹或者该消息文件夹中的期望声音位置。
除了这样的配置之外，具有照相机的IC记录器1还允许在再现声音文件的时候将新书签图像记录在包括该声音文件的消息文件夹中，并且允许以后与图像文件相关联地将声音记录在仅包括图像文件的消息文件夹中。
实际上，当在CPU24根据LCD盖状态信号S3和照相机盖状态信号S4检测到LCD盖部件4和照相机盖8打开的状态下根据操作输入信号S2识别出照相机快门按钮6C被按，并且如上所述再现由用户选择的消息文件夹的声音文件时，CPU24对应地控制DSP29。
在CPU24的控制下，DSP29此时捕获照相机快门按钮6C被按时刻的一帧静止图像的图像数据D3，其图像根据从CCD照相机3提供的图像信号S5来获得，并且对所捕获的图像数据D3执行图像压缩处理。然后，DSP29将通过这样的图像压缩处理而获得的压缩图像数据D4存储在闪存30中作为照相机快门按钮6C被按时刻的书签图像的图像文件，使得压缩图像数据D4与此时正在再现的声音文件相关联。
另一方面，当在显示在LCD7上的消息文件夹选择屏幕33(图6)上选择仅包括图像文件的消息文件夹之后根据操作输入信号S2识别出记录按钮6A被按，并且使用调节杆6E通过预定操作输入用于在消息文件夹中进行附加记录的命令时，CPU24对应地控制DSP29。
这样，在CPU24的控制下，DSP29此时对从AD/DA转换器22提供的声音数据D1执行音频压缩处理，然后与图像文件相关联地将所得到的压缩声音数据D2作为声音文件存储在闪存30中。附带地，在这种情况下，在附加记录的声音的开始位置处自动将基于原始图像文件的静止图像设为书签图像。
这样，具有照相机的IC记录器1允许以后在记录声音的期望位置处自由地附加记录书签图像，并且允许以后与所记录的静止图像相关联地附加记录声音。从而有可能改善搜索期望记录声音位置的容易度以及改善IC记录器的功能性。
(3)具有照相机的IC记录器中数据管理格式的目录结构接下来，将描述作为压缩声音数据D2和压缩图像数据D4的数据管理格式的Voiscape格式的目录结构，该格式用于具有照相机的IC记录器1。
图7示出了Voiscape格式的目录结构。如图7所示，记录声音的声音文件(“03072400.MSV”)和与该声音文件相关联记录的书签图像的图像文件(“P0000000.JPG”到“P0000003.JPG”)存储在被称作“MSSONY”的文件夹内创建的被称作“VOISCAPE”的文件夹内。
包括消息文件夹的文件夹(“FOLDER1”到“FOLDER3”)存在于该“VOISCAPE”内。用户可以从这些文件夹内选择期望文件夹作为存储记录声音的声音文件等的位置。
“VOISCAPE”还存储上述消息管理文件(“MSGLIST.MSF”)，其用于管理所创建的消息文件夹。如图8所示，该消息管理文件具有这样的数据结构，其中在32[字节]的首标(“首标”)之后，针对每个文件夹顺序地描述关于各个文件夹(“FOLDER1”到“FOLDER3”)的文件夹名称等的信息(“文件夹条目”)以及关于在这些文件夹内创建的各个消息文件夹的文件夹名称等的信息(“消息条目”)。从而，有可能根据消息管理文件在文件夹内搜索期望消息文件夹。
此外，由用户根据使用条件在每个文件夹(“FOLDER1”到“FOLDER3”)内创建消息文件夹(“03072400”到“03072408”)。每个消息文件夹包括通过声音记录而获得的声音文件(“03072400.MSV”)、每个书签图像的图像文件(“P0000000.JPG”到“P0000003.JPG”)、以及图像管理文件(“03072400.PIN”)。
图像管理文件用来管理每个消息文件夹。如图9所示，图像管理文件具有这样的数据结构，其中在首标(“首标”)之后，当设置了代表性图像时，描述代表性图像的图像文件的文件名称(代表性画面条目)，并且在文件名称(代表性画面条目)之后，描述每个书签图像的图像文件的文件名称以及关于声音的书签图像的绑定位置(时间)。从而，根据图像管理文件，可以搜索消息文件夹的代表性图像或者每个书签图像的绑定位置(书签图像与其相关联的相关声音中的位置)。
附带地，通过将声音文件和与该声音文件相关联的每个书签图像的图像文件这样存储在相同的文件夹(消息文件夹)内，当将这些数据片断捕获到外部个人计算机中并且由浏览器观看时，容易地识别声音文件与图像文件之间的关系。这样，有可能防止用户意外地删除声音文件或图像文件。
(4)代表性图像自动设置处理接下来，将描述包括在具有照相机的IC记录器1中的代表性图像自动设置处理。
具有照相机的IC记录器1中的CPU24在声音记录和图像记录模式中与声音记录开始时间点的声音相关联地自动设置代表性图像。
实际上，当CPU24检测到LCD盖部件4和照相机盖8都处于打开状态时，并且CPU24识别出记录按钮6A被按时，CPU24通过定时器27测量从声音记录开始时间点(记录按钮6A被按的时间点)开始逝去的时间。
此时，CPU24将操作模式改成声音记录和图像记录模式，并且控制DSP29顺序地将从AD/DA转换器22提供的声音数据D1作为压缩声音数据D2存储在闪存30中，同时顺序地将从CCD照相机3提供的图像信号S5作为图像数据D3发送到LCD7，以便实时地将此时由CCD照相机3正在拍摄的场景的活动图像显示在LCD7上。
当在该状态下识别出照相机快门按钮6C被按时，CPU24生成照相机快门按钮6C被按时刻的一帧静止图像的图像数据D3，并且生成图像管理文件(图9(“03072400.PIN”))。
当照相机快门按钮6C被按时刻的时间点在声音记录开始时间点的30[秒]内，并且满足未设置代表性图像时，CPU24将此时生成的压缩图像数据D4的图像设为代表性图像，并且将所设置的压缩图像数据D4存储在闪存30中，并且在图像管理文件中首标(图9(“首标”))之后的代表性图像描述区域内描述压缩图像数据D4的文件名称以及声音开始时间(记录按钮6A被按的时间)。
另一方面，当不满足这些条件时，CPU24将此时生成的压缩图像数据D4的图像设为书签图像，并且将所设置的压缩图像数据D4存储在闪存30中，并且在图像管理文件(图9(“03072400.PIN”))中的书签图像区域(图9(“画面条目”))内描述压缩图像数据D4的文件名称以及照相机快门按钮6C被按的时间。
当此后识别出停止按钮6F被按时，CPU24在此时由用户选择的文件夹内创建新消息文件夹(图9(“文件夹”))。CPU24将由压缩声音数据D2形成的声音文件(图9(“03072400.MSV”))、与该声音文件相关联的每个图像文件(图9(P0000000.JPG))、以及图像管理文件(图9(“03072400.PIN”))存储在消息文件夹中。CPU24将用于该消息文件夹的管理信息存储在消息管理文件中。
这样，CPU24将与在声音记录开始处的30[秒]内按照相机快门按钮6C的第一操作对应的静止图像设为与声音记录开始时间点的声音相关联的代表性图像，并且将在过去了30[秒]之后按照相机快门按钮6C的搡作对应的静止图像设为与按操作时间的声音相关联的书签图像而不管按操作是否是第一操作。
附带地，当在从开始声音记录开始过去了30[秒]之后第一次按照相机快门按钮6C时，或者当在照相机快门按钮6C从未被按的情况下按停止按钮6F时，CPU24将预先存储在ROM25中的图标数据存储在消息文件夹中作为图像文件，将基于图标数据的图标设为与声音记录开始时间点的声音相关联的代表性图像，并且在图像管理文件的代表性图像描述区域内描述所设置的内容。
根据图10所示的代表性图像自动设置处理过程来执行CPU24的上述代表性图像自动设置处理。
具体地说，当CPU24检测到LCD盖部件4和照相机盖8都处于打开状态时，并且当CPU24识别出记录按钮6A被按时，CPU24在步骤SP0开始代表性图像自动设置处理过程RT。在下一步骤SP1，CPU24通过定时器27测量从声音记录开始时间点开始逝去的时间，并且启动CCD照相机3并实时地在LCD7上显示正在由CCD照相机3拍摄的活动图像。
在下一步骤SP2，CPU24确定照相机快门按钮6C是否被按。当在步骤SP2获得否定结果时，CPU24进入步骤SP3，以确定是否从启动CCD照相机3开始过去了预定图像显示时间段。当在步骤SP3也获得否定结果时，CPU返回到步骤SP2，以等待在该图像显示时间段内按照相机快门按钮6C的操作。
当CPU24在步骤SP2确定了照相机快门按钮6C被按时，CPU24进入步骤SP4以生成与照相机快门按钮6C被按时刻对应的图像信号S5作为压缩图像数据D4。在下一步骤SP5，CPU24确定是否满足照相机快门按钮6C被按的时刻在声音记录开始的30[秒]内且代表性图像未被设置的条件。
当满足这些条件时，CPU24进入步骤SP6，以将在步骤SP4生成的压缩图像数据D4的静止图像设为与声音开始时间点(记录按钮6A被按的时间点)的声音相关联的代表性图像。此后，CPU24返回到步骤SP2，并且重复上述处理。另一方面，当不满足这些条件时，CPU24进入步骤SP7，以将在步骤SP4生成的压缩图像数据D4的静止图像设为与照相机快门按钮6C被按时间点的声音相关联的书签图像。此后，CPU24返回到步骤SP2，并且重复上述处理。
另一方面，当CPU24在步骤SP3确定了图像显示时间段已经过去时，CPU24进入步骤SP8，以停止LCD7的显示。
然后，CPU24在下一步骤SP9确定实况图按钮6B是否被按。当在步骤SP9获得否定结果时，CPU24进入步骤SP10，以确定停止按钮6F是否被按。当在步骤SP10也获得否定结果时，CPU24返回到步骤SP9，以等待按实况图按钮6B或停止按钮6F的操作。
当CPU24在步骤SP9确定了实况图按钮6B被按时，CPU24终止LCD7的显示停止状态，然后返回到步骤SP1，以重复上述处理。另一方面，当CPU24在步骤SP10确定了停止按钮6F被按时，CPU24进入步骤SP11，以结束代表性图像自动设置处理过程RT。
这样，CPU24可以自动地设置与声音记录开始时间点相关联的代表性图像。
(5)操作和效果在上述构造中，具有照相机的IC记录器1顺序地将照相机快门按钮6C被按时刻的图像的压缩图像数据D4与此时记录的声音的压缩声音数据D2相关联，其中照相机快门按钮6C被按时刻的图像是从由CCD照相机正在拍摄的活动图像获得的，并且以消息文件夹单元将压缩图像数据D4存储在闪存30中。
然后，具有照相机的IC记录器1以消息单元将这样的图像作为消息文件夹选择屏幕33显示在LCD7上。具有照相机的IC记录器1再现与从消息文件夹选择屏幕33选择的图像的压缩图像数据D4相关联的压缩声音数据D2。
因此，具有照相机的IC记录器1使得有可能在预先根据图像可视且直观地以消息单元掌握声音内容之后执行再现。
在这种情况下，具有照相机的IC记录器1将在从声音记录开始时间点开始的预定扩展时间(在本实施例中为30[秒])的时间段内首次按照相机快门按钮6C的时刻的图像设为采用消息单元的图像，以便将其与声音记录开始时间点的声音相关联地显示在消息文件夹选择屏幕33上。
这样，仅仅通过在从声音记录开始时间点开始的预定扩展时间内按照相机快门按钮6C，具有照相机的IC记录器1可以自动地设置每个消息的代表性图像。这样，有可能设置代表性图像而无需以后设置代表性图像或者无需在声音记录开始时间点之后匆忙地按照相机快门按钮6C，从而可以改善可操作性。另外，由于从声音记录开始时间点开始的扩展时间内的图像被设置为代表性图像，而该图像被认为是通常产生深刻印象，因此可以更直观地掌握每个消息的声音内容，并且由于该图像与声音记录开始时间点的声音相关联，因此可以容易地执行用户所期望的消息开始点搜索和再现。
此外，当在除了从声音记录开始时间点开始的预定扩展时间之外的其它时间段内首次按照相机快门按钮6C时，或者当在声音记录结束时间点之前未按照相机快门按钮6C时，将预先准备的图标设为与声音记录开始时间点的声音相关联的代表性图像。
这样，具有照相机的IC记录器1可以容易地且有保证地执行用户所期望的消息开始点搜索和再现。
根据上述构造，顺序地将照相机快门按钮6C被按时刻的图像的压缩图像数据D4与此时记录的声音的压缩声音数据D2相关联，并且将其存储在闪存30的消息文件夹单元中。然后，将消息单元中的这些代表性图像作为消息文件夹选择屏幕33显示在LCD7上。再现从消息文件夹选择屏幕33选择的与代表性图像的压缩图像数据D4相关联的压缩声音数据D2。另外，将在从声音记录开始时间点开始的预定时间点的时间段内首先按照相机快门按钮6C的时刻的图像设为与声音记录开始时间点的声音相关联的代表性图像。这样，自动地设置每个消息的代表性图像而无需复杂的用户操作，并且可以根据代表性图像可视且直观地掌握每个消息的声音内容。这样，有可能改善搜索容易度。
(6)其它实施例虽然在前面实施例中描述了包括在具有照相机的IC记录器1中的闪存30用作记录声音信息和图像信息的记录介质的情况，但是本发明不限于此。可以采用可与具有照相机的IC记录器1分开的闪存，并且代替闪存，可以采用各种其它记录介质例如记忆棒(索尼公司的注册商标)。
在前述实施例中，描述了用于针对每个声音信息文件将基于与该文件相关联的图像信息的图像之一设为该文件的代表性图像的记录介质将在从声音记录开始时间点开始的预定扩展时间的时间段内首次按照相机快门按钮6C的时刻的图像设为与声音记录开始时间点的声音相关联的代表性图像。然而，本发明不限于此。例如，可以将在从先于声音记录结束时间点预定扩展时间的时间点到结束时间点的时间段内按照相机快门按钮6C的时刻的图像设为与声音记录开始时间点相关联的代表性图像。在这种情况下，虽然在前面实施例中扩展时间为30秒，但是可以使用诸如一[分钟]的时间，也就是，用户对于将照相机快门按钮6C被按的时间点的静止图像与声音记录开始时间点相关联将不感到奇怪的时间。
此外，例如，代替在从声音记录开始时间点开始的预定扩展时间的时间段内首次按照相机快门按钮6C的时刻的图像，简单地，第一次按照相机快门按钮6C的时刻的图像或者最后一次按照相机快门按钮6C的时刻的图像可以被设为与声音记录开始时间点相关联的代表性图像。在这种情况下，由于一般地用户经常将重点放在对应于第一次或最后一次的图像或者对其具有深刻印象，因此如同在前述实施例一样可以可视且直观地掌握每个消息的声音内容。
此外，例如，当照相机快门按钮6C在单位时间内被按预定或更多次数时，可以将照相机快门按钮6C被按时刻的图像之一设为与声音记录开始时间点的声音相关联的代表性图像。在这种情况下，由于一般地用户经常将重点放在这些图像，根据每个消息单元的图像如同在前述实施例中一样可以可视且直观地掌握整个声音内容。
当作为数据记录和再现声音和图像时，本发明是适用的。
本领域的技术人员应当理解，可以在所附权利要求或者其等价物的范围内根据设计需要和其它因素进行各种修改、组合、子组合和变更。
权利要求
1.一种记录和再现设备，包括声音采集装置，用于采集外部声音，并且输出对应于声音采集结果的声音信息；拍摄装置，用于对外界进行拍摄，并且输出对应于拍摄结果的图像信息；记录装置，用于以消息单元将所述声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与所述声音信息的对应文件相关联地将所述图像信息记录到该记录介质上；显示装置，用于显示基于与所述声音信息的各个所述文件相关联的所述图像信息的图像；以及再现装置，用于再现与通过预定第二外部操作在由所述显示装置显示的所述图像当中选择的所述图像相关联的所述声音信息的所述文件；其中所述记录装置针对所述声音信息的每个所述文件将基于与所述文件相关联的所述图像信息的图像之一设置为所述文件的代表性图像。
2.如权利要求1所述的记录和再现设备，其中所述记录装置将基于在开头或在最后与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
3.如权利要求1所述的记录和再现设备，其中所述记录装置将基于在开头与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
4.如权利要求1所述的记录和再现设备，其中所述记录装置将基于在从声音记录开始时间点开始的预定扩展时间的时间段内与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
5.如权利要求4所述的记录和再现设备，其中所述扩展时间为基本上30秒。
6.如权利要求1所述的记录和再现设备，其中当不存在要与所述文件相关联的所述图像信息时，所述记录装置将预先设置的设定图像设为与所述声音信息的开始相关联的所述代表性图像。
7.如权利要求1所述的记录和再现设备，其中所述第一外部操作是按照相机快门按钮的操作。
8.如权利要求1所述的记录和再现设备，其中所述第二外部操作是这样的操作，即通过操作预定操作元件而移动由所述显示装置与所述图像一起显示的光标，使得光标指示期望所述图像，然后通过操作所述操作元件将所述图像设为选定对象。
9.一种记录和再现方法，包括第一步骤，以消息单元将通过采集外部声音而获得的声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与所述声音信息的对应文件相关联地将通过对外界进行拍摄而获得的图像信息记录到所述记录介质上；第二步骤，显示基于与所述声音信息的各个所述文件相关联的所述图像信息的图像；以及第三步骤，再现与通过预定第二外部操作在所显示的所述图像当中选择的所述图像相关联的所述声音信息的所述文件；其中在所述第一步骤中，针对所述声音信息的每个所述文件，将基于与所述文件相关联的所述图像信息的图像之一设置为所述文件的代表性图像。
10.如权利要求9所述的记录和再现方法，其中在所述第一步骤中，将基于在开头或在最后与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
11.如权利要求9所述的记录和再现方法，其中在所述第一步骤中，将基于在开头与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
12.如权利要求9所述的记录和再现方法，其中在所述第一步骤中，将基于在从声音记录开始时间点开始的预定扩展时间的时间段内与所述文件相关联的所述图像信息的图像设为与所述声音信息的开始相关联的所述代表性图像。
13.如权利要求12所述的记录和再现方法，其中所述扩展时间为基本上30秒。
14.如权利要求9所述的记录和再现方法，其中在所述第一步骤中，当不存在要与所述文件相关联的所述图像信息时，将预先设置的设定图像设为与所述声音信息的开始相关联的所述代表性图像。
15.如权利要求9所述的记录和再现方法，其中所述第一外部操作是按照相机快门按钮的操作。
16.如权利要求9所述的记录和再现方法，其中所述第二外部操作是这样的操作，即通过操作预定操作元件而移动由所述显示装置与所述图像一起显示的光标，使得光标指示期望所述图像，然后通过操作所述操作元件将所述图像设为选定对象。
17.一种记录和再现设备，包括声音采集器，采集外部声音，并且输出对应于声音采集结果的声音信息；拍摄设备，对外界进行拍摄，并且输出对应于拍摄结果的图像信息；记录器，以消息单元将所述声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与所述声音信息的对应文件相关联地将所述图像信息记录到该记录介质上；显示设备，显示基于与所述声音信息的各个所述文件相关联的所述图像信息的图像；以及再现器，再现与通过预定第二外部操作在由所述显示设备显示的所述图像当中选择的所述图像相关联的所述声音信息的所述文件；其中所述记录器针对所述声音信息的每个所述文件将基于与所述文件相关联的所述图像信息的图像之一设置为所述文件的代表性图像。
全文摘要
本发明公开一种记录和再现设备，包括声音采集装置，用于采集外部声音，并且输出对应于声音采集结果的声音信息；拍摄装置，用于对外界进行拍摄，并且输出对应于拍摄结果的图像信息；记录装置，用于以消息单元将声音信息转换成文件，并且将这些文件记录到预定记录介质上，并且响应于预定第一外部操作与声音信息的对应文件相关联地将图像信息记录到该记录介质上；显示装置，用于显示基于与各个声音信息文件相关联的图像信息的图像；以及再现装置，用于再现与通过预定第二外部操作在由显示装置显示的图像当中选择的图像相关联的声音信息文件。记录装置针对每个声音信息文件将基于与该文件相关联的图像信息的图像之一设置为该文件的代表性图像。
文档编号G06F17/00GK1758734SQ20051009982
公开日2006年4月12日 申请日期2005年9月2日 优先权日2004年9月2日
发明者饭田健一, 加藤文彦, 田中出, 三原悟史 申请人:索尼株式会社