一种多媒体多信息同步重现的方法及其应用
【技术领域】
[0001]本发明涉及一种不同类型信息同步重现的方法，特别是一种多媒体多信息同步重现的方法及其运用。
【背景技术】
[0002]在对同时涉及声音、图像与文字和行踪、行为这些信息在内的多媒体多信息的集合进行存储、回放和检索、查询时，目前需要使用多种软、硬件设备系统以及手段和方法才能达到目的。
[0003]一、常见的多媒体多信息集合包括:
(一)、公安部关于机动车驾驶证领、考过程所包含的信息:
1.1、不少于两个通道的实时视频信息；
1.2、考车驾驶室内的实时音频信息；
1.3、监控中心考试员与考生的实时对话信息；
1.4、考车行驶过程的实时位置信息；
1.5、考生考试时所使用的考试车辆即考车的信息；
1.6、负责监考某个考生的考试员的信息；
1.7、正在进行考试的考生信息；
1.8、考生的考试成绩及其评判依据；
1.9、对考生进行扣分评定时必须记录的实时音频和视频信息、考车即时所处位置、当时即时时刻等实时信息。
[0004]1.10、其它的国家标准没有明确规定的并在某些考场认为又需要附加的某些信息，如考生报名、学习、考试的过程以下一些信息:
1.101、对报名学习机动车驾驶技能的人员以及驾驶员和其他人员的体检过程进行监督所要记录的信息:
1.102、监督体检过程的音频、视频信息；
1.103、体检人与被体检人的信息；
1.104、体检单位的信息；
1.105、体检结果的信息。
[0005](二)、对机动车的安全、技术性能的检验过程进行监督所要记录的信息:
2.1、监督及年检过程的音频、视频信息；
2.2、机动车年检时需提供的相关信息；
2.3、年检单位及检验员、引车员的信息；
2.4、检验结果的信息。
[0006](三)、各种事故现场的处理需要涉及到的信息:
3.1、现场勘探过程的音频、视频信息；
3.2、勘探、测量人员及产生的现场信息； 3.3、现场处理单位和负责当时现场处理的人员的信息；
3.4、现场处理结果的信息。
[0007](四)、其它各种实时监控过程需要涉及到的一些信息:
4.1、对运钞车、危险物品运输车等执行特种任务的车辆的日常监督、实时跟踪过程产生音频、视频和实时时间、行驶轨迹及相关的调度、管理等信息；
4.2、需要用声音、图像等手段严把产品监督检验过程各相应阶段的相关信息；
4.3、车辆上牌及4S店服务监督时需要管理的各种信息；
4.4、银行业务流程监控过程必须的有关信息；
4.5、为用于作凭证使用的音、像、图片及其对应的所有其它资料。
[0008]二、现有多媒体多信息同步重现的方法:
在对同时涉及声音、图像与文字和行踪、行为这些信息在内的多媒体多信息的集合进行存储、回放和检索、查询时，目前是采用下列众多技术进行集成的:
1、通过音频、视频采集与记录系统来对声音、图像进行同步采集与记录；
2、通过电脑数据库系统来对非声音、非图像的信息进行记录；
3、在对多媒体多信息进行朔源时，使用相应声音、图像播放器进行回放或复原的，对非声音、非图像的信息则是通过数据库查询系统进行搜索、查询与显示的，对被监控对象当时所对应的即时时刻所处位置是综合应用数据库查询系统和虚拟技术进行模拟显示和还原的。
[0009]三、现有多媒体多信息同步重现的方法的缺点:
(一)在对过程信息进行朔源时，同时须要使用多种没有在时间问题上存在有能够同时一一对应关联的系统作手段，因此不管理论上还是实践中都无法解决回放时声音、图像、图片等信息与对应的非声音、非图像、非图片信息等其它多种信息的同步问题，如:
记录驾驶人驾驶技能考试过程时需要多个信息集文件，当需要重现视频和行驶轨迹时，不同步现象尤为明显突出，只能异步地描绘出来的行驶轨迹与考试车辆实时记录下来的视频信号之间的时间差是不确定的，根本无法控制，这样很容易引起视觉误差，在有评判扣分点时，使观察者认为是一种评判错误，甚至会导致对正确性产生怀疑或纠纷；
在对需要报名学习机动车驾驶技能的人进行报名前的体检时，为了杜绝不正之风、防止弄虚作假和确保公平、公证，新标准规定了不允许在受到车管所民警实时监管下的指定设置在车管所内部的体检机构进行相应的工作，而是让不能受车管所直接干预的具有体检资质的中立医院作为第三方进行体检的，这时为了确保体检结果的真实性并实施有效的过程监督，需要结合音、像信息作佐证，这时就会出现在进行监督检查时重现的这些信息存在明显的时间异步问题:用文字表示的体检结果与体检过程的音、像没有固定的时间关系。
[0010](二)用目前的数据库技术对即时时刻发生的静态信息及动态信息进行存储时，由于接口的通用性和技术的开放性问题，使得其安全性得不到保障，会很容易地被不法份子篡改，从而破坏了信息数据的真实性。
[0011](三)用目前的数据库技术对与时间无关的静态信息及与时间存在着一一对应关系的动态信息进行存储时，分别保存于多个不同类型的文件当中，因此要查找起来就很麻烦，比较费工、费时，若要同步重现就更加困难，有时时差甚至超过了 10分钟。
【发明内容】
[0012]本发明的目的在于提供一种多媒体多信息同步重现的方法，以解决已有技术存在的上述问题；利用本发明方法能做到:
①由于多媒体多信息文件被实时地同时保存在同一个文件当中，因此可以保证在查询时和回放时能够高度地得到同步，避免了同一时刻发生的事件和现象不能在同一时刻重现回放的非实时性问题；
②把存储多媒体多信息的多个相关文件数量适当合并在一起，可减少存储空间的占用量;
③优化传统的多媒体多信息文件的存储保存方法，在减少存储空间的同时也提高了篡改信息的难度；
④提高查询多媒体多信息的便利性和速度，减少时间的浪费。
[0013]⑤提高多媒体多信息的安全性、保密性，使多媒体多信息文件在流转、复制及查阅过程不易被泄漏、篡改、删除。
[0014]为解决上述问题，本发明采用的技术方案是:一种多媒体多信息同步重现的方法，该方法是通过“多信息调制单元”把具有关联信息关系的多个相关文件或多种信息流合并在一起，然后再通过专用的能够把多信息同步重现回放出来的播放器来同步再现的方法，该方法包括以下基本步骤:
A、多信息同步记录步骤:
该步骤是通过“多信息调制单元”的“多信息混合器”把“非音频、视频信息”插入到“压缩前的音频、视频流”或“压缩后的音频、视频流或其文件”中，即在“压缩前的音频、视频流”或“压缩后的音频、视频流或其文件”中必需的“视频帧”或“音频帧”内嵌入一些携带有“非音频、视频信息”的“附加信息块”和/或是在必需的“视频帧”、“音频帧”之间创建或者插入一些携带有“非音频、视频信息”的“附加信息帧”，最终形成新的符合某种压缩标准要求的音频、视频流CMSAV或其文件CMSAVF ；
B、多信息同步重现步骤:
该步骤是通过“多信息同步重现单元”即“多媒体多信息解调单元”将承载有“非音频、非视频信息”的表面上看来仍然是符合某种压缩标准要求的音频、视频的“多媒体多信息文件CMSAVF ”经过“多信息文件解调器”后，分别获得“附加信息块”、“音频帧”、“视频帧”共三种信息集合，之后将作为“多媒体流信息”基本单元的“音频帧”、“视频帧”送给“音频、视频解码器或播放器”还原出录制前的音频、视频信息和场景；而对从“多媒体多信息文件CMSAVF”中解调得到的“附加信息块”再次进行相应的“解调”或称为“解码”处理，还原出嵌入到“多媒体多信息文件CMSAVF”中的“非音频、视频信息”。
[0015]其进一步技术方案是:所述A、多信息同步记录步骤中，当搭载“非音频、非视频信息”的“流媒体”是多路音频、视频信息时，需要它们能够满足“同步”的要求，对多路音频、视频的同步处理方法是:在A、多信息同步记录步骤之前增加一个AO 预处理步骤”；
A01、通过数据采集单元的视频预处理单元将多通道的视频信息混合成单一通道的视频信息CVS ；
其方法是:同时采集h个通道的模拟视频摄像机信号并将其数字化或k个通道的数字视频摄像机的实时动态视频信号，最后利用“视频数字混合器”把它们合并成只需I个通道就能满足国家标准要求和用户特殊要求的数字视频信号CVS供后级综合处理或简单的存储记录使用；上述h、k的取值范围是:h=0，l，2，……，24，k=0，l，2，……，24，h+k=l，2，3，……24 ；
A02、通过数据采集单元的音频预处理单元将多通道的音频信息混合成单一通道的音频信息DAS:
其方法是；同时把m个通道来自模拟音频拾音器的实时音频模拟信号通过模拟音频混合电路将其混合成单一通道的模拟音频信号HAS，然后再进行数字化处理并与η个通道数字音频拾音器的实时音频数字信号通过“数字音频混合器”混合成只需I个通道就可以满足国家标准要求和用户特殊要求的单通道数字音频信号DAS，作为“数字音频拾音器”和模拟音频拾音器的信号源，m、η的取值范围是:m = O，I，2，……，24，n=0，l，2，……，24，m+η = I，2，3，......，24。
[0016]其更进一步技术方案是:所述A、多信息同步记录步骤中，对单路音频、视频信息的处理方法是:先同步地分别对“音频信息DAS、视频信息CVS”进行数字化采集，获得没有经过压缩的原始数字音频、视频混合信息流AVS的信息流，然后根据不同的同步时差分别采取以下Al或A2两种方法之一种或是同时采用两种方法进行处理:
Al:先把同步采集到的数字化“音频、视频信息” AVS通过“多信息混合器”插入“非音频、非视频信息”，形成对AVS添加了非音频、非视频信息后形成的多信息音频、视频流MSA