移动图像数据发送方法、装置和系统的制作方法

文档序号:7764750阅读:148来源:国知局
专利名称:移动图像数据发送方法、装置和系统的制作方法
技术领域
本发明涉及移动图像数据发送方法、装置和系统,特别是涉及利用蜂窝式电话的移动图像数据发送方法、装置和系统。
但在常规技术中有一个问题,由别的装置创建的移动图像的媒体数据,不能通过H.324协议所实现的TV蜂窝式电话功能来实现。因此,有必要在蜂窝式电话是设置存储器,用来编辑软件和媒体文件,以重现媒体数据。
此外,作为与本发明领域类似的技术,在日本专利申请公报NO.平8-46723中有“inter-communication system between different TV Phones(不同电视电话之间的内部通信系统)”。这个系统提出的目的是使不同类型的TV电话之间能进行内部通信,由于协议中的差异,这是不能实现的。在内部通信系统中,为n种类型TV电话准备有n(n-1)段协议转换器,并根据DTMF(拨号音多频)指令选用转换器,以建立连接。
但在系统中,必须为n种类型TV电话提供n(n-1)段协议转换器。换句话说,对协议转换器数量的要求,与TV电话类型的数量有关。此外,系统不能灵活地适应转换器中的交换器。
根据本发明第一方面,为达到上述目的,提供一种移动图像数据发送系统,其用于使蜂窝式电话能重现以不同格式图像数据处理协议生成的图像数据,系统包括具有TV电话功能和TV蜂窝式电话,其用于接收和重现被发送的动态图像;媒体文件存储器,其用于存储以编档移动图像的任意格式形成的媒体文件;接口转换器,其用于多路复用中间格式化数据,以生成声音/图像数据的位流,并将位流发送至TV蜂窝式电话;媒体文件控制器,其用于向接口转换器发送中间格式化数据和声音/图像数据的编解码(编码/解码)信息;和中间格式化数据存储器,其用于存储来自媒体文件控制器的声音/图像数据的编解码信息,和来自媒体文件存储器的媒体文件,作为中间格式化数据。
根据本发明的第二方面,在第一方面中,移动图像数据发送系统进一步包括用于互连TV蜂窝式电话的TV蜂窝式电话网。
根据本发明的第三方面,在第二方面中,移动图像数据发送系统进一步包括交换单元,其与TV蜂窝式电话网相连,并通过无线电与TV蜂窝式电话通信。
根据本发明的第四方面,提供一种移动图像数据发送装置,其用于使蜂窝式电话能重现以不同格式图像数据处理协议生成的图像数据,装置包括媒体文件存储装置,其用于存储以编档移动图像的任意格式形成的媒体文件;接口转换装置,其用于多路复用中间格式化数据,以生成声音/图像数据的位流,并将位流发送至TV蜂窝式电话,其具有接收和重现被发送的动态图像的TV电话动能;媒体文件控制装置,其用于向接口转换器发送中间格式化数据和声音/图像数据的编解码(编码/解码)信息;和中间格式化数据存储装置,其用于存储来自媒体文件控制器的声音/图像数据的编解码信息,和来自媒体文件存储器的媒体文件,作为中间格式化数据。
根据本发明的第五方面,在第四方面中,中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;其中第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间。
根据本发明的第六方面,在第五方面中,每一第一声音帧数据、第二声音帧数据和图像帧数据,都提供有识别符。
根据本发明的第七方面,提供一种移动图像数据发送方法,其用于使具有接收和重现被发送的动态图像的TV电话功能的TV蜂窝式电话,能重现以不同格式的图像数据处理协议生成的图像数据,方法包括步骤用媒体文件存储装置,存储以编档移动图像的任意格式形成的媒体文件;用接口转换装置,多路复用中间格式化数据,以生成声音/图像数据的位流并发送位流;用媒体文件控制装置,向接口转换装置发送中间格式化数据和声音/图像数据的编解码(编码/解码)信息;和用中间格式化数据存储装置,存储来自媒体文件控制装置的声音/图像数据的编解码信息,和来自媒体文件存储装置的媒体文件,作为中间格式化数据。
根据本发明的第八方面,在第七方面中,形成用于互连TV蜂窝式电话的TV蜂窝式电话网。
根据本发明的第九方面,在第八方面中,中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;其中第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间。
根据本发明的第十方面,在第九方面中,每一第一声音帧数据、第二声音帧数据和图像帧数据,都提供有识别符。
图7是接口转换器中的过程3示范操作的早期部分流程图;图8是接口转换器中的过程3示范操作的后期部分流程图;图9是TV蜂窝式电话中的过程4示范操作流程图;

图10是存储器中的过程5示范操作流程图;图11是媒体文件控制器中的过程6示范操作流程图;图12是接口转换器中的过程7示范操作的早期部分流程图;图13是接口转换器中的过程7示范操作的后期部分流程图。
图1是根据本发明实施例的移动图像数据发送系统的配置图。下面将描述系统的组成部分。参考图1,移动图像数据发送系统包括TV蜂窝式电话25和26,交换单元27和28,接口转换器29,媒体文件控制器30,TV蜂窝式电话网31,媒体文件存储器32,和存储器33。
TV蜂窝式电话25和26是具有再现移动图像的TV功能的蜂窝式电话。各TV蜂窝式电话25和26被提供以控制H.223多协议和H.245通信控制协议的协议控制功能。
H.223多协议是用于低位速率的多媒体通信和协议。首先,解释根据ITU-T建议书H.223的分组多路复用系统。这里是从“CommunicationProtocol Dictionary(通信协议字典)”(Ascii公司,PP.517)中的摘录“分组多路复用系统H.223是为GSTN(普通交换电话网)TV电话系统开发的,由多路复用的多路复用(MUK)层和适应媒体信息流的自适应(AL)层组成。AL层包括关于控制或数据信息的AL1,关于声音信息的AL2和关于图像信息的AL3,在误差检测、顺序号和转发方面各有不同于别者的功能。多路复用系统H.223的特征之一是低位速率通信中的分组交换延迟问题,是通过在一个MUX分组中插入多段媒体信息解决的。”H.245通信控制协议是由分组多路复用的ITU-T规定的控制消息。下面也是从“Communication Protocol Dictionary(Ascii公司,PP.518-519)中的摘录
“H.245通信控制协议是为声-像通信开发的,并共用于许多系统,协议的特征在于在它的确认程序中,发送机每次向接收机发送命令或指令后,在发送下一消息之前,发送机会从接收机获得确认信号ACK或NACK(否认信号)。虽然确认程序使过程复杂,但各终端的状态转换确有把握,因而能使通信可靠。”除此以外,再简要解释别的涉及本发明的术语词汇。
下面是从“Communication Protocol Dictionary”(Ascii公司,PP.521)中有关GSTN系统H.324的摘录“普通模拟电话网被简称为GSTN(变通交换电话网)。从世界上任何地方至任意点的可达性,是GSTN独有的特征。虽然所建议的信道是模拟电话的频带范围,但通过提供带调制解调器的终端,GSTN能用作上达28.8kbps的数字数据交换网。使用GSTN的声-像通信系统由ITU-T建议书H.324规定。”下面是从“Communication Protocol Dictionary”(Ascii公司,PP.531)中有关MPEG的摘录“MPEG(移动图像专家组)最初是SC29中移动图像/声音压缩用的标准化组的浑外,后来广泛用作由组规定的指示国际标准ISO/IEC11172和ISO/IEC 13818的术语。前者称为MPEG-1,后者称为MPEG-2,两者都是在多媒体领域中众所周知的标准。”每个交换单元具有从TV蜂窝式电话25或26接收媒体文件重现指令和移动图像存储指令,以及将媒体文件重现指令和移动图像存储指令发送至媒体文件控制器30的功能,另外,交换单元27和28提供一种功能,用于发送/接收在TV蜂窝式电话25或26与接口转换器29之间交换的呼叫信息。
接口转换器29具有功能控制H.223多路复用协议和H.245通信控制协议;接收从TV蜂窝式电话25或26来的声音/图像数据位流,以分析和分离位流;多路复用和生成声音/图像数据的位流,以向TV蜂窝式电话25或26发送位流;向媒体文件控制器30转接中间格式化数据;接收从媒体文件控制器30来的中间格式化数据,以分析和分离中间格式化数据;以及生成向媒体文件控制器30发送的媒体文件信息。
媒体文件控制器30具有功能接收从TV蜂窝式电话25或26来的媒体文件重现指令和移动图像存储指令;向接口转换器29发送存储开始指令;生成声音/图像数据的中间格式化数据和编解码(编码/解码)信息,将它们发送至接口转换器29;接收从接口转换器29来的声音/图像数据的中间格式化数据和编解码信息;向存储器33发送中间格式化数据和声音/图像数据的编解码信息;以及接收从媒体文件存储器32来的媒体文件。
TV蜂窝式电话网31是一种互连TV蜂窝式电话25和26的网络。
媒体文件存储器32具有功能存储媒体文件1至3;接收从媒体文件控制器30来的媒体文件接收指令;和向媒体文件控制器30发送被指令接收的媒体文件。
存储器33具有功能接收从媒体文件控制器30来的声音/图像数据的中间格式化数据和编解码信息,以及存储开始指令;和接收从媒体文件控制器30来的文件,以保存文件。
在下面,将参考图2详细地说明媒体文件控制器30。图2示出媒体文件控制器30示范结构的方块图。媒体文件控制器30包括文件输入装置4,用于输入媒体文件1至3;媒体文件分析装置5;媒体文件分离装置6;中间格式构成装置10;媒体文件信息处理装置11;和输出装置12。
附带地,媒体文件1至3是一些以编档移动图像的任意格式形成的文件。
文件输入装置4是一个处理块,具有识别每个输入媒体文件类型,并向与媒体文件类型相应的媒体文件分析装置5发送媒体文件的功能。
媒体文件分析装置5是一个处理块,具有功能分析从文件输入装置4接收到的媒体文件报头信息;向媒体文件分离装置6发送包含在所分析的媒体文件中的媒体数据;提取组成媒体文件的声音编解码信息和图像编解码信息;以及向媒体文件信息处理装置11发送声音编解码信息和图像编解码信息。
媒体文件分离装置6是一处理块,提供有重现定时分析装置7,声音帧分析装置8和图像帧分析装置9。
重现定时分析装置7具有功能分析接收到的媒体文件;提取涉及每个重现图像同一时间轴上的声音帧的图像帧;控制和确定声音帧和图像帧的输出顺序;提取每一帧;以及分别向声音帧分析装置8和图像帧分析装置9发送所提取的声音帧和图像帧。
声音帧分析装置8具有功能分析接收到的声音帧;根据H.324将帧调整到与声音/图像位流相应的格式;把指示声音的标识符加至每一声音帧;维持由重现定时分析装置7确定的中间格式的顺序;以及向中间格式构成装置10发送声音帧。
图像帧分析装置9具有功能分析接收到的图像帧,根据H.324将帧调整到与声音/图像位流相应的格式;把指示图像的标识符加至每一图像帧;维持由重现定时分析装置7确定的中间格式的顺序;以及向中间格式构成装置10发送图像帧。
中间格式构成装置10是一个处理块,具有功能接收已调整的声音帧和图像帧,每一声音帧和图像帧具有分别来自声音帧分析装置8和图像帧分析装置9的标识符;以及根据由重现定时分析装置7确定的帧的顺序,生成中间格式化数据。
媒体文件信息处理装置11是一处理块,具有这样的功能,即把从媒体文件分析装置5接收到的被提取的声音编解码信息和图像编解码信息,转换为与发射机和接收机之间兼容的格式;以及向输出装置12发送生成的接口格式。
输出装置12是一处理块,具有向接收机发送数据的功能。
下面,将详细地描述接口转换器29。图3示出接口转换器29的示范结构方块图。参考图3,接口转换器29包括输入装置13,媒体文件信息处理装置14,H.245协议处理装置15,H.245协商信息缓冲器16,H.223协议分离装置17,H.223协议多路复用装置18,中间格式分析/分离装置19,中间格式多路复用/生成装置20,输出定时装置21和输出装置24。
输入装置13是处理块,具有分析所接收数据的功能,以及把数据定位到媒体文件信息处理装置14,H.223协议分离装置17和中间格式分析/分离装置19的功能。
媒体文件信息处理装置14是处理块,具有当生成中间格式化数据时,分析由媒体文件中的声音/图像编解码信息生成的媒体文件信息的功能,和把媒体文件信息存储到H.245协商信息缓冲器16的功能。
H.245协议处理装置15是处理块,具有根据H.245通信控制程序,分析/控制从H.223协议分离装置17接收到的H.245数据的功能,和对H.223协议多路复用装置18做出应答的功能。
H.245协商信息缓冲器16是存储器,用于存储根据H.245通信控制程序,由H.245协议处理装置15处理的协商所取得的信息,和媒体文件信息。
H.223协议分离装置17是处理块,具有根据H.223多路复用协议,分析和分离从输入装置13接收的数据的功能,以及将分离的数据定位到H.245协议处理装置15和输出定时装置21的功能。
H.223协议多路复用装置18是处理块,具有根据H.223多路复用协议,多路复用从H.245协议处理装置15和输出定时装置21接收的数据的功能,以及把多路复用的数据发送至输出装置24的功能。
中间格式分析/分离装置19是处理块,具有功能分析由媒体文件生成的中间格式化数据,以执行利用标识符的分离控制;控制被分离的声音帧的图像帧的顺序;以及向输出定时装置21发送这些帧。
中间格式多路复用/生成装置20是处理块,具有功能接收已从声音/图像位流分别提取的,并提供有标识符的声音帧的图像帧;以接收顺序按中间格式对帧进行排列,以产生中间格式化数据。
输出定时装置21备有声音帧缓冲器22和图像帧缓冲器23。输出定时装置21是处理块,具有功能当接收帧时,控制从中间格式化数据提取的声音帧和图像帧的输出顺序;分别将声音帧和图像帧存储到声音帧缓冲器22和图像帧缓冲器23;以及读出声音帧缓冲器22和23的帧,以向H.223协议多路复用装置18发送帧。除此之外,输出定时装置21还执行处理当接收帧时,控制从声音/图像位流提取和声音帧和图像帧的输出顺序;分别将声音帧和图像帧存储到声音帧缓冲器22和图像帧缓冲器23;以及读出声音帧缓冲器22和23的帧,以向中间格式多路复用/生成装置20发送这些帧。
声音帧缓冲器22是存储器,用于暂存形成声音/图像位流或中间格式化数据的声音帧。
图像帧缓冲器23是存储器,用于暂存形成声音/图像位流或中间格式数据的图像帧。
输出装置24是处理块,具有向接收机发送从媒体文件信息处理装置14,H.223协议多路复用装置18,和中间格式多路复用/生成装置20接收到的数据的功能。
有时当中间格式化数据在媒体文件控制器30被创建时,首先将任意格式的媒体文件1,2或3输入至文件输入装置4。然后,文件输入装置4向与输入媒体文件类型相应的媒体文件分析装置5发送媒体文件。接收媒体文件后,媒体文件分析装置5分析它的报头信息,并向媒体文件分离装置6发送包含在所分析的媒体文件中的媒体数据。另外,媒体文件分析装置5提取构成媒体文件的声音编解码信息和图像编解码信息,以创建媒体文件信息,并将媒体文件信息发送至媒体文件信息处理装置11。其后。媒体文件信息处理装置11将媒体文件信息转换为与中间格式化数据接收机接口的格式,并通过输出装置12向接收机发送格式化的媒体文件数据。
此外,重现定时分析装置7分析收到的媒体数据,并且根据它们在同一时间轴上的顺序,排列声音帧和图像帧。由此,媒体文件分离装置6确定在中间格式化数据中排列声音帧和图像帧的顺序。声音帧和图像帧分别由声音帧分析装置8和图像帧分析装置9进行分析。
声音帧分析装置8和图像帧分析装置9根据H.324,将帧调整到与声音/图像位流相应的格式,并将用于指示声音和图像的标识符加至每一帧。此后,声音帧分析装置8和图像帧分析装置9向中间格式构成装置10发送这些帧。
在从声音帧分析装置8和图像帧分析装置9收到被调整的各自具有标识符的声音帧和图像帧之后,中间格式构成装置10按照由重现定时分析装置7确定的帧顺序,将这些帧重装入中间格式化数据中。因此,中间格式化数据被生成,并通过输出装置12发送至接收机。
在利用中间格式化数据为H.324终端(蜂窝式电话)创建声音/图像位流的情况下,媒体文件信息处理装置14通过输入装置13接收包括声音/图像编解码信息的媒体文件信息。媒体文件信息处理装置14根据由通信开始时协商所获得的H.245通信控制协议,将媒体文件信息连同协商信息一起存储到H.245协商信息缓冲器16。
另一方面,中间格式分析/分离装置19通过输入装置13接收中间格式化数据。中间格式分析/分离装置19通过它们的标识符识别中间格式化数据中的各声音帧和图像帧,以便按排列顺序把它们分离,并将这些帧发送至输出定时装置21。
在接收帧时,输出定时装置21控制从中间格式化数据提取的输出声音帧和图像帧的顺序,以不致破坏声音数据和图像数据的同步。然后,输出定时装置21分别将声音帧和图像帧存入声音帧缓冲器22和图像帧缓冲器23。
根据从存储在H.245协商信息缓冲器16协商信息计算的声音输出时序,传输线的转输速度和包含在媒体文件信息的声音编解码信息,将声音帧从声音帧缓冲器22逐个地读出,并发送至H.223协议多路复用装置18。
H.223协议多路复用装置18根据H.223多路复用协议多路复用从输出定时装置21接收到的声音帧,并生成声音位流。
另一方面,所有的安排在一对声音帧之间的图像帧都在顺序控制下从图像帧缓冲器23中被读出,以不致破坏声音数据和图像数据的同步,并在发送一对声音帧的第一帧以后直至另一帧的定时,这一周期期间内,被发送至H.223协议多路复用装置18。
H.223协议多路复用装置18根据H.223多路复用协议多路复用图像帧,并生成图像帧位流。
在通过从利用H.224终端来的声音/图像位流创建中间格式化数据的情况下,媒体文件信息处理装置14根据H.245协商信息缓冲器16中的协商信息生成媒体文件信息,该协商信息是经过由H.245协议处理装置15处理的协商而获得的。媒体文件信息通过输出装置24被发送至接收机。
除此之外,H.223协议分离装置17通过输入装置13接收声音/图像位流。顺便说说,H.223协议分离装置17根据H.223多路复用协议按照接收顺序,执行对接收数据的分离处理,并按照它们被提取的顺序,将声音帧和图像帧发送至输出定时装置21。
输出定时装置21在接收帧时执行顺序控制,以致不破坏声音数据和图像数据的同步,并将指示声音或图像的标识符加至各自的声音帧和图像帧。然后,输出定时装置21将这些帧发送至中间格式多路复用/生成装置20。
在收到声音帧和图像帧之后,中间格式多路复用/生成装置20根据中间格式,按接收顺序将这些帧进行重装,以产生中间格式化数据。中间格式化数据被发送至输出装置24。
下面,将描述本发明的操作方式。
当TV蜂窝式电话25通过交换单元27和TV蜂窝式电话网31开始与接口转换器29通信时,在TV蜂窝式电话25和接口转换器29之间,根据H.245通信控制协议开始在通信方面的协商。
在接口转换器29中,H.223协议分离装置17通过输入装置13接收有关协商的信息,并根据H.223多路复用协议分离多路复用的数据,以向H.245协议处理装置15发送被分离的数据。
H.245协议处理装置15控制协商信息的传输接收,以便存储或发送信息。有关所建立的通信的协商信息,被存储在H.245协商信息缓冲器16中,或发送至H.223协议多路复用装置18。在收到协商信息之后,H.223协议多路复用装置18多路复用它,并通过输出装置24向外部发送多路复用的数据。
另外,TV蜂窝式电话25通过交换单元27,接口转换器29和TV蜂窝式电话网31,向媒体文件控制器30发送媒体文件重现指令,用于指定将要重现的媒体文件。
在收到媒体文件重现指令之后,媒体文件控制器30从媒体文件存储器32读取指定和媒体文件。顺便说说,媒体文件存储器32存储以任意格式的媒体文件1,2和3,这些媒体文件保持移动图像作为媒体文件图像。
在媒体文件控制器30中,当从媒体文件存储器32读取的媒体文件,是由文件输入装置4输入时,文件输入装置4向与媒体文件类型相应和媒体文件分析装置5,发送媒体文件。接着,媒体文件分析装置5分析媒体文件的报头信息等等,以便向媒体文件分离装置6发送已分析的媒体数据。媒体文件分析装置5还获得媒体文件中的关于声音或图像数据的编解码信息,以生成媒体文件信息。媒体文件信息被发送至媒体文件信息处理装置11,然后,通过输出装置12发送至接口转换器29。
在接口转换器29中,媒体文件信息处理装置14通过输入装置13,接收包括声音/图像编解码信息的媒体文件信息。媒体文件信息根据通信开始时得到的H.245通信控制协议,连同协商信息一起,被存储在H.245协商信息缓冲器16中。
在生成中间格式化数据的情况下,媒体文件控制器30的媒体文件分离装置6,接收媒体数据。接着,重现定时分析装置7分析媒体数据,并根据它们在同一时间轴上的顺序,排列声音帧和图像帧。因此,媒体文件分离装置6确定声音帧和图像帧放置在中间格式化数据的顺序。声音帧和图像帧,分别由声音帧分析装置8和图像帧分析装置9进行分析,并根据H.324进行调整,以便与声音/图像位流相对应。此后,声音帧分析装置8和图像帧分析装置9将指示声音或图像的标识符,加至各自的帧,并将这些帧发送至中间格式构成装置10。
在接收从声音帧分析装置8和图像帧分析装置9来的、各自具有标识符的已调整的声音帧和图像帧之后,中间格式构成装置10,根据由重现定时分析装置7确定的帧的顺序,将这些帧重装入中间格式化数据。所生成的中间格式化数据通过输出装置12,被发送至接口转换器29。
在通过利用从媒体文件控制器30收到的中间格式化数据,为H.324终端生成声音/图像位流的情况下,接口转换器29的媒体文件控制器30经过输入装置13,接收中间格式化数据,接着,中间格式分析/分离装置19借助于它们的标识符,识别包含在中间格式化数据的各自的声音帧和图像帧,并按照排列的顺序分离各自的帧。被分离的声音帧和图像帧被发送至输出定时装置21。
在收到分离的帧之后,输出定时装置21执行对声音和图像帧的顺序控制,以使声音数据和图像数据的同步在接收机中不被破坏。然后,声音帧和图像帧被存储到声音帧缓冲器22和图像帧缓冲器23。
声音帧缓冲器22根据由存储在H.245协商信息缓冲器16的协商信息计算的声音输出时序,传输线的传输速度,和包含在媒体文件信息中的声音编解码信息,将声音帧逐个地读出来,并发送至H.223协议多路复用装置18,以便生成根据H.223多路复用协议多路复用的声音位流。
至个存储在图像帧缓冲器23中的图像帧,所有放置在一对声音帧之间的图像,在顺序控制下被读出,不破坏声音数据和图像数据的同步。接着,图像帧在一对声音帧的第一帧以后直至发送另一帧的定时,这一周期期间内,被发送至H.223协议多路复用装置18,以便生成根据H.223多路复用协议多路复用的图像位流。
此后,H.223协议多路复用装置18向输出装置24发送声音/图像位流,使位流通过交换单元27和TV蜂窝式电话网31,被发送至TV蜂窝式电话25。
为了存储移动图像,TV蜂窝式电话25首先通过交换单元27、接口转换器29和TV蜂窝式电话网31,向媒体文件控制器30发送移动图像存储指令。接着,媒体文件控制器30同时向接口转换器29和存储器33发出存储开始指令。在收到存储开始指令之后,存储器33保持有关TV蜂窝式电话25用户的专用信息,并准备存储移动图像。
当接口转换器29从媒体文件控制器30接收存储开始指令时,根据H.245通信控制协议并通过交换单元27和TV蜂窝式电话网31,在TV蜂窝式电话25与接口转换器29之间开始关于通信的协商。
在协商结束之后,利用从H.245协议处理装置15收到的协商信息,生成媒体文件信息,并存储地H.245协商信息缓冲器16中,生成的媒体文件信息,通过输出装置24被发送至媒体文件控制器30。
当接口转换器29的H.223协议分离装置17,经过输入装置13接收声音/图像位流时,H.223协议分离装置17根据H.223多路复用协议,按照接收顺序,对收到的数据执行分离处理,并按照接收它们的分离顺序,将这些声音帧和图像帧发送至输出定时装置21。
输出定时装置21执行分离的声音帧和图像帧的顺序控制,以使声音数据和图像数据的同步不致受到破坏,并且将指示声音或图像的标识符加至每一帧。然后,输出定时装置21将这些帧发送至中间格式多路复用/生成装置20。
收到来自输出定时装置21的声音帧和图像帧之后,中间格式多路复用/生成装置20,按照中间格式依接收顺序对帧进行重装,以便生成中间格式化数据。中间格式化数据被发送至输出装置24。
输出装置24将中间格式化数据发送至媒体文件控制器30。
由接口转换器29生成的中间格式化数据和声音/图像编解码信息(它们已被媒体文件控制器30收到),被发送至存储器33。存储器33存储与用户信息有关的中间格式化数据和媒体文件信息。
下面将参考图4至13,描述根据本发明实施例的移动图像数据发送的总体操作。图4是形成中间格式化数据的程序的简要说明图。图5至13是说明作为处理过程1至7的各单元的个别操作流程图。
在图4中,时间轴T以上的声音帧(1)至(3)和图像帧(1)至(4),以常规发送顺序安排;而时间轴T以下的声音帧(1)至(3)和图像帧(1)至(4),以本发明的中间格式安排。
参考图4,在常规发送顺序中,图像帧(1)至(4)与声音帧(1)至(3)并行重装。另一方面,在本发明的中间格式中,各自具有标识符的图像帧(1)至(3),被放在声音帧(1)至(2)与它们的标识符之间。类似地,图像帧(4)和它的标识符。被放在声音帧(2)至(3)与它们的标识符之间。中间格式化数据配有处于最前面的报头,作为整体数据的ID。下面首先描述向TV蜂窝式电话25或26发送所生成的中间格式化数据的程序。
当TV蜂窝式电话25开始通过交换单元27和TV蜂窝式电话网31,与接口转换器29通信时,在TV蜂窝式电话25与接口转换器29之间,开始根据H.245通信控制协议就通信进行协商(步骤A1/图5,步骤A23/图7)。在接口转换器29中,H.223协议分离装置17通过输入装置13接收关于协商的信息(步骤A24/图7),并根据H.223多路复用协议,分离多路复用数据,将分离的数据发送至H.245协议处理装置15(步骤A25/图7)。
H.245协议处理装置15控制协商信息的传送-接收,从而存储或发送信息(步骤A26/图7)。有关建立通信的协商信息,被存储在H.245协商信息缓冲器16中(步骤A27/图7),或者被发送至H.223协议多路复用装置18(步骤A28/图7)。在收到协商信息之后,H.223协议多路复用装置18对它进行多路复用(步骤A29/图7),并通过输出装置24向TV蜂窝式电话25发送多路复用数据(步骤A30/图7)。
协商完成(步骤A3/图5,步骤A31/图7)之后,TV蜂窝式电话25通过交换单元27、接口转换器29和TV蜂窝式电话网31,向媒体文件控制器30发送指定待重现媒体文件的媒体文件重现指令(步骤A4和A5/图5)。
在收到媒体文件重现指令(步骤A8/图6)之后,媒体文件控制器30从媒体文件存储器32提取指定的媒体文件(步骤A9/图6)。
在媒体文件控制器30中,当从媒体文件存储器32提取的媒体文件,输入文件输入装置4(步骤A10/图6)时,文件输入装置4将媒体文件发送至与媒体文件类型相应的媒体文件分析装置5(步骤A11和A12/图6)。此后,媒体文件分析装置5分析媒体文件的报头信息等,将分析的媒体数据发送至媒体文件分离装置6(步骤A13/图6)。
媒体文件分析装置5也获得媒体文件中的声音或图像数据编解码信息,生成媒体文件信息。媒体文件信息被发送至媒体文件信息处理装置11,然后通过输出装置12发送至接口转换器29(步骤A14/图6)。
在接口转换器29中,媒体文件信息处理装置14通过输入装置13,接收包含声音/图像编解码信息的媒体文件信息(步骤A32/图7)。媒体文件信息与通信开始时获得的基于H.245通信控制协议的协商信息一起,被存储在H.245协商信息缓冲器16中(步骤A33/图7)。
当中间格式化数据生成时,媒体文件控制器30的媒体文件分离装置6接收媒体数据。此后,重现定时分析装置7分析媒体数据,并按照声音帧和图像帧在同一时间轴上的顺序,安排这些帧。因此,媒体文件分离装置6决定声音帧和图像帧在中间格式中的顺序(步骤A15/图6)。
声音帧和图像帧分别由声音帧分析装置8和图像帧分析装置9分析,并被调整得与按照H.324的声音/图像位流相应。在这以后,声音帧分析装置8和图像帧分析装置9将指示声音或图像的标识符,加至每一帧,并将这些帧发送至中间格式构成装置10(步骤A16/图6)。
在从声音帧分析装置8和图像帧分析装置9收到被调整的各自具有标识符的声音帧和图像帧之后,中间格式构成装置10根据由重现定时分析装置7确定的帧顺序,将这些帧重装入中间格式化数据中(步骤A18至A21/图6)。所生成的中间格式化数据通过输出装置12,被发送至接口转换器29(步骤A22/图6),过程2就此完成。
当接口转换器29利用从媒体文件控制器30收到的中间格式化数据,生成至H.324终端的声音/图像位流时,中间格式分析/分离装置19经过输入装置13接收中间格式化数据(步骤A34/图7)。然后,根据存储在H.245协商信息缓冲器16中的协商信息,传输线的传输速率和包含在媒体文件信息中的声音编解码信息,计算声音输出定时(步骤A35/图7)。
收到中间格式化数据之后,中间格式分析/分离装置19对包含在中间格式化数据中的每一声音/图像帧进行识别,并按排列的顺序分离这些帧,将它们发送至输出定时装置21(步骤A36/图8)。输出定时装置21对从中间格式化数据分离的声音帧和图像帧进行顺序控制,以不致破坏声音数据和图像数据的同步,并由此将这些帧存储在声音帧缓冲器22或图像帧缓冲器23中(步骤A38和A39/图8)。
存储在声音帧缓冲器22中的声音帧,按照所计算的声音输出定时依次被读出(步骤A40和A41/图8),并被发送至H.223协议多路复用装置18,以生成根据H.223多路复用协议多路复用的声音位流(步骤A42/图8)。
关于存储在图像帧缓冲器23中的图像帧,所有安排在一对声音帧之间的图像帧,都在顺序控制之下被读出,以不致破坏声音数据和图像数据的同步(步骤A44和A45/图8)。然后,图像帧在发送一对声音帧的第一帧以后直至发送另一帧的定时,这一周期期间内,被发送至H.223协议多路复用装置18,以生成根据H.223多路复用协议多路复用的图像位流(步骤A47/图8)。
在这以后,H.223协议多路复用装置18向输出装置24发送声音/图像位流,以使位流通过交换单元27和TV蜂窝式电话网31,被发送至TV蜂窝式电话25(步骤A46和A48/图8),过程3就此完成。
TV蜂窝式电话25接收声音/图像位流,并显示移动图像(步骤A6和A7/图5),因此过程1完成。
当存储移动图像时,TV蜂窝式电话25通过交换单元27、接口转换器29和TV蜂窝式电话网31,向媒体文件控制器30发送移动图像存储指令(步骤A49/图9)。在收到移动图像存储指令之后,媒体文件控制器30同时向接口转换器29和存储器33发布存储开始指令(步骤A59至A61/图11)。
在收到存储开始指令(步骤A54/图10)之后,存储器33保持关于TV蜂窝式电话25用户的专用信息,并准备存储移动图像(步骤A55和A56/图10)。
另一方面,当接口转换器29从媒体文件控制器30收到存储开始指令时(步骤A66/图12),通过交换单元27和TV蜂窝式电话网31,开始在TV蜂窝式电话25与接口转换器29之间根据H.245通信控制协议,就通信进行协商(步骤A50/图9,步骤A67/图12)。
在接口转换器29中,H.223协议分离装置17通过输入装置13接收关于协商的信息(步骤A51/图9,步骤A68/图12),并根据H.223多路复用协议分离多路复用数据(步骤A69/图12),将分离的数据发送至H.245协议处理装置15。
H.245协议处理装置15控制协商信息的传送-接收,以便存储或发送信息(步骤A70/图12)。有关建立通信的协商信息被存储在H.245协商信息缓冲器16中(步骤A71/图12),或者被发送至H.223协议多路复用装置18(步骤A72/图12)。
在收到协商信息之后,H.223协议多路复用装置18对它进行多路复用(步骤A73/图12),并通过输出装置24向TV蜂窝式电话25发送多路复用数据(步骤A74/图12)。
在协商结束(步骤A52/图9,步骤A75/图12)之后,利用H.245协议处理装置15所收到的并存储在H.245协商信息缓冲器16中的协商信息,生成媒体文件信息(步骤A76/图12)。所生成的媒体文件通过输出装置24,被发送至媒体文件控制器30(步骤A77/图12)。
当接口转换器29的H.223协议分离装置17经过输入装置13收到声音/图像位流(步骤A53/图9,步骤A78/图13)时,H.223协议分离装置17对收到的数据,根据H.223多路复用协议按接收顺序进行分离处理(步骤A79/图13),并根据已分离的顺序,向输出定时装置21发送声音帧和图像帧。
输出定时装置21对分离的声音帧和图像帧进行顺序控制,以不致破坏声音数据的图像数据的同步,并在每一帧加上指示声音或图像的标识符(步骤A80/图13)。然后,输出定时装置21将这些帧发送至中间格式多路复用/生成装置20(步骤A81/图13)。
从输出定时装置21收到声音帧和图像帧之后,中间格式多路复用/生成装置20按照中间格式,对这些帧按照接收顺序进行重装,以生成中间格式化数据(步骤A82和A83/图13)。中间格式化数据被发送至输出装置24。
输出装置24将中间格式化数据发送至媒体文件控制器30(步骤A84和A85/图13),因此过程7完成。
收到由接口转换器29生成在中间格式化数据和媒体文件信息(步骤A62,A63和A64/图11)以后,媒体文件控制器30将它们发送至存储器33(步骤A65/图11),过程6完成。存储器33存储中间格式化数据和与用户信息有关的媒体文件信息(步骤A57和A58/图10),过程5完成。
如上所述,按照本发明的移动图像数据发送方法、装置和系统,能通过将数据转换为中间格式化数据,从以各种格式为MPEG和ASF形成的媒体文件,生成向H.324终端(TV蜂窝式电话)发送的声音/图像位流。顺便说说,中间格式是兼容的格式,可使中间格式化数据的图像数据的各种格式统一起来。中间格式化数据能容易地转换为可在TV蜂窝式电话上重现的多路复用协议格式。
也就是说,在本发明的移动图像数据发送系统中,以编档移动图像的任意格式形成的媒体文件,被转换为中间格式化数据,并与声音/图像编解码信息一起存储。中间格式化数据被多路复用,以便生成基于声音/图像编解码信息的声音/图像位流。声音/图像位流被发送至TV蜂窝式电话,并被显示在电话上。这样,常规蜂窝式电话能重现以不同格式的数据处理协议形成的图像数据。
另外,按照本发明,能通过利用中间格式,很容易支持以各种格式创建的移动图像文件。中间格式以接口兼容性成为系统的核心。因此,每部TV蜂窝式电话不需要有各种文件兼容的软件。
再有,媒体文件信息从H.245协商而得的信息生成,与接收终端兼容的数据,与参照媒体文件信息的传输同时形成,因此,能允许存储在存储器中的数据或存储在媒体文件存储器中的媒体文件的位流,以兼容的格式向每个接收终端传输。
虽然已参考具体的说明性实施例描述了本发明,但不受限于实施例而仅由所附权利要求限定。很明显,在不偏离本发明的范围和精神的情况下,技术人员能变更或修改实施例。
权利要求
1.一种移动图像数据发送系统,其用于使蜂窝式电话能重现以不同格式图像数据处理协议生成的图像数据,其特征在于系统包括具有TV电话功能和TV蜂窝式电话,其用于接收和重现被发送的动态图像;媒体文件存储器,其用于存储以编档移动图像的任意格式形成的媒体文件;接口转换器,其用于多路复用中间格式化数据,以生成声音/图像数据的位流,并将位流发送至TV蜂窝式电话;媒体文件控制器,其用于向接口转换器发送中间格式化数据和声音/图像数据的编解码信息;和存储器,其用于存储来自媒体文件控制器的声音/图像数据的编解码信息,和来自媒体文件存储器的媒体文件,作为中间格式化数据。
2.如权利要求1所述的移动图像数据发送系统,其特征在于系统进一步包括用于互连TV蜂窝式电话的TV蜂窝式电话网。
3.如权利要求1所述的移动图像数据发送系统,其特征在于系统进一步包括用于互连TV蜂窝式电话的TV蜂窝式电话网;和交换单元,其与TV蜂窝式电话网相连,并通过无线电与TV蜂窝式电话通信。
4.一种移动图像数据发送装置,其用于使蜂窝式电话能重现以不同格式图像数据处理协议生成的图像数据,其特征在于装置包括媒体文件存储装置,其用于存储以编档移动图像的任意格式形成的媒体文件;接口转换装置,其用于多路复用中间格式化数据,以生成声音/图像数据的位流,并将位流发送至TV蜂窝式电话,其具有接收和重现被发送的动态图像的TV电话动能;媒体文件控制装置,其用于向接口转换器发送中间格式化数据和声音/图像数据的编解码信息;和中间格式化数据存储装置,其用于存储来自媒体文件控制器的声音/图像数据的编解码信息,和来自媒体文件存储器的媒体文件,作为中间格式化数据。
5.如权利要求4所述的移动图像数据发送装置,其特征在于中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;和第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间。
6.如权利要求4所述的移动图像数据发送装置,其特征在于中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间;和每一第一声音帧数据、第二声音帧数据和图像帧数据,都提供有识别符。
7.一种移动图像数据发送方法,其用于使具有接收和重现被发送的动态图像的TV电话功能的TV蜂窝式电话,能重现以不同格式的图像数据处理协议生成的图像数据,其特征在于方法包括步骤将以编档移动图像的任意格式形成的媒体文件,存储在媒体文件存储装置中;通过接口转换装置,多路复用中间格式化数据,以生成声音/图像数据的位流并发送位流;用媒体文件控制装置,向接口转换装置发送中间格式化数据和声音/图像数据的编解码(编码/解码)信息;和将来自媒体文件控制装置的声音/图像数据的编解码信息,和来自媒体文件存储装置的媒体文件,作为中间格式化数据,存储在存储装置中。
8.如权利要求7所述的移动图像数据发送方法,其特征在于形成用于互连TV蜂窝式电话的TV蜂窝式电话网。
9.如权利要求7所述的移动图像数据发送方法,其特征在于形成用于互连TV蜂窝式电话的TV蜂窝式电话网;中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;和第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间。
10.如权利要求7所述的移动图像数据发送方法,其特征在于形成用于互连TV蜂窝式电话的TV蜂窝式电话网;中间格式化数据包括第一声音帧数据,第二声音帧数据和图像帧数据;和第一声音帧数据在时间轴上领先第二声音帧数据,图像帧数据定位于第一声音帧数据和第二声音帧数据之间;和每一第一声音帧数据、第二声音帧数据和图像帧数据,都提供有识别符。
全文摘要
一种发送移动图像数据的方法、装置和系统,其中各种现有媒体文件的移动图像数据,被有效地以可重现格式传送到现有的TV蜂窝式电话。媒体文件存储器存储以编档移动图像的任意格式所创建的媒体文件。存储器存储作为中间格式化数据的声音/图像数据的编解码信息和媒体文件。媒体文件控制器多路复用中间格式化数据,以生成基于声音/图像数据的编解码信息的声音/图像数据位流。接口转换器将声音/图像数据的位流发送至TV蜂窝式电话。
文档编号H04M1/725GK1435988SQ0310358
公开日2003年8月13日 申请日期2003年1月29日 优先权日2002年1月31日
发明者横山浩嗣 申请人:日本电气株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1