Hadoop中基于Zigzag的MapReduce数据处理方法与流程

文档序号:12472167阅读:来源:国知局

技术特征:

1.一种Hadoop中基于Zigzag的MapReduce数据处理方法,其特征在于,包括:

将视频图像的离散余弦变换编码特点及相关的Zigzag分布特征信息引入MapReduce模型的拷贝过程中;

将行程编码技术引入所述MapReduce模型的合并过程中;

对合并后的数据进行Reduce处理。

2.如权利要求1所述的Hadoop中基于Zigzag的MapReduce数据处理方法,其特征在于,将视频图像的离散余弦变换编码特点及相关的Zigzag分布特征信息引入MapReduce模型的拷贝过程中具体地包括:

将每个视频图像的16×16块按Zigzag顺序划分为16个4×4块;

将每个4×4块采用Zigzag映射方式形成B(i,0)、B(i,1)、......、B(i,15),其中,B表示块,i表示所述块中第i个4×4块;

将16个4×4块相对应的数据采用Map过程映射到16个对应的Reduce端以形成块B(i,j),每一所述块B(i,j)中具有16个数据。

3.如权利要求2所述的Hadoop中基于Zigzag的MapReduce数据处理方法,其特征在于,将行程编码技术引入所述MapReduce模型的合并过程中具体包括:

采用行程编码技术将每个所述块B(i,j)中的16个数据合并为新的第j个Block。

4.如权利要求1所述的Hadoop中基于Zigzag的MapReduce数据处理方法,其特征在于,所述编码包括JPEG、MPEG及H.26X。

5.如权利要求1所述的Hadoop中基于Zigzag的MapReduce数据处理方法,其特征在于,所述MapReduce模型的核心过程包括Map、拷贝及合并过程。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1