技术编号：6524805
提示：您尚未登录，请点 登 陆 后下载，如果您还没有账户请点 注 册 ，登陆完成后，请刷新本页查看技术详细信息。本发明公开了，本发明是在Hadoop集群中应用Map/Reduce软件实现超大文件内多数据块定位的方法。本发明主要包括以下步骤组建集群环境、构造序列文件、修改用户程序源代码和通过streaming方式调用用户程序，本发明通过控制Map的数量和序列，确定Map进程与多数据块之间的映射关系，并且可以定位数据块在文件中的位置，让指定Map进程处理指定数据块，同时本发明可以轻松实现超大文件的多数据块并行处理。专利说明[0001]本发明涉及一种基于Hadoop (分...
注意：该技术已申请专利，请尊重研发人员的辛勤研发付出，在未取得专利权人授权前，仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权，增加技术思路，做技术知识储备，不适合论文引用。
请注意，此类技术没有源代码，用于学习研究技术思路。