技术编号:6363210
提示:您尚未登录,请点 登 陆 后下载,如果您还没有账户请点 注 册 ,登陆完成后,请刷新本页查看技术详细信息。本申请涉及数据处理领域,特别涉及一种数据标识方法及系统。背景技术在很多行业诸如银行、电信和互联网行业中需要进行海量数据的处理。在海量数据中,不可避免的出现数据重复的情况,如何在海量数据删除重复的数据,只保留多个相同数据中的一个数据是一个急需解决的问题。目前,数据标识方法的具体过程可以包括首先,对于任意一个待去重数据,获取所有去重文件以及其内保存的已去重数据。所述去重文件中任一已去重数据与同一文件中其他已去重数据不相同;其次,遍历获取的已去重数据,判断在已去...
注意:该技术已申请专利,请尊重研发人员的辛勤研发付出,在未取得专利权人授权前,仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权,增加技术思路,做技术知识储备,不适合论文引用。
请注意,此类技术没有源代码,用于学习研究技术思路。