技术总结
一种基于hadoop元数据的冷数据识别方法，其可以很明确地知道hadoop集群文件系统中哪些是冷数据，根据元数据统计分析，然后推进集群用户删除冷数据，有效地识别冷数据，从而使得集群存储空间得到高效的利用。该方法包括：(1)准备镜像文件；(2)解析镜像文件；(3)根据步骤(2)解析出来的信息，将hadoop文件系统的所有文件和目录的元数据信息存储到关系型数据库mysql中；(4)根据目录最近一次的访问时间，识别出没有被用户访问的目录和对应未访问的时间，再根据目录所属的用户和组，确定并通知存在冷数据目录的用户。还有系统。
技术研发人员：何良均;张翼;温宗臣;冯森林;李冰;张书凡;范卫卫;赵志华
受保护的技术使用者：北京集奥聚合科技有限公司
文档号码：201610944210
技术研发日：2016.11.02
技术公布日：2017.03.15