利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
[0152]显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
【主权项】
1.一种小文件的定位方法，其特征在于，包括: 文件管理平台接收客户端发送的小文件读取请求后，确定所述小文件的目录对应的元数据文件； 所述文件管理平台根据所述小文件的标识信息，以及预设的所述小文件的索引信息，确定所述小文件的元数据信息在所述元数据文件中的存储位置，并基于所述存储位置获取所述小文件的元数据信息；其中，所述小文件的索引信息用于描述所述小文件的标识信息和所述存储位置之间的映射关系，所述元数据信息中至少包括小文件的切片数据和检验码所属的容器和小文件的切片数据和校验码在容器中的偏移量； 所述文件管理平台基于所述小文件的元数据信息，向所述客户端通知保存有所述容器的相关存储节点的位置，令所述客户端从所述相关存储节点读取所述小文件的切片数据和校验码。2.如权利要求1所述的方法，其特征在于，在接收到所述小文件读取请求之前，进一步包括: 所述文件管理平台接收到客户端发送的小文件存储请求时，为所述小文件分配可用的容器，并通过所述容器关联相应的存储节点，令所述客户端将小文件的切片数据和校验码分别发送至相应的存储节点，并指示所述相应的存储节点分别将接收到的小文件的切片数据和校验码存储至本地对应所述容器的存储文件中； 所述文件管理平台根据所述小文件的目录以及预设的目录与元数据文件的一一对应关系，确定所述小文件对应的元数据文件，并根据客户端反馈的存储结果，将所述小文件的元数据信息在所述元数据文件中进行更新，以及建立所述小文件的索引信息，其中，所述小文件的索引信息用于描述所述小文件的标识信息与所述小文件元数据信息的存储位置之间的映射关系。3.如权利要求2所述的方法，其特征在于，所述文件管理平台为所述小文件分配可用的容器，并通过所述容器关联相应的存储节点，令所述客户端将小文件的切片数据和校验码分别发送至相应的存储节点，具体包括: 所述文件管理平台为所述小文件分配可用的容器，并将所述容器中各个存储文件分别关联相应的存储节点，令所述客户端将小文件进行切片处理并按预设的容错方法计算校验码后，按照容器中各个存储文件与相应的存储节点的对齐顺序将各个切片数据和校验码分别向相应的存储节点发送，其中，各个切片数据及相应检验码，与各个存储文件之间的对应关系是由所述文件管理平台预先配置的。4.如权利要求1、2或3所述的方法，其特征在于，所述文件管理平台基于所述小文件的元数据信息，向所述客户端通知保存有所述容器的相关存储节点的位置，令所述客户端从所述相关存储节点读取所述小文件的切片数据和校验码，具体包括: 所述文件管理平台基于所述小文件的元数据信息，确定小文件的各个切片数据和校验码所属的容器，以及小文件的各个切片数据和校验码在容器中的偏移量； 所述文件管理平台按照所述容器中的各个存储文件与各个存储节点的对齐顺序，分别确定小文件的各个切片数据和校验码对应的存储节点；其中，各个切片数据及相应检验码，与各个存储文件之间的对应关系是由所述文件管理平台预先配置的； 所述文件管理平台向所述客户端通知所述对应的存储节点的位置，令所述客户端根据小文件的各个切片数据和校验码在容器中的偏移量，分别从所述对应的存储节点中读取各个切片数据和校验码。5.如权利要求1一 4任一项所述的方法，其特征在于，进一步包括: 在建立小文件的索引信息之前，建立每一个元数据文件对应的头文件，所述头文件至少包括小文件的元数据信息在对应元数据文件中的存储位置信息，以及小文件数据的状态信息，所述状态信息用于指示小文件的元数据是否可读。6.如权利要求5所述的方法，其特征在于，进一步包括: 在接收到客户端发送的删除小文件的请求后，获取小文件所在元数据文件对应的头文件，并将获得的头文件中小文件的元数据的状态信息更改为不可读。7.一种小文件的定位系统，其特征在于，包括: 目录服务器，用于在接收客户端发送的小文件读取请求后，确定所述小文件的目录对应的元数据文件；以及， 用于根据所述小文件的标识信息，以及预设的所述小文件的索引信息，确定所述小文件的元数据信息在所述元数据文件中的存储位置，并基于所述存储位置获取所述小文件的元数据信息；其中，所述索引信息用于描述所述小文件的标识信息和所述存储位置之间的映射关系，所述元数据信息中至少包括小文件的切片数据和检验码所属的容器和小文件的切片数据和校验码在容器中的偏移量； 元数据服务器，用于基于所述小文件的元数据信息，向所述客户端通知保存有所述容器的相关存储节点的位置，令所述客户端从所述相关存储节点读取所述小文件的切片数据和校验码。8.如权利要求7所述的系统，其特征在于，在接收到所述小文件读取请求之前: 所述元数据服务器进一步用于:在接收到客户端发送的小文件存储请求时，为所述小文件分配可用的容器，并通过所述容器关联相应的存储节点，令所述客户端将小文件的切片数据和校验码分别发送至相应的存储节点，并指示所述相应的存储节点分别将接收到的小文件的切片数据和校验码存储至本地对应所述容器的存储文件中； 所述目录服务器器进一步用于:根据所述小文件的目录以及预设的目录与元数据文件的一一对应关系，确定所述小文件对应的元数据文件，并根据客户端反馈的存储结果，将所述小文件的元数据信息在所述元数据文件中进行更新，以及建立所述小文件的索引信息，其中，所述小文件的索引信息用于描述所述小文件的标识信息与所述小文件元数据信息的存储位置之间的映射关系。9.如权利要求8所述的系统，其特征在于，在为所述小文件分配可用的容器，并通过所述容器关联相应的存储节点，令所述客户端将小文件的切片数据和校验码分别发送至相应的存储节点时，所述元数据服务器具体用于: 为所述小文件分配可用的容器，并将所述容器中各个存储文件分别关联相应的存储节点，令所述客户端将小文件进行切片处理并按预设的容错方法计算校验码后，按照容器中各个存储文件与相应的存储节点的对齐顺序将各个切片数据和校验码分别向相应的存储节点发送，其中，各个切片数据及相应检验码，与各个存储文件之间的对应关系是由所述文件管理平台预先配置的。10.如权利要求7、8或9所述的系统，其特征在于，在定位小文件的过程中: 所述目录服务器具体用于:根据获得的所述小文件的元数据信息，确定小文件的各个切片数据和校验码所属的容器，以及小文件的各个切片数据和校验码在容器中的偏移量；所述元数据服务器具体用于:按照所述容器中的各个存储文件与相应的存储节点的对齐顺序，分别确定小文件的各个切片数据和校验码对应的存储节点，并向所述客户端通知所述对应的存储节点的位置，令所述客户端根据小文件的各个切片数据和校验码在容器中的偏移量，分别从所述对应的存储节点中读取各个切片数据和校验码，其中，各个切片数据及相应校验码，与各个存储文件之间的对应关系是由本系统预先配置的。11.如权利要求7- 10任一项所述的系统，其特征在于，所述目录服务器进一步用于: 在建立小文件的索引信息之前，建立每一个元数据文件对应的头文件，所述头文件至少包括小文件的元数据信息在对应元数据文件中的位置信息，以及小文件数据的状态信息，所述状态信息用于指示小文件的元数据是否可读。12.如权利要求11所述的系统，其特征在于，所述目录服务器进一步用于: 在接收到客户端发送的删除小文件的请求后，获取小文件所在元数据文件对应的头文件，并将获得的头文件中小文件的元数据的状态信息更改为不可读。
【专利摘要】本发明涉及互联网领域，具体公开了一种小文件的定位方法及系统，用以提高小文件的定位能力。该方法为：接收客户端发送的小文件读取请求后，确定该小文件的目录对应的元数据文件，根据小文件的标识信息，以及预设的小文件的索引信息，确定小文件的元数据信息在元数据文件中的存储位置，并基于存储位置获取小文件的元数据信息，基于小文件的元数据信息，向该客户端通知保存有该容器的相关存储节点的位置，令该客户端从相关存储节点读取该小文件的切片数据和校验码。这样，可以提高小文件的定位能力，降低索引的复杂度，并提高系统的索引及存储性能。
【IPC分类】G06F17/30
【公开号】CN104965845
【申请号】CN201410850201
【发明人】许焰, 周明伟, 江文龙
【申请人】浙江大华技术股份有限公司
【公开日】2015年10月7日
【申请日】2014年12月30日