一种文件数据快速导入方法及装置与流程

文档序号:31348791发布日期:2022-08-31 12:16阅读:来源:国知局

技术特征:
1.一种文件数据快速导入方法,其特征在于,包括:利用预先构建的多个文件数据解析器以数据记录级并行方式解析多个文件,得到各文件对应的数据解析结果;将所述数据解析结果以数据记录级并行方式导入预先构建的数据表中。2.根据权利要求1所述的文件数据快速导入方法,其特征在于,还包括:利用预先构建的文件结构解析器解析所述文件的结构。3.根据权利要求2所述的文件数据快速导入方法,其特征在于,所述利用预先构建的文件结构解析器解析所述文件的结构,包括:根据所述文件的列表标签确定所述结构的根节点;根据所述文件的列表标签下的子标签确定所述结构的叶节点;根据所述根节点及所述叶节点生成所述结构。4.根据权利要求3所述的文件数据快速导入方法,其特征在于,还包括:根据所述结构建立用于存储所述文件中数据记录的数据表;生成所述文件与所述数据表之间的映射关系。5.根据权利要求3所述的文件数据快速导入方法,其特征在于,所述利用预先构建的多个文件数据解析器以数据记录级并行方式解析多个文件,得到各文件对应的数据解析结果,包括:利用所述多个文件数据解析器以数据记录级并行方式获取各文件中各叶节点对应的数据项,得到所述数据解析结果。6.根据权利要求3所述的文件数据快速导入方法,其特征在于,所述将所述数据解析结果以数据记录级并行方式导入预先构建的数据表中,包括:构建的多个文件数据导入器;利用所述多个文件数据导入器以数据记录级并行方式读取所述数据解析结果,并将所述所述数据解析结果插入所述数据表中。7.一种文件数据快速导入装置,其特征在于,包括:数据解析单元,用于利用预先构建的多个文件数据解析器以数据记录级并行方式解析多个文件,得到各文件对应的数据解析结果;数据导入单元,用于将所述数据解析结果以数据记录级并行方式导入预先构建的数据表中。8.根据权利要求7所述的文件数据快速导入装置,其特征在于,还包括:结构解析单元,用于利用预先构建的文件结构解析器解析所述文件的结构。9.根据权利要求8所述的文件数据快速导入装置,其特征在于,所述结构解析单元,包括:根节点确定模块,用于根据所述文件的列表标签确定所述结构的根节点;叶节点确定模块,用于根据所述文件的列表标签下的子标签确定所述结构的叶节点;文件结构生成模块,用于根据所述根节点及所述叶节点生成所述结构。10.根据权利要求9所述的文件数据快速导入装置,其特征在于,还包括:数据表建立单元,用于根据所述结构建立用于存储所述文件中数据记录的数据表;映射生成单元,用于生成所述文件与所述数据表之间的映射关系。
11.根据权利要求9所述的文件数据快速导入装置,其特征在于,所述数据解析单元,具体用于:利用所述多个文件数据解析器以数据记录级并行方式获取各文件中各叶节点对应的数据项,得到所述数据解析结果。12.根据权利要求9所述的文件数据快速导入装置,其特征在于,所述数据导入单元,包括:导入器构建模块,用于构建的多个文件数据导入器;数据插入模块,用于利用所述多个文件数据导入器以数据记录级并行方式读取所述数据解析结果,并将所述所述数据解析结果插入所述数据表中。13.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至6任一项所述的文件数据快速导入方法的步骤。14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至6任一项所述的文件数据快速导入方法的步骤。15.一种计算机程序产品,包括计算机程序/指令,其特征在于,该计算机程序/指令被处理器执行时实现权利要求1至6任一项所述的文件数据快速导入方法的步骤。

技术总结
本申请提供一种文件数据快速导入方法及装置,涉及数据迁移技术领域,也可用于金融领域,包括:利用预先构建的多个文件数据解析器以数据记录级并行方式解析多个文件,得到各文件对应的数据解析结果;将所述数据解析结果以数据记录级并行方式导入预先构建的数据表中。本申请能够提高数据导入的自动化程度,提高数据导入效率,大大缩短数据导入数据库的时间。大大缩短数据导入数据库的时间。大大缩短数据导入数据库的时间。


技术研发人员:乔建成 吴红娟
受保护的技术使用者:中国银行股份有限公司
技术研发日:2022.06.02
技术公布日:2022/8/30
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1