一种多级分类检索方法及系统的制作方法

文档序号:6484078阅读:485来源:国知局
专利名称:一种多级分类检索方法及系统的制作方法
技术领域
本发明属于数据库检索技术领域,具体涉及一种多级分类检索方法及系统。本发明尤其适用于海量数据的数据库检索中。
背景技术
在信息系统中,往往对数据进行分类存储,便于用户对数据进行分类检索和查看 分类数据,尤其在海量数据的情况下,这样可以提高检索的效率。例如,假设一篇文章含有 地区分类属性亚洲一中国一北京。这是一种典型多级分类结构,如果将该地区的分类属性 设置为“中国”,则系统在存储时通常只存储一个节点即“中国”或者将分类路径写死到一个 或多个字段上。检索时,通过SQL中的like语句进行模糊查询。一方面,这种检索方式在 数据量较大的情况下效率较低,即使建立数据库索引也无法达到很好的检索效率。另一方 面,这种检索方式检索出的结果只包含“中国”的数据,而通常的需求是能够按照分类路径 进行检索,即按照“中国”检索时能够检索出所有“中国”和“北京”的数据,也就是说,能够 检索出该节点以及该节点后所有节点的数据。现有的检索方式中,针对检索效率低的问题,还存在一种将多个分类属性存储到 数据表的多个字段上,然后利用数据库索引进行检索的方式。例如,上例中,可以将“亚洲”、 “中国”、“北京”存储在三个字段上,这种方式虽然能够在一定程度上提高检索的效率,但其 扩展性极差,当增加多个分类时(如上例中还需要存储栏目分类、体裁分类等等)会增加很 多字段,从而使表的结构变得越来越臃肿。

发明内容
针对现有技术中存在的缺陷,本发明的目的是提供一种速度快、扩展性好的多级 分类检索方法及系统。为了实现上述目的,本发明采用的技术方案如下一种多级分类检索方法,包括以下步骤(1)将业务数据的分类信息存储在分类表中,所述分类表包括用于存储分类节点 层次ID的字段、用于存储分类节点ID的字段、用于存储分类节点名称的字段以及用于存储 分类节点父节点的字段;(2)将业务数据存储在数据表中,所述数据表包括分类字段,所述分类字段用于存 储分类路径,所述分类路径根据分类表中用于存储分类节点父节点的字段内容获得,分类 路径上的分类节点用从分类表中获得的分类节点ID表示;(3)根据数据表生成与该数据表相对应的分类关联表,所述分类关联表存储数据 表中除分类字段外的全部或部分字段内容,以及根据数据表中分类字段存储的分类路径拆 分成的多个分类层次字段,按照层次关系存储拆分后的分类节点;(4)在分类表中获得分类节点层次ID和分类节点ID,设置检索条件,利用数据库 索引在分类关联表中检索数据。
一种多级分类检索系统,包括用于将业务数据的分类信息存储在分类表中的分类 信息存储模块(11),所述分类表包括用于存储分类节点层次ID的字段、用于存储分类节点 ID的字段、用于存储分类节点名称的字段以及用于存储分类节点父节点的字段;用于将业务数据存储在数据表中的业务数据存储模块(12),所述数据表包括分类 字段,所述分类字段用于存储分类路径,所述分类路径根据分类表中用于存储分类节点父 节点的字段内容获得,分类路径上的分类节点用从分类表中获得的分类节点ID表示;用于根据数据表生成与该数据表相对应的分类关联表的分类关联表生成模块,所述分类关联表存储数据表中除分类字段外的全部或部分字段内容,和根据数据表 中分类字段存储的分类路径拆分成的多个分类层次字段,按照层次关系存储拆分后的分类 点以及用于呈现分类表、设置检索条件、利用数据库索引在分类关联表中检索数据 并呈现检索结果的检索模块(14)。本发明所述方法及系统,通过先生成将数据表中分类字段存储的分类路径自动拆 分后按照层次关系存储成多个字段的分类关联表,再利用数据库索引在分类关联表中进行 精确检索的方式,克服了现有技术直接在数据表中进行模糊检索带来的效率低的缺陷,提 高了分类数据检索的效率,而且不但能够检索出符合条件的分类节点信息,同时又能够检 索出该节点后的所有节点信息。此外,通过将数据表中分类字段存储的多种分类路径拆分 后存储在分类关联表中的多条记录的方式,支持多种分类分别检索,并具有很好的扩展性。


图1是具体实施方式
中所述系统结构图;图2是具体实施方式
中所述方法流程图;图3是数据表、触发器、分类表和分类关联表之间的关系示意图。
具体实施例方式下面结合具体实施方式
和附图对本发明进行详细描述。本发明的核心思想是在数据表中设置分类字段,存储分类节点之间的层次关系 (即分类路径);根据分类节点之间的层次关系将每个节点拆分成独立的字段,生成分类关 联表,在分类关联表中检索数据。图1出示了一种多级分类检索系统的结构,包括用于将业务数据的分类信息存储 在分类表中的分类信息存储模块11,所述分类表包括用于存储分类节点层次ID的字段、用 于存储分类节点ID的字段、用于存储分类节点名称的字段以及用于存储分类节点父节点 的字段;用于将业务数据存储在数据表中的业务数据存储模块12,所述数据表包括分类字 段,所述分类字段用于存储分类路径,所述分类路径根据分类表中用于存储分类节点父节 点的字段内容获得,其上的节点用从分类表中获得的分类节点ID表示;用于根据数据表生成与该数据表相对应的分类关联表的分类关联表生成模块13, 所述分类关联表存储数据表中除分类字段外的全部或部分字段内容,和根据数据表中分类 字段存储的分类路径拆分成的多个分类层次字段,按照层次关系存储拆分后的分类节点;
以及用于呈现分类表、设置检索条件、利用数据库索引在分类关联表中检索数据 并呈现检索结果的检索模块14。该系统还包括用于在数据表中创建触发器的触发器生成模块15,当更新数据表中 的数据时,触发器可以将数据表中的数据和与其相对应的分类关联表中的数据进行同步更
新。 图2出示了采用图1所示系统实现多级分类检索的方法流程,主要包括以下步 骤(1)分类信息存储模块11将业务数据的分类信息存储在分类表中。分类表可以是一种树形结构表,包括存储分类节点层次ID的字段、存储分类节点 ID的字段、存储分类节点名称的字段以及存储分类节点父节点的字段等。分类表的主要结 构如下表所示 分类表的创建数量根据信息系统中对数据的分类方式来确定,一个分类表对应一 种分类。(2)业务数据存储模块12将业务数据存储在数据表中。数据表包括分类字段,该字段用于存储分类路径。如果数据表中一条记录可以按 照不同的角度进行多种分类,则该字段中可以存储多种分类路径,分类的层次关系以及多 种分类路径之间可以采用事先约定的符号表示。(3)分类关联表生成模块13生成分类关联表。分类关联表生成模块13根据数据表建立与该数据表相对应的分类关联表。该表 存储数据表中除分类字段外的全部或部分字段内容,以及根据数据表中分类字段存储的分 类路径拆分成的多个分类层次字段,按照层次关系存储拆分后的分类节点,结构和与其对 应的数据表的结构相似,优选的创建方法可以概括为如下两个步骤①选择数据表中除分类字段外的全部或部分字段作为分类关联表中的字段,并确 定分类关联表中的分类层次字段的个数;所述分类层次字段的个数不小于数据表中分类字 段存储的最深分类路径的层次深度,分类层次字段的名称中包含分类节点的层次ID。例如,假设分类关联表中分类层次字段的个数为10个,字段名称为“分类_1”、“分
类_2”......“分类_9”、“分类_10”,其中的数字1、2......9、10表示分类节点的层次ID,
如下表所示 ②建立数据表中字段与分类关联表中字段的对应关系,将被步骤①选中的字段内 容写入到分类关联表记录中相应的字段内,将数据表分类字段存储的分类路径按照层次关 系进行拆分,将拆分后的分类节点按照该分类节点所处的层次分别写入到分类关联表记录 中相应的分类层次字段内。假设读取的数据表中分类字段存储的分类路径为“ 10_11_12_13” (其中“_”为层 次间隔符,10、11、12、13表示分类节点ID),根据其结构可知10为第1层、11为第2层、13为第3层、14为第4层,将其写入分类关联表中相应的层次字段中,如果分类路径没有预先 设定的分类层次字段深,则在不存在分类节点的层次字段中写入0,如下表所示 当数据表的分类字段中存储多种分类路径时,一种分类路径形成分类关联表中的 一条记录,除分类层次字段外,所有分类路径形成的分类关联表中记录的其他字段内容相 同。在上述方法中,分类关联表中冗余的字段内容可以根据具体的需要进行选择,对 于一些大文本字段或二进制字段则不必进行冗余。这种方式当检索后需要展示的结果仅涉 及到冗余的字段内容时,则无需与数据表进行关联查询,从而可以进一步提高检索的效率; 当检索后需要展示分类关联表中没有的字段内容时,可以从与该分类关联表对应的数据表 中获取。此外,该方法中还预先设定了分类关联表中的分类层次字段的个数。这种方式虽 然易于实现,但会造成一定的空间浪费。当然也可以根据读取的分类路径的深度进行动态 拆分,使分类路径的深度与分类关联表中的分类层次字段的个数相同。但是,当一个数据表 中分类字段存储多种分类路径且深度不同;或者数据表中不同记录中分类字段存储的分类 路径深度不同时,分类关联表中分类层次字段的深度仍然需要与数据表分类字段存储的分 类路径的最深层次相同,没有达到这种深度的分类路径中不存在分类节点的层次字段仍然 需要用0占位。这种方式虽然可以节省空间,但稍显复杂。数据表与分类关联表的对应关系可以为一对一,即一个数据表对应一个分类关联 表,当然也可以是一对多(一个数据表对应多个分类关联表)、多对一或多对多,本发明不 对两者之间的对应关系进行限制,任何一种方式均可。(4)触发器生成模块14创建触发器。当分类关联表建立后,如果需要更新分类关联表,则还应该在与分类关联表相对 应的数据表上根据数据库类型自动生成符合数据库语法的触发器,用于将数据表中的数据 与分类关联表中的数据进行同步,即当更新数据表中的数据时,与该数据表对应的分类关 联表也进行同步更新,以保证分类关联表与对应的数据表之间的一致性。数据表中数据更 新主要包括增加记录、更新记录和删除记录,其中更新记录包括更新非分类字段内容和更 新分类字段内容,更新分类字段内容包括在原记录的分类字段中增加分类路径等,在原记 录中增加分类路径的更新过程可以概括为如下步骤①更新数据表时触发该表上的触发器;②触发器根据数据表记录中更新的分类字段,获取该分类字段更新后的分类路 径;③根据更新后的分类路径,更新与该数据表对应的分类关联表中的记录。更新分 类关联表中记录的方法与建立分类关联表的方法相似。例如,假设原数据表的结构如下 原分类关联表的结构如下 现在原数据表的分类字段中增加一种分类路径,修改的数据表结构如下 则利用触发器更新分类关联表的表结构如下 其中,第1条记录与第2条记录除分类字段外,其他字段的内容相同。如果数据表中增加一条新的记录,则更新分类关联表的方法可以概括如下步骤①更新数据表时触发该表上的触发器;②触发器根据数据表中更新的记录,获取数据表中新增加的记录内容;③根据数据表中字段与分类关联表中字段的对应关系,将数据表中的字段内容写 入到分类关联表记录中相应的字段内,将数据表分类字段存储的分类路径按照层次关系进 行拆分,将拆分后的分类节点按照该分类节点所处的层次分别写入到分类关联表记录中相 应的分类层次字段内。如果数据表中删除一条记录,则利用触发器直接根据主键删除分类关联表中相应 的记录即可。创建触发器的方法为现有技术,可参阅相关文献,此处不再展开说明。图3出示了数据表31、触发器34、分类表32和分类关联表33之间的关系。建立 数据表时需要从分类表中获得分类信息,以及分类路径上分类节点的ID ;分类关联表的建 立需要依据数据表,触发器建立在数据表上,更新数据表时利用触发器保持数据表与分类 关联表的同步更新。(5)检索模块15在分类关联表中检索数据。检索模块15展示分类表的结构,可以从中获得分类节点层次ID和分类节点ID,根 据分类节点层次ID和分类节点ID在检索模块15中设置检索条件,检索模块15利用数据库索引在分类关联表中进行检索,并显示检索结果。实施例1本实施例中,假设数据存在如下一种分类方式A、B、C、D。其中,A为根节点,层次 ID为1,分类节点ID为100 ;B为A节点的子节点,层次ID为2,分类节点ID为101 ;C为B 节点的子节点,层次ID为3,分类节点ID为102 ;D为节点C的子节点,层次ID为4,分类节 点ID为103。假设建立如下结构的分类表 根据分类表获得分类节点ID后,假设建立如下结构的数据表 上表中分类字段中的“_”表示节点之间的层次关系。当然,也可以采用其他符号 表示,本发明不对分类字段的具体存储格式进行限定,只要能够识别出分类节点之间的层 次关系即可。本实施例中,数据表建立后,选择该表中的字段1、字段2和字段3作为分类关联表 中的字段,分类层次字段的个数为4。然后建立数据表中字段与分类关联表中字段的对应关 系,将数据表中字段存储的内容写入分类关联表中的相应字段;拆分数据表分类字段存储 的分类路径,将分类节点分别写入分类关联表中相应的分类层次字段内,生成如下结构的 分类关联表 其中,“分类_1、分类_2、分类_3、分类_4”中的数字“1、2、3、4”表示分类层次ID, “100、101、102、103”表示分类节点 ID。分类关联表建立后,在与其相对的数据表上创建触发器,当数据表更新数据时使 用该触发器保持数据表和与其对应的分类关联表中的数据同步。检索时,首先从分类表中获得分类层次ID和分类节点ID ;然后设置检索条件,假设本实施例中设置的检索条件为“分类_2 = 101”;最后利用数据库索引根据检索条件在分类关联表中进行检索。不仅可以检索出“分类_2 = 101”的信息,还可以检索出其后所有节 点102和103的信息。实施例2与实施例1不同的是,数据表中的分类字段存储多个分类路径,假设其结构如下 表所示 上表中,分类字段中不同的分类层次之间的层次关系用“;”间隔,当然也可以采 用其他符号,只要能够将不同的分类区别开来即可。生成的分类关联表结构如下表所示 其中,3条记录的“字段1”、“字段2”、“字段3”的内容相同。显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其同等技术的范围 之内,则本发明也意图包含这些改动和变型在内。
权利要求
一种多级分类检索方法,包括以下步骤(1)将业务数据的分类信息存储在分类表中,所述分类表包括用于存储分类节点层次ID的字段、用于存储分类节点ID的字段、用于存储分类节点名称的字段以及用于存储分类节点父节点的字段;(2)将业务数据存储在数据表中,所述数据表包括分类字段,所述分类字段用于存储分类路径,所述分类路径根据分类表中用于存储分类节点父节点的字段内容获得,分类路径上的分类节点用从分类表中获得的分类节点ID表示;(3)根据数据表生成与该数据表相对应的分类关联表,所述分类关联表存储数据表中除分类字段外的全部或部分字段内容,以及根据数据表中分类字段存储的分类路径拆分成的多个分类层次字段,按照层次关系存储拆分后的分类节点;(4)在分类表中获得分类节点层次ID和分类节点ID,设置检索条件,利用数据库索引在分类关联表中检索数据。
2.如权利要求1所述的一种多级分类检索方法,其特征在于步骤(2)中所述数据表 的分类字段中存储一种或多种分类路径。
3.如权利要求1所述的一种多级分类检索方法,其特征在于步骤(3)中所述数据表 与分类关联表之间的对应关系为一对一、一对多、多对一或多对多。
4.如权利要求1至3之一所述的一种多级分类检索方法,其特征在于,步骤(3)中所述 根据数据表生成与该数据表相对应的分类关联表的过程包括以下步骤①选择数据表中除分类字段外的全部或部分字段作为分类关联表中的字段,并确定分 类关联表中的分类层次字段的个数;所述分类层次字段的个数不小于数据表中分类字段存 储的最深分类路径的层次深度,分类层次字段的名称中包含分类节点的层次ID ;②建立数据表中字段与分类关联表中字段的对应关系,将被步骤①选中的字段内容写 入到分类关联表记录中相应的字段内,将数据表分类字段存储的分类路径按照层次关系进 行拆分,将拆分后的分类节点按照该分类节点所处的层次分别写入到分类关联表记录中相 应的分类层次字段内。
5.如权利要求4所述的一种多级分类检索方法,其特征在于步骤②中,当数据表的分 类字段中存储多种分类路径时,一种分类路径形成分类关联表中的一条记录,除分类层次 字段外,所有分类路径形成的分类关联表中记录的其他字段内容相同。
6.如权利要求4所述的一种多级分类检索方法,其特征在于所述方法在建立分类关 联表后,还包括在与分类关联表相对应的数据表上创建触发器的步骤,更新数据表中的数 据时,利用所述触发器对分类关联表中的数据进行同步更新。
7.如权利要求6所述的一种多级分类检索方法,其特征在于所述更新数据表中的数 据包括增加记录、更新记录和删除记录,所述更新记录包括在原记录的分类字段中增加分 类路径。
8.如权利要求7所述的一种多级分类检索方法,其特征在于在数据表中增加记录时, 所述利用触发器对分类关联表中的数据进行同步更新的过程包括以下步骤①更新数据表时触发该表上的触发器;②触发器根据数据表中更新的记录,获取新增加的记录内容;③根据新增加的记录内容,更新与该数据表对应的分类关联表中的记录。
9.如权利要求7所述的一种多级分类检索方法,其特征在于在原记录的分类字段中 增加分类路径时,所述利用触发器对分类关联表中的数据进行同步更新的过程包括以下步 骤①更新数据表时触发该表上的触发器;②触发器根据数据表记录中更新的分类字段,获取该分类字段更新后的分类路径;③根据更新后的分类路径,更新与该数据表对应的分类关联表中的记录。
10.一种多级分类检索系统,包括用于将业务数据的分类信息存储在分类表中的分类 信息存储模块(11),所述分类表包括用于存储分类节点层次ID的字段、用于存储分类节点 ID的字段、用于存储分类节点名称的字段以及用于存储分类节点父节点的字段;用于将业务数据存储在数据表中的业务数据存储模块(12),所述数据表包括分类字 段,所述分类字段用于存储分类路径,所述分类路径根据分类表中用于存储分类节点父节 点的字段内容获得,分类路径上的分类节点用从分类表中获得的分类节点ID表示;用于根据数据表生成与该数据表相对应的分类关联表的分类关联表生成模块(13),所 述分类关联表存储数据表中除分类字段外的全部或部分字段内容,和根据数据表中分类字 段存储的分类路径拆分成的多个分类层次字段,按照层次关系存储拆分后的分类节点;以及用于呈现分类表、设置检索条件、利用数据库索引在分类关联表中检索数据并呈 现检索结果的检索模块(14)。
11.如权利要求10所述的一种多级分类检索系统,其特征在于所述系统还包括用于 在数据表中创建触发器的触发器生成模块(15),所述触发器用于将数据表中的数据和与其 相对应的分类关联表中的数据进行同步更新。
全文摘要
本发明公开了一种多级分类检索方法及系统,属于数据库检索技术领域。现有技术中,对分类数据的检索效率低或者扩展性差。本发明所述方法及系统根据数据分类信息在数据表中设置分类字段,存储分类节点之间的层次关系;根据分类节点之间的层次关系将每个节点拆分成独立的字段,与数据表中其他字段组合,生成分类关联表;检索时利用数据库索引在分类关联表中检索数据。本发明所述方法及系统提高了分类数据的检索效率,扩展性强,特别适用于大数据量的数据库检索中。
文档编号G06F17/30GK101840400SQ20091008036
公开日2010年9月22日 申请日期2009年3月19日 优先权日2009年3月19日
发明者卢作伟, 宫丽杰, 王洪昌 申请人:北大方正集团有限公司;北京大学;北京北大方正电子有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1