基于指标方案树的评价指标体系生成方法

1.本发明属于智能决策和综合评价技术领域，尤其涉及一种基于指标方案树的评价指标体系生成方法。


背景技术：

2.管理事务中，为了实现对复杂事务的评价，人们通常需建立一个包含多级指标的评价指标体系。在建立指标体系的过程中，各专家学者通常各有不同的观点，因而如何有效集结众多专家的意见建立一个能体现出群体智慧的评价指标体系是很多研究者非常关心的。
3.目前的评价指标体系的建立方法主要存在如下问题：
4.1、目前的评价系统通常只针对单一类型评价对象。已有的评价方法及相关研究成果主要关注的是对某一层级指标如何确定其子指标权重的问题，相应的计算机评价系统也只针对单一评价对象去设计实现评价过程，而没有针对不同类评价对象的处理方法。实践中，不同类的评价对象有时需要采用不同的评价方案，传统的评价系统由于没有“评价对象-评价方案”的关联功能，因此在实现复杂对象的评价工作时，由于只能对所有评价对象采用唯一方案而变得难以深入。
5.2、目前的评价系统在指标体系的生成过程中，难以综合多个专家的意见进行智能分析。在建立指标体系的过程中，常有专家提出不同的评价方案，这些方案或者是指标不同，或是虽指标相同，但权重不同。虽然采用传统技术可以将多人对于权重的意见集结成一个唯一的权重方案，但在各种方案的提出过程中，仍然需要对多个备选方案进行记录、比较。而传统系统难以实现对多个备选方案的记录及比较。
6.3、目前的评价系统对于指标的选择和管理较为死板，往往只能在指标集确定的情况下，对各指标的权重进行修改。现有技术中评价指标体系建立过程一般是分两步走，一是建立指标体系，通常是先根据专家的意见，选取一部分指标作为一级指标，然后再对各一级指标进一步分解为二级指标，再由二级指标到三级指标、四级指标
……
，第二步是确定各指标的权重，通常是采用ahp法、delphi法等主观赋权法或主成分分析法、熵权法等客观赋权方法。现有技术的重点是放在确定指标权重的确定上，即在已经完成各级指标的选取后，研究利用何种方法为各指标赋权。现有技术中对各级指标的选取并无专门的关注，而是把指标的选取工作视为一个简单问题，似乎不需要专门研究。但事实上，建立评价指标体系的真正难点在于指标的选取上。比如，在选取指标的过程中，各位专家可能会提出多种可能的方案，各方案可能包含名称相同但含义不同的指标，而每种方案也因为所使用的指标的不同，而有优劣之分。好的方案应该是其包含的指标不仅有很高的代表性，而且还要易于理解使用、有较强的可操作性，同时又要获取成本低、获取周期短。而为了实现对各种评价方案的比较，首先就需要做到对各种方案的记录描述，这是因为复杂评估系统中，各级指标的数量总数可能很大、各指标的差异也会很大，导致对于指标的最后选取存在很大困难，例如如何选到那些代表性强且易于观测的指标。
7.因此，在复杂对象的评估系统中急需一种能够方便地记录、管理各种评价方案，并易于实现对各种评价方案的比较，从而有助于能最终获取一套能有效集结众多专家意见、荟萃集体智慧的完美评价方案。


技术实现要素：

8.为克服上述现有技术的不足，本发明提供了一种基于指标方案树的评价指标体系生成方法，建立了评价对象——指标体系——评价方案关联的评价系统，能够整合多个专家意见，并且能够对这些备选方案进行管理、分析和查询。
9.为实现上述目的，本发明采用如下技术方案：
10.一种用于评价指标体系生成的服务器，包括：
11.接收用户输入的待评价指标并进行查询，若包含相应指标方案树，获取包含这一指标的所有评价方案；
12.对所述评价方案进行合理性判断，获取合理评价方案；
13.提取所述合理评价方案中的专家评价信息；
14.根据所述评价信息，获取一个或多个优选评价方案推送至客户端；
15.其中，所述指标方案树为奇数层节点为评价指标、偶数层节点为评价方案的树结构，所述评价方案节点还存储该方案的评价信息。
16.进一步地，所述服务器接收客户端发送的针对指定评价对象的新建指标方案树，以及对已创建指标方案树的修改完善。
17.进一步地，所述对已创建指标方案树的修改完善包括：
18.(1)根据评价对象获取相应指标方案树，设该指标方案树共2n层，第2i-1层为指标层，第2i层为评价方案层i＝1,2,
…
n，从第2n-1层开始遍历，将该层第1个指标节点记为当前指标；
19.(2)判断当前指标是否有评价方案，若有评价方案，对该评价方案进行评价；若没有评价方案，为当前指标创建新的评价方案，作为当前指标的叶子节点；
20.(3)判断该评价方案是否需要对当前指标进一步拆分为多个指标，若需要，为当前指标的该评价方案添加子指标，并设置各子指标的权重；若不需要，将该指标标记为末级指标，转到步骤(4)；
21.(4)判断该指标层是否还有其他指标节点，若有，将该层下一个指标节点记为当前指标，若没有，返回上一个指标层，将上一个指标层中的第1个指标设为当前指标，转到步骤(2)。
22.进一步地，对该评价方案进行评价包括：
23.判断所述评价方案是否形式完整、是否实质完整，以及
24.对所述评价方案进行投票、打分或评论。
25.进一步地，所述指标方案树中，指标节点包括该节点的创建时间、创建人、指标权重和备注说明；方案节点包括该节点的创建时间、创建人、方案评价记录和备注说明。
26.进一步地，所述合理性判断包括判断是否形式完整、是否实质完整、所述方案是否为根指标方案。
27.进一步地，所述服务器还将所述指标方案树推送至所述客户端。
28.根据本发明的第二目的，本发明还提供了一种基于指标方案树的评价指标体系生成方法，包括：
29.接收用户输入的待评价指标并进行查询，若包含相应指标方案树，获取包含这一指标的所有评价方案；
30.对所述评价方案进行合理性判断，获取合理评价方案；
31.提取所述合理评价方案中的评价信息；
32.根据所述评价信息，获取一个或多个优选评价方案；
33.其中，所述指标方案树为奇数层节点为评价指标、偶数层节点为评价方案的树结构，所述评价方案节点还存储该方案的评价信息。
34.进一步地，所述指标方案树中，指标节点包括该节点的创建时间、创建人、指标权重和备注说明；方案节点包括该节点的创建时间、创建人、方案评价记录和备注说明。
35.进一步地，所述合理性判断包括判断是否形式完整、是否实质完整、所述方案是否为根指标方案。
36.本发明的有益效果
37.1、本发明将多级评价指标与具体的评价方案关联起来，并采用树结构进行存储——指标方案树。为某一评价对象创建指标方案树，可以将各级指标体系中任一指标的各种备选方案方便地存放于一个完整的系统中，相比于传统的多指标评价体系，本发明的评价系统能够整合针对该评价对象的多个不同的评价方案。当需要评价该评价对象时，通过查询该评价系统，就可以参考相关人员的意见，快速确定合理的评价方案(包括所采用的指标和指标的权重等信息)。
38.2、本发明的指标方案树，存储方式简单直观，通过可视化可以让相关专家清晰地看到在各级各指标下，分别有哪些不同的评价方案。同时也可以让相关专家看到，现有各个评价方案的成熟度。最成熟的方案是指，既形式完整(所包含的本级子指标已可以确定，且权重也已确定)、又实质完整(即其所包含的各指标及其各级子指标都有形式完整的评价方案，且所有最末级指标都有了可操作性的评价方案)。
39.3、本发明的指标方案树还支持对方案的评价、优化，并且能够根据需要将特定的评价方案与各种不同类型的评价对象关联。当用户查询评价方案时，系统能够根据评价自动推送优选评价方案。
附图说明
40.构成本技术的一部分的说明书附图用来提供对本技术的进一步理解，本技术的示意性实施例及其说明用于解释本技术，并不构成对本技术的不当限定。
41.图1为本发明的指标方案树的结构示意图；
42.图2为本发明评价指标体系生成方法；
43.图3为本发明指标方案树选择、创建、修改的过程；
44.图4为本发明评价指标体系生成过程中合理性评价过程。
具体实施方式
45.应该指出，以下详细说明都是示例性的，旨在对本技术提供进一步的说明。除非另
有指明，本文使用的所有技术和科学术语具有与本技术所属技术领域的普通技术人员通常理解的相同含义。
46.需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本技术的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
47.在不冲突的情况下，本技术中的实施例及实施例中的特征可以相互组合。
48.实施例一
49.本实施例公开了一种基于指标方案树的评价指标体系生成系统，包括：
50.客户端，包括发起者模块、专家模块和方案查询模块；
51.发起者模块，用于指定评价对象集，为各评价对象创建指标方案树，并发送至服务器；评价任务发起人的账号在登录系统后，其有权决定哪些专家具有哪些评价权限，如有提出方案的权限，有评价方案的权限等，同时也有权决定哪些专家在哪些领域具有更高的意见权重，同时也有权决定评价方案优劣的评价方法，即设定最佳方案的生成规则。
52.所述指标方案树为：奇数层节点存储评价指标，偶数层节点存储评价方案。
53.每个指标节点对应一个或多个方案叶子节点，表示评价该指标节点中的指标的一个或多个方案；每个方案节点对应一个或多个指标子节点，表示该方案节点可以通过多个子指标进行评价。
54.所述指标方案树中，指标节点均记录该节点的创建时间、创建人、指标权重、备注说明等信息。方案节点均记录创建时间、创建人、方案评分记录、备注说明等信息。
55.如图1所示，根指标下存在完成根指标评价的n个方案f[1],f[2],,,f[i],,,f[n]，方案f[i]包含[i,m]个子指标z[i,1],z[i,2],，,,z[i,j],,,,z[i,m]；子指标z[i,j]下又有完成子指标评价的[i,j,s]个方案，方案f[i,j,k]下又包含[i,j,k,t]个指标
……
通过层层分解，一直到其下的评价方案均不再包含子指标的末级指标。
[0056]
所述指标方案树的创建方法为：
[0057]
为评价对象创建树结构并指定根指标，所述根指标节点存储所述指标方案树的评价对象、评价目标、创建者id、创建时间等信息。
[0058]
所述专家模块，用于完善指标方案树和评价已有方案；
[0059]
任何一个被授权的专家均可从其客户端发出对任何一个指标建立自己的评价方案的请求，并发出自己的评价方案。被授权专家如果认为某个待评价指标缺乏可行的评价方案，其可以自己提出一个方案，具体过程是，点击待评价指标，然后申请增加一个评价方案节点，然后填写方案名称，创建新方案的原因，提交后系统自动存入创建人信息及创建时间。
[0060]
被授权专家如果认为某个待评价指标的某个评价方案形式上不完整，即或者需要补充子评价指标，或者需要为方案的各子指标赋权重，则其可以为该方案逐一添加子指标，或为各子指标赋权重。具体操作过程是，点击待完善的方案，在菜单中点击添加子指标。添加子指标时，需写明子指标的名称、具体含义、建议权重和备注说明等，及对该子指标的建议评价方案。系统随后自动存入创建子指标的专家信息及创建子指标的时间。
[0061]
所述完善指标方案树包括：为指标方案树中的方案节点增加新的指标节点，为各
指标节点赋予权重信息，以及为指标节点创建新的评价方案节点，并发送至服务器；
[0062]
所述评价已有方案包括投票、打分或评论，并发送至服务器。
[0063]
具体地，所述完善指标方案树和评价已有方案包括：
[0064]
(1)根据评价对象获取相应指标方案树，设该指标方案树共2n层，第2i-1(i＝1,2,
…
n)层为指标层，第2i(i＝1,2,
…
n)层为评价方案层。从第2n-1层开始遍历，将该层第1个指标节点记为当前指标；
[0065]
(2)判断当前指标是否有评价方案，若有评价方案，执行步骤(12)；若没有评价方案，执行步骤(3)；
[0066]
(3)创建对当前指标的一个新的评价方案，作为当前指标的叶子节点，并记录该评价方案的方案名称、方案提出人的id，提出时间，该方案的说明(如该方案的设计思路、评价方法、需注意的问题等)，转到步骤(4)。
[0067]
(4)判断该评价方案是否需要对当前指标进一步拆分为多个指标(该方案是否需通过多个指标综合评价)，若需要，转到步骤(6)；若不需要，转到步骤(5)；
[0068]
(5)将该指标标记为末级指标，转到步骤(7)；
[0069]
(6)为当前指标的该评价方案添加一个子指标，写明指标名称、设置原因、测评思路以及创建人、创建时间等，转到步骤(8)；
[0070]
(7)判断该指标层是否还有其他指标节点，若有，将该层下一个指标节点记为当前指标，若没有，返回上一个指标层，将上一个指标层中的第1个指标设为当前指标，转到步骤(2)；
[0071]
(8)判断该方案是否还需要其他指标，若需要其他指标，返回步骤(6)；若不需要其他指标，转到步骤(9)；
[0072]
(9)采用公知的方法设定该方案中各子指标的权重，转到步骤(10)。
[0073]
(10)判断当前指标的各评价方案中，是否有满意的方案，若有满意的方案，转到步骤(11)；若没有满意的方案，进行步骤(3)；
[0074]
(11)为该方案满意值增加1，同时为当前指标的热度增加1，将结果记录在系统。可选地，还可以为该方案增加文字评论信息。
[0075]
(12)判断该方案是否形式完整，若形式完整，转到步骤(13)；若形式不完整，转到步骤(8)；
[0076]
(13)判断该方案是否实质完整，若实质完整，转到步骤(7)；若实质不完整，转到步骤(14)；
[0077]
(14)找到其子指标中没有满意的实质完整方案的某个指标，将之设为当前指标，转到步骤(2)。
[0078]
被授权专家登录系统后，会看到所有待评价的指标。专家可以根据自己熟悉的领域，对部分待评价指标提出评价方案建议，也可以对已有的评价方案进行评价、打分；同时，专家也可以阐述自己的评价依据，并提出提升个人意见所占权重的理由。
[0079]
所述方案查询模块，用于接收用户输入的指标，并将所述指标发送至服务器，以及
[0080]
接收服务器发送的查询结果。
[0081]
具体地，所述查询结果包括服务器推送的一个或多个评价方案，以及以用户所输入的指标作为根指标的指标方案树。
[0082]
用户可以根据需要对所述指标方案树进行修改完善，生成自定义的评价方案。例如针对某一方案进行指标的增删、权重的修改等，或者创建新的指标方案。
[0083]
服务器，接收发起者指定的评价对象，和相应的指标方案树，以及接收专家完善的指标方案树；
[0084]
基于所述指标方案树和专家对方案的评价信息，根据方案查询请求生成评价方案。
[0085]
具体地，所述根据方案查询请求生成评价方案包括以下步骤：
[0086]
(1)接收用户输入的指标，查询是否包含相应指标方案树，若包含，获取包含这一指标的所有评价方案，并获取以该指标作为根节点的指标方案树；若不包含，将该指标指定为根指标，创建新的指标方案树；
[0087]
(2)对所述评价方案进行合理性判断；
[0088]
所述合理性可以通过多个程度的成熟度来描述。所谓方案成熟度，是指该方案的可用程度。方案的成熟度，从不成熟到成熟，依次有以下几种状态：不完整——只有部分次级指标，或者有全部次级指标，但没有权重；形式完整——有全部次级指标，全部次级指标均已被赋权重；实质完整——或者没有次级指标，但方案已被多数专家认为有可行性，并予以推荐；或者有次级指标，但全部次级指标均已有实质完整的评价方案。
[0089]
具体地，所述合理性判断包括系统内部判断和系统外部判断。其中，所述系统内部判断包括：判断该指标方案是否形式完整、是否实质完整、所述方案是否为根指标方案。形式完整的意义为方案中评价企业诚信的各级指标均完整，每个指标的指标权重均完整；实质完整的意义为方案中每个评价指标均完整并且每个指标均具有可操作性(即每个指标都有可行方案)，如果一个方案中存在某个指标或子指标的方案不完整，也就说明这个指标没有可操作性。判断所述方案是否为根指标方案是为防止系统将根指标下的某个子指标方案直接输出到客户端。
[0090]
该方案并不要求必须是实质完整的方案，也不必是形式完整的方案。如果一个方案中存在某个指标或子指标的方案不完整，也就说明这个指标没有可操作性，那么系统就将没有方案的指标进行标记，提示其他用户可以对方案进行补充，或舍弃该指标。
[0091]
所述系统外部判断为辅助方式，服务器将指标方案树发送至客户端，由用户进行合理性评价。包括，例如用户对指标的方案合理性、权重合理性、子指标合理性进行判断。
[0092]
具体地，在所述的指标方案树建立过程中及建立之后，服务器接收客户端专家对所述指标方案树的各层评价方案中的任一方案发出的评价信息，评价信息包括但不限于方案的可操作性、适用的评价对象及对方案的质疑，同时也包含专家对其关注的评价方案对各相关评价对象的适用性的打分。所述服务器可以根据任务发起人的需要，决定是否将各专家的评选意见予以公布；
[0093]
(3)提取通过合理性判断的评价方案相应的专家评价信息并进行解析，获取这些方案的综合评分；
[0094]
(4)基于所述综合评分，推送一个或多个评价方案至客户端，所述指标方案树也一并推送。
[0095]
待专家评价及打分工作全部完成之后，服务器将自动推送出各级指标的各种评价方案中的针对各类评价对象的最被认可的评价方案，即最佳方案或最优方案、满意方案。
[0096]
只有所有待评价对象集的所有子集上均有满意的顶层评价方案时，服务器才结束评价指标体系的生成工作。在评价指标体系生成工作完成前，系统会提示有哪些评价对象尚无满意的顶层评价方案。
[0097]
该方案包含但不限于以下信息，待评价的指标、适用的评价对象子集、评价待评价指标的所有次级指标及各次级指标的权重。其不仅包含形式完整的评价方案的所有全部特征，同时，如果其有次级指标，则其所有各次级指标亦均有实质完整的评价方案。
[0098]
该方案可以是只针对一个子指标的最佳方案，也可以是针对根指标的最佳顶层方案。
[0099]
该方案可以是只针对一个子指标的只适用于一个评价对象子集的最佳方案，也可以是针对该指标的适用于所有待评价对象全集的最佳方案，也可以是针对根指标的适用于全部对象的最佳顶层方案。
[0100]
为了更清楚地阐述本发明，该技术方案的实现过程可描述如下：
[0101]
(1)任何人均可通过客户端登录该评价系统，通过发起者模块创建某一评价对象的指标方案树；所述指标方案树一经创建即存储到所述服务器中；
[0102]
(2)专家通过专家模块对所述指标方案树进行补充完善，并可以对已有的评价方案进行满意度打分；
[0103]
(3)任何人均可通过方案查询模块进行评价方案的查询，该模块接受用户传输的指标后，在服务器中查找是否有该指标的存在，如果没有该指标，就可以将该指标定为根指标，创建新的指标方案树。其他的系统登录人员可以对该指标进行指标方案、子指标、指标权重的补充。如果有，就将指标和其指标方案提取，作为指标方案树发送给用户；并且可以根据专家的满意度打分为用户推送优选评价方案；
[0104]
(4)如果用户对已有的方案不满意，也可以在现有的指标方案上对指标、指标权重、指标方案进行修改，以得到大家认可的指标方案。
[0105]
如果上述评价指标体系生成服务器在运转了一个时期，接受了各授权专家所有评价信息后，如果一个指标在特定的评价对象子集上只得到了一个评价方案，且该方案已被多数专家认可，即评价为可行、有效、推荐，则该评价方案将被服务器自动标记为实质完整方案。
[0106]
实施例1
[0107]
用户通过客户端上传企业诚信经营的根指标，系统自动查询是否有以诚信经营为根指标的指标方案树，在系统中查到有以下两个方案树。用户可以对两个方案进行比较，选出适合的方案进行使用，如果两个方案都不满意，用户可以对方案进行修改，也可以重新建立新的方案树。如果用户对其中一个方案表示满意，系统自动对方案的形式完整、实质完整、是否为根指标方案进行判断，如果判断均成功，那么用户就可以使用该方案树进行企业诚信经营评价。若有一处判断不成功，则提示客户重新对指标方案进行补充。
[0108]
根指标：评选诚信企业
[0109]
方案1
[0110]
表1指标评价树示例
[0111]
[0112]
[0113][0114]
方案2
[0115][0116]
实施例2
[0117]
根指标：评选全国优秀运动员
[0118]
方案1：只注重成绩的方案
[0119]
子指标1：大赛(奥运会、世界杯等)成绩权重0.5
[0120]
方案：奥运冠军或世界杯冠军100分，亚军80分，季军60分子指标2：破记录情况权重0.3
[0121]
方案：破世界纪录100分，破亚洲纪录60分，国家纪录40分子指标3：所在项目是否国家传统强项权重0.2
[0122]
方案：传统强项，50分
[0123]
传统弱项，100分
[0124]
方案2：成绩与体育风尚并重的方案
[0125]
子指标1：运动成绩，权重0.5
[0126]
子指标2：体育风尚，权重0.5
[0127]
方案1：只注重体育领域的精神文明状况
[0128]
指标1：未使用违禁药物
[0129]
方案：发现使用违禁药物，记0分。
[0130]
方案2：体育领域及其他领域状况并重
[0131]
指标1：公平竞赛情况
[0132]
方案：未发现使用违禁药物，记100分，否则0分。
[0133]
指标2：遵纪守法情况
[0134]
方案：无违纪记100分，被司法机关刑事处分的记0分。
[0135]
以上一个或多个实施例中，系统首先将待评价指标设为根指标，然后接受多个专家客户端提供的多种不同的顶层评价方案，每个顶层方案又都包含若干一级指标及相应的指标权重；再由各专家对各一级指标提出各自的二层评价方案，每个二层评价方案又包含若干二级指标
……
以此类推，直到各子指标均分解到了其下的评价方案均不包含多指标的末级指标层，最终建立起一个指标层、方案层相间的树状结构的指标方案树；然后再由各专家对各层评价方案进行评选，选出各级指标的针对各类评价对象的最佳方案。本发明建立了易于将评价对象——评价方案进行关联，同时易于对评价方案层层选优的评价指标体系动态生成系统，不仅可以有效集结、整合多专家意见，且可以对方案进行灵活调整，并根据适用性将评价方案与评价对象进行匹配。
[0136]
本领域技术人员应该明白，上述本发明的各模块或各步骤可以用通用的计算机装置来实现，可选地，它们可以用计算装置可执行的程序代码来实现，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。本发明不限制于任何特定的硬件和软件的结合。
[0137]
上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。