专利名称：：一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统的制作方法
技术领域：
：本发明涉及一种数据分类系统，特别是关于一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统。
背景技术：
：数据挖掘在金融业、零售业和电信业的应用越来越广泛，在金融领域，管理者可以通过数据挖掘对客户偿还能力以及信用的分析，进行分类，评出等级，从而可减少发放贷款的盲目性，改善银行资产以及负债在各种投资产品类型中的配比结构，提高资金的使用效率，优化资产结构。同时还可发现在各种资金运作业务中起决定性作用的主导因素和关键环节，从而制定相应的金融政策。在零售业，数据挖掘可有助于识别顾客购买行为，发现顾客购买模式和趋势，改进服务质量，取得更好的顾客保持力和满意程度，提高货品销量比率，设计更好的货品运输与分销策略，减少商业成本。分类系统是数据挖掘的主要系统之一，用于提取描述重要数据类别归属的模型或预测未来的数据趋势。一般来说，分类是把数据项映射到其中一个事先定义的类中的学习函数的过程，用基于归纳学习算法得出分类。学习的目标是构建一个分类模型，通常也叫分类器，它可以根据有效的变量输入值预测一些所给样本的类。导出的模型是基于对训练数据集的分析，并用IF-THEN规则、决策树、数学公式或神经网络等形式表示。目前数据分类的技术系统主要有决策树、贝叶斯系统、神经网络、K-最近邻系统、Logistic(罗切斯特)回归、多元线性回归、支持向量机、聚类分析系统等。通常情况下，评价模型的好坏主要看其系统的无偏性和稳健性。具体的说，无偏性主要表现在预测或者分类结果的均值和样本均值保持一致，而稳健性则主要考察模型的训练样本评分向量和测试样本的评分向量是否是高度相关的，相关度高就表示好，相关度低则表示差。罗切斯特回归模型作为大样本数据情况下最稳定的二元分类系统已被广泛用于评分建模中。对罗切斯特回归模型而言，其优点主要是稳健性较好、模型的可解释性较强、可以产生一个线性评分卡，缺点则是预测精度与其他某些系统相比较差，如神经网络、NaiveBayes(朴素贝叶斯)模型等。朴素贝叶斯模型是一种简单而高效的分类器，但是其变量独立性假设限制了对实际数据的应用，通过建模测试发现，单独使用朴素贝叶斯模型建立的模型精确度很高，但模型稳健性较差，仅对其中部分数据的分类精确。
发明内容针对上述问题，本发明的目的是提供一种稳健性好，可解释性强，而且简单、高效、精确度高的基于罗切斯特模型_朴素贝叶斯模型的数据分类系统。为实现上述目的，本发明采取以下技术方案一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统，其特征在于它包括数据处理模块、样本抽样模块、模型建立模块、数据测试模块；所述数据处理模块中，根据输入的原始样本集中各类样本变量的缺失值比率，以及各类样本变量之间的相关性和样本属性，将所述原始样本集分为饱和层和缺失层；4所述样本抽样模块中，根据目标变量，从所述饱和层和缺失层中随机抽取训练样本变量和测试样本变量，分别形成具有饱和层和缺失层的训练样本集和测试样本集，将所述训练样本集输入所述模型建立模块，将所述测试样本集输入所述数据测试模块；所述模型建立模块中，对所述饱和层中的训练样本采用罗切斯特回归模型建模，对所述缺失层中的训练样本采用朴素贝叶斯模型建模，并将得到一混合动态模型输入到所述数据测试模块中，所述混合动态模型包括有罗切斯特回归模型和朴素贝叶斯模型；所述数据测试模块中，将所述饱和层的测试样本输入所述混合动态模型中的罗切斯特回归模型中，将所述缺失层的测试样本输入所述混合动态模型中的朴素贝叶斯模型中，之后进行测试，得到并输出评分结果。所述饱和层包括可利用信息较多的样本，所述缺失层包括可利用信息较少的样本。从所述饱和层随机抽取的训练样本所占比例与所述缺失层中随机抽取的训练样本所占比例相同。从所述饱和层随机抽取的训练样本中目标变量的分布与原饱和层总样本目标变量的分布一致；从所述缺失层随机抽取的训练样本中目标变量的分布与原缺失层总样本目标变量的分布一致。所述模型建立模块中，所述罗切斯特回归模型的关键变量使用向前向后的逐步回归法进行选取。所述模型建立模块中，所述朴素贝叶斯模型通过判断训练样本的最大后验概率，对所述训练样本进行分类。本发明由于采取以上技术方案，其具有以下优点1、本发明由于采用了数据处理模块将原始样本集中各类样本变量分为饱和层和缺失层，通过样本抽样模块根据目标变量按照分层抽样原则，从饱和层和缺失层中随机抽取输入模型建立模块的训练样本变量和输入数据测试模块的测试样本变量，模型建立模块根据输入的训练样本建立了一罗切斯特-朴素贝叶斯混合动态模型，且混合动态模型包括罗切斯特模型和朴素贝叶斯模型，利用罗切斯特_朴素贝叶斯混合动态模型可以将饱和层和缺失层的测试样本变量分别输入混合动态模型中的罗切斯特模型、朴素贝叶斯模型中，得到并输出一评分结果，因此罗切斯特-朴素贝叶斯混合动态模型兼具罗切斯特模型和朴素贝叶斯模型的优点，形成优势互补，将得到的数据分类系统稳健性好，可解释性强，易于产生一个评分卡，而且简单、高效、精确度高。2、由于本发明首次采用通过样本分割的方式独立建模，针对不同样本的数据质量有效地利用了两类模型处理样本的相对优势，避免了由于数据预处理时原始样本集的噪声，及数据规模使模型变量约简效果不理想，导致影响分类效果的问题。本发明的系统可广泛应用于金融业、零售业和电信业中，可满足评价客户偿还能力和信用度，并且优化金融机构本身的资金运作能力，发现顾客购买模式和趋势，理解商业行为和捕捉盗用行为，设计更好的货品运输与分销策略等实际需求。图1是本发明的结构示意图具体实施例方式下面结合附图和实施例对本发明进行详细的描述。如图1所示，本发明的数据分类系统包括数据处理模块1、样本抽样模块2、模型建立模块3、数据测试模块4。其中，数据处理模块1的主要功能是根据输入的原始样本集中各类样本变量的缺失程度，来确定混合动态模型适用的样本分层规则。即在数据处理模块l中统计出原始样本集中各类样本变量的缺失值比率，以及各类样本变量之间的相关性和各样本变量的类型、分布等属性；当某一类样本变量的缺失值比率超过固定的阈值，且超过阈值的变量之间相关性超过规定值，并且这些样本变量的个数超过样本变量总和的1/3时，则将这些样本变量标记出来形成标记变量集；根据标记出来的变量集是否全部缺失的分层规则将原始样本集分成互不交叉的两层，即饱和层11和缺失层12，饱和层1是指可利用信息较多的样本变量，缺失层12是指可利用信息较少的样本变量。在样本抽样模块2中，根据目标变量的取值，从数据处理模块1分出的饱和层11随机抽取训练样本变量，形成饱和层11的训练样本集；从数据处理模块1分出的缺失层12中随机抽取训练样本变量，形成缺失层12的训练样本集。饱和层11和缺失层12中抽取的训练样本变量所占比例相同，饱和层11剩下的样本变量作为测试样本变量形成测试样本集，相应地，缺失层12剩下的样本变量作为测试样本变量形成测试样本集，因此测试样本变量所占比例也相同。且从饱和层11随机抽取的训练样本中目标变量的分布与原饱和层11总样本中目标变量的分布一致；从缺失层12随机抽取的训练样本中目标变量的分布与原缺失层11总样本中目标变量的分布一致。将饱和层11和缺失层12中抽取的训练样本集输入模型建立模块3，将饱和层11和缺失层12中剩下的测试样本集输入数据测试模块4中。例如，在汽车金融中，对输入的原始样本集根据目标变量的买车或不买车取值分层，饱和层11对应客户信息较多的客户信息，缺失层12对应客户信息较少的客户，随机抽取饱和层11中2/3的客户样本作为训练样本，随机抽取缺失层12中2/3的客户样本作为训练样本，但无论是饱和层11还是缺失层12，抽取的训练样本中买车客户所占的比例均分别与原样本层中买车客户比例相同，将两层中抽取出来的训练样本均输送给模型建立模块3。剩下饱和层11与缺失层12中的1/3样本作为测试样本输送给数据测试模块4中。训练样本集、测试样本集的结构如表1所示表1训练样本集、测试样本集的结构<table>tableseeoriginaldocumentpage6</column></row><table>在模型建立模块3中，对分别属于饱和层11的训练样本和缺失层12的训练样本分别考虑不同的混合动态模型。由于属于缺失层12的训练样本集的变量缺失值较多，可利用的信息较少，本发明采用朴素贝叶斯模型对这部分训练样本进行建模；而饱和层11的训练样本集的输入变量可利用的信息较多，如果同样使用朴素贝叶斯模型则会导致模型预测效果非常不稳定，对抽样的训练样本依赖性较大导致模型泛化性降低，因此采用传统、稳定的罗切斯特回归模型对这部分样本进行建模。1、对于饱和层11的训练样本集，运用罗切斯特回归模型进行建模，需要选取关键变量并确定回归系数。在实际的问题分析中能够获取的变量非常多，为了在拟合优度和变量个数之间达到最优平衡，本发明使用向前向后的逐步回归法来确定关键变量的选取。在模型选择方面，采用的判断标准包括F-test(方差齐性检验)、t-test(显著性检验)、adjustedR-square(风险系数调整)、最小MSE(均方误差)准则、AIC(AkaikeInformationCriterion,赤池信息准则)准则和BIC(BayesInformationCriterion,贝叶斯信息准则)准则等统计量。设从训练样本集中提取的关键变量ZpZ2、…、Zm为自变量，其中m为关键变量的个数；Q为二值目标变量，Q={0，1};P(Q=1)表示Q=1时的概率，P(Q=0)表示Q=0的概率，并且P(Q=1)+P(Q=0)=1。则模型方程如下log~^-^="o+iZi+a2Z2+...+amZ",(1)其中，a。、Ql、a2、…、am为回归模型的系数，可通过现有的标准软件计算，如数据挖掘与统计分析软件SAS和仿真软件MATLAB。2、对于缺失层12的训练样本集，朴素贝叶斯模型的分类步骤如下1)将训练样本集中的每个训练样本X用一个n维特征向量(Xl、x2、…、x》表示，分别描述对n个变量^、A2、…、An的度量值。2)假定训练样本有t类目标变量，分别为类q、C2、…、Ct，给定一个未知类标号的训练样本X，分类模型将预测训练样本X属于具有最大后验概率的类，即后验概率P(CiIX)>P(Cj|X)，i、j=1，…，t，且i^j。所以，对训练样本X的分类问题就转化为求取最大的后验概率P(CilX)的问题，由贝叶斯定理得后验概率P(CilX):其中，P(Xlci)为类Ci的样本中属于训练样本X的概率，P(Ci)为类Ci的先验概率，P(X)为训练样本X的先验概率。如果类Ci的先验概率P(Ci)未知，则通常假定所有的类都是等概率的，即P(c》=P(c2)二…二P(Ci)，并据此只对训练样本X为类Ci的概率P(Xlci)进行最大化，否则，就对P(Xlci)P(Ci)进行最大化。但由于训练样本X具有许多变量，因此计算P(Xl(O的开销可能非常大。为降低计算开销，可以做类条件独立的朴素假定，给定样本的类Ci，假定变量A、A2、…、An相互条件独立，即在变量间不存在依赖关系，由此腦c,)^尸".i。)(3)其中，P(Ci)、P(Xklc》，k二1，2，…，n，都可以采用极大似然估计来计算，则有P(0,，i^l0LH^(4)I"ir(c,)i7其中，|T|表示训练样本的总数，|T(Ci)I表示类Ci中的训练样本数，而|T(xk，Cj)表示在变量Ak，k=1，…，n上具有特征值xk的类Ci的训练样本数。3)对未知训练样本X分类，对每个类Ci，计算P(CilX)，当且仅当P(Xlci)P(Ci)>P(X|Cj)P(Cj)，i、j=1，…，t，且i-j时，训练样本X被划分到类Ci中。从理论上讲，与其它所有的分类算法相比，朴素贝叶斯模型具有最小的错误概率，在实践中，朴素贝叶斯模型可以与判定树和神经网络分类算法相媲美。甚至在类条件独立假定不满足的情形下，朴素贝叶斯分类依然有良好的表现，而且它的学习效率很高，给定具有n个变量的|T|个训练样本，学习时间复杂度为O(nlTl)。3、选取模型评价指标本发明结合罗切斯特回归模型和朴素贝叶斯模型的测试结果，将样本按从罗切斯特回归模型和朴素贝叶斯模型输出的估计概率的从高到低进行排序，为了方便比较结果，计算估计概率在10%、20%、30%、...、90%、100%分位数处的SuccessRate(区间转化率)、CumulativeRate(累积转化率)、Cumulative%ofTotalSuccess(转化样本占总转化样本的累积比率)以及LifeIndex(上升指数)的值，如表2所示。本发明中，定义SuccessRate=P(CiIX)，即训练样本X被划为类Ci的概率。表2模型评价指标Cumulative%ofTotalSuccessRateCumulativeRateCumulative%ofTotalSuccessLiftlndex30.0%7.00%10.32%50.19%0.0445本发明的实施例中，模型训练结果Cumulative%ofTotal(总转化样本的累积比率)排名前30%的训练样本的CumulativeRate为10.32X。其中该样本中的转化样本占总样本中转化样本的50.19%，即挑选出来的30%样本中包含了50.19%的转化样本，其中排名20%30%的样本中区间转化率为7.00%。对于商家来说，最为关注的是从海量的人中挑出潜在的客户群，这里本发明的动态分类模型提出两个概念Threshold(门槛)和MP(转化率)值；Threshold表示希望挑出来的潜在客户样本占总客户样本的比例，threshold取值需要根据总客户样本数量和商家希望锁定的目标客户群样本数量而定。而MP值则表示Threshold为固定值下的所选样本转化率。本发明的实施例中选定Threshold=25%时的MP值作为模型稳定性的评价指标之一，即在挑选模型时，MP值是作为训练模型选择指标之一。罗切斯特-朴素贝叶斯混合动态模型参数确定后，将测试数据输入至数据测试模块4中，数据测试模块4将根据数据处理模块1中确定的饱和层11和缺失层12分层规则，判断每条测试样本适用罗切斯特回归模型或朴素贝叶斯模型中的哪一类，并根据模型的种类将各参数代入相应模型中，计算出所有测试样本的区间转化率，除了自动排序后的模型评分结果，数据测试模块4也同样可以计算出给定Threshold值的MP值，或者计算出给定MP值的Threshold值。下面通过一个具体的实施例，对本发明系统的应用进行进一步说明。8对于某大型汽车金融公司提供的汽车消费者海量信息数据库，数据库包括九十多万条样本量，每条信息包括用户信息量的多少、请求购买车型、计划付款方式、打算购买时间以及其他人口统计信息等多维变量A、4、…、An。用户的购买状态作为分类的目标变量，共有两类用户购买目标函数为Cl=l，用户放弃目标函数为c2=0。本实施例建模的目的是采用数据挖掘方法，获得潜在汽车消费者分类模型，精确定位高购买倾向的潜在汽车购买客户群，进而根据每个客户的广告策略响应模型打分，确定针对每个客户最有效的宣传方式，选择最优广告策略，为决策的制定提供指导性的数据准备。在罗切斯特_朴素贝叶斯混合动态模型的建模分析过程中，首先在数据处理模块1中，通过相关性分析和变量属性分析，将原始样本集分为饱和层11和缺失层12。在样本抽样模块2中，将原始样本集按2:1的比例分为训练样本集和测试样本集，用2/3的样本来训练模型，用剩余1/3的样本对模型进行测试。在模型建立模块3的模型选择方面，本实施例中为了比较、分析罗切斯特-朴素贝叶斯混合动态模型的优越性，除了使用罗切斯特_朴素贝叶斯混合动态模型并得出其实施效果，还分别使用了罗切斯特回归模型、朴素贝叶斯模型、神经网络和支持向量机四种常用的分类方法，用做本发明罗切斯特_朴素贝叶斯混合动态模型的对比试验。I)罗切斯特回归模型使用罗切斯特回归模型对本发明的实施例的汽车消费者海量信息数据库进行建模，模型参数如表3所示，相对于表2所示的模型评价指标，罗切斯特回归模型对训练样本集的评价指标如表4所示，测试样本集的评价指标如表5所示表3:罗切斯特回归模型建立的模型参数<table>tableseeoriginaldocumentpage9</column></row><table>表4:训练样本集的评价指标<table>tableseeoriginaldocumentpage10</column></row><table><table>tableseeoriginaldocumentpage11</column></row><table>从结果可以看出，对于罗切斯特回归模型来说，开发样本的LiftIndex为0.6371，测试样本的LiftIndex为0.6386，两者非常接近，均高于0.62，说明Logistic回归模型的预测精度不错。经过计算的开发样本和测试样本的相关系数为0.9993，可见两者关联度非常高，即认为模型的稳健性非常好。II)朴素贝叶斯模型使用朴素贝叶斯模型对本发明的实施例的汽车消费者海量信息数据库进行建模，相对于表2所示的模型评价指标，朴素贝叶斯模型对训练样本集的评价指标如表6所示，测试样本集的评价指标如表7所示表6:训练样本集的评价指标<table>tableseeoriginaldocumentpage11</column></row><table><table>tableseeoriginaldocumentpage12</column></row><table>观察结果可知，朴素贝叶斯模型的训练样本集的LiftIndex为0.6527，要高于罗切斯特回归模型的0.6371;同时其分类后的前10%样本购买率达到16.3%，这也高于罗切斯特回归模型的14.68%。这说明在拟合准确度方面，朴素贝叶斯模型要高于罗切斯特回归模型。但继续观察测试样本集，发现其LiftIndex只有O.6103，再计算开发样本和测试样本的相关系数，也远不如罗切斯特回归模型，因此说明朴素贝叶斯模型尽管拟合准确度更高，但在预测稳健性方面较差。III)神经网络采用神经网络模型中最常见的三层BP网络结构，包括一个输入层、一个隐含层和一个输出层，对本发明的实施例的汽车消费者海量信息数据库进行建模，为提高分类效率，隐含层节点设为3个。相对于表2所示的模型评价指标，神经网络模型对训练样本集的评价指标如表8所示，测试样本集的评价指标如表9所示表8:训练样本集的评价指标<table>tableseeoriginaldocumentpage13</column></row><table>表9:测试样本集的评价指标<table>tableseeoriginaldocumentpage13</column></row><table><table>tableseeoriginaldocumentpage14</column></row><table>从结果可以看出，神经网络建模的评价指标结果无论是准确性还是稳健性都很不错。IV)支持向量机使用支持向量机模型对本发明的实施例的汽车消费者海量信息数据库进行建模，模型参数如表3所示，相对于表2所示的模型评价指标，支持向量机模型对训练样本集的评价指标如表10所示，测试样本集的评价指标如表11所示表10:训练样本集的评价指标<table>tableseeoriginaldocumentpage14</column></row><table><table>tableseeoriginaldocumentpage15</column></row><table>表11:测试样本集的评价指标<table>tableseeoriginaldocumentpage15</column></row><table>从结果可以看出，支持向量机方法得出的分类模型的开发样本和测试样本的LiftIndex都在0.59左右，低于之前的几种分类方法。这可能是由于支持向量机方法在处理大样本数据方面的不足造成的。V)罗切斯特_朴素贝叶斯混合动态模型在对前面罗切斯特回归模型、朴素贝叶斯模型、神经网络和支持向量机四种常用的分类方法建模后，可以发现几种方法中，朴素贝叶斯模型的分类精度最高，但稳健性较差；罗切斯特回归模型尽管分类精度稍差，但稳健性很好。经过具体的实验，本发明的罗切斯特-朴素贝叶斯混合动态模型的基本思路是首先针对开发样本，按照变量之间的相关性和变量属性将原始样本集分成两部分；可以发现其中一部分购买率达到7.5%，按另一部分购买率仅为4%，因此考虑对这两部分分别采用朴素贝叶斯模型和罗切斯特回归模型来建模，对模型的预测值混合排序、分组、评分，得到开发样本的评分模型，再将这一模型应用到测试样本中。相对于表2所示的模型评价指标，罗切斯特_朴素贝叶斯混合动态模型对训练样本集的评价指标如表12所示，测试样本集的评价指标如表13所示。表12:训练样本集的评价指标<table>tableseeoriginaldocumentpage16</column></row><table>表13:测试样本集的评价指标<table>tableseeoriginaldocumentpage17</column></row><table>从结果可以看出，罗切斯特-朴素贝叶斯混合动态模型的训练样本集的Liftlndex为0.6722，测试样本集的LiftIndex为0.6716，两者的前10%评分都高于16%，说明罗切斯特-朴素贝叶斯混合动态模型分类精度很好。计算开发样本和测试样本的LiftIndex相关系数，为0.9998，因此稳健性也非常好。综上所述，本发明的罗切斯特_朴素贝叶斯混合动态模型不仅可以提高预测的精度，又能保持很好的稳定性。权利要求一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统，其特征在于它包括数据处理模块、样本抽样模块、模型建立模块、数据测试模块；所述数据处理模块中，根据输入的原始样本集中各类样本变量的缺失值比率，以及各类样本变量之间的相关性和样本属性，将所述原始样本集分为饱和层和缺失层；所述样本抽样模块中，根据目标变量，从所述饱和层和缺失层中随机抽取训练样本变量和测试样本变量，分别形成具有饱和层和缺失层的训练样本集和测试样本集，将所述训练样本集输入所述模型建立模块，将所述测试样本集输入所述数据测试模块；所述模型建立模块中，对所述饱和层中的训练样本采用罗切斯特回归模型建模，对所述缺失层中的训练样本采用朴素贝叶斯模型建模，并将得到一混合动态模型输入到所述数据测试模块中，所述混合动态模型包括有罗切斯特回归模型和朴素贝叶斯模型；所述数据测试模块中，将所述饱和层的测试样本输入所述混合动态模型中的罗切斯特回归模型中，将所述缺失层的测试样本输入所述混合动态模型中的朴素贝叶斯模型中，之后进行测试，得到并输出评分结果。2.如权利要求1所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于所述饱和层包括可利用信息较多的样本，所述缺失层包括可利用信息较少的样本。3.如权利要求1所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于从所述饱和层随机抽取的训练样本所占比例与所述缺失层中随机抽取的训练样本所占比例相同。4.如权利要求2所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于从所述饱和层随机抽取的训练样本所占比例与所述缺失层中随机抽取的训练样本所占比例相同。5.如权利要求1或2或3或4所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于从所述饱和层随机抽取的训练样本中目标变量的分布与原饱和层总样本目标变量的分布一致；从所述缺失层随机抽取的训练样本中目标变量的分布与原缺失层总样本目标变量的分布一致。6.如权利要求1或2或3或4所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于所述模型建立模块中，所述罗切斯特回归模型的关键变量使用向前向后的逐步回归法进行选取。7.如权利要求5所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于所述模型建立模块中，所述罗切斯特回归模型的关键变量使用向前向后的逐步回归法进行选取。8.如权利要求1或2或3或4或7所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于所述模型建立模块中，所述朴素贝叶斯模型通过判断训练样本的最大后验概率，对所述训练样本进行分类。9.如权利要求5所述的一种基于罗切斯特模型_朴素贝叶斯模型的数据分类系统，其特征在于所述模型建立模块中，所述朴素贝叶斯模型通过判断训练样本的最大后验概率，对所述训练样本进行分类。10.如权利要求6所述的一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统，其特征在于所述模型建立模块中，所述朴素贝叶斯模型通过判断训练杆本的最大后验概率，对所述训练样本进行分类。全文摘要本发明涉及一种基于罗切斯特模型-朴素贝叶斯模型的数据分类系统，它包括一数据处理模块根据输入的原始样本集中各类样本变量的缺失值比率，以及各类样本变量之间的相关性和样本属性，将原始样本集分为饱和层和缺失层；一样本抽样模块根据目标变量，从饱和层和缺失层中随机抽取训练样本变量和测试样本变量，分别形成具有饱和层和缺失层的训练样本集和测试样本集；一模型建立模块对饱和层中的训练样本采用罗切斯特回归模型建模，对缺失层中的训练样本采用朴素贝叶斯模型建模，得到一具有罗切斯特回归模型和朴素贝叶斯模型的混合动态模型；一数据测试模块将饱和层的测试样本输入混合动态模型中的罗切斯特回归模型中，将缺失层的测试样本输入混合动态模型中的朴素贝叶斯模型中，之后进行测试，得到并输出评分结果。本发明兼具罗切斯特回归模型和朴素贝叶斯模型的优点，形成优势互补，可以广泛应用在金融业、零售业和电信业中。文档编号G06F17/30GK101719147SQ20091023821公开日2010年6月2日申请日期2009年11月23日优先权日2009年11月23日发明者尹留志申请人:合肥兆尹信息科技有限责任公司