一种针对于预估模型的数据处理方法及装置的制造方法

文档序号:9471984阅读:249来源:国知局
一种针对于预估模型的数据处理方法及装置的制造方法
【技术领域】
[0001]本发明涉及预估模型训练技术领域,特别是涉及一种针对于预估模型的数据处理方法及装置。
【背景技术】
[0002]现有技术中,预估模型是常用的一种模型,能够为数据应用提供针对性的参考信息,例如:作为预估模型的广告点击率预估模型能够为广告投放提供针对性的参考信息。在预估模型的每次训练时,需要利用到基于上次模型训练的输出数据所形成的历史特征信息和基于本次训练所对应数据采集时间段内的用户操作所生成的用户日志数据,其中,历史特征信息中包括多组特征描述信息,特征描述信息与特征一一对应,每一特征描述信息中包括特征名和训练所得的特征值;具体训练过程为:从用户日志数据中所需的目标特征的目标特征名,并且,构建每一目标特征各自所对应的特征描述信息,其中,每一目标特征所对应的特征描述信息包括目标特征名和默认特征值,每一目标特征所对应的默认特征值均相同;进而,将历史特征信息中的多组特征描述信息和目标特征所对应的特征描述信息作为该广告点击率预估模型的输入数据进行训练,得到输出数据。其中,历史特征信息中的特征描述信息所涉及的特征和目标特征通常存在相同的。
[0003]对于预估模型而言,由于每次训练会增加新的特征,累积到一定数量,训练数据的数据量将过大,导致训练时无法一次性读入到内存,因此,为了避免数据量过大,所使用的历史特征信息所涉及的时段有限,不能无限累积,但是,这样会带来特征缺少,使得所训练的预估模型的精准性受到影响。

【发明内容】

[0004]本发明实施例的目的在于提供一种针对于预估模型的数据处理方法及装置,以在降低训练数据的数据量大小的同时保证特征的完整,从而保证所训练预估模型的精准性。具体技术方案如下:
[0005]第一方面,本发明实施例提供了一种针对于预估模型的数据处理方法,包括:
[0006]获得从用户日志数据中提取的多个目标特征的目标特征名,其中,所述用户日志数据为基于本次训练所对应数据采集时间段内的用户操作所生成的日志数据;
[0007]获得历史特征信息,其中,所述历史特征信息为预先保存的且基于上一次训练所述预估模型所得的输出数据所生成;
[0008]对所述目标特征名和所述历史特征信息进行累加处理,得到待利用的多组特征描述信息,其中,所述待利用的多组特征描述信息中的特征名各不相同且特征值基于所述历史特征信息确定;
[0009]将所述待利用的多组特征描述信息作为输入数据对所述预估模型进行训练,得到作为输出数据的多组特征描述信息。
[0010]可选的,本发明实施例所提供的一种针对于预估模型的数据处理方法还包括:
[0011]基于作为输出数据的多组特征描述信息,按照预定更新方式更新所述历史特征信息;其中,所述预定更新方式包括:
[0012]分别判断作为输出数据的每一组特征描述信息中的特征名是否与所述历史特征信息所包括一组特征描述信息中的特征名相同,如果相同,将所述历史特征信息所包括该组特征描述信息中的特征值更新为作为输出数据的该组特征描述信息中的特征值,否则,在所述历史特征信息中增加作为输出数据的该组特征描述信息。
[0013]可选的,所述待利用的多组特征描述信息中的特征名均为目标特征名。
[0014]可选的,所述待利用的多组特征描述信息中的特征名包括目标特征名和所述历史特征信息所包括的特征描述信息中与所述目标特征名不同的特征名。
[0015]可选的,待利用的任意一组的特征描述信息中特征值的确定方式,包括:
[0016]如果待利用的当前组的特征描述信息中的特征名与所述历史特征信息所包括的一组特征描述信息中的特征名相同,则该当前组的特征描述信息中的特征值为所述历史特征信息中该组特征描述信息中的特征值;
[0017]如果待利用的当前组的特征描述信息中的特征名与所述历史特征信息所包括特征描述信息中的特征名均不相同,则该当前组的特征描述信息中的特征名所对应的特征值为默认值。
[0018]可选的,所述将所述待利用的多组特征描述信息作为输入数据对所述预估模型进行训练,得到作为输出数据的多组特征描述信息,包括:
[0019]确定训练所述预估模型所需的目标函数,其中,所述目标函数为:f(特征名,特征值)=训练后特征值;
[0020]基于待利用的多组特征描述信息和所述目标函数,得到所述多组特征描述信息中的特征名所对应的训练后特征值;
[0021]将所述待利用的多组特征描述信息中的特征名和相应训练后特征值构成作为输出数据的特征描述信息。
[0022]第二方面,本发明实施例提供了一种针对于预估模型的数据处理装置,包括:
[0023]目标特征名获得模块,用于获得从用户日志数据中提取的多个目标特征的目标特征名,其中,所述用户日志数据为基于本次训练所对应数据采集时间段内的用户操作所生成的日志数据;
[0024]历史特征信息获得模块,用于获得历史特征信息,其中,所述历史特征信息为预先保存的且基于上一次训练所述预估模型所得的输出数据所生成;
[0025]累加处理模块,用于对所述目标特征名和所述历史特征信息进行累加处理,得到待利用的多组特征描述信息,其中,所述待利用的多组特征描述信息中的特征名各不相同且特征值基于所述历史特征信息确定;
[0026]模型训练模块,用于将所述待利用的多组特征描述信息作为输入数据对所述预估模型进行训练,得到作为输出数据的多组特征描述信息。
[0027]可选的,本发明实施例所提供的一种针对于预估模型的数据处理装置,还包括:
[0028]历史特征信息更新模块,用于基于作为输出数据的多组特征描述信息,按照预定更新方式更新所述历史特征信息;其中,所述预定更新方式包括:
[0029]分别判断作为输出数据的每一组特征描述信息中的特征名是否与所述历史特征信息所包括一组特征描述信息中的特征名相同,如果相同,将所述历史特征信息所包括该组特征描述信息中的特征值更新为作为输出数据的该组特征描述信息中的特征值,否则,在所述历史特征信息中增加作为输出数据的该组特征描述信息。
[0030]可选的,所述待利用的多组特征描述信息中的特征名均为目标特征名。
[0031]可选的,所述待利用的多组特征描述信息中的特征名包括目标特征名和所述历史特征信息所包括的特征描述信息中与所述目标特征名不同的特征名。
[0032]可选的,待利用的任意一组的特征描述信息中特征值的确定方式,包括:
[0033]如果待利用的当前组的特征描述信息中的特征名与所述历史特征信息所包括的一组特征描述信息中的特征名相同,则该当前组的特征描述信息中的特征值为所述历史特征信息中该组特征描述信息中的特征值;
[0034]如果待利用的当前组的特征描述信息中的特征名与所述历史特征信息所包括特征描述信息中的特征名均不相同,则该当前组的特征描述信息中的特征名所对应的特征值为默认值。
[0035]可选的,所述模型训练模块包括:
[0036]目标函数确定单元,用于确定训练所述预估模型所需的目标函数,其中,所述目标函数为:f(特征名,特征值)=训练后特征值;
[0037]特征值获得单元,用于基于待利用的多组特征描述信息和所述目标函数,得到所述多组特征描述信息中的特征名所对应的训练后特征值;
[0038]输出数据确定单元,用于将所述待利用的多组特征描述信息中的特征名和相应训练后特征值构成作为输出数据的特征描述信息
[0039]本发明实施例中,在针对于预估模型的数据处理过程中,获得从用户日志数据中提取的多个目标特征的目标特征名;获得历史特征信息,该历史特征信息为预先保存的且基于上一次训练该预估模型所得的输出数据所生成;对该目标特征名和所述历史特征信息进行累加处理,得到
当前第1页1 2 3 4 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1