带权重的文章标识方法和装置的制造方法_2

文档序号:9826244阅读:来源:国知局
数少,其能体现文章多个词的重要程度,所以在需要根据文章多个词的重要程度分析问题时,可以使用扩展后的标题替代文章进行使用。
[0041]本发明的另一实施例中提供了一种带权重的文章标识装置,相比于前述的实施例,本实施例的带权重的文章标识装置,权重值计算模块220统计多个词在文章中的词频,根据多个词在文章中的词频,计算多个词的权重值。在本实施例中,越重要的词在文章中出现的频率就越高,所以根据词频可以判断多个词的权重。
[0042]如图3所示,本发明的另一实施例中提供了一种带权重的文章标识装置,相比于前述的实施例,本实施例的带权重的文章标识装置,还包括:
[0043]权值调整模块310,用于对多个词的权重值进行调整,使得多个词的权重值均为预设值的整数倍。在本实施例中,由于标题中词的个数只能够按整数进行增加,所以需要对多个词的权重值进行调整,使得多个词的权重值的比值不至过于复杂,导致标题中扩展了大量的词,从而影响了标题的简要性。
[0044]本发明的另一实施例中提供了一种带权重的文章标识装置,相比于前述的实施例,本实施例的带权重的文章标识装置,还包括:
[0045]设置模块320,用于根据多个词的权重值中的最小值设置预设值。在本实施例中,将多个词的权重值中的最小值设置预设值,使得标题中的至少一个词只出现一次,从而可以保证标题的长度不至过长。
[0046]本发明的另一实施例中提供了一种带权重的文章标识装置,相比于前述的实施例,本实施例的带权重的文章标识装置,
[0047]标识模块140取扩展后的标题的最小哈希值对文章进行标识。根据本实施例的技术方案,例如对于一篇文章《明星新片尺度大职场御姐范儿就得这么穿》,如果直接用标题的最小哈希值标识文章,则该值可能与《欧美风服饰搭配晋级职场御姐范儿》这些文章对应的值相近,但两篇文章的重点并不相同;本实施例中,可以根据权重比如(tfidf,词频)算出“明星”的权重比较高,比如这篇文章中“明星”的权重为0.4,“新片”的权重为0.2,其他词的权重为0.1,那么将标题扩展为《明星明星明星明星新片新片尺度大职场御姐范儿就得这么穿》,再计算最小哈希值,则得到的值能够反映多个词的不同重要程度。
[0048]在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
[0049]在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
[0050]类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循【具体实施方式】的权利要求书由此明确地并入该【具体实施方式】,其中每个权利要求本身都作为本发明的单独实施例。
[0051]本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
[0052]此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
[0053]本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的带权重的文章标识装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
[0054]应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
【主权项】
1.一种带权重的文章标识方法,其特征在于,包括: 对文章对应的标题进行分词得到多个词; 计算所述多个词的权重值;所述多个词的权重值反应所述多个词在所述文章中的重要程度; 根据所述多个词的权重值,扩展所述文章对应的标题中所述多个词中至少一个词的数量,使所述多个词的数量与所述多个词的权重值相对应; 以扩展后的标题对所述文章进行标识。2.根据权利要求1所述的方法,其特征在于,计算所述多个词的权重值,具体包括: 统计所述多个词在所述文章中的词频,根据所述多个词在所述文章中的词频,计算所述多个词的权重值。3.根据权利要求1-2任一项所述的方法,其特征在于,在根据所述多个词的权重值,扩展所述文章对应的标题中所述多个词中至少一个词的数量之前,还包括: 对所述多个词的权重值进行调整,使得所述多个词的权重值均为预设值的整数倍。4.根据权利要求1-3任一项所述的方法,其特征在于,在对所述多个词的权重值进行调整,使得所述多个词的权重值均为预设值的整数倍之前,还包括: 根据所述多个词的权重值中的最小值设置所述预设值。5.根据权利要求1-4任一项所述的方法,其特征在于,以扩展后的标题对所述文章进行标识,具体包括: 取所述扩展后的标题的最小哈希值对所述文章进行标识。6.一种带权重的文章标识装置,其特征在于,包括: 分词模块,用于对文章对应的标题进行分词得到多个词; 权重值计算模块,用于计算所述多个词的权重值;所述多个词的权重值反应所述多个词在所述文章中的重要程度; 扩展模块,用于根据所述多个词的权重值,扩展所述文章对应的标题中所述多个词中至少一个词的数量,使所述多个词的数量与所述多个词的权重值相对应; 标识模块,用于以扩展后的标题对所述文章进行标识。7.根据权利要求6所述的装置,其特征在于,所述权重值计算模块统计所述多个词在所述文章中的词频,根据所述多个词在所述文章中的词频,计算所述多个词的权重值。8.根据权利要求6-7任一项所述的装置,其特征在于,还包括: 权值调整模块,用于对所述多个词的权重值进行调整,使得所述多个词的权重值均为预设值的整数倍。9.根据权利要求6-8任一项的装置,其特征在于,还包括: 设置模块,用于根据所述多个词的权重值中的最小值设置所述预设值。10.根据权利要求6-9任一项所述的装置,其特征在于, 所述标识模块取所述扩展后的标题的最小哈希值对所述文章进行标识。
【专利摘要】本发明提供一种带权重的文章标识方法和装置,方法包括:对文章对应的标题进行分词得到多个词;计算多个词的权重值;多个词的权重值反应多个词在文章中的重要程度;根据多个词的权重值,扩展文章对应的标题中多个词中至少一个词的数量,使多个词的数量与多个词的权重值相对应;以扩展后的标题对文章进行标识。根据本发明,根据文章标题中各个词的重要程度为各个词计算了权重值,并根据权重值大小对文章标题中相应的词进行了扩展,扩展后的标题中权重值较大的词占比增大,这相当于扩展后的标题也能体现文章多个词的重要程度,所以在需要根据文章多个词的重要程度分析问题时,可以使用扩展后的标题替代文章进行使用。
【IPC分类】G06F17/27
【公开号】CN105589847
【申请号】CN201510976010
【发明人】张伸正, 魏少俊, 陈培军
【申请人】北京奇虎科技有限公司, 奇智软件(北京)有限公司
【公开日】2016年5月18日
【申请日】2015年12月22日
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1