一种搜索引擎抓取网页开放式摘要信息的方法及装置制造方法
【专利摘要】本发明的实施例公开了一种搜索引擎抓取网页开放式摘要信息的方法及装置，其中该方法包括：在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；以及在检测到网页信息中包含标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的结构相映射的网页内容。通过本发明的实施例能够调整搜索引擎抓取的开放式摘要信息的内容，极大地丰富了网页摘要信息展示的形式。
【专利说明】—种搜索引擎抓取网页开放式摘要信息的方法及装置
【技术领域】
[0001]本发明属于计算机【技术领域】，尤其涉及一种搜索引擎抓取网页开放式摘要信息的方法及装置。
【背景技术】。
[0002]用户在使用搜索引擎进行搜索时，搜索引擎会根据用户输入的搜索关键词返回多个搜索结果并展示给用户查看，然而不同的用户有时候会有不同的偏好的站点。目前主流的搜索引擎，在抓取网站内容时仅是根据简单的robots协议(也称为爬虫协议、爬虫规则、机器人协议等)进行提取，在用户搜索时根据匹配度提供简单的信息展示，由此使得网站信息与用户搜索需求匹配度不高，展示效果差，搜索结果转化率低，内容无法验证等多个技术问题。
【发明内容】
[0003]鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的搜索引擎抓取网页开放式摘要信息的方法及装置，丰富搜索结果展示的效果。
[0004]为了达到上述目的，本发明的实施例的一个方面提供了一种搜索引擎抓取网页开放式摘要信息的方法，包括:在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；以及在检测到网页信息中包含标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的结构相映射的网页内容。
[0005]可选地，每个网页包括一个或者多个开放式摘要信息，每个开放式摘要信息与相应的网页的关键词相关联。
[0006]可选地，与开放式摘要信息中描述的结构相映射的网页内容包括以下的至少一种:文子、图片、链接、视频和首频。
[0007]可选地，该方法还包括:验证开放式摘要信息的渲染结果、和/或验证开放式摘要信息的格式、和/验证开放式摘要信息的网页内容；在验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回根据协议头以及内容对开放式摘要信息进行渲染的渲染结果，以作为所述搜索请求的搜索结果。
[0008]可选地，该方法还包括:在验证未通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0009]可选地，验证开放式摘要信息的格式的步骤包括:验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值；
[0010]所述验证开放式摘要信息的内容的步骤包括:验证开放式摘要信息的内容中是否包含特定元素。
[0011]可选地，特定元素包括价格和折扣信息中的至少一个。
[0012]可选地，开放式摘要信息采用HTML、HTML5、JavaScript、Flash、或CSS的格式。
[0013]根据本发明的实施例的另一个方面提供了一种搜索引擎抓取网页开放式摘要信息的装置，其包括:检测模块，用于在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；以及抓取模块，用于在检测到网页信息中包含所述标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的所述结构相映射的网页内容。
[0014]可选地，每个网页包括一个或者多个开放式摘要信息，每个开放式摘要信息与相应的网页关键词网页的关键词相关联。
[0015]可选地，与开放式摘要信息中描述的结构相映射的网页内容包括以下的至少一种:文子、图片、链接、视频和首频。
[0016]可选地，该装置还包括:验证模块，用于验证开放式摘要信息的渲染结果、和/或验证开放式摘要信息的格式、和/或验证开放式摘要信息的网页内容；在验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回根据协议头以及网页内容对开放式摘要信息进行渲染的渲染结果，以作为所述搜索请求的搜索结果。
[0017]可选地，该验证模块还用于在验证未通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0018]可选地，该验证模块进一步用于验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值；或者验证模块进一步用于验证开放式摘要信息的内容中是否包含特定元素。
[0019]在本发明的实施例中，在抓取网页信息时，当检测到网页信息中包含标识时，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的结构相映射的网页内容，从而便于调整搜索引擎抓取网页开放式摘要信息的内容，极大地丰富了网页摘要信息展示的形式。例如:以与开放式摘要信息中描述的结构相映射的网页内容为文字内容为例，该开放式摘要信息包括:旨在让用户大体了解网页上的内容的相关信息，以及与用户的搜索查询有何关联的信息。举例:评级、评论之外，还可以添加诸如“产品的图片”、“产品的价格”、“是否有库存”等等帮助用户确定搜索相关度的信息。如果搜索引擎了解网页上的内容，就可以根据内容在搜索结果中展示上面这种搜索结果。这种搜索结果可以帮助搜索用户直观的了解网站与用户的搜索初衷是否相关和匹配，从而获得更高的点击率。
[0020]上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的【具体实施方式】。
【专利附图】
【附图说明】
[0021]通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中:
[0022]图1示出了根据本发明一个实施例的搜索引擎抓取网页开放式摘要信息的方法100的流程图；
[0023]图2示出了根据本发明一个实施例的验证网页开放式摘要信息的方法200的流程图[0024]图3示出了根据本发明一个实施例的搜索引擎提供网页开放式摘要信息的方法300的流程图；
[0025]图4示出了根据本发明另一个实施例的搜索引擎提供网页开放式摘要信息的方法400的流程图；
[0026]图5示出了根据本发明一个实施例的搜索引擎抓取网页开放式摘要信息的装置500的结构框图；
[0027]图6示出了根据本发明一个实施例的验证网页开放式摘要信息的装置600的结构框图；
[0028]图7示出了根据本发明一个实施例的搜索引擎提供网页开放式摘要信息的装置700的结构框图；以及
[0029]图8示出了根据本发明另一个实施例的搜索引擎提供网页开放式摘要信息的装置800的结构框图。
【具体实施方式】
[0030]下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
[0031]在本发明的实施例中，为了增强搜索结果展示的效果，搜索引擎可以抓取网页开放式摘要信息，然后搜索引擎将抓取得到的一个或多个网页开放式摘要信息作为搜索结果进行展示。可选地，在抓取到网页开放式摘要信息后，可对网页开放式摘要信息进行验证，在验证通过后，搜索引擎将网页开放式摘要信息作为搜索结果进行展示。
[0032]其中，上述搜索引擎是指根据一定的策略、运用特定的计算机程序从互联网上搜集信息，在对信息进行组织和处理后，为用户提供检索服务，将用户检索相关的信息展示给用户的系统。
[0033]上述开放式摘要信息可以由网站结合网页关键词一并提供，并需通过搜索引擎的验证系统通过后，才予以展示，该开放式摘要信息包括:旨在让用户大体了解网页上的内容的相关信息，以及与用户的搜索查询有何关联的信息。举例:评级、评论之外，还可以添加诸如“产品的图片”、“产品的价格”、“是否有库存”等等帮助用户确定搜索相关度的信息。当然可以理解的是，在本发明的实施例中并不限定开放式摘要信息的表现形式。
[0034]实施例一
[0035]下面首先介绍搜索引擎抓取网页开放式摘要信息的方法，具体包括:在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；在检测到网页信息中包含标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与其中描述的结构相映射的网页内容。
[0036]如图1所示，为本发明的实施例中的搜索引擎抓取网页开放式摘要信息的方法100的流程图，该方法100始于步骤S110。在步骤SllO中，在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识。
[0037]其中，通过预设的开放式摘要信息的标识来判断抓取的网页信息中是否包含开放式摘要信息，在本发明的实施例中并不限定上述预设的开放式摘要信息的标识的具体形式。
[0038]可选地，在本发明的实施例中，每个网页可以包括一个或多个开放式摘要信息，每个开放式摘要信息与相应的网页的关键词相关联。当用户输入的搜索关键词能够与网页的关键词相匹配时，搜索引擎可返回并展示与该网页的关键词相关联的开放式摘要信息。
[0039]其中，开放式摘要信息可以采用HTML (Hypertext Markup Language,超文本标记语言)、HTML5、JavaScript、Flash、或 CSS (Cascading Style Sheet,级联样式表)的格式。当然可以理解的是，在本发明的实施例中并不限定开放式摘要信息的具体格式。
[0040]在检测到网页信息中包含标识的情况下，进入步骤S130，在步骤S130中，抓取网页信息中描述开放式摘要信息的结构的协议头以及与其中描述的结构相映射的网页内容。[0041 ] 可选地，在本发明的实施例中，与开放式摘要信息中描述的结构相映射的网页内容包括以下的至少一种:文字、图片、链接、视频和音频。当然可以理解的是，在本发明的实施例中并不限定网页内容的具体类型。
[0042]可选地，在步骤S130之后，可进入步骤S150。在步骤S150中，验证开放式摘要信息的渲染结果、和/或验证开放式摘要信息的格式、和/验证开放式摘要信息的网页内容。
[0043]可选地，在本发明的实施例中，步骤S150中，验证开放式摘要信息的格式的步骤包括:验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值。
[0044]例如:预先定义的阈值为400pxX170px，如果开放式摘要信息所占网页区域的大小超出400pxX170px时，则验证不通过。当然可以理解的是，在本发明的实施例中并不限定阈值的具体范围。
[0045]可选地，在本发明的实施例中，步骤S150中，验证开放式摘要信息的内容的步骤包括:验证开放式摘要信息的内容中是否包含特定元素。可选地，特定元素包括价格和折扣率中的至少一个。
[0046]例如:如果开放式摘要信息的内容包括某款产品或某项服务的具体价格和/或折扣率时，则验证不通过。因此，通过本发明的实施例搜索引擎提供的开放式摘要信息可以仅提供一个抽象内容，而不提供其他可能的含义或行为，例如价格竞争等。当然可以理解的是，在本发明的实施例中并不限定特定元素的具体内容。
[0047]可选地，在本发明的实施例中，在步骤S150验证通过的情况下，可以进入步骤S170。
[0048]在步骤S170中，在验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回根据协议头以及网页内容对开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。例如:采用现有的渲染方式，根据协议头和网页内容对开放式摘要信息进行渲染，在此不再敷述。
[0049]可选地，在本发明的实施例中，在步骤S150验证未通过的情况下，可进入步骤S190。
[0050]在步骤S190中，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0051]其中，上述默认摘要信息可以是指采用Sitemap (站点地图)协议抓取的网页摘要信息，或者由搜索引擎自动识别网页页面中可优化展示的部分。当然可以理解的是，在本发明的实施例中并不限定默认摘要信息的抓取方式。
[0052]在本发明的实施例中，在抓取网页信息时，当检测到网页信息中包含标识时，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的结构相映射的网页内容，从而便于调整搜索引擎抓取网页开放式摘要信息的内容，极大地丰富了网页摘要信息展示的形式。
[0053]例如:以与开放式摘要信息中描述的结构相映射的网页内容为文字为例，该开放式摘要信息包括:旨在让用户大体了解网页上的内容的相关信息，以及与用户的搜索查询有何关联的信息。举例:“评级”、“评论”之外，还可以添加诸如“产品的图片”、“产品的价格”、“是否有库存”等等帮助用户确定搜索相关度的信息。如果搜索引擎了解网页上的内容，就可以根据内容在搜索结果中展示上面这种搜索结果。这种搜索结果可以帮助搜索用户直观的了解网站与用户的搜索初衷是否相关和匹配，从而获得更高的点击率。
[0054]需要说明的是，图1所示的方法并不限定按所示的各步骤的顺序进行，可以根据需要调整各步骤的先后顺序，另外，所述步骤也不限定于上述步骤划分，上述步骤可以进一步拆分成更多步骤也可以合并成更少步骤。
[0055]实施例二
[0056]在搜索引擎抓取网页开放式摘要信息之后，可以对开放式摘要信息进行验证。下面介绍验证网页搜索引擎验证网页开放式摘要信息的方法，具体包括:在检测到网页信息中包含预设的开放式摘要信息的标识的情况下，验证对开放式摘要信息进行渲染的渲染结果是否成功；如果渲染结果成功，根据预先定义的规则，验证开放式摘要信息的格式和/验证开放式摘要信息的网页内容。
[0057]如图2所示，为本发明的实施例中验证网页开放式摘要信息的方法200的示意图，该方法200始于步骤S210。
[0058]在步骤S210中，在检测到网页信息中包含预设的开放式摘要信息的标识的情况下，验证对开放式摘要信息进行渲染的渲染结果是否成功。
[0059]其中，通过预设的开放式摘要信息的标识来判断抓取的网页信息中是否包含开放式摘要信息，当然可以理解的是，在本发明的实施例中并不限定上述预设的开放式摘要信息的标识的具体形式。
[0060]可选地，在本发明的实施例中，开放式摘要信息可以采用HTML、HTML5、JavaScript、Flash或CSS的格式。当然可以理解的是，在本发明的实施例中并不限定开放式摘要信息的具体格式。
[0061]可选地，在本发明的实施例中，可以采用JavaScript脚本语言验证对开放式摘要信息进行渲染的渲染结果是否成功，当然可以理解的是，在本发明的实施例中并不限定验证对开放式摘要信息进行渲染的渲染结果是否成功的具体方式。
[0062]随后，如果渲染结果成功，在步骤S230中，根据预先定义的规则，验证开放式摘要信息的格式和/验证开放式摘要信息的网页内容。
[0063]可选地，在本发明的实施例中，预定义的规则可以是:验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值。例如:预先定义的阈值为400pxX170px，如果开放式摘要信息所占网页区域的大小超出400ρΧΧ170ρΧ，则验证不通过。当然可以理解的是，在本发明的实施例中并不限定阈值的具体范围。[0064]或者，在本发明的实施例中，预定义的规则也可以是:验证开放式摘要信息的内容中是否包含特定元素。例如:特定元素包括某款产品或某项服务的具体价格和折扣率中的至少一个。如果开放式摘要信息的内容包括价格和/或折扣率，则验证不通过。因此，通过本发明的实施例搜索引擎提供的开放式摘要信息可以仅提供一个抽象内容，而不提供其他可能的含义或行为，例如价格竞争等。当然可以理解的是，在本发明的实施例中并不限定特定元素的具体内容。
[0065]同样，可以理解的是，在本发明的实施例中并不限定预先定义的规则。
[0066]可选地，在本发明的实施例中，该网页内容包括以下的至少一种:文字、图片、链接、视频和音频。当然可以理解的是，在本发明的实施例中并不限定网页内容的具体类型。
[0067]可选地，在本发明的实施例中，在步骤S230之后，在渲染结果、开放式摘要信息的格式或网页内容的验证通过的情况下，进入步骤S250。
[0068]在步骤S250中，在接收到与网页的关键词相匹配的搜索请求时，返回网页的开放式摘要信息的渲染结果，以作为搜索请求的搜索结果。
[0069]可选地，在本发明的实施例中，搜索结果可以采用HTML、SHTML、HTML5、或XML(Extensible Markup Language,可扩展标记语言)的格式，当然可以理解的是,在本发明的实施例中并不限定搜索结果的具体格式。
[0070]可选地，在步骤S230之后，在渲染结果、开放式摘要信息的格式或网页内容的验证未通过的情况下,进入步骤S270。
[0071]在步骤S270中，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0072]上述默认摘要信息可以采用现有的sitemap协议等方式从一个或多个网页中抓取得到。
[0073]需要说明的是，图2所示的方法并不限定按所示的各步骤的顺序进行，可以根据需要调整各步骤的先后顺序，另外，所述步骤也不限定于上述步骤划分，上述步骤可以进一步拆分成更多步骤也可以合并成更少步骤。
[0074]实施例三
[0075]在搜索引擎抓取到一个或多个网页开放式摘要信息，或者在开放式摘要信息验证通过后，搜索引擎可以将网页开放式摘要信息作为搜索结果，并展示开放式摘要信息。下面介绍搜索引擎提供网页开放式摘要信息的方法。
[0076]在本发明的实施例中，搜索引擎提供网页开放式摘要信息的方法，具体包括:接收搜索请求；在开放式摘要数据库中查找与搜索请求相匹配的网页；对于与搜索请求相匹配的网页，返回对开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。
[0077]如图3所示，为本发明的实施例中搜索引擎提供网页开放式摘要信息的方法300的示意图，该方法始于步骤S310，在步骤S310中，接收搜索请求。
[0078]例如:用户在搜索栏中输入搜索关键词；然后客户端将搜索关键词构成的URL(Uniform Resource Locator,统一资源定位符)发送给网络侧的搜索引擎。
[0079]随后，在步骤S330中，在开放式摘要数据库中查找与搜索请求相匹配的开放式摘要信息。其中，开放式摘要数据库中预先存储有一个或多个开放式摘要信息。
[0080]可选地，在本发明的实施例中，网页内容包括以下的至少一种:文字、图片、链接、视频和音频，当然可以理解的是，在本发明的实施例中并不限定网页内容的具体类型。
[0081]随后，在步骤S350中，对于与搜索请求相匹配的开放式摘要信息，返回对开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。可选地，在搜索结果中，包含搜索结果排在靠前的位置的开放式摘要信息。
[0082]可选地，在本发明的实施例中，在步骤S350中，在网页包括多个开放式摘要信息的情况下，确定与搜索请求最相匹配的开放式摘要信息，并且返回对最相匹配的开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。
[0083]在本发明的实施例中，可采用现有的搜索引擎算法根据搜索请求计算得到多个匹配的开放式摘要信息，然后从多个开放式摘要信息中确定出最相匹配的开放式摘要信息。
[0084]可选地，在本发明的实施例中，搜索结果采用HTML、SHTML、HTML5、或XML的格式，当然可以理解的是，在本发明的实施例中并不限定搜索结果的具体格式。
[0085]可选地，在本发明的实施例中，在步骤S350中，根据网页信息中描述开放式摘要信息的结构的协议头以及与其中描述的结构相映射的网页内容，对开放式摘要信息进行渲染。
[0086]可选地，在本发明的实施例中，网页内容包括以下的至少一种:文字、图片、链接、视频和音频，当然可以理解的是，在本发明的实施例中并不限定网页内容的具体类型。
[0087]可选地，在本发明的实施例中，采用HTML、HTML5、JavaScript、Flash、或CSS的格式，根据协议头以及网页内容，对开放式摘要信息进行渲染。
[0088]可选地，在本发明的实施例中，搜索结果采用HTML、SHTML、HTML5、或XML的格式，当然可以理解的是，在本发明的实施例中并不限定搜索结果的格式。
[0089]可选地，在本发明的实施例中，在接收搜索请求的步骤(S310)中，从客户端接收搜索请求，并且在网页包括开放式摘要信息的情况下，返回对开放式摘要信息进行渲染的渲染结果以作为搜索请求的搜索结果的步骤(S330)中，向客户端返回渲染结果，以在客户端上作为搜索结果进行展示。
[0090]需要说明的是，图3所示的方法并不限定按所示的各步骤的顺序进行，可以根据需要调整各步骤的先后顺序，另外，所述步骤也不限定于上述步骤划分，上述步骤可以进一步拆分成更多步骤也可以合并成更少步骤。
[0091]实施例四
[0092]下面介绍另一种实现搜索引擎提供网页开放式摘要信息的方法，具体包括:在抓取网页信息时，检测其中是否包含描述开放式摘要信息的结构的协议头；在检测到协议头的情况下，抓取协议头以及与其中描述的结构相映射的网页内容，并且根据协议头以及网页内容对开放式摘要信息进行渲染；检测开放式摘要信息中是否包含特定元素，在包含的情况下，将特定元素与网页信息相对应地抓取；在接收到与网页的关键词相匹配的搜索请求时，返回包含与搜索请求相匹配的关键词的多个网页的开放式摘要信息的渲染结果，以作为搜索请求的搜索结果；以及响应于基于开放式摘要信息中的特定元素进行排序的请求，对搜索结果进行排序。
[0093]如图4所示，为本发明的实施例中搜索引擎显示展示网页开放式摘要信息的方法400的示意图，该方法400始于步骤S410。
[0094]在步骤S410中，在接收到搜索请求时，返回包含与搜索请求相匹配的关键词的多个网页的开放式摘要信息的渲染结果，以作为搜索请求的搜索结果。
[0095]可选地，网络侧的搜索服务器接收到终端设备发送的搜索请求后，根据搜索请求中的关键词进行匹配，得到包含与搜索请求相匹配的关键词的多个网页的开放式摘要信息的渲染结果，并作为搜索请求的搜索结果返回至终端设备。
[0096]随后，在步骤S430中，响应于基于开放式摘要信息中的特定元素进行排序的请求，对搜索结果进行排序。
[0097]可选地，网络侧的搜索服务器接收到终端设备的基于开放式摘要信息中的特定元素的排序请求，按照从高到底或者从低到高等方式对搜索结果进行排序，当然可以理解的是，在本发明的实施例中并不限定排序的具体策略。
[0098]可选地，在本发明的实施例中，在步骤S410之前，上述方法400还包括:在抓取网页内容时，检测其中是否包含预设的开放式摘要信息的标识；然后在检测到网页内容中包含标识的情况下，检测开放式摘要信息中是否包含特定元素，在包含特定元素的情况下，将特定元素与网页的关键词、开放式摘要信息相对应地存储。
[0099]可选地，在本发明的实施例中，网页内容包括以下的至少一种:文字、图片、链接、视频和音频。当然可以理解的是，在本发明的实施例中并不限定网页内容的具体格式。
[0100]可选地，在本发明的实施例中，在将特定元素与网页的关键词、开放式摘要信息相对应地存储的步骤中，将特定元素作为特定条目，与网页的关键词、开放式摘要信息相对应地存储在搜索引擎的数据库中。
[0101]可选地，在本发明的实施例中，在步骤S430中，将包含开放式摘要信息的搜索结果排在靠前的位置。
[0102]可选地，在本发明的实施例中，在步骤S430中，按照特定元素升序或者降序，对搜索结果进行排序。可选地，特定元素包括价格、折扣率、好评率、信用等级和销量中的至少一个。
[0103]可选地，在本发明的实施例中，开放式摘要信息采用HTML、HTML5、JavaScript、Flash或CSS的格式，当然可以理解的是，在本发明的实施例中并不限定开放式摘要信息的具体格式。
[0104]可选地，在本发明的实施例中，搜索结果采用HTML、SHTML、HTML5或XML的格式，当然可以理解的是，在本发明的实施例中并不限定搜索结果的具体格式。
[0105]需要说明的是，图4所示的方法并不限定按所示的各步骤的顺序进行，可以根据需要调整各步骤的先后顺序，另外，所述步骤也不限定于上述步骤划分，上述步骤可以进一步拆分成更多步骤也可以合并成更少步骤。
[0106]实施例五
[0107]如图5所示，为本发明的实施例中搜索引擎抓取网页开放式摘要信息的装置500的结构示意图。
[0108]在本发明的实施例中，该装置500包括:检测模块510和抓取模块530，其中检测模块510用于在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；抓取模块530用于在检测到网页信息中包含标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的结构相映射的网页内容。
[0109]可选地，在本发明的实施例中，每个网页包括一个或者多个开放式摘要信息，每个开放式摘要信息与相应的网页关键词网页的关键词相关联。
[0110]可选地，在本发明的实施例中，与开放式摘要信息中描述的结构相映射的网页内容包括以下的至少一种:文字、图片、链接、视频和音频。
[0111]可选地，在本发明的实施例中，装置500还包括:验证模块，用于验证开放式摘要信息的渲染结果、和/或验证开放式摘要信息的格式、和/或验证开放式摘要信息的网页内容；在验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回根据协议头以及网页内容对开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。
[0112]可选地，在本发明的实施例中，验证模块还用于在验证未通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0113]可选地，在本发明的实施例中，验证模块进一步用于验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值；或者验证模块进一步用于验证开放式摘要信息的内容中是否包含特定元素。
[0114]实施例六
[0115]如图6所示，为本发明的实施例中的验证网页开放式摘要信息的装置600的结构示意图。
[0116]在本发明的实施例中，该装置600包括:第一验证模块610和第二验证模块620，其中第一验证模块610用于在检测到网页信息中包含预设的开放式摘要信息的标识的情况下，验证对开放式摘要信息进行渲染的渲染结果是否成功；第二验证模块620用于根据预先定义的规则，验证开放式摘要信息的格式和/或网页内容。
[0117]可选地，在本发明的实施例中，装置600还包括:结果返回模块630，用于在渲染结果、以及格式和/或网页内容的验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的开放式摘要信息的渲染结果，以作为搜索请求的搜索结果。
[0118]可选地，在本发明的实施例中，结果返回模块630还用于在渲染结果、或格式、或内容的验证未通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为搜索请求的搜索结果。
[0119]可选地，在本发明的实施例中，第二验证模块620进一步用于验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值。
[0120]可选地，在本发明的实施例中，第二验证模块620进一步用于验证开放式摘要信息的内容中是否包含特定元素。
[0121]实施例七
[0122]如图7所示，为本发明的实施例中搜索引擎提供网页开放式摘要信息的装置700的结构示意图。
[0123]在本发明的实施例中，该装置700包括:接收模块710、查找模块720和提供模块730，其中接收模块710用于接收搜索请求；查找模块720用于在开放式摘要数据库中查找与搜索请求相匹配的网页内容；以及提供模块730用于对于与搜索请求相匹配的网页，返回对开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。
[0124]可选地，在本发明的实施例中，提供模块730进一步用于在网页包括多个开放式摘要信息的情况下，确定与搜索请求最相匹配的开放式摘要信息，并且返回对最相匹配的开放式摘要信息进行渲染的渲染结果，以作为搜索请求的搜索结果。
[0125]可选地，在本发明的实施例中，提供模块730还用于根据网页信息中描述开放式摘要信息的结构的协议头以及与其中描述的结构相映射的网页内容，对开放式摘要信息进行渲染。
[0126]可选地，在本发明的实施例中，接收模块710用于从客户端接收搜索请求，并且提供模块向客户端返回渲染结果，以在客户端上作为搜索结果进行展示。
[0127]实施例八
[0128]如图8所示，为本发明的实施例中的搜索引擎提供网页开放式摘要的装置800的结构示意图。
[0129]该装置800包括提供模块810和排序模块830，其中提供模块810用于在接收到搜索请求时，返回包含与搜索请求相匹配的关键词的多个网页的开放式摘要信息的渲染结果，以作为搜索请求的搜索结果；排序模块830用于响应于基于开放式摘要信息中的特定元素进行排序的请求，对搜索结果进行排序。
[0130]可选地，在本发明的实施例中，装置800还包括:第一检测模块850，用于在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；第二检测模块870，用于在检测到网页信息中包含标识的情况下，检测开放式摘要信息中是否包含特定元素，在包含的情况下，将特定元素与网页的关键词、开放式摘要信息相对应地存储。
[0131]可选地，在本发明的实施例中，第二检测模块870进一步用于将特定元素作为特定条目，与网页的关键词、开放式摘要信息相对应地存储在搜索引擎的数据库中。
[0132]可选地，在本发明的实施例中，排序模块830进一步用于将包含开放式摘要信息的搜索结果排在靠前的位置。
[0133]可选地，在本发明的实施例中，排序模块830进一步用于按照特定元素升序或者降序，对搜索结果进行排序。
[0134]在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
[0135]在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
[0136]类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循【具体实施方式】的权利要求书由此明确地并入该【具体实施方式】，其中每个权利要求本身都作为本发明的单独实施例。
[0137]本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的替代特征来代替。
[0138]此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
[0139]本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP )来实现根据本发明实施例的装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
[0140]应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
【权利要求】
1.一种搜索引擎抓取网页开放式摘要信息的方法(100)，包括: 在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识(SllO);以及 在检测到网页信息中包含所述标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的所述结构相映射的网页内容(S130)。
2.如权利要求1所述的方法，其中，每个网页包括一个或者多个开放式摘要信息，每个开放式摘要信息与相应的网页的关键词相关联。
3.如权利要求1所述的方法，其中，与所述开放式摘要信息中描述的结构相映射的网页内容包括以下的至少一种:文字、图片、链接、视频和音频。
4.如权利要求1?3中的任一项所述的方法，所述方法还包括: 验证开放式摘要信息的渲染结果、和/或验证开放式摘要信息的格式、和/验证开放式摘要信息的网页内容； 在验证通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回根据所述协议头以及所述内容对开放式摘要信息进行渲染的渲染结果，以作为所述搜索请求的搜索结果。
5.如权利要求4所述的方法，所述方法还包括: 在验证未通过的情况下，在接收到与网页的关键词相匹配的搜索请求时，返回网页的默认摘要信息，以作为所述搜索请求的搜索结果。
6.如权利要求4所述的方法，其中，所述验证开放式摘要信息的格式的步骤包括: 验证开放式摘要信息所占网页区域的大小是否超出预先定义的阈值； 所述验证开放式摘要信息的内容的步骤包括: 验证开放式摘要信息的内容中是否包含特定元素。
7.如权利要求6中所述的方法，其中，所述特定元素包括价格和折扣信息中的至少一个。
8.如权利要求1?3中的任一项所述的方法，其中，所述开放式摘要信息采用HTML、HTML5、JavaScript、Flash 或 CSS 的格式。
9.一种搜索引擎抓取网页开放式摘要信息的装置(500)，其包括: 检测模块(510)，用于在抓取网页信息时，检测其中是否包含预设的开放式摘要信息的标识；以及 抓取模块(530)，用于在检测到网页信息中包含所述标识的情况下，抓取网页信息中描述开放式摘要信息的结构的协议头以及与开放式摘要信息中描述的所述结构相映射的网页内容。
10.如权利要求9所述的装置，其中，每个网页包括一个或者多个开放式摘要信息，每个开放式摘要信息与相应的网页关键词网页的关键词相关联。
【文档编号】G06F17/30GK103473358SQ201310445238
【公开日】2013年12月25日 申请日期:2013年9月26日 优先权日:2013年9月26日
【发明者】袁瑞峰 申请人:北京奇虎科技有限公司, 奇智软件（北京）有限公司