内容流生成及发布系统及其抓取方法
【技术领域】
[0001 ]本发明的示例性实施例涉及一种内容流生成及发布系统。
【背景技术】
[0002]本部分旨在向读者介绍可能与本申请的各个方面有关的本领域的各个方面的技术，相信本部分有助于向读者提供背景信息，以便更好地理解本申请的各个方面。因此，应当理解，应该从这个角度来进行解读，而不是将其视为是对现有技术的承认。
[0003]当今大众主要的信息来源是互联网，包括各大型媒体的网站，而以微博、微信为代表的社交媒体，以及手机端的大量App正在迅速崛起，此类多种多样的信息交互形式组成了新媒体。与报刊、广播、电视等传统媒体不同，新媒体的特征是具有交互性与即时性、海量性与共享性，而多媒体与超文本日趋个性化与社群化。随着科技的飞速发展，新媒体越来越受到人们的关注，成为创新的热门领域。
[0004]传统的内容发布大多只是单一的品牌和产品的重复。这种内容发布面临难于被大众接受的困境，其信息很难被潜在客户信任。当今消费者越来越聪明，他们不希望其购买行为被操纵，而只要为他们提供优质的信息。而所有广告商都需要靠内容致胜，且企业需要创建针对性强、价值高、易被关注的信息，因此提供一种高效、便捷的内容流生成及发布系统以及相应的方法成为迫切的需要。
【发明内容】
[0005]根据本发明示例性实施例的一种内容流生成及发布系统，其包括内容流抓取部、内容库、设计策略部、编辑平台、发布平台以及输入/输出接口，其中所述内容流抓取部通过所述输入/输出接口从多个不同类型的内容平台抓取多种不同类型的内容，所述设计策略平台预置不同的策略和计划，所述内容库根据所述设计策略平台中预置的策略对所述内容流抓取部抓取的多种不同类型的内容进行存储，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成内容流，所述发布平台根据所述设计策略平台中预置的策略将生成的内容流通过所述输入/输出接口发布至发布界面，其中，所述设计策略平台能够设置内容流发布时间表，和/或根据预设的时间、关键词、社交媒体账号、发布渠道中的至少一个设置手动或自动发布内容流。
[0006]进一步地，所述内容流生成及发布系统还包括素材库，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容以及素材库中的内容进行编辑，从而生成内容流。
[0007]进一步地，所述内容流抓取部将抓取的不同类型的内容分段为不同类型的数据结构，所述内容库对所述不同类型的数据结构进行存储并生成相应的数据结构清单。
[0008]进一步地，所述内容库中至少存储第一类型的数据结构以及第二类型的数据结构，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成包括根据所述第一类型的数据结构生成第一内容流，并在固定的位置以及预置的时间在所述第一内容流中插入所述第二类型的数据结构从而生成第二内容流。
[0009]进一步地，所述第二内容基于与客户端平台相关的一个或者多个特性和/或基于之前提供的内容的一个或者多个特性而选择。
[0010]进一步地，所述设计策略平台预置不同的策略包括以下至少一种:
[0011]a)划分不同的发布频道，并为不同的发布频道设置发布容量；
[0012]b)划分不同的发布频道，并为不同的发布频道设置收费标准；以及
[0013]c)划分不同的发布频道，并为不同的发布频道设置发布时间；
[0014]其中所述发布平台将生成的内容流分发到不同的发布频道，并最终通过所述输入/输出接口发布至发布界面。
[0015]进一步地，所述内容流生成及发布系统还包括加密平台，所述加密平台根据不同发布频道对应的频道号以及所述发布平台提供的加密密钥生成发布频道加密密钥，以便对不同的发布频道上的内容流进行加密。
[0016]进一步地，所述设计策略平台预置不同的策略还包括分别为不同类型的内容和不同的发布频道指定不同的优先级。
[0017]进一步地，所述内容流生成及发布系统还包括优化单元，所述优化单元对所述内容库中存储的相同的内容进行合并，并且提高合并后内容的优先级。
[0018]进一步地，所述内容流生成及发布系统还包括分析单元，所述分析单元根据记录点击率、停留时间、地域分布、浏览器的类型、跳入和跳出URL链接、最感兴趣的内容、评价和转发率以及客户转化率中的至少一个确定内容的受欢迎程度，从而帮助发布者改进和优化未来的内容发布策略和方向。
[0019]本发明的内容流生成及发布系统的抓取方法，其中包括如下步骤:
[0020]STEP 1、所述内容流抓取部抓取数据，同时将待抓取库的内容进行筛选，将重复内容进行标记；
[0021]STEP 2、所述内容流抓取部抓取未被标记的数据。
[0022]本发明采用上述方法可有效地减少计算机内部的资源占用，实现最快速地抓取。
[0023]进一步地，内容流生成及发布系统的抓取方法，其中包括如下步骤:
[0024]STEP 1、内容流抓取部抓取数据；
[0025]STEP 2、内容流抓取部将抓取到的数据进行筛选，并删除重复数据。
[0026]进一步地，内容流生成及发布系统的抓取方法，其中包括如下步骤:
[0027]STEP 1、内容流抓取部缓存数据；
[0028]STEP 2、内容流抓取部将缓存到的数据与其它待抓取的数据进行对比，
[0029]若缓存到的数据与其它待抓取的数据相同，则结束；
[0030]若缓存到的数据与其他待抓取的数据不同，则抓取。
[0031 ]进一步地，内容流生成及发布系统的抓取方法，其中筛选包括如下步骤:
[0032]所述内容流抓取部将所述将同一域名下的重复网页URL中query部分进行比较，查找query部分中赋值不同的参量作为无效参量，并去除所述无效参量。
[0033]进一步地，内容流生成及发布系统的抓取方法，其中筛选包括如下步骤:
[0034]以缓存到的数据的字符串中的一大写字母至另一大写字母之前为字符，以字符为关键字搜索其它待抓取数据。
[0035]根据本发明的示例性实施例，可根据预置的策略实现对不同类型内容的抓取，生成并发布内容流。
【附图说明】
[0036]为了更清楚地说明本发明实施例的技术方案，下面将对实施例的附图作简单地介绍，显而易见地，下面描述中的附图仅仅涉及本发明的一些实施例，而非对本发明的限制。
[0037]图1为根据本发明示例性实施例的内容流生成及发布系统的结构示意图。
【具体实施方式】
[0038]为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他的实施例，都属于本发明保护的范围。
[0039]在本发明的描述中，需要说明的是，术语“上”、“下”、“顶”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本