本发明属于网络监测技术领域,具体涉及一种网络舆情监测导控系统。
背景技术:
随着互联网技术的普及发展,新闻、论坛、博客、微博客、视频网站等传播渠道、舆情产生速度等均呈现出爆炸式快速增长的态势,据初步统计,2009年以来,互联网上具有负面影响的舆情数量同比增长了近2倍以上,因此对舆情的监测导控变得迫不及待。目前舆情监测导控主要存在以下问题亟待解决:
1)传统的网络舆情监测导控工作几乎完全是通过人工方式开展的,具有手工搜索网站的局部性、时间上的滞后性、信息搜索的随意性、随时性的缺陷;
2)缺乏舆情信息综合分析,导致舆情分析之间的关联能力不足,例如,特定舆情事件在新闻、论坛、微博、博客等不同来源上的关联分析,各分支在舆情信息的管理上缺乏统一的信息报送;
3)舆情导控体系中缺乏可量化的考核数据作为各级领导年底评分的依据。
因此发明一个科学、全面、高效的网络舆情监测导控系统,能够否克服以上问题,能够对互联网上传播的舆情信息进行准确查找、归类、排重、分析、研判、导控和核查,实现对互联网上各类海量数据快速分析处理,更加准确的掌握各类舆情信息传播的数量、范围、趋势、影响等情况,成为当今研究的热点。
技术实现要素:
本发明的目的是提供一种网络舆情监测导控系统,解决了传统网络舆情监测导控工作中对舆情搜集不及时、不全面,没有舆情分析和对舆情导控工作考核的问题。
本发明所采用的技术方案是,一种网络舆情监测导控系统包括:
数据采集模块,内置信息来源站点,基于多线程、集群采集模式,配置不同调度模式对信息源头采集;
舆情信息数据处理模块,用于对数据采集模块采集到的数据进行加工处理为舆情研判分析模块提供数据指标,同时生成系统平台信息;
舆情研判分析模块,根据舆情信息数据处理模块提供的各项数据指标对数据进行综合计算分析,基于多层不同权重的关键字数据推送算法从海量数据中自动推送用户真正关心的舆情线索;
舆情引导指挥模块,用于实现重大、敏感舆情信息的逐级上报及领导审核,可通过系统下发导控任务且具有短信提醒功能,确保导控任务通知及时、到位;
舆情引导考核模块,用于针对舆情引导指挥模块下发的导控任务的完成情况、信息上报情况采取多角度考核模式,并支持按照单位考核、部门考核、个人考核三种考核方式,并对考核得到的数据进行分类作为对舆情监控人员工作量和工作效果考核的科学评估依据;
中央处理器,用于协同上述各模块工作。
本发明的特点还在于,
调度模式包括指定调度模式和随机调度模式。
多角度考核模式包括任务完成情况考核模式、信息报送情况考核模式、在线考核模式。
数据采集模块包括:
网站管理单元,用于对来源站点进行维护;
通用爬虫解析单元,用于输入站点入口url选择对应解析模板对不同站点进行板块配置,根据板块的热度及关注程度按需设置每次爬取的站点主贴列表及回帖列表的爬取范围,同时对于新增板块选择对应调度模式进行数据采集;
代理ip池单元,用于解决通用爬虫解析单元高频度爬取指定站点导致ip被封的问题;
服务器监控单元,用于自动统计每台采集服务器每天完成的调度趋势,按周统计全部采集服务器的调度总数,对比调度动态为采集服务器调配采集任务;
网站采集监控单元,用于监控各板块目前调度模式、目前总调度次数、发现信息数量、采集信息、所耗时间、任务状态数据,并对已改版的板块向厂家发送邮件通知。
舆情信息数据处理模块包括:
舆情数据管理单元,用于对采集到的数据进行整理、编辑、删除、新增维护工作,支持通过关键词的自动分类,支持无限极分类体系;
门户信息配置单元,用于自动生成前端门户平台信息,通过后台配置对门户平台频道、热词、专题进行管理和设置;
简报管理信息单元,用于按天、按月自动生成舆情简报,同时对已生成的简报提供可视化编辑界面,用户可以编辑撰写。
舆情研判分析模块包括:
舆情统计单元,用于对信息站点、舆情内容、时间等统计,以折线图、柱状图、饼图等多种表现方式呈现结果;
舆情计算单元,用于侧重业务需求根据各项指标综合计算舆情热点、负面信息进行专题分析;
舆情推送单元,用于根据客户的行业特点与行业需求,定制一个舆情展示、呈现平台,通过该平台可以将系统中收集到的信息、分析结果、生成的简报、以图文方式进行展现,提供给用户和各级领导浏览、下载;
舆情报警单元,针对预先设置的舆情敏感关键字,统一指定报警邮箱进行邮件报警或指定手机号发送短信进行报警预示,另外还支持系统界面警。
舆情推送单元包括:
信息推送单元,支持业务分类,基于相关语义推送行业关注的舆情信息;
关键字推送单元,提炼用户关注事件的特征关键字并预先设置,使系统根据关键字自动匹配相关帖文展现给客户,同时作为信息推送单元的互补单元,可随时自定义关键字关注相关事件;
个性化推送单元,用于用户个性化定制关注事件关键字,系统相应推送相关信息。
舆情敏感关键字包括事件关键字、相关人员关键字和自定义关键字。
舆情引导指挥模块包括:
任务下达单元,用于将新发现的舆情向全体舆情监控人员发布引导指令和引导内容,同时向舆情监控人员发送短信进行相应提醒;
信息上报单元,用于各分支机构将重要舆情分级上报,支持快捷上报和手工上报两种模式,同时支持对上报历史进行查询。
舆情引导考核模块包括:
舆情监控人员管理单元,用于管理员系统账号与舆情监控人员系统账号进行关联,实现管理员系统账号与舆情监控人员系统账号对应;针对支持虚拟账号站内搜索的站点,管理员通过舆情监控人员系统账号完成站内检索、采集、入库;针对不支持虚拟账号站内搜索的站点,管理员通过数据采集模块完成对舆情监控人员的数据检索、采集、入库;
舆情工作核查单元,通过系统设置核查任务方式和excel核查任务导入方式对舆情监控人员工作任务进行核查;
舆情工作核查显示单元,对舆情工作核查单元考核得到的数据进行分类作为对舆情监控人员工作量和工作效果考核的科学评估依据。
系统设置核查任务方式为系统设置任务执行时间,通过数据采集模块根据任务执行时间对任务的执行结果进行收集。
excel核查任务导入方式为按照站点名、信息的url、数据类型、核查项、任务执行时间格式,批量将核查任务导入系统后,对导入的任务核查结果进行收集。
本发明的有益效果是,本发明的一种网络舆情监测导控系统支持采集各种来源的信息,通过数据采集模块能够全面、准确、及时地获取与想搜集的舆情相关的信息,通过舆情信息数据处理模块深层次地对互联网舆情信息进行分析和挖掘,通过舆情研判分析模块可以向客户推送用户真正关心的舆情线索,通过舆情引导指挥模块、舆情引导考核模块,实现舆情的过滤和导控,并且可对导控任务进行核查,确保舆情导控工作落实,克服了传统舆情监测导控工作的信息搜集不及时、不全面、对舆情导控的滞后和无法核查的问题,保证了在实际舆情导控工作中使得负面舆情和相关敏感舆情得到最大化的控制,对社会的负面影响带来最小。
附图说明
图1是本发明一种网络舆情监测导控系统的结构示意图。
具体实施方式
下面结合附图和具体实施方式对本发明进行详细说明。
本发明的一种网络舆情监测导控系统如图1所示,包括:
数据采集模块,内置信息来源站点,基于多线程、集群采集模式,配置不同调度模式对信息源头采集;
舆情信息数据处理模块,用于对数据采集模块采集到的数据进行加工处理为舆情研判分析模块提供数据指标,同时生成系统平台信息;
舆情研判分析模块,根据舆情信息数据处理模块提供的各项数据指标对数据进行综合计算分析,基于多层不同权重的关键字数据推送算法从海量数据中自动推送用户真正关心的舆情线索;
舆情引导指挥模块,用于实现重大、敏感舆情信息的逐级上报及领导审核,可通过系统下发导控任务且具有短信提醒功能,确保导控任务通知及时、到位;
舆情引导考核模块,用于针对舆情引导指挥模块下发的导控任务的完成情况、信息上报情况采取多角度考核模式,并支持按照单位考核、部门考核、个人考核三种考核方式,并对考核得到的数据进行分类作为对舆情监控人员工作量和工作效果考核的科学评估依据;
中央处理器,用于协同上述各模块工作。
调度模式包括指定调度模式和随机调度模式。
多角度考核模式包括任务完成情况考核模式、信息报送情况考核模式、在线考核模式。
数据采集模块包括:
网站管理单元,用于对来源站点进行维护;
通用爬虫解析单元,用于输入站点入口url选择对应解析模板对不同站点进行板块配置,根据板块的热度及关注程度按需设置每次爬取的站点主贴列表及回帖列表的爬取范围,同时对于新增板块选择对应调度模式进行数据采集;
代理ip池单元,用于解决通用爬虫解析单元高频度爬取指定站点导致ip被封的问题;
服务器监控单元,用于自动统计每台采集服务器每天完成的调度趋势,按周统计全部采集服务器的调度总数,对比调度动态为采集服务器调配采集任务;
网站采集监控单元,用于监控各板块目前调度模式、目前总调度次数、发现信息数量、采集信息、所耗时间、任务状态数据,并对已改版的板块向厂家发送邮件通知。
舆情信息数据处理模块包括:
舆情数据管理单元,用于对采集到的数据进行整理、编辑、删除、新增维护工作,支持通过关键词的自动分类,支持无限极分类体系;
门户信息配置单元,用于自动生成前端门户平台信息,通过后台配置对门户平台频道、热词、专题进行管理和设置;
简报管理信息单元,用于按天、按月自动生成舆情简报,同时对已生成的简报提供可视化编辑界面,用户可以编辑撰写。
舆情研判分析模块包括:
舆情统计单元,用于对信息站点、舆情内容、时间等统计,以折线图、柱状图、饼图等多种表现方式呈现结果;
舆情计算单元,用于侧重业务需求根据各项指标综合计算舆情热点、负面信息进行专题分析;
舆情推送单元,用于根据客户的行业特点与行业需求,定制一个舆情展示、呈现平台,通过该平台可以将系统中收集到的信息、分析结果、生成的简报、以图文方式进行展现,提供给用户和各级领导浏览、下载;
舆情报警单元,针对预先设置的舆情敏感关键字,统一指定报警邮箱进行邮件报警或指定手机号发送短信进行报警预示,另外还支持系统界面警。
舆情推送单元包括:
信息推送单元,支持业务分类,基于相关语义推送行业关注的舆情信息;
关键字推送单元,提炼用户关注事件的特征关键字并预先设置,使系统根据关键字自动匹配相关帖文展现给客户,同时作为信息推送单元的互补单元,可随时自定义关键字关注相关事件;
个性化推送单元,用于用户个性化定制关注事件关键字,系统相应推送相关信息。
舆情敏感关键字包括事件关键字、相关人员关键字和自定义关键字。
舆情引导指挥模块包括:
任务下达单元,用于将新发现的舆情向全体舆情监控人员发布引导指令和引导内容,同时向舆情监控人员发送短信进行相应提醒;
信息上报单元,用于各分支机构将重要舆情分级上报,支持快捷上报和手工上报两种模式,同时支持对上报历史进行查询。
舆情引导考核模块包括:
舆情监控人员管理单元,用于管理员系统账号与舆情监控人员系统账号进行关联,实现管理员系统账号与舆情监控人员系统账号对应;针对支持虚拟账号站内搜索的站点,管理员通过舆情监控人员系统账号完成站内检索、采集、入库;针对不支持虚拟账号站内搜索的站点,管理员通过数据采集模块完成对舆情监控人员的数据检索、采集、入库;
舆情工作核查单元,通过系统设置核查任务方式和excel核查任务导入方式对舆情监控人员工作任务进行核查;
舆情工作核查显示单元,对舆情工作核查单元考核得到的数据进行分类作为对舆情监控人员工作量和工作效果考核的科学评估依据。
系统设置核查任务方式为系统设置任务执行时间,通过数据采集模块根据任务执行时间对任务的执行结果进行收集。
excel核查任务导入方式为按照站点名、信息的url、数据类型、核查项、任务执行时间格式,批量将核查任务导入系统后,对导入的任务核查结果进行收集。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。