略记录，把策略记录转交给云端网络层模块。网络层查找策略记录中用户帐号对应的TCP长连接，把策略推送给移动终端App。
[0133]3.App中的SDK网络层接收到云端下发的上报日志指令以及相关参数后，传递给SDK日志处理模块。参数包括:日志时间段、包含关键字。
[0134]4.SDK日志处理模块在本地日志文件中查找符合参数指定的日志。将内容传递给SDK网络层。在实际系统中，为了减少网络传输量，传递给SDK网络层的日志内容经过了压缩。SDK网络层把日志上传给云端。
[0135]5.云端网络层模块接收到用户终端上报的日志后，如果是压缩格式需要先解压再转交，否则直接转交给云端日志收集模块存储，同时把策略数据库中对应的记录标记为已处理。
[0136]云端日志收集模块是一个带有检索功能的存储系统。云端收集到终端日志后可由人工分析处理，找出终端的问题所在。
[0137]本实施例中，在客户端61(包括移动终端、PC客户端或者其他终端设备)上部署本发明的基础组件可实现日志的云端主动抓取，当云端需要抓取客户端日志时，通过组件发送消息给客户端61，指定要抓取日志的时间段、关键字等参数，客户端61收到消息后上报相应的日志。上报过程中日志经过加密和压缩，确保信息安全。
[0138]所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0139]在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。
[0140]作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
[0141]另外，在本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
[0142]集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(R0M，Read-0nly Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0143]以上，以上实施例仅用以说明本发明的技术方案，而非对其限制;尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换;而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
【主权项】
1.一种终端日志抓取方法，其特征在于，包括: 定期进行数据库扫描，并确定所述数据库中存在有未处理的策略记录； 根据未处理的所述策略记录确定对应的客户端，并与所述客户端建立连接关系，并将所述策略记录相对应的要求上报日志信息发送至所述客户端； 获取到所述客户端根据所述要求上报日志信息上报的与所述要求上报日志信息相对应的指定日志。2.根据权利要求1所述的终端日志抓取方法，其特征在于，根据未处理的所述策略记录确定对应的客户端，并与所述客户端建立连接关系，并将所述策略记录相对应的要求上报日志信息发送至所述客户端之前还包括: 当确定用户账号对应的业务处理异常时，将所述用户账号与当前时间记录在所述数据库中。3.根据权利要求1所述的终端日志抓取方法，其特征在于，根据未处理的所述策略记录确定对应的客户端，并与所述客户端建立连接关系，并将所述策略记录相对应的要求上报日志信息发送至所述客户端之前还包括: 将获取到的通过人工输入的用户账户、当前时间、要求上报日志对应的关键字记录再所述数据库中。4.根据权利要求1至3中任意一项所述的终端日志抓取方法，其特征在于，根据未处理的所述策略记录确定对应的客户端，并与所述客户端建立连接关系，并将所述策略记录相对应的要求上报日志信息发送至所述客户端具体包括: 根据所述数据库中未处理的所述策略记录确定相对应的用户账户，并根据所述用户账户与对应的所述客户端建立TCP长连接； 将所述策略记录相对应的要求上报日志信息发送至所述客户端，所述要求上报日志信息包括要求上报日志指令、日志时间段及要求上报日志对应的关键字。5.根据权利要求4所述的终端日志抓取方法，其特征在于，获取到所述客户端根据所述要求上报日志信息上报的与所述要求上报日志信息相对应的指定日志具体包括: 获取到所述客户端根据所述要求上报日志指令、所述日志时间段及所述要求上报日志对应的所述关键字确定的所述指定日志； 将接收到的所述指定日志标记为已处理。6.一种终端日志抓取装置，其特征在于，包括: 日志抓取策略模块，用于定期进行数据库扫描，并确定所述数据库中存在有未处理的策略记录； 网络层模块，用于根据未处理的所述策略记录确定对应的客户端，并与所述客户端建立连接关系，并将所述策略记录相对应的要求上报日志信息发送至所述客户端； 云端日志收集模块，用于获取到所述客户端根据所述要求上报日志信息上报的与所述要求上报日志信息相对应的指定日志。7.根据权利要求6所述的终端日志抓取装置，其特征在于，所述终端日志抓取装置还包括: 策略数据库，用于当确定用户账号对应的业务处理异常时，将所述用户账号与当前时间进行记录。8.根据权利要求6所述的终端日志抓取装置，其特征在于，所述策略数据库，还用于将获取到的通过人工输入的用户账户、当前时间、要求上报日志对应的关键字进行记录。9.根据权利要求6至8中任意一项所述的终端日志抓取装置，其特征在于，网络层模块具体包括: 确定子模块，用于根据所述数据库中未处理的所述策略记录确定相对应的用户账户，并根据所述用户账户与对应的所述客户端建立TCP长连接； 发送子模块，用于将所述策略记录相对应的要求上报日志信息发送至所述客户端，所述要求上报日志信息包括要求上报日志指令、日志时间段及要求上报日志对应的关键字。10.根据权利要求9所述的终端日志抓取装置，其特征在于，云端日志收集模块具体包括: 获取子模块，用于获取到所述网络层模块转发的所述客户端根据所述要求上报日志指令、所述日志时间段及所述要求上报日志对应的所述关键字确定的所述指定日志； 标记子模块，用于将接收到的所述指定日志标记为已处理。11.一种终端日志抓取系统，其特征在于，包括: 客户端，以及如权利要求6至10中任意一项所述的终端日志抓取装置； 所述客户端与所述终端日志抓取装置建立有通信连接关系； 所述客户端，用于将所述终端日志抓取装置发送的所述要求上报日志信息相对应的指定曰志。12.根据权利要求11所述的终端日志抓取系统，其特征在于，所述客户端具体包括: 客户端网络层模块，用于获取所述终端日志抓取装置发送的根据未处理的所述策略记录相对应的要求上报日志信息，或者将所述要求上报日志信息对应的指定日志上报至所述终端日志抓取装置； 日志处理模块，用于根据所述要求上报日志信息，在本地日志文件中，查找到相对应的所述指定日志。
【专利摘要】本发明实施例公开了一种终端日志抓取方法、装置及系统，解决了目前由于运行日志信息量太大，以及云端被动接收日志所导致的抓取终端日志的精确性低的技术问题。本发明实施例终端日志抓取方法包括：定期进行数据库扫描，并确定数据库中存在有未处理的策略记录；根据未处理的策略记录确定对应的客户端，并与客户端建立连接关系，并将策略记录相对应的要求上报日志信息发送至客户端；获取到客户端根据要求上报日志信息上报的与要求上报日志信息相对应的指定日志。
【IPC分类】H04L12/24
【公开号】CN105490841
【申请号】CN201510843646
【发明人】黄伟, 蔡毅
【申请人】广州华多网络科技有限公司
【公开日】2016年4月13日
【申请日】2015年11月26日