一种基于ApacheAmbari的Hue服务自动化配置处理办法的制作方法

本发明涉及计算机软件应用技术，尤其涉及一种基于Apache Ambari的Hue服务自动化配置处理办法。

背景技术：

在社会快速发展的今天，各行各业每天都会产生大量的数据，数据来源囊括了我们周围可以捕获的任何类型数据，网站、社交媒体、交易型商业数据以及其它商业环境中创建的数据。面对海量数据的处理操作，应运而生很多大数据服务组件，如Hadoop、Spark、Hue等。面对这些大数据组件的使用，很多用户使用和管理要付出大量的时间成本。

Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控，它目前支持大多数Hadoop生态圈的组件，如HDFS、Yarn、Hbase、Hive、Pig、Zookeeper等。Hue是一个可快速开发和调试Hadoop生态系统中各种服务应用的一个基于浏览器的图形化工具，通过使用Hue，可以很方便的操作Hadoop集群。而实际部署Hue服务的过程中，Hue的部署和配置工作是一项很繁琐且容易出错的过程。尤其是对于不熟悉Hue服务的用户，可能面对Hue服务的配置需要耗费大量的时间。。

技术实现要素：

为了解决该问题，本发明提出了一种基于Apache Ambari的Hue服务自动化配置处理办法。通过对Apache Ambari部署管理工具的二次开发，实现Hue服务的自动化部署和配置，能大大提高运维人员的操作和使用上的便利。

本发明提供一种基于Apache Ambari的Hue服务自动化配置处理办法。Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的安装部署、管理和监控。Hue是一个可快速开发和调试Hadoop生态系统中各种服务应用的一个基于浏览器的图形化工具，通过使用Hue，可以很方便的使用集群中已部署的组件服务。本发明通过对Ambari进行二次开发，在Ambari中集成Hue服务，Hue在安装和配置过程中需要手动操作的繁琐的工作交给Ambari来自动安装部署完成，并提供了在Ambari中监控Hue服务健康状况，同时，该设计在Ambari Web端支持操作人员选择在Hue服务中使用其它大数据组件服务，对于大数据集群的运维提供了极大的便利

主要包括：

对Ambari部署管理工具进行二次开发，添加Hue服务模块。

调用Ambari提供的相关安装模块函数，设计和编写Hue服务安装部署模块。

调用Ambari的接口函数，自动获取集群已安装部署的其它大数据服务的安装配置信息，并提供给Hue服务配置模块使用。

在Ambari中设计Hue服务的启动或者停止模块。

在Ambair中设计获取Hue服务的运行状态的监控模块。

在Abmari的Hue服务模块添加其它服务信息，如元数据库同步，用户同步等。

本发明的关键点：

1) 对Apache Ambari管理工具进行二次开发，集成Hue服务；

2) 实现Hue服务自动化安装部署、配置管理；

3) 实现Hue服务的运行状态监控。

Hadoop集群和Hue服务相结合，Ambari部署管理工具和Hue安装配置相结合；通过Ambari部署管理工具自动配置Hue服务。

本发明的有益效果是

基于Apache Ambari的Hue服务自动化安装部署和配置，能够快速的实现部署和配置Hue服务，并同时提供监控Hue服务的健康状况，极大的提高安装部署和配置效率，降低配置Hue服务过程中由于相关配置信息过多导致的多重问题。

附图说明

图1是Ambari系统架构示意图；

图2是显示Agent上部署Hue服务示意图。

具体实施方式

下面对本发明的内容进行更加详细的阐述：

如图(1)为Ambari系统架构，Ambari分为两大部分：Ambari Server和Ambari Agent。Ambari Server的Rest API中又分为主要的两大类 API，其中一类为ambari-web提供监控管理服务，另一类用于与ambari-agent交互，接受ambari-agent向ambari-server发送心跳请求。Master模块接受API和Agent Interface的请求，完成ambari-server的集中式管理监控逻辑，而每个agent节点只负责所在节点的状态采集及维护工作。在Ambari中集成Hue服务，即在Ambari的某一个或者多个Agent上安装部署Hue服务。

如图(2)是显示某个Agent上部署Hue服务。Ambari Server向Agent发送请求，如通知某个Agent端部署Hue服务、向此Agent发送必要的安装和配置文件等。Agent端接收请求后根据Server端发来的消息分步执行设计好的安装部署、服务配置、服务启停和用户同步等操作。当Hue服务正常启动后，Agent端会将Hue服务的运行状态定时返回给Ambari Server端，Ambari Server将收集的Hue服务状态信息实时反馈到Ambari Server的Web控制台，实现Hue服务的监控。同时，在Ambari Server的Web控制台的Hue服务模块，支持Hue与各个大数据服务组件操作的插件启停配置。