一种基于hadoop大数据平台的应用服务系统及部署方法

摘要

本发明公开一种基于hadoop大数据平台的应用服务系统及部署方法，属于大数据应用领域，本发明要解决的技术问题为如何能够充分利用平台资源，保证业务系统的高效运行，实现应用资源的统一管理与隔离，采用的技术方案为：（1）、一种基于hadoop大数据平台的应用服务系统，该系统包括应用分布模块、应用资源管理模块、应用状态监控模块和应用错误处理模块。（2）、一种基于hadoop大数据平台的应用服务部署方法，该方法包括如下步骤：（1）、客户端提交应用需求到资源管理器；（2）、资源管理器在节点控制器中创建应用控制器；（3）、应用控制器向资源管理器申请应用资源；（4）、资源管理器向其余节点控制器分配资源。

主权项

一种基于hadoop大数据平台的应用服务系统，其特征在于该系统包括应用分布模块、应用资源管理模块、应用状态监控模块和应用错误处理模块；其中，应用分布模块用于实现应用的集群自动化部署，为每个应用资源管理模块提供对应的配置及资源设置，自动将应用及应用所需的各种资源发送到集群中，完成集群相关环境设置；应用资源管理模块依赖于YARN计算框架，实现层次化的应用资源管理，为每个应用限定所使用的CPU及内存使用情况，不同应用间实现资源的隔离，保证各个应用的服务质量；应用状态控制模块用于监控应用的发布状态及运行状态，实时获得各个应用的运行情况及资源占用情况；应用错误处理模块依赖于应用状态监控模块，为每个应用指定错误处理方法，当监控到应用进入错误状态如异常退出时，应用服务系统自动调用错误处理方法，保证应用的正常运行。