一种基于Java虚拟机资源池的数据处理方法

摘要

本发明公开了一种基于Java虚拟机资源池的数据处理方法，通过JVM Pool Controller对JVM池中的虚拟机资源按需的进行创建、杀死、重置，进而维护一个保持活动的JVM池，为Hadoop MapReduce框架提供Job复用JVM支持，消除连续运行MapReduce任务时JVM的重复启动开销，加速MapReduce任务的启动加载速度；通过对JVM池的管理，为分布式的Java程序提供JVM级别的横向扩展和负载均衡支持。在应用于海量数据处理时，可以大大降低用于海量数据处理的Hadoop MapReduce任务的启动时间；在用于其他大规模分布的Java程序能够大大提升JVM负载均衡和横向扩展能力。

主权项

一种基于Java虚拟机资源池的数据处理方法，其特征在于包括以下步骤：通过JVM Pool Controller对JVM池中的虚拟机资源按需的进行创建、杀死、重置；维护一个保持活动的JVM池，为Hadoop MapReduce框架提供Job复用JVM支持；消除连续运行MapReduce任务时JVM的重复启动开销，加速MapReduce任务的启动加载速度；通过对JVM池的管理，为分布式的Java程序提供JVM级别的横向扩展和负载均衡支持。