分布式计算框架的任务调派系统

摘要

本申请公开一种分布式计算框架的任务调派系统，其中包括应用服务器、任务队列服务平台与Redis服务平台。应用服务器用于部署多个业务处理服务；任务队列服务平台由多个任务服务器透过网路集群，任务队列服务平台中部署zookeeper服务，任务调度操作用于处理zookeeper服务的消息队列的新的客户任务；由多个Redis服务器透过网路连接构成，Redis服务平台经由网路连接于任务队列服务平台，Redis服务平台根据新加入消息队列中的客户任务调用处理进程，处理进程对客户任务进行清洗并输出第一业务结果存储至Redis缓存存储器中；Redis服务平台的实时计算模块侦测Redis缓存存储器中存在新的第一业务结果，实时计算模块对第一业务结果进行计算并输出第二业务结果。

主权项

一种分布式计算框架的任务调派系统，其特征在于分布处理一客户端所发出的客户任务，所述的分布式计算框架的任务调派系统包括：多个应用服务器，用于部署多个业务处理服务；一任务队列服务平台，由多个任务服务器透过网路集群，该应用服务器经由网路连接于该任务队列服务平台，该任务队列服务平台中部署一zookeeper服务，该任务队列服务平台透过一任务调度操作，该任务调度操作用于处理該zookeeper服务的一消息队列的新的一客户任务；以及一Redis服务平台，由多个Redis服务器透过网路连接构成，該Redis服务平台经由网路连接于該任务队列服务平台，该Redis服务平台根据由新加入该消息队列中的该客户任务调用一处理进程，由该处理进程对该客户任务进行清洗并输出一第一业务结果存储至一Redis缓存存储器中；其中，由该Redis服务平台的一实时计算模块侦测该Redis缓存存储器中存在新的该第一业务结果，该实时计算模块对该第一业务结果进行实时计算并输出一第二业务结果至该Redis缓存存储器。