一种基于云计算的大数据统一分析处理方法

摘要

本发明涉及一种基于云计算的大数据统一分析处理方法，该方法包括：基于云计算技术构建高可扩展的海量结构化、非结构化和半结构化数据的分布式存储平台；在云计算平台上实现海量异构数据的分布式并行处理，解析异构数据的查询分析请求，按照查询分析的数据对象所在位置调度数据处理计算，将数据分析处理计算分布到各数据存储节点上，实现海量数据的并行分析处理；集成结构化数据查询分析接口与非结构化数据查询分析接口，实现异构数据的并行分析处理，提供统一数据访问接口；基于云服务技术为大数据应用提供结构化数据服务和非结构化数据服务。具有克服了大数据分析处理的复杂性和挑战性，满足大数据处理的规模不断增长和实时性需求等优点。

主权项

一种基于云计算的大数据统一分析处理方法，其特征在于，包括以下步骤：（1）基于云计算技术构建高可扩展的海量结构化、非结构化和半结构化数据的分布式存储平台；（2）基于云计算实现并行数据处理，在高可扩展的云计算平台上实现海量结构化、半结构化和非结构化数据的分布式并行分析处理，对异构数据的查询分析请求进行解析并制定数据处理计算的优化分布调度方式，按照查询分析的数据对象所在位置调度数据处理计算，将数据分析处理计算分布到各数据存储节点上，实现海量数据的并行分析处理；（3）集成结构化数据查询分析接口与非结构化数据查询分析接口，进行异构数据的并行分析处理，提供统一数据访问接口；（4）基于云服务技术为大数据应用提供结构化数据服务和非结构化数据服务。