发明名称 |
基于Hadoop的大规模社交网络分析方法及其分析平台 |
摘要 |
本发明提供了一种基于Hadoop的大规模社交网络分析方法及其分析平台,包括以下步骤:1)、获取社交网络中的原始数据,并将原始数据进行存储;2)、对所述原始数据进行统一化处理,使得原始数据生成固定格式的数据文件;3)、对数据文件进行预处理,使得数据文件转化为HNAP系统的数据格式,然后建立支持图论模型及分布式环境的数据模型;4)、利用HNAP系统算法库中的算法,对步骤3)数据模型的数据进行社会网络分析,并对分析后的输出结果进行整合,生成文档文件,本发明利用分布式数据处理分析工具,对所述原始数据进行处理,使得原始数据生成固定格式的数据文件,使得其能够利用分布式计算,获得分析结果,解决了单核处理能力不足的问题。 |
申请公布号 |
CN105354298A |
申请公布日期 |
2016.02.24 |
申请号 |
CN201510742141.5 |
申请日期 |
2015.11.01 |
申请人 |
长春理工大学 |
发明人 |
王鹏;杨迪;李松江;杨华民;邱宁佳;高铖 |
分类号 |
G06F17/30(2006.01)I |
主分类号 |
G06F17/30(2006.01)I |
代理机构 |
|
代理人 |
|
主权项 |
一种基于Hadoop的大规模社交网络分析方法,其特征在于,包括以下步骤:1)、获取社交网络中的原始数据,并将原始数据进行存储;2)、对所述原始数据进行统一化处理,使得原始数据生成固定格式的数据文件;3)、对数据文件进行预处理,使得数据文件转化为HNAP系统的数据格式,然后建立支持图论模型及分布式环境的数据模型;4)、利用HNAP系统算法库中的算法,对步骤3)数据模型的数据进行社会网络分析,并对分析后的输出结果进行整合,生成文档文件。 |
地址 |
130022 吉林省长春市朝阳区卫星路7186号 |