一种基于Storm分布式框架的食品安全网络舆情预警系统

摘要

本发明公开了属于大数据处理技术领域中的一种基于storm分布式框架的食品安全网络舆情预警系统，通过爬取网络媒体的新闻网页，然后从网页文件中提取食品相关舆情信息并将其进行分布式聚类；对每个聚类结果中的舆情信息进行进一步分析以得到每个事件，并获取事件的起源、发展、高潮、结束阶段的相关信息，以达到网络监控的目的。本系统通过storm分布式框架提高了舆情数据处理的效率，解决了以往时效性较差的缺点。

主权项

一种基于storm分布式框架的食品安全网络舆情预警系统，其特征在于，通过爬取食品相关舆情信息，并进行分布式聚类；分析聚类结果以得到事件信息，判断舆情变化趋势，进而进行监控和预警。