基于云计算和Hadoop的网络舆情监控系统设计

针对我国大学生群体的舆情管理需求,文中设计了功能完备的舆情信息监控系统。该系统由数据采集、数据处理、话题发现、舆情分析四个模块组成。基于Hadoop技术设计了系统的数据采集和数据处理模块,架构了数据存储的Hdfs分布式文件管理体系,实现了舆情数据信息的高效存储;使用云计算中的MapReduce编程模型和语义分析算法实现了话题发现与舆情分析模块,从而完成对舆情数据信息的分析。经测试,该系统运行稳定、数据分析精准且便于部署,可以实现舆情监控管理的需求。