基于 Hadoop的海量数据处理模型研究和应用

文中针对如何从海量数据中提取有用价值信息这一开发应用问题,通过分析现有计算和存储技术,并且结合Hadoop的技术研究,设计了一种海量数据处理模型,该模型是以Hadoop技术为基础的。文中先介绍了分布式系统,然后描述了Hadoop架构,最后介绍了本设计的海量数据处理模型。该模型通过一系列设计可以有效的缓解了网络压力,同时它不需要程序员具有相应专业的经验就可以对超大系统进行整理并且获得所需资源。该模型具有高效率、低成本以及易维护的特性。