Hadoop部署实践 论坛日志分析.docx

MapReduce处理数据、hive数据分析 需求描述: 1. access_2013_05_30.log、access_2013_05_31.log是2013年5月30日和31日两天的apache common日志文件。 数据格式说明: 每行记录有5部分组成: 访问ip 访问时间 访问资源 访问状态 访问流量 例如:27.19.74.143 - - [30/May/2013:17:38:20 +0800] "GET /static/image/common/faq.gif HTTP/1.1" 200 1127 2. 需求 通过对黑马技术论坛的apache commo