pkss bigdata

大数据、小语言、可扩展系统项目部署YARN和HDFS在docker目录中，您将找到部署我们的基础架构所需的一切。有4个docker镜像：一个具有基本系统并包含hadoop的“超类”和3个专业化。有一个YARN资源管理器、HDFS名称节点和工作器的映像。图像都可以使用./build_docker_images构建和正确命名。运行脚本的用户需要在docker组中或者是root。构建容器后，生成一个resource_manager和name_node映像，并根据需要生成尽可能多的工作程序。 resource_manager应该在qp-hd10上运行，在qp-hd12上运行名称节点，在qp-hd15和qp-hd16上运行要启动容器，请运行： docker run -d --name=$NAME $IMAGE s