一·部署mapreduce

(共有三台虚拟机node1,node2,node3)其中node1为主节点即为运行namenode和resourcemanager

在node1中修改以下文件:

1.mapred-env.sh(配置环境变量)

2.mapred-site.xml

二·部署yarn

1.配置yarn-env.sh文件

2.配置yarn-site.xml文件

在node1完成配置后使用:

scp mapred-env.sh mapred-site.xml yarn-env.sh yarn-site.xml node2:`pwd`/

scp mapred-env.sh mapred-site.xml yarn-env.sh yarn-site.xml node3:`pwd`/

将我们配置好的文件复制到node2,node3

至此完成mapreduce,yarn集群完成配置

大家可以自己操作一下,只要细心就没问题!!!!

三·yarn集群的启停

配置完成后可以用命令

start-yarn.sh

进行一步启动

或者可以分别在各虚拟机上使用命令:

yarn --daemon start +各进程名称进行启动

关闭也是同理

最后可以在浏览器输入node1:8088进入网页可以更直观的看到我们的yarn是怎么运行的

Logo

码道开发者社区,聚焦华为云码道 CodeArts 代码智能体,沉淀 Agent、Skill、鸿蒙开发实战内容,供开发者查阅资料、交流技术、分享工程实践

更多推荐