云帆大数据培训lesson11笔记.docx
- 文档编号:6903792
- 上传时间:2023-01-12
- 格式:DOCX
- 页数:9
- 大小:2.17MB
云帆大数据培训lesson11笔记.docx
《云帆大数据培训lesson11笔记.docx》由会员分享,可在线阅读,更多相关《云帆大数据培训lesson11笔记.docx(9页珍藏版)》请在冰豆网上搜索。
云帆大数据培训lesson11笔记
启动集群
在cent01
start-dfs.sh
mr-jobhistory-daemon.shstarthistoryserver
在cent02
start-yarn.sh
在cent03
yarn-daemon.shstartproxyserver
也就是说,要在启动dfs以后,等待一会,再启动yarn
Proxyserver部署到了130,我们的是cent03
因为运行了climinicuster导致系统的namespace不对了,需要重新格式化
1.删除三台机器上的data目录,重新建立目录结构
rm-rfdata
mkdir-pdata/tmp
mkdir-pdata/dfs/nn/edits
mkdir-pdata/dfs/nn/name
mkdir-pdata/dfs/snn/edits
mkdir-pdata/dfs/snn/name
2.格式化namenode
hdfsnamenode–format
Hdfs-site.xml,卸载和增加节点
在cent01上面生成dfs-hosts.exclude文件
把cent03加入到该文件中
hdfsdfsadmin-refreshNodes
在resourcemanager的node(cent02)上面修改yarn-site.xml文件
增加exclude文件
刷新node
还需要在NameNode的server上刷新Node
hdfsdfsadmin–refreshNodes
需要在resourceManager的server上修改yarn-sitexml文件,去掉exclude内容
在cent03上重启nodemanager之后
需要在resourceManager的server上刷新nodes
yarnrmadmin–refreshNodes
ZKFC:
ZooKeeperFailoverController
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 云帆大 数据 培训 lesson11 笔记