云帆大数据培训lesson08笔记.docx
- 文档编号:6809099
- 上传时间:2023-01-10
- 格式:DOCX
- 页数:8
- 大小:1.73MB
云帆大数据培训lesson08笔记.docx
《云帆大数据培训lesson08笔记.docx》由会员分享,可在线阅读,更多相关《云帆大数据培训lesson08笔记.docx(8页珍藏版)》请在冰豆网上搜索。
云帆大数据培训lesson08笔记
分布式安装集群规划
1.机器规划
172.21.110.231172.21.110.232172.21.110.233
cent01cent02cent03
2.服务组件规划
HDFS:
NameNode
DataNodeDataNodeDataNode
secondaryNamenode
Yarn:
ResourceManager
NodeManagerNodeManagerNodeManager
MR:
JobHistoryServer
配置core-site.xml
///home/grid/hadoop/data/tmp
//cent01:
9000
配置NameNode
hdfs-site.xml
50070
///home/grid/hadoop/data/dfs/nn/name
///home/grid/hadoop/data/dfs/nn/edits
///home/grid/hadoop/data/dfs/dn
配置DataNode和NodeManager
slaves
cent01
cent02
cent03
配置secondaryNameNode
hdfs-site.xml
50090
///home/grid/hadoop/data/dfs/snn/name
///home/grid/hadoop/data/dfs/snn/edits
配置ResourceManager
yarn-site.xml
JobHistoryServer
mapred-site.xml
10020
建立目录
mkdir-p/home/grid/hadoop/data/tmp
mkdir-p/home/grid/hadoop/data/dfs/nn/name
mkdir-p/home/grid/hadoop/data/dfs/nn/edits
mkdir-p/home/grid/hadoop/data/dfs/dn
mkdir-p/home/grid/hadoop/data/dfs/snn/name
mkdir-p/home/grid/hadoop/data/dfs/snn/edits
格式化namenode:
bin/hdfsnamenode-format
启动服务
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 云帆大 数据 培训 lesson08 笔记