ubuntu下hadoop的安装.docx
- 文档编号:12701569
- 上传时间:2023-04-21
- 格式:DOCX
- 页数:9
- 大小:809.29KB
ubuntu下hadoop的安装.docx
《ubuntu下hadoop的安装.docx》由会员分享,可在线阅读,更多相关《ubuntu下hadoop的安装.docx(9页珍藏版)》请在冰豆网上搜索。
ubuntu下hadoop的安装
1、下载虚拟机和ubuntu镜像文件,并且安装完毕,过程简单不再赘述。
2、创建hadoop用户组
3、创建hadoop用户
4、为hadoop用户赋权限
5、用hadoop用户登录系统
6、安装ssh
如果Ubuntu安装ssh时出现软件包openssh-server还没有可供安装的候选者错误
解决方案:
分析原因是我们的apt-get没有更新,当然如果你的是最新的系统不用更新也行,但是我相信很多人都是需要更新的吧,操作命令如下:
sudoapt-getupdate
更新完毕后执行:
sudoapt-getinstallopenssh-server
安装完成后,开启ssh服务
7、开启ssh服务并查看
8、设置免密码登录,生成公钥和私钥
此时会在/home/hadoop/.ssh下生成两个文件:
id_rsa和id_rsa.pub,前者为私钥,后者为公钥。
下面我们将公钥追加到authorized_keys中,它用户保存所有允许以当前用户身份登录到ssh客户端用户的公钥内容。
9、登录ssh
10、安装java环境
sudoapt-getinstallopenjdk-7-jdk
查看一下是否成功安装jdk
11、安装hadoop2.7.2
拷贝下载hadoop包到系统盘下
解压
sudotarxzfhadoop-2.7.2.tar.gz
12、赋予用户对该文件夹的读写权限
sudochmod774home/hadoop-2.7.2
13、配置~/.bashrc
配置该文件前需要知道Java的安装路径,用来设置JAVA_HOME环境变量,可以使用下面命令行查看安装路径
完整的路径为
/usr/lib/jvm/java-7-openjdk-i386/jre/bin/java
我们只取前面的部分/usr/lib/jvm/java-7-openjdk-i386
配置.bashrc文件
sudogedit~/.bashrc
14、在文件后面添加环境变量
执行下面命,使添加的环境变量生效:
source~/.bashrc
15、修改hadoop-env.sh
找到JAVA_HOME变量,修改此变量如下
exportJAVA_HOME=/usr/lib/jvm/java-7-openjdk-i386
16、完成wordcount实验
创建需要读入的文件input和输出文件output
把系统自带的README.TXT放在input下,进行统计
结果
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- ubuntu hadoop 安装