Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

参考链接:https://www.cnblogs.com/87hbteo/p/7606012.html
一、准备
1.1创建hadoop用户
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)1.2 安装SSH,设置SSH无密码登陆
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

输入完 $ ssh-****** -t rsa 语句以后,需要连续敲击三次回车,如下图:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)其中,第一次回车是让KEY存于默认位置,以方便后续的命令输入。第二次和第三次是确定passphrase,相关性不大。两次回车输入完毕以后,如果出现类似于下图所示的输出,即成功:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)
之后再输入:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)
2.安装jdk 1.8
首先在oracle官网下载jdk1.7 http://www.oracle.com/technetwork/java/javase/downloads/index.html 接下来进行安装与环境变量配置,根据个人电脑系统选择对应版本,我选的是jdk-8u221-linux-x64.tar.gz

Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)注:其中如果权限不够,无法在相关目录下创建jvm文件夹,那么可以使用 $ sudo -i 语句进入root账户来创建文件夹。
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)
另外推荐使用vim来编辑环境变量,即最后一句使用指令
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)如果没有vim,可以使用:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)来进行下载。
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)在.bashrc文件添加如下指令:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)
在文件修改完毕以后,输入代码:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)如果出现如下图所示的内容,即为安装成功
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)如果打开 http://localhost:50070失败,需要./sbin/stop-all.sh 关闭所有服务,然后编辑hdfs-site.xml(路径 /usr/local/hadoop/etc/hadoop)

最后发现可能是namenode初始化默认端口失效,于是决定手动修改配置文件设置默认端口
1.hdfs-site.xml 添加如下:
Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

然后重新格式化namenode(./bin/hdfs namenode -format)
启动hadoop(./sbin/start-all.sh)。最终访问正常