Ubuntu内安装Hadoop

hadoop的 安装极为繁琐，作者也是在安装了好长的时间下才能成功，以下将分享我的安装经验，我已经尽我所能把每个步骤展示出来，希望所有人能成功。

目录

一. 安装准备

二. 创建hdoop用户

三. 设置ssh密钥

四. 在 Ubuntu 上下载并安装 Hadoop

五. 配置环境

六. 检查hadoop安装是否成功

七. 配置伪分布式

八. 启动Hadoop

九. 其他

十. hadoop的简单操作

一. 安装准备

确保安装好ssh和java11,如果没有它们，请一次运行一个命令来安装它们：

sudo apt update && sudo apt upgrade -y

sudo apt install openssh-server openssh-client -y

sudo apt install openjdk-11-jdk -y

二. 创建hdoop用户

使用以下命令为 Hadoop 创建非 root 用户。这是我们在实际下载和安装Hadoop之前需要做的预配置的一部分。

这是创建了一个名叫hdoop的用户。

sudo adduser hdoop

进入hdoop用户中：

su - hdoop

三. 设置ssh密钥

现在，为了在Ubuntu上安装Hadoop，我们将使用您刚刚创建的Hadoop用户，并使用它来与它建立SSH连接。使用以下命令生成 SSH 密钥对并保存它：

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

chmod 600 ~/.ssh/authorized_keys

chmod 700 ~/.ssh

ssh localhost

显示如上则成功，如果链接不成功（只有最后一步）则输入：

sudo service  ssh start

四. 在 Ubuntu 上下载并安装 Hadoop

你可以访问官网，寻找喜欢的版本，这里我下载的是3.4.0版本