Starting namenodes on [hp01] hp01: Could not create directory '/home/hdfs/.ssh'. hp01: Failed to add the host to the list of known hosts (/home/hdfs/.ssh/known_hosts). hp01: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). Starting datanodes hp01: Could not create directory '/home/hdfs/.ssh'. hp02: Could not create directory '/home/hdfs/.ssh'. hp03: Could not create directory '/home/hdfs/.ssh'. hp01: Failed to add the host to the list of known hosts (/home/hdfs/.ssh/known_hosts). hp03: Failed to add the host to the list of known hosts (/home/hdfs/.ssh/known_hosts). hp02: Failed to add the host to the list of known hosts (/home/hdfs/.ssh/known_hosts). hp01: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). hp03: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). hp02: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). Starting secondary namenodes [hp02] hp02: Could not create directory '/home/hdfs/.ssh'. hp02: Failed to add the host to the list of known hosts (/home/hdfs/.ssh/known_hosts). hp02: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

<think>嗯，用户之前已经遇到了Hadoop无法以root用户启动的问题，现在解决了用户权限问题，但出现了新的错误，主要涉及SSH目录创建失败和权限被拒绝。用户可能需要进一步配置SSH免密登录和权限设置。 首先，用户可能已经按照之前的指导创建了hdfs用户，但未正确设置其主目录或权限。错误信息显示无法创建/home/hdfs/.ssh目录，这说明hdfs用户的主目录可能不存在或者权限不足。需要检查/home/hdfs是否存在，以及是否属于hdfs用户。 接下来，SSH免密登录配置不正确，导致各个节点之间无法无密码通信。Hadoop在启动时需要通过SSH连接到其他节点，如果hdfs用户没有设置SSH密钥，或者公钥未添加到其他节点的授权文件中，就会出现权限拒绝的问题。 另外，用户可能在之前的步骤中没有正确设置hdfs用户的SSH配置，或者在生成密钥时权限设置不当。需要确保.ssh目录的权限为700，密钥文件的权限为600，否则SSH会拒绝使用这些文件。 还有可能SELinux或防火墙设置阻止了SSH连接，需要检查这些安全设置是否影响了通信。同时，确认所有节点上的hdfs用户都存在，并且主目录结构正确。 用户可能需要分步骤解决：首先确保hdfs用户的主目录存在并拥有正确权限，然后生成SSH密钥对，配置authorized_keys，最后测试SSH连接。此外，可能需要处理多个节点之间的同步，确保所有节点都配置一致。</think>--- ### **问题根源分析** 当前错误涉及**SSH免密登录配置失败**与**用户目录权限问题**，具体表现为： 1. 无法创建`/home/hdfs/.ssh`目录 2. SSH密钥认证失败（`Permission denied`） 3. 多节点同步失败 --- ### **分步解决方案** --- #### **1. 修复用户主目录权限** ```bash # 创建hdfs用户主目录（如果不存在） sudo mkdir -p /home/hdfs sudo chown -R hdfs:hdfs /home/hdfs sudo chmod 755 /home/hdfs ``` --- #### **2. 配置SSH免密登录** ```bash # 切换到hdfs用户 sudo su - hdfs # 生成SSH密钥（执行后连续回车三次） ssh-keygen -t rsa -P "" -f ~/.ssh/id_rsa # 授权密钥 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 700 ~/.ssh chmod 600 ~/.ssh/authorized_keys ``` --- #### **3. 多节点同步配置** 在所有节点（hp01/hp02/hp03）执行： ```bash # 批量配置脚本 for host in hp01 hp02 hp03; do ssh $host "sudo mkdir -p /home/hdfs && sudo chown hdfs:hdfs /home/hdfs" scp -r ~/.ssh hdfs@$host:~/ # 复制密钥文件 done ``` --- #### **4. 验证SSH连通性** ```bash # 以hdfs用户身份测试 sudo -u hdfs ssh hp01 date sudo -u hdfs ssh hp02 date sudo -u hdfs ssh hp03 date ``` ✅ 预期结果：直接返回系统时间，无需输入密码 --- #### **5. 关键权限修正** ```bash # 确保所有节点存在hdfs用户 sudo groupadd hadoop sudo usermod -aG hadoop hdfs # 设置sudo权限（可选） echo "hdfs ALL=(ALL) NOPASSWD:ALL" | sudo tee /etc/sudoers.d/hdfs ``` --- ### **错误场景处理指南** --- #### **场景1：`Could not create directory`持续出现** - **检查点**： 1. 确认`/home/hdfs`目录权限： ```bash ls -ld /home/hdfs # 应显示drwxr-xr-x ``` 2. 验证用户映射： ```bash getent passwd hdfs # 必须返回有效条目 ``` --- #### **场景2：`Permission denied (publickey)`** - **排查步骤**： ```bash # 检查SSH调试信息 sudo -u hdfs ssh -vvv hp01 # 验证密钥权限 ls -l /home/hdfs/.ssh ``` ✅ 正确权限： ``` -rw------- 1 hdfs hdfs 1675 Jun 10 09:00 id_rsa -rw-r--r-- 1 hdfs hdfs 398 Jun 10 09:00 id_rsa.pub ``` --- #### **场景3：多节点同步失败** ```bash # 检查主机名解析 ping -c 1 hp01 ping -c 1 hp02 ping -c 1 hp03 # 验证SSH配置文件 sudo -u hdfs cat /home/hdfs/.ssh/config ``` ✅ 推荐配置： ``` Host * StrictHostKeyChecking no UserKnownHostsFile=/dev/null ``` --- ### **成功启动验证** ```bash # 完整启动流程 sudo -u hdfs $HADOOP_HOME/sbin/stop-dfs.sh sudo -u hdfs $HADOOP_HOME/sbin/start-dfs.sh # 查看节点状态 hdfs dfsadmin -report ``` ✅ 正常输出应包含所有节点的`Live datanodes`信息 --- ### **补充说明** - **权限架构建议**： ```mermaid graph LR A[hdfs用户] --> B[主目录权限755] A --> C[.ssh目录700] C --> D[密钥文件600] A --> E[跨节点相同UID/GID] ``` - **典型错误规避**： - 避免使用root用户直接操作HDFS - 确保所有节点时间同步（NTP服务） - 检查`/etc/hosts`文件中的IP-主机名映射 按此方案操作后，SSH连接问题和权限拒绝错误应被解决。若仍存在问题，建议检查防火墙设置（`sudo systemctl status firewalld`）和SELinux状态（`getenforce`）。