千家信息网

启动hadoop。start-all.sh 缺少datanode进程

发表于:2025-02-04 作者:千家信息网编辑
千家信息网最后更新 2025年02月04日,1)修改每个Slave的namespaceID使其与Master的namespaceID一致。或者2)修改Master的namespaceID使其与Slave的namespaceID一致。该"name
千家信息网最后更新 2025年02月04日启动hadoop。start-all.sh 缺少datanode进程


1)修改每个Slave的namespaceID使其与Master的namespaceID一致。

  或者

2)修改Master的namespaceID使其与Slave的namespaceID一致。

  该"namespaceID"位于"/usr/hadoop/tmp/dfs/data/current/VERSION"文件中,前面蓝色的可能根据实际情况变化,但后面红色是不变的。

  例如:查看"Master"下的"VERSION"文件


查看错误日志访问http://localhost:50070,点击页面中的Namenode logs链接,在logs页面点击hadoop-hadoop-datanode-ubuntu.log 链接,

发现在日志中有此提示:Invalid directory in dfs.data.dir: Incorrect permission for /usr/local/hadoop/hdfs/data, expected: rwxr-xr-x, while actual: rwxr-xrwx 。原因是data文件夹权限问题,执行:chmod g-w /usr/local/hadoop/hdfs/data,修改文件夹权限后,再次启动Hadoop,问题解决。




0