dfs.data.dir 配置导致datanode无法启动

淩亂°似流年 2022-05-09 11:44 356阅读 0赞

在新装的hadoop集群中 由于大意

dfs.data.dir参数 所对应的目录没有建立导致 该datanode没有起来：

错误信息如下：

2012-12-14 12:17:50,463 INFO org.apache.hadoop.metrics2.impl.MetricsConfig: loaded properties from hadoop-metrics2.properties

2012-12-14 12:17:50,475 INFO org.apache.hadoop.metrics2.impl.MetricsSourceAdapter: MBean for source MetricsSystem,sub=Stats registered.  
2012-12-14 12:17:50,477 INFO org.apache.hadoop.metrics2.impl.MetricsSystemImpl: Scheduled snapshot period at 10 second(s).  
2012-12-14 12:17:50,477 INFO org.apache.hadoop.metrics2.impl.MetricsSystemImpl: DataNode metrics system started  
2012-12-14 12:17:50,554 INFO org.apache.hadoop.metrics2.impl.MetricsSourceAdapter: MBean for source ugi registered.  
2012-12-14 12:17:50,587 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory in dfs.data.dir: can not create directory: /data/hdfs/data  
2012-12-14 12:17:50,587 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: All directories in dfs.data.dir are invalid.  
2012-12-14 12:17:50,587 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Exiting Datanode

2012-12-14 12:17:50,588 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: SHUTDOWN\_MSG:

解决的办法：

在root用户下执行：

cd /

mkdir data

cd data

mkdir hdfs

cd hdfs

mkdir name data

chown -R hadoop:hadoop/data

chmod -R 755 /data

然后再重新启动 整个新装的集群。

发表评论取消回复

表情：

评论列表（有 0 条评论，356人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL配置错误导致服务无法启动

MySQL配置错误可能会导致多种服务问题，以下是可能的情况和解决步骤： 1. **语法错误**：这是最常见的错误，如未关闭的引号、拼写错误的键等。检查MySQL配置文件（通常

淡淡的烟草味﹌/ 2025年03月14日 20:45/ 0 赞/ 69 阅读

相关 MySQL配置错误导致服务无法启动

当MySQL服务器由于配置错误而无法启动时，通常会看到一些错误信息。这里提供一个常见的问题解决步骤： 1. **检查日志**：MySQL在启动过程中会产生一个或多个错误日志。

冷不防/ 2025年02月23日 05:33/ 0 赞/ 81 阅读

相关 MySQL配置文件误修改导致服务无法启动

当MySQL的配置文件（通常为`my.cnf`或`mysql.conf`）被误修改，可能会导致MySQL服务无法正常启动。以下是一些常见问题和解决方法： 1. **配置参数丢

傷城~/ 2025年01月31日 14:15/ 0 赞/ 118 阅读

相关 MySQL服务器配置错误导致服务无法启动

MySQL服务器配置错误是常见的问题，这可能会导致服务无法正常启动。以下是一些可能的配置错误以及解决方法： 1. **权限设置错误**：如果用户的权限不足，将无法操作MySQ

﹏ヽ暗。殇╰゛Y/ 2025年01月25日 15:57/ 0 赞/ 106 阅读

相关 namenode和datanode无法启动解决方案

安装Hadoop（伪分布式环境）namenode和datanode无法启动解决方案先附上我参考的安装教程链接 > 10.1.88.4/index\_1.php?url

╰半橙微兮°/ 2023年05月29日 03:20/ 0 赞/ 181 阅读

相关 Hadoop DataNode用jps查看无法启动的解决办法

问题描述：部署好Hadoop环境后，在slave机上运行jps看不到Datanode的进程。解决方式：删除所有slave机上hdfs-site.xml中配置的Datanod

小咪咪/ 2022年07月14日 05:44/ 0 赞/ 268 阅读

相关 hadoop 完全分布式下 datanode无法启动解决方法

解决这个问题的时候，自己使用的版本是2.7.3，下面的文章中的版本应该是2.0以前的版本，但也好用。使用的是下面的这几步完成的： 1. 先执行stop-all.sh暂停所有

雨点打透心脏的1/2处/ 2022年07月13日 07:59/ 0 赞/ 343 阅读

相关 DataNode无法启动问题

![20180422173518499][] 由于两个NN中文件保存路径下的clusterID不一致导致的。解决方法： 1、删除hadoop.tmp.dir

我不是女神ヾ/ 2022年05月26日 01:22/ 0 赞/ 381 阅读

相关 dfs.data.dir 配置导致datanode无法启动

在新装的hadoop集群中由于大意 dfs.data.dir参数所对应的目录没有建立导致该datanode没有起来：错误信息如下： 2012-12-14

淩亂°似流年/ 2022年05月09日 11:44/ 0 赞/ 357 阅读

相关解决Hadoop伪分布式下，datanode无法启动的问题

问题：发现可视化界面中datanode的个数为0，是用jps命令查看时，发现DataNode没有启动，查看datanode的启动日志时，出现以后报错信息↓ ![2018

ゞ浴缸里的玫瑰/ 2022年04月15日 03:18/ 0 赞/ 608 阅读