HADOOP操作命令
等价于start-dfs.sh + start-yarn.sh
一次性停止hadoop所有进程
./sbin/stop-all.sh
./sbin/start-dfs.sh
./sbin/start-yarn.sh
(1)退出安全模式
NameNode在启动时会自动进入安全模式。安全模式是NameNode的一种状态,在这个阶段,文件系统不允许有任何修改。
系统显示Name node in safe mode,说明系统正处于安全模式,这时只需要等待十几秒即可,也可通过下面的命令退出安全模式: $HADOOP_HOME/sbin/hadoop dfsadmin -safemode leave
(2) 进入安全模式
在必要情况下,可以通过以下命令把HDFS置于安全模式: $HADOOP_HOME/sbin/hadoop dfsadmin -safemode enter
添加一个新的DataNode节点,先在新加节点上安装好Hadoop,要和NameNode使用相同的配置(可以直接从NameNode复制),修改$
HADOOP_HOME/etc/Hadoop/master文件,加入NameNode主机名。然后在NameNode节点上修改$HADOOP_HOME/etc/Hadoop/master文件,加入NameNode主机名。然后在NameNode节点上修改HADOOP_HOME/conf/slaves文件,加入新节点名,再建立新加节点无密码的SSH连接,运行启动hadoop集群命令为:$
HADOOP_HOME/sbin/start-all.sh
HDFS的数据在各个DataNode中的分布可能很不均匀,尤其是在DataNode节点出现故障或新增DataNode节点时。新增数据块时NameNode对DataNode节点的选择策略也有可能导致数据块分布不均匀。用户可以使用命令重新平衡DataNode上的数据块的分布:$
HADOOP_HOME/sbin/start-balancer.sh