集群搭建小结

2019-11-06 09:20:22

字体：大中小

来源：转载

供稿：网友

主备节点启动小结

在这次ha集群的搭建过程中细节上出现了较多卡顿。针对搭建好后的主备节点的启用也出现了一些问题。在启动时单在一个节点上格式化后，另一个namenode节点并未同步格式化内容 可能是因为网络通信的问题,毕竟这次的数据导入过程中因为专用网络出现了较多问题 致使另一节点上的namenode启用并未成功因此无法连通8020端口。

解决方案

将有格式化信息的name相关信息拷贝一份至另一namenode,注意datanode的version也要对应，而datanode的data的信息在start-dfs.sh时生成

ha集群启用相关指令

hadoop-daemon.sh start journalnodehdfs namenode -formathadoop-daemon.sh start namenodestart-dfs.shstart-yarn.shhadoop-daemon.sh start datanode

hdfs haadmin -getServiceState nn1 查看活跃主备节点的状态 *haadmin -failover –forcefence –forceactive nn2 nn1

确定要转为active的namenode的id，这里将namenode1设为active，使用命令行工具进行状态切换

hdfsnamenode -initializeSharedEditshadoop-daemon.sh start namenode在namenode1上对journalnode的共享数据进行初始化，然后启动namenode进程：namenode2上同步journalnode的共享数据，然后启动namenode进程：$HADOOP_HOME/bin/hdfsnamenode -bootstrapStandby$HADOOP_HOME/sbin/hadoop-daemon.sh start namenode

参考连接