Hadoop HA部署过程中出现主备namenode或datanode挂掉的问题

本文讲述了在部署HadoopHighAvailability(HA)过程中遇到的hdfsnamenode-format格式化失败问题,原因包括配置错误、服务启动顺序和JournalNode版本不一致。作者详细描述了解决步骤,包括检查配置、确认服务状态和清理临时文件等,确保namenode和datanode正常工作。

在部署Hadoop HA的过程时,当进行到hdfs namenode -format格式化这一步骤时显示

org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check if JNs are ready for formatting. 1 exceptions thrown:拒绝连接

查阅多篇文章分析可知其原因是节点之间无法通信,所以无法建立连接

解决方法

1.首先查看配置文件hdfs中dfs.namenode.shared.edits.dir是否出错

2.查看zk集群是否启动,其次查看master和slave1上的journalnode是否启动

3.查阅其他博客有博主建议添加core-site.xml中的一个配置参数为:

<!--修改core-site.xml中的ipc参数,防止出现连接journalnode服务ConnectException--> 
  <property> 
    <name>ipc.client.connect.max.retries</name> 
    <value>100</value> 
    <description>Indicates the number of retries a client will make to establish a server c
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值