当前位置: 移动技术网 > IT编程>数据库>其他数据库 > HDFS的HA集群原理分析

HDFS的HA集群原理分析

2020年01月05日  | 移动技术网IT编程  | 我要评论
1.简单hdfs集群中存在的问题 不能存在两个NameNode 单节点问题 单节点故障转移 2.解决单节点问题 找额外一个NameNode备份原有的数据 会出现脑裂 脑裂:一个集群中多个管理者数据不一致 这种情况称之为脑裂 3.如何解决启动多个NameNode时保证同一时刻只有一个NameNode工 ...

1.简单hdfs集群中存在的问题

  • 不能存在两个namenode
  • 单节点问题   单节点故障转移

2.解决单节点问题

  • 找额外一个namenode备份原有的数据 会出现脑裂
  • 脑裂:一个集群中多个管理者数据不一致 这种情况称之为脑裂

3.如何解决启动多个namenode时保证同一时刻只有一个namenode工作 避免脑裂发生

  qjm 使用zookeeper完成高可用

        

 

 

 4.面试问题

在ha集群中 如果zk与namenode(active) 出现网络延迟这种情况时,zk会自动切换namenode(standy) 为活跃节点 这个时候集群中就出现了多个namenode active  进而出现脑裂问题

journal node可以解决脑裂问题  它有两个作用:

    1. 负责namenode中edits同步
    2. 隔离机制 保证在这一时刻只能有一个namenode active 使用ssh登录到namenode节点上使用kill命令杀死namenode

如您对本文有疑问或者有任何想说的,请 点击进行留言回复,万千网友为您解惑!

相关文章:

验证码:
移动技术网