大数据面试·Hadoop篇(二)

    技术2022-07-10  116

    大数据面试·Hadoop篇(二)

    1.2 HDFS HA 1.2.1 简单说下HDFS HA 1.2.2 DataNode宕机 1.2.3 NameNode宕机 1.2.4 NameNode对元数据的管理 1.2.5 HDFS的checkpoint 1.2.6 HDFS如何保证HA

    1.2 HDFS HA

    1.2.1 简单说下HDFS HA

    Datanode同时配置主备两个Namenode,并同时发送Block报告和心跳到两台Namenode。 确保任何时刻只有一个Namenode处于Active状态

    1.2.2 DataNode宕机

    短时间宕机:脚本恢复 长时间宕机:重启该DataNode

    1.2.3 NameNode宕机

    结合ZooKeeper做HDFS的自动故障转移

    1.2.4 NameNode对元数据的管理

    Processed: 0.011, SQL: 9