大数据面试·Hadoop篇(四)

    技术2022-07-11  145

    大数据面试·Hadoop篇(四)

    1.4 Hadoop集群常用shell命令1.4.1 启动HDFS1.4.2 启动YARN1.4.3 创建文件夹1.4.4 查看HDFS系统根目录1.4.5 上传文件1.4.6 下载文件1.4.7 合并下载1.4.8 复制1.4.9 移动1.4.10 删除1.4.11 从本地剪切文件到HDFS上1.4.12 追加文件1.4.13 查看文件内容1.4.14 查看集群的工作状态

    1.4 Hadoop集群常用shell命令

    1.4.1 启动HDFS

    start-dfs.sh

    1.4.2 启动YARN

    start-yarn.sh

    1.4.3 创建文件夹

    hadoop fs -mkdir /a

    1.4.4 查看HDFS系统根目录

    hadoop fs -ls /

    1.4.5 上传文件

    hadoop fs -put words.txt /aa

    1.4.6 下载文件

    hadoop fs -get /aa/words.txt ~/newwords.txt

    1.4.7 合并下载

    $ hadoop fs -getmerge /aa/words.txt /aa/bb/words.txt ~/2words.txt

    1.4.8 复制

    hadoop fs -cp /aa/words.txt /a

    1.4.9 移动

    hadoop fs -mv /a/words.txt /aa/bb/cc

    1.4.10 删除

    hadoop fs -rm /aa/bb/cc/words.txt

    1.4.11 从本地剪切文件到HDFS上

    hadoop fs -moveFromLocal ~/hello.txt /aa

    1.4.12 追加文件

    hadoop fs -appendToFile ~/hello.txt /aa/words.txt

    1.4.13 查看文件内容

    hadoop fs -cat /aa/hello.txt

    1.4.14 查看集群的工作状态

    hdfs dfsadmin -report
    Processed: 0.020, SQL: 9