亲手搭建!从0到1搭建CDH集群(centos6.5+CDH5.16+jdk1.8+mysql5.7)(第三步: CDH安装)

    技术2023-06-17  83

    说明:【all】【所有机器】【123】表示所有节点都执行 【1】表示只有1号节点执行

    三 CDH安装

    3.1 打开web

    打开7180端口,账号密码都是admin

    3.2 安装警告

    Cloudera 建议将 /proc/sys/vm/swappiness 设置为最大值 10 Cloudera 建议将 /proc/sys/vm/swappiness 设置为最大值 10。当前设置为 30。使用 sysctl 命令在运行时更改该设置并编辑 /etc/sysctl.conf,以在重启后保存该设置。您可以继续进行安装,但 Cloudera Manager 可能会报告您的主机由于交换而运行状况不良。

    临时生效:

    sysctl vm.swappiness=10 && cat /proc/sys/vm/swappiness

    永久生效:

    echo 'vm.swappiness=10'>> /etc/sysctl.conf 已启用透明大页面压缩,可能会导致重大性能问题。 已启用透明大页面压缩,可能会导致重大性能问题。请运行“echo never > /sys/kernel/mm/transparent_hugepage/defrag”和“echo never > /sys/kernel/mm/transparent_hugepage/enabled”以禁用此设置,然后将同一命令添加到 /etc/rc.local 等初始化脚本中,以便在系统重启时予以设置。

    临时生效:

    echo never > /sys/kernel/mm/transparent_hugepage/defrag echo never > /sys/kernel/mm/transparent_hugepage/enabled

    永久生效:

    echo 'echo never > /sys/kernel/mm/transparent_hugepage/defrag' >> /etc/rc.local echo 'echo never > /sys/kernel/mm/transparent_hugepage/enabled' >> /etc/rc.local

    3.3 安装所需元数据

    安装所需mysql元数据,安装什么软件,元数据库就是什么(如安装hive,数据库名写hive,账号root,密码abc123456)

    【推荐阅读】

    亲手搭建!从0到1搭建CDH集群(centos6.5+CDH5.16+jdk1.8+mysql5.7)(第二步: ClouderaManager安装) 亲手搭建!从0到1搭建CDH集群(centos6.5+CDH5.16+jdk1.8+mysql5.7)(第四步: spark2.x安装)

    Processed: 0.017, SQL: 9