杰霸霸博客

主题

CM6的集群部署 ​

1. 访问CM的WEBUI ​

修改win11中的host文件，加入hadoop1的域名映射，访问http://hadoop101:7180/Alt text 默认用户名密码都是admin/admin 登录后，进入欢迎页面, 点击右下角的继续：
Alt text 接受条款和协议： Alt text

2. 选择版本 ​

选择Cloudera Express版本，也就是免费版 Alt text 点击继续后，稍等片刻空白页面加载页面： Alt text

3. 设置集群名称 ​

点击继续后，输入集群名称 Alt text

4. 添加agent主机 ​

点击继续后，要求指定主机 Alt text

5. 设置parcels ​

选择CDH版本6.3.2： Alt text 点击继续后，CM的agent就开始parcel包的分发，比较耗时 Alt text 就是等，一直等：
Alt text

6. 集群检查 ​

进入检查网络性能，检查主机页面：
Alt text 片刻过后结果出来，点击查看详情： Alt text 按照里面描述的提示进行处理： Alt text 在所有节点执行:

sh
## 临时修改交换分区配置
sysctl vm.swappiness=10
## 永久生效交换分区配置
sed -i s/"vm.swappiness = 30"/"vm.swappiness = 10"/g /usr/lib/tuned/virtual-guest/tuned.conf
## 透明巨叶问题 临时修改
echo never > /sys/kernel/mm/transparent_hugepage/defrag
echo never > /sys/kernel/mm/transparent_hugepage/enabled
## 透明巨叶问题 永久修改
echo "never > /sys/kernel/mm/transparent_hugepage/defrag" >> /etc/rc.d/rc.local
echo "never > /sys/kernel/mm/transparent_hugepage/enabled" >> /etc/rc.d/rc.local

然后点击重新运行，可以看到问题已经处理：
Alt text