什么是Gateway节点?
1 | Gateway节点又称为客户端节点,它是Hadoop集群的接口机。主要会部署一些客户端的配置、脚本命令等。如:HDFS的core-site.xml , hdfs-site.xml以及hadoop的操作命令 |
1 | 如果你使用的是Apache Hadoop,你只需要将hadoop相关服务的配置和脚本命令拷贝到客户端机器即可,但一旦集群的配置有所修改,你需要注意也同步到客户端机器。 |
CDH上如何增加一台Gateway节点?
1 | 流程: |
一、创建Gateway节点的主机模板
1. 创建Gateway节点的主机模板
1 | 从Cloudera Manager进入“主机模板”页面 ---> 点击创建 |
2. 给模板命名,并选择各个服务的Gateway角色
3. 点击“创建” , 确认创建成功
二、Gateway节点的前置准备
1 | 1.确保OS的yum源可以正常使用,通过yum repolist命令可以查看到匹配的OS的所有包 |
三、增加Gateway节点的集群并应用主机模板
1. 进入“所有主机”页面 —> 点击“向集群添加主机” —> 选择“经典向导” —> 点击“继续”
2. 输入Gateway节点的IP或者hostname,点击搜索,完成后点击“继续”
3. 选择“自定义存储库”, 并输入Cloudera Manager的yum源http地址,点击“继续”
4. 勾选Java的两个选项,点击“继续”
5. 输入Gateway节点的root密码,并点击“继续”
6. 等待cloudera-scm-agent在Gateway节点上安装
安装完成后点击“继续”
7. 等待分发Parcel包并激活,完成后,点击“继续”
8. 主机检查,点击“继续”
9. 选择主机模板
没有发现之前创建的主机模板文件,这里先不管了,回到Cloudera Manager主页。你也可以在这个页面点击“创建”,直接创建一个主机模板,选中后,点击继续。
10. 点击进入“所有主机”页面,可以发现新的Gateway节点已经在主机列表中
11. 选中Gateway节点,点击“已选定的操作”,并点击“应用主机模板”
12. 选择之前创建好的主机模板,并勾选应用主机模板,确认。
13. 等待应用主机模板命令执行完毕,待所有步骤执行完毕后,点击“关闭”
14. 确认所有Gateway角色已经部署到新的节点
至此,给CDH集群增加新的Gateway节点完成。
参考自:微信公众号Hadoop实操
- 本文作者: GaryWu
- 本文链接: https://garywu520.github.io/2018/12/11/CDH集群的Gateway节点/
- 版权声明: 本博客所有文章除特别声明外,均采用 MIT 许可协议。转载请注明出处!