CDH 修改集群IP

来源:互联网 发布:一建机电知乎 编辑:程序博客网 时间:2024/05/17 09:11

最近遇到一个Case:客户原来的Hadoop集群的物理机要迁移至别的地方,这将导致物理机的IP要更换。这让我不禁想到一个问题:CDH Manager页面中的主机IP的信息究竟是保存在哪里的?

这里写图片描述

后来才明白,CDH Manager在安装的时候会配置相应的数据库,用来保存集群所有的配置信息,因此这里的节点的IP也是保存在这个数据库中,所以如果更换了节点的IP,就必须要更新此数据库的配置信息。具体步骤如下,

1 停止CDH Manager相应的管理进程(Server进程及所有节点的Agent进程)

service cloudera-scm-agent stopservice cloudera-scm-server stop

2 查看对应数据库的scm用户密码

[root@esg06 trafodion]# grep password /etc/cloudera-scm-server/db.propertiescom.cloudera.cmf.db.password=aOnrBDz4Bi

3 在CDH Manager管理节点上登录数据库(默认Postgresql)

psql -h localhost -p 7432 -U scm

此时需要输入scm用户的密码,即上述步骤2中的密码

4 查看数据库中的主机IP

scm=> select host_id, host_identifier, name, ip_address from hosts; host_id |           host_identifier            |        name         | ip_address---------+--------------------------------------+---------------------+-------------       8 | 40bce2b1-d718-467b-b757-49b55ed2fed6 | esg11.esgyncn.local | 10.10.10.11       6 | f63edca9-b64b-4d03-9339-724d520ffeef | esg08.esgyncn.local | 10.10.10.8       7 | 9949b2cf-4e09-4f3b-abeb-72a8b53b0124 | esg09.esgyncn.local | 10.10.10.9       5 | ce21067f-134f-4861-8468-ced2f214bab9 | esg10.esgyncn.local | 10.10.10.10       4 | 5b965ecf-3414-4896-a654-356a351040f5 | esg15.esgyncn.local | 10.10.10.15      10 | e251e5f2-9e4e-4210-a237-5fa5f289d8e6 | esg12.esgyncn.local | 10.10.10.12       1 | 24da548a-063b-46a9-8a2d-0c88881f4aed | esg13.esgyncn.local | 10.10.10.13       2 | cdec8d37-1206-4e71-b9b3-4fad9c080d5e | esg06.esgyncn.local | 10.10.10.6       9 | 45b1fd0a-d34b-42a7-a1c8-dc4a07485071 | esg14.esgyncn.local | 10.10.10.14       3 | 29121630-aa25-4594-82c8-c8ea7896fe9b | esg07.esgyncn.local | 10.10.10.7(10 rows)

5 依次修改主机IP

update hosts set ip_address='...' where ip_address='';...

6 退出数据库(:\q)

7 修改所有节点的Agent配置文件

--将server_hosts的值修改为新的CDH Manager管理节点的IPvi /etc/cloudera-scm-agent/config.ini

8 修改所有节点的/etc/hosts,将IP修改为新的IP

9 重启启动CDH Manager对应的管理进程及Agent服务

service cloudera-scm-server-db restartservice cloudera-scm-server startservice cloudera-scm-agent start
1 0
原创粉丝点击