生产环境下的hadoop 配置实战

来源:互联网 发布:卖商品的淘宝店铺名字 编辑:程序博客网 时间:2024/05/16 17:10

成百上千的hadoop集群维护方式:(技巧)


不维护每台机器的hosts 文件,取而代之的是建立一台dns 服务机,维护服务机来间接维护hosts ,

dns 服务机系统用 bind软件 来配置


数目巨大的ssh 的配置会是一件非常麻烦,非常容易出错的事情;

取代方案是NFS(网络文件系统),windows 网络邻居的协议采用samba ,linux 也支持,mnt 到对应的位置

共享出去,设定权限访问


多台机器复制hadoop:awk 产生脚本(grep 也是搜索)和 sed 命令

运行脚本的程序用sh 命令



0 0
原创粉丝点击