Hadoop配置文件同步脚本
来源:互联网 发布:算法爱好者 公众号 编辑:程序博客网 时间:2024/05/20 18:16
同步Hadoop的配置文件,总是scp,这很麻烦,现在写了一个同步脚本;
这个脚本会先备份远程服务器的配置文件,然后再同步;
如果同步的次数多了,可以按照日志删除配置文件比如:
find . -name '*20150604*' | xargs rm -f
脚本内容如下:
#!/bin/bash
##用于同步配置文件
##配置文件路径
HADOOP_ETC=/home/hadoop/hadoop-2.7.0/etc/hadoop
##需要同步的文件
ETC_FILES="core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml mapred-env.sh hadoop-env.sh"
##需要同步的主机(如果没有hosts的主机名映射,可以填ip)
HOSTS="Hadoop202 Hadoop203"
OP_DATE=$(date +%Y%m%d_%H%M%S)
echo "配置文件开始同步"
for H in $HOSTS;do
echo "##Sycn for $H##"
for F in $ETC_FILES;do
echo "backup and scp..."
ssh hadoop@$H cp $HADOOP_ETC/$F $HADOOP_ETC/${F}_${OP_DATE}
scp $HADOOP_ETC/$F hadoop@$H:$HADOOP_ETC
done
done
0 0
- Hadoop配置文件同步脚本
- hadoop 集群中 同步配置文件
- 复制hadoop配置文件到datanode的脚本
- hadoop配置文件
- HADOOP 配置文件
- Hadoop配置文件
- hadoop 配置文件
- Hadoop配置文件
- hadoop配置文件
- [Hadoop]配置文件
- Hadoop配置文件
- hadoop 配置文件
- Hadoop配置文件
- Hadoop配置文件
- Hadoop配置文件
- hadoop 配置文件
- Hadoop配置文件与HBase配置文件
- hbase配置文件同步
- JavaScript脑筋急转弯
- Sicily 4423 Calculate the Sum
- Lucene使用实例
- 无需翻墙, Android官方开发相关下载资源一揽子大汇总
- 玩转Docker镜像
- Hadoop配置文件同步脚本
- OC第一天-继承,方法
- C和C++之间库的互相调用
- 软件包管理
- 15OJ——拍“七”游戏
- 【每日一记】unity3d 图片置灰shader
- LoaderManager使用详解(三)---实现自定义Loaders
- html5通过浏览器调用手机相机
- 新gre作文写作法律类的句子短语