使用rsync进行多服务器同步
2016-01-20 16:09
363 查看
使用rsync进行多服务器同步
@(Others)当集群数量很大时,修改配置文件和节点之间的文件同步是一件很麻烦且浪费时间的事情。
rsync是linux上实现不同机器之间文件同步、备份的工具,centos系统中默认已经安装,使用
rsync -h
检查是否已经安装rsync。
使用前提
确保各个节点部署的目录结构是一致的,不然同步起来很麻烦。使用过程
在网上找到一大堆rsync的配置资料,然而使用起来不尽人意,对于初次使用rsync的人来说,各种配置显然太过复杂,需要一步步来熟悉。所以这里不会对rsync的配置文件进行任何修改,仅仅使用rsync的命令进行同步操作。
需求
需要同步各个节点上的hadoop、hbase和spark的配置文件,其余目录/文件不需要同步。
exclude文件
在部署hadoop等父目录下,新建一个rsync-exclude.list文件,内容为不需要同步的目录/文件,每个目录/文件为一行
每行的内容不要留有空格或者制表符等,不然会导致无效!
在该目录下执行rsync命令:
sudo rsync -avz --exclude-from rsync-exclude.list ${需要同步的目录} ${目标节点ip/host}:${目标节点的目录}
-avz 表示传输过程中递归同步、显示详情并使用压缩。
–exclude-from 的参数为exclude文件目录。
注意,exclude文件中要使用相对路径,测试时使用绝对路径失败。
脚本实现多服务器同步
只需要一个简单的for循环即可实现:#!/bin/bash hosts=(host1 host2 host3 ...) for host in ${hosts[@]} do sudo rsync -avz --exclude-from rsync-exclude.list ${需要同步的目录} $host:${目标节点的目录} done
作者:@小黑
相关文章推荐
- 为什么0.1+0.2=0.30000000000000004
- solr 搜索引擎查询
- Android测试
- 欢迎使用CSDN-markdown编辑器
- android shape讲解小全及例子
- 机器学习(一)——线性回归(Linear Regression)
- Android XML file之animation-list
- 硬负载OR软负载
- ExpandableListView的首次加载全部展开,并且点击Group不收缩
- jrebel配置热部署参数
- js将字符串转化成函数:eval(logOutCallbackFun+"()");
- Quartz2D简单介绍
- centos下安装使用解压工具:rar/unrar
- 10.php桥接模式
- cocos2dx 绽开效果
- VisualSVN 配置提交svn时强制输入日志
- js返回顶部封装 简洁
- php 路由实现
- 用C语言实现数组反序
- 五分钟搞懂Gson的用法