使用rsync命令实现xsync广播脚本

2024-08-20 20:20

本文主要是介绍使用rsync命令实现xsync广播脚本,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.rsync

1.1介绍

rsync 是一个非常强大的文件同步工具,它用于在本地计算机之间或通过网络在不同计算机之间高效地复制文件和目录。rsync 支持增量复制,这意味着它只会传输自上次同步以来发生变化的部分数据,从而显著减少网络带宽的使用。
基本语法
rsync 的基本语法如下:

rsync [options] source destination
  • source: 源文件或目录。
  • destination: 目标文件或目录。

常用选项

  • -a, --archive: 归档模式,等同于 -rlptgoD,即递归复制文件、保持符号链接、权限、时间戳、所有权等。
  • -r, --recursive: 递归复制整个目录。
  • -v, --verbose: 显示详细信息。
  • -z, --compress: 对数据进行压缩传输。
  • -P: 等同于 -rp 和 --partial,即递归复制并允许部分传输。
  • -e, --rsh=COMMAND: 指定远程 shell 命令,默认为 ssh。
  • -h, --human-readable: 以人类可读的方式显示文件大小。
  • -u, --update: 只传输那些源文件比目标文件新或者目标文件不存在的文件。
  • -c, --checksum: 使用校验和来检测文件是否改变,而不是依赖于文件大小和最后修改时间。 通过 SSH 复制文件

假设你想从本地计算机复制文件到远程服务器,可以使用以下命令:

rsync -avz -e ssh /path/to/local/file user@remote_host:/path/to/remote/directory/

这里:

  • -avz: 使用归档模式、详细输出和压缩传输。
  • -e ssh: 使用 SSH 协议进行数据传输。
  • /path/to/local/file: 本地文件路径。
  • user@remote_host:/path/to/remote/directory/: 远程服务器上的目标路径。

从远程服务器复制文件
要从远程服务器复制文件到本地计算机,可以使用以下命令:

rsync -avz -e ssh user@remote_host:/path/to/remote/file  /path/to/local/directory/

递归复制整个目录
要递归复制整个目录及其子目录,可以使用 -r 或 -a 选项:

rsync -avz -e ssh /path/to/local/directory/ user@remote_host:/path/to/remote/directory/

注意事项
确保你有足够的权限访问源和目标位置。
在复制大量数据时,考虑使用 -z 选项以减少网络流量。
使用 -v 选项可以帮助你了解 rsync 的执行进度。
如果远程服务器需要密码认证,确保你正确配置了 expect 脚本来处理密码提示。

1.2安装方式

sudo apt update
sudo apt install rsync -y

2.xsync实现

使用 rsync 与 expect 结合实现
expect实现自动输入密码

#!/bin/bash
#判断参数的个数
if [ $# -lt 1 ]
thenecho Not Enough Arhuement!exit;
fi#遍历集群所有机器
for host in hadoop002 hadoop003 hadoop004
doecho ========== ${host} ==========#遍历所有目录,挨个发送for file in $@do#判断文件是否存在if [ -e $file ]then#cd -P cd软连接进入的仍然是目标目录pdir=$(cd -P $(dirname $file); pwd)#获取文件名称fname=$(basename $file)# 标准的开启expect的脚本执行开始
/usr/bin/expect <<EOFset timeout 30spawn ssh root@${host} "mkdir -p $pdir"expect {"yes/no"{send "yes\r";exp_continue}"password:"{send "12345678\r"}}puts "${host}自动登录成功"spawn rsync -av $pdir/$fname root@${host}:$pdirexpect {"yes/no"{send "yes\r"exp_continue}"password:"{send "12345678\r"}}expect eof
EOFelseecho $file does not exists!fidone
done

hadoop002 hadoop003 hadoop004是要广播的远程服务器
$(dirname $file) 获取所在文件的目录
$(basename $file) 获取文件名称

效果图
在这里插入图片描述

注意:

ssh root@${host} "mkdir -p $pdir" 

ssh root@${host} “mkdir -p $pdir”,登录成功后会自动执行mkdir -p p d i r ,最后自动退出远程服务器, s s h r o o t @ pdir,最后自动退出远程服务器,ssh root@ pdir,最后自动退出远程服务器,sshroot@{host} 并不会自动退出而是停留再远程服务端交互界面。
因此使用ssh root@${host} “mkdir -p $pdir” 不用再执行send “exit \r”。

这篇关于使用rsync命令实现xsync广播脚本的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1091091

相关文章

如何使用Lombok进行spring 注入

《如何使用Lombok进行spring注入》本文介绍如何用Lombok简化Spring注入,推荐优先使用setter注入,通过注解自动生成getter/setter及构造器,减少冗余代码,提升开发效... Lombok为了开发环境简化代码,好处不用多说。spring 注入方式为2种,构造器注入和setter

MySQL中比较运算符的具体使用

《MySQL中比较运算符的具体使用》本文介绍了SQL中常用的符号类型和非符号类型运算符,符号类型运算符包括等于(=)、安全等于(=)、不等于(/!=)、大小比较(,=,,=)等,感兴趣的可以了解一下... 目录符号类型运算符1. 等于运算符=2. 安全等于运算符<=>3. 不等于运算符<>或!=4. 小于运

使用zip4j实现Java中的ZIP文件加密压缩的操作方法

《使用zip4j实现Java中的ZIP文件加密压缩的操作方法》本文介绍如何通过Maven集成zip4j1.3.2库创建带密码保护的ZIP文件,涵盖依赖配置、代码示例及加密原理,确保数据安全性,感兴趣的... 目录1. zip4j库介绍和版本1.1 zip4j库概述1.2 zip4j的版本演变1.3 zip4

Python 字典 (Dictionary)使用详解

《Python字典(Dictionary)使用详解》字典是python中最重要,最常用的数据结构之一,它提供了高效的键值对存储和查找能力,:本文主要介绍Python字典(Dictionary)... 目录字典1.基本特性2.创建字典3.访问元素4.修改字典5.删除元素6.字典遍历7.字典的高级特性默认字典

使用Python构建一个高效的日志处理系统

《使用Python构建一个高效的日志处理系统》这篇文章主要为大家详细讲解了如何使用Python开发一个专业的日志分析工具,能够自动化处理、分析和可视化各类日志文件,大幅提升运维效率,需要的可以了解下... 目录环境准备工具功能概述完整代码实现代码深度解析1. 类设计与初始化2. 日志解析核心逻辑3. 文件处

python生成随机唯一id的几种实现方法

《python生成随机唯一id的几种实现方法》在Python中生成随机唯一ID有多种方法,根据不同的需求场景可以选择最适合的方案,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习... 目录方法 1:使用 UUID 模块(推荐)方法 2:使用 Secrets 模块(安全敏感场景)方法

一文详解如何使用Java获取PDF页面信息

《一文详解如何使用Java获取PDF页面信息》了解PDF页面属性是我们在处理文档、内容提取、打印设置或页面重组等任务时不可或缺的一环,下面我们就来看看如何使用Java语言获取这些信息吧... 目录引言一、安装和引入PDF处理库引入依赖二、获取 PDF 页数三、获取页面尺寸(宽高)四、获取页面旋转角度五、判断

C++中assign函数的使用

《C++中assign函数的使用》在C++标准模板库中,std::list等容器都提供了assign成员函数,它比操作符更灵活,支持多种初始化方式,下面就来介绍一下assign的用法,具有一定的参考价... 目录​1.assign的基本功能​​语法​2. 具体用法示例​​​(1) 填充n个相同值​​(2)

Spring StateMachine实现状态机使用示例详解

《SpringStateMachine实现状态机使用示例详解》本文介绍SpringStateMachine实现状态机的步骤,包括依赖导入、枚举定义、状态转移规则配置、上下文管理及服务调用示例,重点解... 目录什么是状态机使用示例什么是状态机状态机是计算机科学中的​​核心建模工具​​,用于描述对象在其生命

Spring Boot 结合 WxJava 实现文章上传微信公众号草稿箱与群发

《SpringBoot结合WxJava实现文章上传微信公众号草稿箱与群发》本文将详细介绍如何使用SpringBoot框架结合WxJava开发工具包,实现文章上传到微信公众号草稿箱以及群发功能,... 目录一、项目环境准备1.1 开发环境1.2 微信公众号准备二、Spring Boot 项目搭建2.1 创建