服务器间进行文件传输-SFTPSCP一篇搞定

2024-09-01 23:12

本文主要是介绍服务器间进行文件传输-SFTPSCP一篇搞定,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.简单介绍一下

在一些特殊场景,两台服务器之间需要进行文件传输的时候,或许我们会想到FTP,这也是我们常见的实现方式,但是如果我们不能操作远程服务器,无法判断远程服务器是否安装了FTP呢,众所周知,FTP使用的前提时确定服务器上配置了FTP服务,并且正在运行FTP服务器软件,这是最大的前提,如果我们不知道,那么就不能贸然的使用该方式。

我的需求是:我只知道对方服务器的ip、端口、用户名、密码,文件地址。其他的我一概不知。

那么还有什么方式呢,SFTP?SCP?

SFTP和FTP不就少了一个S,应该也需要安装FTP吧?答案是:NO

SFTP:是一种基于SSH协议的网络协议,用于在网络上安全的传输协议,SFTP提供了一个安全的文件传输机制,允许用户在传输过程中加密数据,从而保护数据免受窃听和篡改。

注意:OpenSSH支持SFTP,也就是说只要服务器中有OpenSSH,SFTP就可以使用。

FTP:是一种用于在网络上进行文件传输的协议。它是基于文本的协议,允许用户上传、下载、删除和重命名文件。

注意:需要安装配置FTP服务到服务器。

SCP:是一种用于在服务器之间安全复制文件的网络协议。基于SSH协议,提供了一个加密的方法来传输文件,确保数据在传输过程中的安全性。SCP是一个命令行工具,通常用于远程服务器管理、文件备份和系统维护。

注意:我认为只要服务器可以执行linux命令,应该都可以实现。

2.实现方式

我的实现方式是基于Spring Boot创建完成的哈,大家如果出现了什么问题,得放到评论区,得重新看看具体是什么原因。

2.1 FTP方式

这个大家就参考网上详细的文章哈,主要我的需求不能使用这个方式😄,所以没有代码😜。

2.2 SFTP方式

第一个肯定就是导入依赖

<dependency><groupId>com.jcraft</groupId><artifactId>jsch</artifactId><version>0.1.53</version>
</dependency>        

然后,咱们就得写一个工具类了

import com.jcraft.jsch.Channel;
import com.jcraft.jsch.ChannelSftp;
import com.jcraft.jsch.JSch;
import com.jcraft.jsch.Session;
import java.io.File;public class ScpFileTransferUtil {// 远程服务器的IP地址private static final String IP = "192.xxx.xxx.xx";// 远程服务器的SSH端口private static final int PORT = xxxx;// 远程服务器的用户名private static final String USER_NAME = "root";// 远程服务器的密码private static final String PASSWORD = "xxxxxx";/*** 从远程服务器下载文件到本地** @param remotePath 远程文件路径* @param localPath  本地目标目录*/public static void scpFromRemote(String remotePath, String localPath) {try {JSch jsch = new JSch();Session session = jsch.getSession(USER_NAME, IP, PORT);session.setPassword(PASSWORD);// 设置配置项java.util.Properties config = new java.util.Properties();config.put("StrictHostKeyChecking", "no");session.setConfig(config);// 连接会话System.out.println("Connecting to SSH server...");session.connect();// 打开 SFTP 通道Channel channel = session.openChannel("sftp");channel.connect();ChannelSftp sftpChannel = (ChannelSftp) channel;// 解析远程文件路径中的文件名String fileName = extractFileNameFromPath(remotePath);// 创建本地文件路径File localFile = new File(localPath, fileName);// 创建本地目标目录File directory = localFile.getParentFile();if (!directory.exists()) {boolean mkdirResult = directory.mkdirs();if (mkdirResult) {System.out.println("创建文件夹成功");} else {System.out.println("创建文件夹失败");throw new RuntimeException("创建文件夹失败!");}}// 下载文件System.out.println("Downloading file from remote path: " + remotePath);sftpChannel.get(remotePath, localFile.getAbsolutePath());System.out.println("文件下载成功");// 关闭通道和会话channel.disconnect();session.disconnect();} catch (Exception e) {e.printStackTrace();System.err.println("文件下载失败:" + e.getMessage());}}/*** 从路径中提取文件名** @param path 完整路径* @return 文件名*/private static String extractFileNameFromPath(String path) {int lastSeparatorIndex = path.lastIndexOf(File.separator);return path.substring(lastSeparatorIndex + 1);}public static void main(String[] args) {System.out.println("Main method started.");//获取开始时间long startTime = System.currentTimeMillis();String remotePath = "/data/ceshiDown/eac207eeeb2095cc560f94b6e7e33f49_4.mp4"; // 远程文件路径String localPath = "E:\\mnt\\data_process_net\\token"; // 本地目标目录scpFromRemote(remotePath, localPath);System.out.println("Main method finished.");//获取结束时间long endTime = System.currentTimeMillis();System.out.println("程序运行时间:" + (endTime - startTime)/1000 + "s");}
}

这段代码应该不需要我讲解一下了吧,我相信兄弟们都可以看懂的,必要的注释我都加上啦。

搞定!

2.3 SCP方式

SCP的实现方式,有一些稍微的麻烦,需要写一个expect脚本,为什么使用脚本呢,说明一下,在我们使用scp命令在拷贝远程服务器的时候,我们中间需要输入密码。

但是我们在执行代码的时候,可以自动识别需要输入密码,然后自动化输入密码吗?答案是不能的。

所以这里介入expect脚本的作用就是识别哪里需要输入密码,然后自动化输入密码。

这里应该不需要安装任何的依赖的。

直接就是工具类:

import lombok.extern.slf4j.Slf4j;import java.io.BufferedReader;
import java.io.File;
import java.io.IOException;
import java.io.InputStreamReader;
@Slf4j
public class ScpUtil {public static void scpFromRemoteUsingExpect(String expectScriptPath, String user, String host, int port, String remotePath, String localPath, String password) {Process process = null;try {// 确保目标目录存在File localDir = new File(localPath);if (!localDir.exists()) {boolean created = localDir.mkdirs(); // 创建多级目录if (!created) {throw new IOException("无法创建目标目录: " + localPath);}}// 构建 expect 脚本的命令行参数String[] params = {user, host, Integer.toString(port), remotePath, localPath, password};String command = expectScriptPath + " " + String.join(" ", params);// 执行 expect 脚本process = Runtime.getRuntime().exec(command);// 读取命令的输出BufferedReader reader = new BufferedReader(new InputStreamReader(process.getInputStream()));String line;while ((line = reader.readLine()) != null) {System.out.println(line);}// 等待命令执行完成int exitCode = process.waitFor();if (exitCode == 0) {log.info("文件下载成功");} else {log.info("文件下载失败,退出代码:{}", exitCode);}} catch (Exception e) {e.printStackTrace();log.info("文件下载失败:{}", e.getMessage());}finally {// 确保资源被释放if (process != null) {process.destroy();}}}public static void scpDirectoryFromRemoteUsingExpect(String expectScriptPath, String user, String host, int port, String remotePath, String localPath, String password) {Process process = null;try {// 确保目标目录存在File localDir = new File(localPath);if (!localDir.exists()) {boolean created = localDir.mkdirs(); // 创建多级目录if (!created) {throw new IOException("无法创建目标目录: " + localPath);}}// 构建 expect 脚本的命令行参数,确保 remotePath 是一个目录String[] params = {user, host, Integer.toString(port), remotePath + "/", localPath, password};String command = expectScriptPath + " " + String.join(" ", params);// 执行 expect 脚本process = Runtime.getRuntime().exec(command);// 读取命令的输出BufferedReader reader = new BufferedReader(new InputStreamReader(process.getInputStream()));String line;while ((line = reader.readLine()) != null) {System.out.println(line);}// 等待命令执行完成int exitCode = process.waitFor();if (exitCode == 0) {System.out.println("文件夹下载成功");} else {System.err.println("文件夹下载失败,退出代码:" + exitCode);}} catch (IOException e) {e.printStackTrace();log.info("文件夹下载失败:{}", e.getMessage());} catch (InterruptedException e) {Thread.currentThread().interrupt(); // 重新设置中断状态e.printStackTrace();log.info("文件夹下载被中断:{}", e.getMessage());} finally {// 确保资源被释放if (process != null) {try {process.getInputStream().close();process.getOutputStream().close();process.getErrorStream().close();} catch (IOException e) {e.printStackTrace();}process.destroy();}}}public static void main(String[] args) {log.info("Main method started.");// 获取开始时间long startTime = System.currentTimeMillis();String expectScriptPath = "/script/scp_download_directory.exp"; // expect 脚本的路径String remotePath = "/data/ceshiDown/";String localPath = "/data/ceshi2";ScpUtil.scpDirectoryFromRemoteUsingExpect(expectScriptPath, USER_NAME, IP, PORT, remotePath, localPath, PASSWORD);log.info("Main method finished.");// 获取结束时间long endTime = System.currentTimeMillis();System.out.println("程序运行时间:" + (endTime - startTime) / 1000 + "s");}
}

上面这个工具类呢,scpFromRemoteUsingExpect()方法是复制文件的,scpDirectoryFromRemoteUsingExpect()是复制文件夹的。注意一下哦。

最终要的来啦,脚本怎么写呢。
复制文件的脚本下载地址:scp复制远程服务器文件至本地服务器expect脚本

复制文件夹的脚本下载地址:scp复制远程服务器文件夹至本地服务器expect脚本

若是文件下载不了,千万别花钱下载,联系我,我发你。

这里我就不测试了,我是在服务器测试的,是行得通的。
完结!撒花!以上内容,若有任何问题,欢迎在评论区留言,在此,若有更好的解决方案的兄弟,也请留言,让我学习一下哈

这篇关于服务器间进行文件传输-SFTPSCP一篇搞定的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1128313

相关文章

服务器集群同步时间手记

1.时间服务器配置(必须root用户) (1)检查ntp是否安装 [root@node1 桌面]# rpm -qa|grep ntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem-1.41-1.1.el6.noarchntpdate-4.2.6p5-10.el6.centos.x86_64 (2)修改ntp配置文件 [r

MySQL数据库宕机,启动不起来,教你一招搞定!

作者介绍:老苏,10余年DBA工作运维经验,擅长Oracle、MySQL、PG、Mongodb数据库运维(如安装迁移,性能优化、故障应急处理等)公众号:老苏畅谈运维欢迎关注本人公众号,更多精彩与您分享。 MySQL数据库宕机,数据页损坏问题,启动不起来,该如何排查和解决,本文将为你说明具体的排查过程。 查看MySQL error日志 查看 MySQL error日志,排查哪个表(表空间

【Prometheus】PromQL向量匹配实现不同标签的向量数据进行运算

✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,阿里云开发者社区专家博主,CSDN全栈领域优质创作者,掘金优秀博主,51CTO博客专家等。 🏆《博客》:Python全栈,前后端开发,小程序开发,人工智能,js逆向,App逆向,网络系统安全,数据分析,Django,fastapi

业务中14个需要进行A/B测试的时刻[信息图]

在本指南中,我们将全面了解有关 A/B测试 的所有内容。 我们将介绍不同类型的A/B测试,如何有效地规划和启动测试,如何评估测试是否成功,您应该关注哪些指标,多年来我们发现的常见错误等等。 什么是A/B测试? A/B测试(有时称为“分割测试”)是一种实验类型,其中您创建两种或多种内容变体——如登录页面、电子邮件或广告——并将它们显示给不同的受众群体,以查看哪一种效果最好。 本质上,A/B测

Linux服务器Java启动脚本

Linux服务器Java启动脚本 1、初版2、优化版本3、常用脚本仓库 本文章介绍了如何在Linux服务器上执行Java并启动jar包, 通常我们会使用nohup直接启动,但是还是需要手动停止然后再次启动, 那如何更优雅的在服务器上启动jar包呢,让我们一起探讨一下吧。 1、初版 第一个版本是常用的做法,直接使用nohup后台启动jar包, 并将日志输出到当前文件夹n

遮罩,在指定元素上进行遮罩

废话不多说,直接上代码: ps:依赖 jquer.js 1.首先,定义一个 Overlay.js  代码如下: /*遮罩 Overlay js 对象*/function Overlay(options){//{targetId:'',viewHtml:'',viewWidth:'',viewHeight:''}try{this.state=false;//遮罩状态 true 激活,f

速盾:直播 cdn 服务器带宽?

在当今数字化时代,直播已经成为了一种非常流行的娱乐和商业活动形式。为了确保直播的流畅性和高质量,直播平台通常会使用 CDN(Content Delivery Network,内容分发网络)服务器来分发直播流。而 CDN 服务器的带宽则是影响直播质量的一个重要因素。下面我们就来探讨一下速盾视角下的直播 CDN 服务器带宽问题。 一、直播对带宽的需求 高清视频流 直播通常需要传输高清视频

利用matlab bar函数绘制较为复杂的柱状图,并在图中进行适当标注

示例代码和结果如下:小疑问:如何自动选择合适的坐标位置对柱状图的数值大小进行标注?😂 clear; close all;x = 1:3;aa=[28.6321521955954 26.2453660695847 21.69102348512086.93747104431360 6.25442246899816 3.342835958564245.51365061796319 4.87

一种改进的red5集群方案的应用、基于Red5服务器集群负载均衡调度算法研究

转自: 一种改进的red5集群方案的应用: http://wenku.baidu.com/link?url=jYQ1wNwHVBqJ-5XCYq0PRligp6Y5q6BYXyISUsF56My8DP8dc9CZ4pZvpPz1abxJn8fojMrL0IyfmMHStpvkotqC1RWlRMGnzVL1X4IPOa_  基于Red5服务器集群负载均衡调度算法研究 http://ww

RTMP流媒体服务器 crtmpserver

http://www.oschina.net/p/crtmpserver crtmpserver又称rtmpd是Evostream Media Server(www.evostream.com)的社区版本采用GPLV3授权 其主要作用为一个高性能的RTMP流媒体服务器,可以实现直播与点播功能多终端支持功能,在特定情况下是FMS的良好替代品。 支持RTMP的一堆协议(RT