当前位置：网站首页 > IT技术 > 正文

linux超大文件如何从A服务器传输到B服务器

wptr33 2025-01-03 19:19 15 浏览

概述

这是关于php进阶到架构之Linux应用学习的系列课程：linux超大文件如何从A服务器传输到B服务器

学习目标：

解决工作中Linux超大文件传输问题

场景

将linux服务器A中的数据文件迁移到linux服务器B，当文件很大的之后，压缩直接传输会出现传输很久，且中间一段暂停，又得重新上传。这时候需要可以将压缩的文件的分割传输然后解压合并。

linux服务器A文件压缩

tar -czvp -f A.tar.gz A

压缩包A分割多个文件包

split -b 4000k A.tar.gz B.tar.gz

按4000k大小分割A.tar.gz 生成B.tar.gzaxxx
这时候，当前目录会生成
B.tar.gzaa B.tar.gzab B.tar.gzac B.tar.g.ad B.tar.gzae等文件

linux文件A传输到文件linux服务器B

登录服务器A终端，执行下面命令：

scp /path/B.tar.gzaa username@B:/path

scp /path/B.tar.gzab username@B:/path

scp /path/B.tar.gzac username@B:/path

...

更多scp命令，参考https://www.linuxprobe.com/linux-scp.html

合并解压

进入服务器B，进入文件相关目录
合并传输的压缩文件

cat B.tar.gza* >B_cat.tar.gz

或者一个一个的合并

cat B.tar.gzaa >B_cat.tar.gz
cat B.tar.gzab >B_cat.tar.gz
cat B.tar.gzac >B_cat.tar.gz
...

解压压缩的文件

tar -zxvf B_cat.tar.gz

如上几步操作，即可实现将linux服务器A中的大数据文件迁移到linux服务器B

php7进阶到架构师相关阅读

https://www.kancloud.cn/gofor/gofor

最后，欢迎大家留言补充，讨论~
喜欢小编的话，欢迎点赞、收藏和关注哦~///(^v^)\\\~~~

php split

上一篇：简单部署开源短链工具-YOURLS
下一篇：「洞幺邦」COSD数据集图像分类与物体分割

linux超大文件如何从A服务器传输到B服务器

目录

概述

场景

linux服务器A文件压缩

压缩包A分割多个文件包

linux文件A传输到文件linux服务器B

合并解压

php7进阶到架构师相关阅读

最后，欢迎大家留言补充，讨论~
喜欢小编的话，欢迎点赞、收藏和关注哦~///(^v^)\\\~~~

相关推荐

C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)

因果推断Matching方式实现代码因果推断模型

git pull命令使用实例 git pull--rebase

git 执行pull错误如何撤销 git pull fail

面试官:git pull是哪两个指令的组合?

git fetch 和git pull 的异同 git中fetch和pull的区别

git pull 和git fetch 命令分别有什么作用?二者有什么区别?

还可以这样玩?Git基本原理及各种骚操作，涨知识了

git pull 之后本地代码被覆盖解决方案

git命令之pull git.pull

linux超大文件如何从A服务器传输到B服务器

目录

概述

场景

linux服务器A文件压缩

压缩包A分割多个文件包

linux文件A传输到文件linux服务器B

合并解压

php7进阶到架构师相关阅读

最后，欢迎大家留言补充，讨论~~~喜欢小编的话，欢迎点赞、收藏和关注哦~~~///(^v^)\\\~~~

相关推荐

C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)

因果推断Matching方式实现代码 因果推断模型

git pull命令使用实例 git pull--rebase

git 执行pull错误如何撤销 git pull fail

面试官:git pull是哪两个指令的组合?

git fetch 和git pull 的异同 git中fetch和pull的区别

git pull 和git fetch 命令分别有什么作用?二者有什么区别?

还可以这样玩?Git基本原理及各种骚操作，涨知识了

git pull 之后本地代码被覆盖 解决方案

git命令之pull git.pull

最后，欢迎大家留言补充，讨论~
喜欢小编的话，欢迎点赞、收藏和关注哦~///(^v^)\\\~~~

因果推断Matching方式实现代码因果推断模型

git pull 之后本地代码被覆盖解决方案