如何快速多线程从在服务器下载B服务器上300G图片？SCP太慢

问答 / 0 / 11 / 创建于 4年前

B服务器上大约300G图片
原来打算打包后 wget下载；
但是使用 zip -r 压缩了20几个小时还没有完成，于是放弃；
使用SCP尝试，感觉速度跟ZIP -r 差不多，如果断掉了，就要重新传，于是放弃；请问下如何多快速的完成？

课程读者 237 声望

保持好奇，刻意学习，每日精进

《L04 微信小程序从零到发布》

从小程序个人账户申请开始，带你一步步进行开发一个微信小程序，直到提交微信控制台上线发布。

《L01 基础入门》

我们将带你从零开发一个项目并部署到线上，本课程教授 Web 开发中专业、实用的技能，如 Git 工作流、Laravel Mix 前端工作流等。

讨论数量: 11

laravelcc

1 声望

zip+迅雷

4年前评论

kis龍

压缩了20 小时，还没弄完，再加上解压时间，还会，估计会很长的

laravelcc （作者）

@kis龍图片有没有子目录？比如说按日期打包。不要一次打包完，而且zip也进行分卷压缩：zip -h2 你会发现，分卷参数-s，意思是说分割成多大的卷

taobali32

课程读者 50 声望

tmux

4年前评论

kis龍

Laravel 9.x 译者 504 声望

wget -c -t 0 内网下载链接

-c ：断点续传

-t 0 : 反复尝试的次数，0为不限次数

如果是公网传输，建议压缩下，如果是视频，音频，exe一类的就不用压缩了，压缩率不高的
有内网ip ，用内网ip 下载，就行

4年前评论

Hachiko

102 声望

tar 命令可以只打包，不压缩，再传输
使用 rsync 同步

推荐使用第 2 种，线上服务器可能需要限速，不然带宽会被跑满，影响业务

4年前评论

php8

课程读者 33 声望

卸载云硬盘，然后挂载到新服务器？

4年前评论

是阿东啊

课程读者 66 声望

如果能走内网尽量走内网
想稳定一些的话就搞个 FTP，速度也是挺快的
或者搞个 NFS 共享文件
再或者的话就弄个 OSS 类似的服务，花点钱，搞起来方便，后续也方便搞 CDN 之类的服务

4年前评论

芝麻开门

课程读者 144 声望

ftp多线程下载

4年前评论

小李世界

Laravel 8.x 译者 2.0k 声望 / Doge 先锋 @ dogeow.com

FTP 下载吧

4年前评论

Larva

57 声望

rsync 不香么？

4年前评论

xman99

6 声望

rsync 会慢慢同步回来的，只要数据不增长。同步几天就好了

4年前评论

陈先生

课程读者 651 声望 / PHP_EOL @ NaN

oss+oss

4年前评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助