linux 服务器互相之间怎么传输 90G 网站文件?论坛附件非常多

2016-11-29 21:49:16 +08:00
 doufenger

用 scp 传着太慢,而且时间久了就会导致服务器没响应 今天想试试压缩了再传。。结果现在还没压缩好,还搞得一直要重启,不然会卡死( 2G 内存的破 VPS )

10620 次点击
所在节点    DevOps
79 条回复
zzutmebwd
2016-11-30 21:50:24 +08:00
用 btsync 吧 快到爆炸
zzutmebwd
2016-11-30 21:50:49 +08:00
@aaronzjw 你够了
BFDZ
2016-11-30 22:01:46 +08:00
做成种子,用 rtorrent 传
aaronzjw
2016-12-01 00:24:36 +08:00
@zzutmebwd rsync 支持断点续传,貌似还可以自动同步的,网上教程 搜一搜
bao3
2016-12-01 02:28:15 +08:00
楼上的各位写这么多不累吗?为什么不用简单的?

syncthing 直接就可以用了。连脚本都省了。
shiji
2016-12-01 05:33:26 +08:00
sftp 的话,你可别在本地分别连接两个服务器,然后从一个拖到另一个上,这样能快就怪了。

另外一般经验是,即使在局域网里面,传输零散文件的速度也是非常慢的。要先打包再传输。 打包是 archive ,不需要压缩。
loveminds
2016-12-01 08:57:50 +08:00
rsync ,我们一直这样同步,另外是否你服务器磁盘 IO 性能较差
timothyye
2016-12-01 09:03:11 +08:00
rsync , scp
emtohere
2016-12-01 09:03:19 +08:00
rsync -av
anyforever
2016-12-01 09:29:44 +08:00
@shiny +1
cheny95
2016-12-01 10:41:10 +08:00
打包成压缩文件,用迅雷下载...
cassia
2016-12-01 15:19:46 +08:00
硬盘搬运
TaMud
2016-12-01 15:23:39 +08:00
sysnc 文件多了后,占用内存极大,这个问题,楼上的一群人是怎么解决的??
TaMud
2016-12-01 17:39:44 +08:00
46 楼的方法 正确
其它人都是半瓶水,或者说,根本没有搞过大量文件同步传输
ryd994
2016-12-02 10:02:04 +08:00
@TaMud 恕我直言, 46 楼用 nc 和我说用 ssh pipe 是一回事
而且 nc 不加密不验证,安全性和 ssh 差远了
hl
2016-12-02 11:16:57 +08:00
@ryd994 嗯,有些考虑欠佳,默认了内网传输。多谢提醒。
ryd994
2016-12-02 11:22:17 +08:00
@hl 不,其实你的做法也没多大问题
我只是被某人说其他人都是半瓶水感觉很不爽
年轻气盛就是这个样子………
TaMud
2016-12-02 13:10:48 +08:00
@ryd994 忘了表扬你了, sorry
realpg
2016-12-02 13:11:37 +08:00
才 90G

表示我这的备份中心服务器每天 1 点~4 点都至少传输 800G 内容 每天

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/324205

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX