linux 服务器互相之间怎么传输 90G 网站文件？论坛附件非常多

[doufenger]

用 scp 传着太慢，而且时间久了就会导致服务器没响应 今天想试试压缩了再传。。结果现在还没压缩好，还搞得一直要重启，不然会卡死（ 2G 内存的破 VPS ）

[lucifer9]

直接 scp ？
好歹 tar -cJ /home/me/source/directory | ssh target tar -xJ --directory /home/you/target/directory 吧

[alouha]

tar 然后 scp ……

[ChopinWong]

rsync

[goodryb]

估计楼主的 VPS 磁盘性能不怎么样，瓶颈不在于网络，建议可以通过云服务的对象存储中转一下，国内提供云存储的基本都可以，推荐阿里云 OSS ，七牛，其它的不怎么熟悉。

[snopy]

供参考
#!/usr/bin/expect

spawn scp root@ip:/root/check/today_count.log /home/autowork/everyweek_check/from_232
expect '密码: '
send "密码\r"
interact


备注： Linux 文件大于 1G 的使用 scp 会受限制，可采用 split 分片之后传输。
1 ）分割大文件
split -b 1000m a.tar.gz a.tar.gz. #后面输出的文件名 a.tar.gz. 会以 a.tar.gz.aa ， a.tar.gz.ab ， a.tar.gz.ac 形式输出,

2 ）合并
cat a.tar.gz.* > a.tar.gz

[hl]

有个高性能的方法：
1.先在接收方执行:
nc -l 6677 | tar -C 接收文件的目录 -zxf - #接收目录最好是个空目录，防止覆盖的风险

2.再在发送方执行:
tar -zcvf - 要发送的目录 | nc 接收方 ip 6677

[chuhemiao]

sf

[bullfrog]

rsync 实际上是不行的，因为文件太多了，还是多线程 sftp 好使
详见 http://unix.stackexchange.com/questions/165858/transfering-millions-of-files-from-one-server-to-another 最后一个答案

[Ansen]

rsync 或者 btsync

[winiex]

配合 nohup ，从本机拷贝到远端
nohup rsync -avz -P -e "ssh -p 目标机器 ssh 端口" ./本机文件路径 user@remote:远端机器文件路径 >> /tmp/rsync.log &

[cute]

tar zcf - attaches | ssh root@ip "tar zxf - -C /path/to/"

[caomaocao]

ncc ncs?

[RqPS6rhmP3Nyn3Tm]

出 BTSYNC 正版授权，官网购入没用过

[28ms]

务必打包传，小文件影响传输效率

[imn1]

zip -rq0
wput

[Orzzzz]

送分题。

split 分割文件成 900 个
开 nginx ，将 900 个文件放到 web 目录下（端口弄得奇葩一点，二级目录奇葩一点）
接受方服务器写个脚本，用 axel 下载
将 900 个文件合并

如果不放心还可以做个 MD5 校验

如果这都跑不满带宽，你砍我。

[xarrow]

rsync

[cabing]

一个服务器 nc -l 8888 > test.txt
一个服务器输入 nc ip 8888 < test.txt
采用 tcp 协议传输数据。

[P99LrYZVkZkg]

resilio sync

[aaronzjw]

试试这个 sudo rm -rf /