如何将加拿大服务器上总计 200T 的文件传输到国内?

2022-06-08 14:03:16 +08:00
 j0ck1e

网络环境

加拿大服务器公网 10G 带宽 国内服务器公网 5G 带宽

遇到的问题

由于链路距离过长,直接下载速度只能达到 100Mbps

以了解过的解决方法

  1. 购买阿里云 OSS ,通过闪电立方将数据传输到阿里云 OSS 美国节点上,然后数据内部同步到国内的 OSS 节点,最后用国内服务器下国内 OSS 节点上的数据,这个方案价格太高,需要支付存储包流量包费用近 20W
  2. 购买阿里云 CDN 服务,这个方案能否实现还不清楚
19127 次点击
所在节点    宽带症候群
174 条回复
Ciallo
2022-06-09 09:20:09 +08:00
@liuidetmks #119 但是磁带机很贵,而且速度也很慢
salmon5
2022-06-09 09:33:57 +08:00
嫌贵就不要了吧
liuidetmks
2022-06-09 09:40:16 +08:00
@Ciallo 刚在京东看了下,惠普磁带宣称的速度是 860G 每小时,速度不算慢了吧,磁带机是不是可以租一个呢
kerrspace
2022-06-09 09:42:42 +08:00
@txydhr 用卡车装硬盘里面绝对有一部分要随机报废 这个方案实际根本不可行
liuidetmks
2022-06-09 09:44:08 +08:00
Ciallo
2022-06-09 09:51:55 +08:00
@liuidetmks #125 之前在 B 站看过翼王搞过磁带机,老款的,新款的就不清楚了,估计价格不美丽
lrzsw2008
2022-06-09 09:52:43 +08:00
硬盘...
20T 的硬盘你都要 10 个,在线方案我觉得成本更高且不可靠。
硬盘你丢包率 50%,你也只不过是 20 块硬盘+两次运输费用。
或者上面说的磁带,容量比硬盘更大,缺点是两边你都需要租用设备
runntuu
2022-06-09 09:57:06 +08:00
两个方案:
1. 阿里云 OSS+CDN: https://help.aliyun.com/document_detail/123227.html

2. 阿里云 OSS+跨区域复制: https://help.aliyun.com/document_detail/31864.html
> 先把 200T 数据上传到阿里云 OSS 的加拿大站点,然后通过跨区域复制(内网)到阿里云国内站点
mosliu
2022-06-09 09:57:48 +08:00
带硬盘吧。。。建议,双备份,三备份。分开寄
伪装新的,邮寄应该最便宜

不过说实话 硬盘光拷贝 200T 也要好久时间。。。
hankai17
2022-06-09 09:58:55 +08:00
打电话 口述 01 编码
mosliu
2022-06-09 10:04:07 +08:00
或者 SSD 以 1T 100$ 计算
200T 就要 2w$
这个抗震好的多
包上 10 层海绵
2 备份 大概 4W$

这 4w 后续也可以用,或者 从 V2 上打个 8 折再便宜下 V2er 回收个 80%
总共也就是几 k$的花费。
DKR
2022-06-09 10:04:18 +08:00
为什么这个话题时常出现呢,之前记得也有这类话题的讨论。
XiaoBaiYa
2022-06-09 10:13:22 +08:00
18T 现在一个也才 1800.需要买 12 个,2W 块搞定
XiaoBaiYa
2022-06-09 10:16:06 +08:00
BT 和 PT 的方式个人觉得是最靠谱的,租几个带宽高的服务器,成本很低
mayli
2022-06-09 10:40:57 +08:00
链路长不是带宽利用率低的直接原因
即使 300ms 延迟也可能跑满全部带宽
核心问题是缺少可以跑满的高质量线路
尤其是国内

解决了线路 QoS 质量,传输这个没有什么问题
rexion
2022-06-09 10:58:33 +08:00
前面有人提到微软的实体硬盘数据传输,亚马逊 aws 也有,叫 snowmobile ,可以了解一下。
mayli
2022-06-09 11:02:31 +08:00
我觉得题主需要说明下预算和预期的时间
不然不好估算
最便宜的话慢慢传就好了
预算出来了
就方便估计技术路线
WeberXie
2022-06-09 11:11:27 +08:00
@IDAEngine 好奇干啥能存 15 PB 呀?
xuelu520
2022-06-09 11:18:03 +08:00
1.刻蓝光光盘
2.磁带
3.硬盘
然后人肉或快递回国内。
7colcor
2022-06-09 11:27:56 +08:00
想起亚马逊海量数据的运输服务(卡车运输)

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/858171

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX