有哪些工具可以比较可靠地把一个本地目录里的所有内容镜像到一个 S3 Bucket？

2018-10-23 09:12:35 +08:00
 Livid
6421 次点击
所在节点    Amazon Web Services
37 条回复
sNullp
2018-10-23 09:13:45 +08:00
楼主是要一次性上传还是要支持增量更新？
isCyan
2018-10-23 09:14:32 +08:00
minio client
github.com/minio/mc
有 mirror 命令，我用起来还可以
plqws
2018-10-23 09:15:04 +08:00
用 s3 sdk 写个这种功能的同步工具应该不难
svenFeng
2018-10-23 09:15:19 +08:00
S3-fuse
Livid
2018-10-23 09:23:40 +08:00
@sNullp 能够靠谱地一次性传上去就好。
fireapp
2018-10-23 09:26:35 +08:00
s3fs，把 s3 bucket 挂载成本地磁盘，然后 mv
Livid
2018-10-23 09:28:44 +08:00
@fireapp 理论上这样是不是也可以用 rsync 了？
caizixian
2018-10-23 09:31:22 +08:00
`aws s3 sync`?
Xrong
2018-10-23 09:32:56 +08:00
https://aws.amazon.com/cli/ 用官方的 cli 就行了
mangoDB
2018-10-23 09:33:53 +08:00
官网应该有对应的 s3fs 吧，我猜测的。
imnpc
2018-10-23 09:35:51 +08:00
@Livid 挂载以后可以 rsync 但是读写次数会很高 以前挂载阿里云的 OSS 一晚上就同步备份网站和数据库就几十万次读写
fireapp
2018-10-23 09:37:16 +08:00
@Livid 透明的，跟本地盘一样
Vieufoux
2018-10-23 09:38:47 +08:00
用 aws s3 cp 命令
https://docs.aws.amazon.com/cli/latest/reference/s3/
kslr
2018-10-23 09:50:40 +08:00
Rclone
kslr
2018-10-23 09:51:48 +08:00
我每天都要同步几百 g 的数据
ayang23
2018-10-23 09:51:56 +08:00
https://rclone.org/
orzjerry
2018-10-23 09:58:20 +08:00
s3fs 可以 mount 到本地当作本地磁盘，rsync 也是可以的但是磁盘性能真的是不好。
lynnX
2018-10-23 10:02:14 +08:00
GoodSync 一直在用 很方便
xw
2018-10-23 10:11:48 +08:00
s3cmd
Les1ie
2018-10-23 10:21:43 +08:00
让我们猜一猜是不是昨天的 504 让站长意识到了需要异地容灾 :)

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/500071

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX