有哪些工具可以比较可靠地把一个本地目录里的所有内容镜像到一个 S3 Bucket?

2018-10-23 09:12:35 +08:00
 Livid
6438 次点击
所在节点    Amazon Web Services
37 条回复
cloudbeyond
2018-10-23 10:26:03 +08:00
aws 自带工具啦,作为员工推荐给站长

aws s3 sync local s3://bucket

搞定
iConnect
2018-10-23 10:37:51 +08:00
比较好奇 v 站怎么一攻击就死的硬硬的,没有一点复活能力(除了等站长起床)
iConnect
2018-10-23 10:38:04 +08:00
kios
2018-10-23 10:42:44 +08:00
Mountain Duck
sunnyadamm
2018-10-23 11:09:12 +08:00
@Les1ie 周天 504,不是昨天
zhaogaz
2018-10-23 11:17:15 +08:00
群晖就有这功能。 我觉得挺好的
ReVanTis
2018-10-23 11:32:32 +08:00
注意一点,s3 并不是文件系统而是面向对象的存储。
试图从文件系统直接进行同步可能不能保留所有的文件信息,包括权限、修改日期等。
likuku
2018-10-23 14:20:14 +08:00
记得 aws 自家的 cli 工具包里就有 rsync 工具可以直接推到 S3
likuku
2018-10-23 14:24:56 +08:00
#28 找到了:

"管理对象
高级别 aws s3 命令还可以方便地管理 Amazon S3 对象。这些对象命令包括 aws s3 cp、aws s3 ls、aws s3 mv、aws s3 rm 和 sync。cp、ls、mv 和 rm 命令的用法与它们在 Unix 中的对应命令相同,使您可以跨本地目录和 Amazon S3 存储桶无缝工作。sync 命令同步一个存储桶与一个目录或两个存储桶中的内容。"

from:
通过 AWS Command Line Interface 使用高级别 s3 命令 - AWS Command Line Interface : https://docs.aws.amazon.com/zh_cn/cli/latest/userguide/using-s3-commands.html


sync — AWS CLI 1.16.39 Command Reference : https://docs.aws.amazon.com/cli/latest/reference/s3/sync.html
PureWhiteWu
2018-10-23 14:29:12 +08:00
我是用的 cloudmounter,感觉还不错
pythonee
2018-10-23 14:35:28 +08:00
我也有同样的诉求
laxenade
2018-10-23 16:37:09 +08:00
题外话,建议站长顺便把多版本打开(
kennylam777
2018-10-23 17:54:25 +08:00
rclone +1, 因為有多線程
phithon
2018-10-23 18:04:05 +08:00
一直用的 https://github.com/s3tools/s3cmd
直接可以把整个目录传上去
cxbig
2018-10-23 18:46:03 +08:00
做備份用 aws s3 sync 配合 S3 版本控制就不錯
再簡單一點用 aws s3 cp --recursive 速度快些
不適合大批量小文件,效率不高。服務器在 AWS 之外的也會影響傳輸效率
mattx
2018-10-23 19:33:11 +08:00
@lynnX goodsync 挺贵的。
lynnX
2018-10-24 09:56:04 +08:00
@mattx #36 嗯,是的!之前有限免弄了一个。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/500071

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX