阿里云 OSS 挂了？

[oktango]

刚刚业务所有的文件上传都失败了，阿里云的控制台都打不开了。。。。

阿里云的公告内容：


尊敬的客户：

您好！北京时间 2023 年 11 月 12 日 17:44 起，阿里云监控发现云产品控制台访问及 API 调用出现异常，阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便，若有任何问题，请随时联系我们。

--进展更新

17:50 阿里云已确认故障原因与某个底层服务组件有关，工程师正在紧急处理中。

18:54 经过工程师处理，杭州、北京等地域控制台已恢复，其他地域控制台服务逐步恢复中。

[bruceczk]

是的，SDK 报错 The OSS Access Key Id you provided does not exist in our records 。 一脸懵逼

[sansam]

感觉是权限控制系统挂了，RAM 账号都没权限了

[howencilx]

云盘跟着一起挂了

[sugars]

我也发现了，而且 aliyun 官网点登录没用...

[ltq918]

控制台上不去了，手机版也登录不上

[silaszhz]

docker 镜像跟着挂了

[buaacss]

是的,RAM 服务整个挂了,所以影响到所有使用 ram 的服务

[sugars]

InvalidAccessKeyId:The OSS Access Key Id you provided does not exist in our records

[ktqFDx9m2Bvfq3y4]

不能这么整吧，客户都开始抱怨了

[Arthit]

登录进不去了...........

[cndns]

RAM 是内存服务？

[Poluk]

阿里网盘这边登录界面直接 G 了，客户端和网页都登陆不进去了。

[toby1902]

整个阿里云都异常了

[sugars]

这算是重大故障了吧？

[mengyaoren]

。。。登录来回无限跳转

[Freeego]

我是 Infuse 连不上阿里云盘了，看来全挂了

[106npo]

oss error InternalErrorError: Please contact the server administrator, [email protected]

[Ritr]

GG 已经挂了好几个小时了

[106npo]

事件进展
2023-11-12 18:14
(GMT+8)
尊敬的客户：您好！
北京时间 2023 年 11 月 12 日 17:44 起，阿里云监控发现云产品控制台访问及 API 调用出现异常，阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便，若有任何问题，请随时联系我们。

意思故障了半小时才发通知

[fever365]

换了浏览器才确认不是浏览器 cookie 问题.来这里才知道确实挂了.

[adherent]

specified access key is not found 挂了

[OranNeo]

连带淘宝的图片也挂了，这波估计要开除几个人才行了

[Byzliu]

好像全挂了😅

[harrietliu]

我下午的时候发现服务器新放开的端口拒绝访问，吃完饭回来之后连控制台都进不去了

[aloys23]

淘宝好好的

[OranNeo]

@aloys23 网页版你要不要随便搜点什么看一下

[huihuiHK]

距离上次语雀挂还没过多久

[aloys23]

我试试，手机端好的

[sofukwird]

控制台也炸了

[OranNeo]

@aloys23 手机端搜一些上架比较早的商品，首图或者详情也全都不可见了

[aloys23]

网页版打开变成这个了 https://tb.alicdn.com/snapshot/h5/index.htm

[calmlyman]

看来是双 11 业绩不行了，前阵子各种 app 打开就给你自动跳 tb ，无语住了

[itechnology]

是的，我们公司的 APP 收不到验证码，上传不了文件，控制台也炸了，登录不进去

[harrietliu]

登录的二维码刷出来了，但还是进不去

[akamgb]

我说 1688 上的图片怎么显示 undefined

[Captain0711]

尊敬的客户:您好!北京时间 2023 年 11 月 12 日 17:44 起，阿里云监控云产品控制台访问及 API 调用出现出现使用异常，阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便，若有任何问题，请随时联系我们。
语雀也挂了。

[40aU4RaW20xf8hXn]

主站都挂了一会

[TsubasaHanekaw]

今年 4 个 9 的可靠性都没了.献祭个 P10 吧

[5800X3D]

Specified access key is not found.

[maomaosang]

连客服系统都挂了，require 登陆，听说钉钉传文件也不行

[lux182]

严重影响了

[liqingyou2093]

gg 思密达

[poseidOn7246]

一个多小时了，还没整好？

[cmower]

负责人谁，直接开了吧。

[harrietliu]

控制台可以进去了

[FAQW]

微博热搜：淘宝崩了，闲鱼崩了，阿里云盘崩了，钉钉崩了

[toby1902]

我这边部分恢复了

[bywenshu]

已恢复？

[cquan]

好像没问题，19 点 16 分

[f2A2RUpR2HgfHg5a]

真牛逼，一个组件异常导致所有区域的大部分服务异常。 这肯定要拿架构师开刀

[wwqm2]

是真的搞笑，我连饿了么点了外卖骑手都接不了单，害我白白等一个小时

[theprimone]

@wwqm2 #51 兄弟你这个把我笑到了 😂

[wwqm2]

@theprimone 是啊，我实在气不过，让饿一个小时，打电话问客服，客服说的是骑手进不了系统

[3M]

阿里开始腐烂

[wweerrgtc]

闲鱼收不了货, 显示 404

本以为是双十一负载比较大

[yuruizhe]

同+1 ，a 站打不开了

[Quarter]

阿里云全挂了，有啥大惊小怪的，又不是第一次

[ibuki233]

最近已经两次大规模这种事故了吧，严重消耗信任

[kiroter]

BAT 轮到阿里掉队了

[alsas]

P0 级事故

[nealot]

通常云厂商提供的服务都是多机房容灾的，单个机房异常一般不会出这么大的问题

看起来是某个组件突破了他们的高可用体系，成为了所有云产品的单点依赖

[porjac233]

下一个 P0 即将到来，各位拭目以待。

[spadger]

这次双 11 没啥负载，自己开始作死了

[itechify]

P -1 事故

[Neetordy]

降本增效的结果

[yyzh]

@nealot 你想多了,语雀那事就显示出了阿里有多野鸡

[demoshengxw]

是阿里云事故了，瞬间拉了一个 300 的哟人的冒烟群，裂开。

[qianzanqi]

@nealot 很多时候都是：各个组件平时都吹一个机房原地爆炸都能保证高可用。结果一问技术细节，哦高可用依赖 A 服务通过域名调用 B 服务接口，7 层 4 层 lb 挂了呢？那就拉倒了

[xiaofan305]

今年双 11 流量应该不是历史新高呀，感觉阿里云不太行，都是吹牛技术多牛逼，可靠性多少个 9 。前段时间我们用的也崩了，找人工客服对方直接关闭咨询，一定要写工单，我 tm 服务中断了，这操作也是没谁了

[Yadomin]

蹲一个事故报告

[serialt]

万能重启大法

[54xavier]

公司的客服跑来找我说出问题了，我寻思我这几天没改项目啊，刚调试发现是好的，原来是阿里云的问题，而且我刚准备调试就好了。

[jackOff]

阿里的互联网产品稳定性还是比百度差不少的

[Desiree]

看来上次香港机房事件也没让阿里内部人事产生改变

[akay2351]

2023 年 11 月 11 日晚 21:45 左右，天猫也出现过问题。PC 端天猫商品网页无法访问，移动端商品页面加载缓慢。

[bk201]

没事，再裁掉几个背锅的技术，留着那些中层。

[lovelive1024]

有没有人统计过，国内这些云服务提供商，哪个出现问题的次数最多？

[supuwoerc]

年底了，有人不但年终奖没了，现在可能工作都没了，今天还降温了，不知道捅出篓子的团队现在心里啥心情。。

[gyt95]

所以说，面试造火箭有什么用？面霸被面进去实际上是菜鸡。

[pikko]

真的很惨，阿里全系产品都挂了部分服务。

[someday3]

我还记得大家吐槽阿里收购一个公司搞黄一个公司，现在看来，母公司搞黄也指日可待了

[googleaccount]

语雀：我特么上次赔的会员还有人没领呢，咋又挂了。

[Gress]

一家云商一年崩这么多次居然还有人用？

[RexKang]

@Gress 没用过……可能其他家会崩更多次吧。

[janwarlen]

@bk201 #76 现在好像基层干活的都是内包了(内部的外包...)

[Feiex]

@Desiree 还没变？逍遥子背锅走了

[go522000]

很好奇阿里云这个底层组件到底是多底层啊。。。全球性，而且还是所有服务都挂了。

[HKzy]

阿里云名声尽失

[289396212]

阿里的技术真的都是靠吹

[ljzxloaf]

营销不吹不行啊，用户没有多少真正懂技术的。我记得之前有次阿里云的机房光纤被挖断了，然后他们搞了个发布会，现场剪网线，支付宝马上就恢复了。虽然看起来很牛逼，给人的感觉阿里云就算网线挖断了都不影响服务。但实际上这可能只是机房内部的容灾，说白了忽悠下外行，搞点营销噱头罢了。互联网服务能被拔网线？不现实的嘛！只能说在某些情况下可以实现一定的容灾。但是这么一搞给不懂技术的普通大众造成了误解，然后下次你出事了发现不符合他们的预期，那不就得喷你？吹牛逼可以，别吹得太离谱了就行。

[Desiree]

@Feiex 背锅有用，就不会不到一年时间就出事了，降本增效也就是说给上面资本听的，真出事，找人背锅就能好，我们早就是发达国家了