早上刚把阿里云 C 区的十来个服务重启完,刚才一看又全 TM 挂 502 了。 登上去一看,果然,所有的 Docker ,Nginx ,服务都没了。又得重新重启。
这也太离谱了。。。。
一个空调修不好了是吧。。。
还好生产环境不在这个区。
1
6IbA2bj5ip3tK49j 2022-12-19 10:53:58 +08:00 9
知道为啥格力敢说自己掌握核心科技了吧?
|
2
kennidiyuehan 2022-12-19 11:16:22 +08:00
@xgfan 你是懂格力的
|
3
haikouwang 2022-12-19 11:23:00 +08:00
话说阿里云 PCCW 机房只有一个空调吗?一个空调坏了就全挂逼了呗?而且机房日常都是有巡点检的,并且机房精密空调每 3 个月都是有维护的,精密空调到期也是要报废换新的。。。我觉得这次阿里云不是空调坏这么简单。
|
4
seansong 2022-12-19 11:24:57 +08:00
@haikouwang 香港那边不流行临时工背锅
|
5
julyclyde 2022-12-19 11:25:12 +08:00 2
这事倒是不奇怪
十年前美团和千橡人人网租用廊坊机房空调故障的时候,也是一样的情况 N+1 配置,发热超标、空调故障一起发生,然后故障空调所在的区域就会更加热,蔓延到其他列,其他列也会发热超标,再压死一台空调 最后的结果就是整个机房全部死机一遍,熬到日落,凉了 |
6
haikouwang 2022-12-19 11:42:40 +08:00
@julyclyde 悟了大佬。但是机房精密空调 3 个月一次维护,而且每天都有巡点检。这么重大的事故。。。。。我还是不理解。、
|
7
watzds 2022-12-19 11:47:14 +08:00 3
真是空调问题吗? 😂 ,怕不是空调背锅
|
8
julyclyde 2022-12-19 11:47:53 +08:00
@haikouwang 我也不理解。等 pccw 的报告吧
|
9
ttyhtg 2022-12-19 12:15:16 +08:00
也可能不是一个空调的事儿
|
10
liuzhaowei55 2022-12-19 12:25:17 +08:00 via iPhone 1
空调 === 临时工
|
11
jackOff 2022-12-19 12:26:59 +08:00 via Android
搞不好在拔机箱找机场,VPS 机场那个网站不就有人机场被端了吗
|
12
pengtdyd 2022-12-19 12:33:25 +08:00
关键是出了问题有赔偿吗,估计没有吧。
|
13
asd940808 2022-12-19 14:16:29 +08:00
空调挂了确实会导致整个机房都炸了。
|
14
loveuer 2022-12-19 14:26:54 +08:00 2
按以前的经验来说, 机房精密空调一般都有几分几的备机, 只要不是全部一起瓦了, 切换备机也就几分钟的事情. 从空调可用性来说这阿里云都不如自建机房
|
15
lookStupiToForce 2022-12-20 16:10:07 +08:00
有没有人算算阿里这故障率都排到第几个Σ了?🐶
|
16
YSMAN 2022-12-20 16:11:06 +08:00
本质上还是投入的资源不够, 不可能简单到是一个空调的问题。
|
17
moshiyeap100 OP @haikouwang 确实不止一套空调,看故障报告,主备空调用了同一套水循环系统,然后这个水循环系统挂了。
|
18
haikouwang 2022-12-29 19:23:43 +08:00
@moshiyeap100 哦哦哦还有故障报告,晚点去找找看哈哈。谢谢大佬。
|