阿里云因 bug 禁用内部 IP 导致链路不通,造成大规模故障

阿里云午夜在官网、微博发布了故障公告:

6月27日下午,我们在运维上的一个操作失误,导致一些客户访问阿里云官网控制台和使用部分产品功能出现问题,引发了大量吐槽。故障于北京时间2018年6月27日16:21左右开始,16:50分开始陆续恢复。

经过紧急技术复盘,故障原因如下:

当天下午,工程师团队在上线一个自动化运维新功能中,执行了一项变更验证操作。这一功能在测试环境验证中并未发生问题,上线到自动化运维系统后,触发了一个未知代码bug。错误代码禁用了部分内部IP,导致部分产品访问链路不通。 后续人工介入后,工程师团队快速定位问题进行了恢复。

受影响范围包括阿里云官网控制台,以及MQ、NAS、OSS等产品功能。
对于这次故障,没有借口,我们不能也不该出现这样的失误!我们将认真复盘改进自动化运维技术和发布验证流程,敬畏每一行代码,敬畏每一份托付。


下午 16:30 左右,微信朋友圈、微信群、微博出现阿里云故障消息,故障原因主要体现在阿里云官网、控制台无法访问,尝试登陆阿里云官网,显示如下:

官网有时候可以访问,有时候显示502错误的网关,即使官网可以访时,点击登陆,页面只会刷新,登陆不了。

官网公告称16:21左右开始,阿里云官网的部分管控功能,及MQ、NAS、OSS等产品的部分功能出现故障,以下为全文:

阿里云官网通告:6月27日阿里云部分产品及账号登录访问异常通告

【阿里云】【网络】【异常通告】

异常时间:北京时间2018年6月27日16:21左右。
异常概述:于北京时间2018年6月27日16:21左右开始,阿里云官网的部分管控功能,及MQ、NAS、OSS等产品的部分功能出现访问异常,阿里云工程师正在紧急处理中,请您稍后重试。

【异常更新】
北京时间2018年6月27日 16:50
目前受影响的业务正在逐步恢复中,若遇到异常,请您稍等后重试。

【异常更新】
北京时间2018年6月27日 17:30
目前受影响的业务大部分已经恢复正常,请您确认。若还有异常,请您跟我们反馈,谢谢。

故障时间 50 分钟左右,故障原因,阿里云尚未披露。

相关推荐

评论 5

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址
  1. #0

    小事情,阿里的团队实力还是非常强大的。

    以太坊学习2年前 (2018-06-30)回复
    • 是的

      admin2年前 (2018-07-19)回复
  2. #0

    有幸访问到贵站,“百万链”已收录贵站!

    百万链2年前 (2018-07-26)回复
    • 感谢。

      admin2年前 (2018-08-11)回复
  3. #0

    给力!

    跨境电商之家2年前 (2018-08-13)回复