感謝網(wǎng)友 華南吳彥祖 的線索投遞！

11 月 28 日消息，昨日（11 月 27 日）9:16，阿里云部分地域云數(shù)據(jù)庫(kù)控制臺(tái)訪問異常，北京、上海、杭州、深圳、青島 、香港以及美東、美西地域受影響。

昨日晚間，阿里云就云數(shù)據(jù)庫(kù)控制臺(tái)訪問異常一事發(fā)布道歉聲明，表示經(jīng)過工程師緊急處理，訪問異常問題已于當(dāng)日 10:58 恢復(fù)。

您好！北京時(shí)間 2023 年 11 月 27 日 09:16 起，阿里云監(jiān)控發(fā)現(xiàn)北京、上海、杭州、深圳、青島 、香港以及美東、美西地域的數(shù)據(jù)庫(kù)產(chǎn)品（RDS、PolarDB、Redis 等）的控制臺(tái)和 OpenAPI 訪問出現(xiàn)異常，實(shí)例運(yùn)行不受影響。經(jīng)過工程師緊急處理，訪問異常問題已于當(dāng)日 10:58 恢復(fù)。非常抱歉給您的使用帶來不便，若有任何問題，請(qǐng)隨時(shí)聯(lián)系我們。

注意到，這已經(jīng)是阿里云本月第二次控制臺(tái)服務(wù)異常，首次異常是在雙 11 結(jié)束的一天后（11 月 12 日），涉及到阿里云盤、淘寶、咸魚、釘釘、語(yǔ)雀等等產(chǎn)品，持續(xù)時(shí)長(zhǎng)約 3.5 小時(shí)。

故障報(bào)告：

問題影響范圍

• OSS、OTS、SLS、MNS 等產(chǎn)品的部分服務(wù)受到影響，大部分產(chǎn)品如 ECS、RDS、網(wǎng)絡(luò)等運(yùn)行不受影響。

• 云產(chǎn)品控制臺(tái)、管控 API 等功能受到影響

問題影響時(shí)間

北京時(shí)間 2023 年 11 月 12 日 17:39-19:20

問題概況

北京時(shí)間 2023 年 11 月 12 日 17:39 起，阿里云云產(chǎn)品控制臺(tái)訪問及管控 API 調(diào)用出現(xiàn)異常、部分云產(chǎn)品服務(wù)訪問異常，工程師排查故障原因與訪問密鑰服務(wù)（AK）異常有關(guān)。工程師修訂白名單版本后，采取分批重啟 AK 服務(wù)的措施，于 18:35 開始陸續(xù)恢復(fù)，19:20 絕大部分 Region 產(chǎn)品控制臺(tái)和管控 API 恢復(fù)。

處理過程

2023 年 11 月 12 日

• 17:39 阿里云云產(chǎn)品控制臺(tái)訪問及管控 API 調(diào)用出現(xiàn)異常。

• 17:50 工程師確認(rèn)故障是 AK 服務(wù)異常導(dǎo)致，影響云產(chǎn)品控制臺(tái)、管控 API 調(diào)用異常，以及依賴 AK 服務(wù)的云產(chǎn)品服務(wù)運(yùn)行異常。

• 18:01 工程師定位到根因。

• 18:07 開始執(zhí)行恢復(fù)措施，包括修訂白名單版本、重啟 AK 服務(wù)。

• 18:35 杭州等 Region 開始恢復(fù)正常。

• 19:20 絕大部分 Region 的云產(chǎn)品控制臺(tái)和管控 API 調(diào)用恢復(fù)正常。

問題原因

訪問密鑰服務(wù)（AK）在讀取白名單數(shù)據(jù)時(shí)出現(xiàn)讀取異常，因處理讀取異常的代碼存在邏輯缺陷，生成了一份不完整白名單，導(dǎo)致不在此白名單中的有效請(qǐng)求失敗，影響云產(chǎn)品控制臺(tái)及管控 API 服務(wù)出現(xiàn)異常，同時(shí)部分依賴 AK 服務(wù)的產(chǎn)品因不完整的白名單出現(xiàn)部分服務(wù)運(yùn)行異常。

改進(jìn)措施

• 增加 AK 服務(wù)白名單生成結(jié)果的校驗(yàn)及告警攔截能力。

• 增加 AK 服務(wù)白名單更新的灰度驗(yàn)證邏輯，提前發(fā)現(xiàn)異常。

• 增加 AK 服務(wù)白名單的快速恢復(fù)能力。

• 加強(qiáng)云產(chǎn)品側(cè)的聯(lián)動(dòng)恢復(fù)能力。

廣告聲明：文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時(shí)間，結(jié)果僅供參考，所有文章均包含本聲明。

總結(jié)

以上是生活随笔為你收集整理的部分地域云数据库控制台访问异常，阿里云抢修并致歉的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。