【故障公告】阿里雲搶佔式實例服務器被自動釋放引起的故障

很是抱歉，因爲一臺使用阿里雲搶佔式實例的緩存服務器被自動釋放，形成今天 10:20-11:30 左右網站沒法正常訪問，由此給您帶來很大的麻煩，懇請您的諒解。

這臺阿里雲搶佔式實例服務器的出價方式是「使用自動出價」，以前咱們使用這種出價方式的阿里雲搶佔式實例歷來沒有被自動釋放過。

而購買頁面的提示「使用自動出價-以按量付費實例規格價格爲上限」，讓咱們誤覺得自動出價的搶佔式實例不會被釋放，最多隻會以按量付費實例的價格收費。

昨天下午 14:50 左右，收到了阿里雲的通知短信與郵件：

【阿里雲】尊敬的用戶，您好！您的搶佔式實例: i-bp1938t1plpkzggc5jd1(couchbase)  因庫存變化,  即將進入釋放狀態

您好！您的搶佔式實例: i-bp1938t1plpkzggc5jd1已標記進入即將進入釋放狀態，5分鐘後會自動釋放。

建議您使用關機腳原本保存您的應用數據。謝謝!

阿里雲計算有限公司

收到通知時以爲很奇怪，自動出價的服務器怎麼會被釋放？難道是阿里雲的誤通知？

爲了以防萬一，當時準備換服務器，但過了5分鐘後發現那臺服務器還在，沒被釋放，因而就真覺得是阿里雲的誤通知。

。。。

今天出故障時發現數據庫服務器壓力很是大，在排查過程當中忽然想到昨天阿里雲釋放服務器的通知，趕忙查看，汗，那臺服務器沒了。

原來阿里雲在後來的某個時間將那臺服務器「偷偷」釋放了（釋放時沒有發任何通知），並且這樣的釋放不會觸發阿里云云監控的報警，再加上咱們缺乏對緩存服務器的專門監控，結果在服務器被釋放後咱們沒有及時發現，形成今天在訪問高峯時數據庫服務器壓力過大，從而引起故障。

咱們會吸收此次教訓，改進服務器的部署。

後來，向阿里雲提交工單後才知道"當市場價格高於您的出價或者資源供需關係變化時，實例會被自動釋放"也適用於「使用自動出價」的方式，自動出價不會出現「市場價格高於您的出價」的狀況，但會出現「資源供需關係變化」的狀況（好比阿里雲庫存服務器不夠用），這時阿里雲就會在已購買的競價服務器中「搶佔」一些據爲己有。

經過此次教訓也終於明白了爲何阿里雲把當初的「競價實例」更名爲「搶佔式實例」。