DevOps
DevOps
什麼是 DevOps?
- 打破開發與維運的隔閡
- 快速且穩定的部署文化
- CI/CD 是核心實踐
DevOps 真正改變的,不是工具箱,而是故障發生時,由誰半夜醒來。過去開發把程式碼交出去的那一刻就鬆手,凌晨三點的警報則由維運接手。在 DevOps 組織裡,做出功能的團隊會一路負責該功能的部署、監控與故障應變。因此開發者從一開始就會留下日誌、建立回滾路徑,並預先評估流量湧入時的狀況。由做的人在半夜被叫醒的結構,最終會改變程式碼的品質。
運作是否順暢,不憑感覺,而是看四個數字:部署頻率、從提交到上線的前置時間、部署導致故障的比率,以及故障復原時間。一旦把這四個數字放在同一個畫面上,團隊之間互推責任的爭執就會減少。實踐項目也要分開來看。CI 是一天多次整合程式碼,並自動建置、測試;CD 則是幾乎不需人工介入,就把成果部署到正式環境。再加上以程式碼而非文件管理伺服器與網路設定的基礎設施即程式碼(IaC),「我電腦上明明是好的」這種情況才會消失。
也最好先釐清與近似詞之間的界線。敏捷是縮短企劃與開發的週期,DevOps 則是把成果交到客戶手上的那段時間也縮短。SRE 比較接近以錯誤預算這種數字契約來執行 DevOps 目標的做法;近來也有越來越多公司,把管線與監控整合成企業內共通基礎,讓各團隊自行取用,也就是平台工程。開發人員 20 人以下的話,不必走到這一步,光是 CI 與自動測試,就能立即感受到成效。
現場最常見的失敗,是另外成立一個'DevOps 團隊'。原本是要拆除隔閡,結果卻多出開發、維運、DevOps 三個孤島,部署申請的工單只是多了一關。沒有自動測試就先導入部署自動化也很危險,有問題的程式碼會更快、更頻繁地送到客戶手上而已。工具裝了三個月,部署核准還是要靠部長簽核的郵件來回,那就不是 DevOps,只是多買了一台昂貴的建置伺服器。
始於 2009 年前後的開發與維運協作運動,隨著敏捷開發與雲端的普及,已成為軟體開發的標準文化。
以下以一個假設案例來說明。國內中型時尚電商 A 公司,全體員工 320 人,年營收約 KRW 140,000,000,000 (≈ US$104,785,700),但部署每月一次,在週六凌晨 2 點進行,過程中停止服務 4 小時。去年秋季促銷前的部署出現付款錯誤,6 小時後才回滾,光那一週就損失營收 KRW 200,000,000 (≈ US$149,700)。
- CTO 把六個開發團隊與維運團隊聚在一起,攤開過去一年的部署紀錄。12 次部署中有 4 次回滾,平均復原時間為 5 小時 20 分。他說'這不是能力問題,是結構問題',並以此為題召開了會議。
- 結帳團隊負責人先為最常出問題的訂單與結帳 API 建立自動測試。6 週內把核心情境 180 項改寫成腳本,讓每次提交(commit)程式碼後,12 分鐘內就能看到是否通過。
- 基礎架構負責副理把伺服器設定從文件搬到了程式碼。原本架設一台新伺服器要花兩天,縮短到 20 分鐘,而且因測試環境與正式環境不一致而發生的故障,那一季降為 0 件。
- 把部署權限交給各團隊,同時加上一條規則:'做出來的團隊要在部署後值班 48 小時'。一開始出現'為什麼是我們'的反彈,但警報會直接打到自己的手機上這件事,改變了程式碼審查的嚴謹程度。
- 半年後,部署從每月 1 次增加到每週 11 次,平均復原時間從 5 小時 20 分縮短到34 分鐘。凌晨的部署作業已經消失,維運團隊的夜間待命呼叫也從每月 9 次降到 2 次。
朴雪英
Seungtae Park