Kubernetes
Kubernetes (K8s)
Kubernetes とは?
- 膨大な数のコンテナの自動配置・拡張・復旧
- クラウド時代の管制塔
- 大規模運用の標準
Kubernetes を使い始めると、運用担当者の仕事は「サーバーにログインしてコマンドを打つこと」から「あるべき状態をファイルに書いておくこと」に変わります。「注文 API を3つ、メモリ1GB、ポート8080」と宣言しておくと、コントローラーが数秒おきに実際の状態と宣言を比べ、差分を埋めてくれます。手順を人が指示する代わりに、目標値を書いておく方式なので、夜中にコンテナが一つ止まっても、当番の担当者より先にシステムが動きます。障害対応が「復旧作業」から「差分を埋める作業」に変わることが、現場で実感できる最も大きな変化です。
構成単位は階層に分かれています。コンテナを一つか二つまとめた最小単位が Pod、Pod を何セット維持するかの責任を負うのが Deployment、外から届く接続を振り分けるのが Service です。オートスケーリングも自然に働くわけではなく、「CPU 使用率が70%を超えたら最大10セットまで」のような基準を設定して初めて作動します。Docker と混同されることが多いのですが、Docker はコンテナを作って実行するツール、Kubernetes はそのコンテナを複数のサーバーにまたがって配置するツールで、層が違います。自前で構築する代わりに EKS・GKE・AKS のようなマネージド型を使うと、制御部分の運用負担をクラウドに任せられます。
現場で最もよくずれるのは、「Kubernetes を載せれば自動的に落ちなくなる」という期待です。ヘルスチェック(liveness・readiness probe)を正しく設定しないと、プロセスは生きていても応答できない Pod を正常と判断し、トラフィックを送り続けます。リソースの request/limit を空にしておくと、一つの Pod がメモリを使い切り、同じノードの他の Pod まで道連れにします。コンテナが10個前後の組織が無理に導入すると、アプリを作る人員よりクラスターを維持する人員の方が多く必要になるという逆転が起きます。状態を持つ DB を十分な準備なしに Pod で動かすことも、よくある事故の原因です。さらにマイナーバージョンのサポート期間は1年ほどしかないため、定期的なアップグレード計画も一緒に立てる必要があります。
Google が社内システム「Borg」の経験をもとに2014年にオープンソースとして公開し、ジョー・ベダ、ブレンダン・バーンズ、クレイグ・マクラッキーが主導しました。
仮想の事例で見てみましょう。オンラインコマース A社(役職員180名、年間取引高1,200億ウォン(約1,435,081万円))は、大型プロモーションのたびに注文サーバーが耐えられませんでした。機材を事前に2倍用意しておく方式だったため、普段はサーバーの半分が遊んでいたにもかかわらず、昨年末のイベントでは27分間決済ページが止まったことがありました。インフラチーム4名が6か月かけて Kubernetes への移行を進めました。
- インフラチーム長は、全面的な移行の代わりに注文・決済・商品照会の3つのAPIから手を付けました。「一度にすべて移すと元に戻す方法がない」として、全トラフィックの15%だけを新しいクラスターに流しました。
- バックエンド開発者たちは Pod ごとに CPU 0.5コア・メモリ1GBの上限を設定しました。上限を付けずに稼働させた最初の週、精算バッチがメモリを8GBまで使い切り、同じノードの商品照会 API まで道連れにしてしまったためです。
- SRE 担当者はオートスケーリングの基準を「CPU 65%を超えたら30秒以内に最大20セット」に設定し直しました。当初は90%に設定していましたが、増える速度がトラフィックに追いつかず、二度処理が遅れました。
- ヘルスチェックが単純な応答だけを見ていたため、DBへの接続が切れたPodが正常と判定され続けていました。開発リードが「DBまで確認するチェックに変えましょう」とまとめ、readiness probeを組み直しました。
- 6か月後のプロモーションでは、ピーク8分で Pod が6セットから19セットに増え、止まることなく乗り切りました。平常時のサーバー台数は40%減り、月間インフラ費用は2,300万ウォン(約275万円)から1,450万ウォン(約173万円)に下がりました。
- コンテナが多く、拡張が頻繁に必要なとき
- 大規模・高可用性サービス
- 自動配置・復旧が必要なとき
- 小規模サービス(過剰な複雑さ)
- 運用の体制・人員が不足しているとき
- 単純なデプロイで十分な場合
パク・スンテ
パク・ソリョン