
Kubernetes特集 最終日。「動いた」の先にある、本番の準備
Kubernetesで一度挫折した人向けの特集、6日目です。今日は最終章の第5章「本番運用」を公開し、特集が完結しました。
昨日の第4章では、別の場所から名前で呼ぶ、通信を絞る、Podを消しても残るデータを作る、の3つを扱いました。アプリを動かして、届けて、データを残すところまでは、もう手が届いています。今日はその先の話です。
3つ並べても、全滅することがある
「アプリを3つ動かしているから、1台壊れても大丈夫」。これは、3つが別々の機械に載っているときだけ正しい話です。同じ機械に3つ寄っていれば、その機械が止まった瞬間に全部消えます。
章では、機械を3台用意してそれぞれを別の拠点に見立て、アプリを1つずつ散らします。さらに、メンテナンスのときに同時に止めてよい数を決めておきます。
「良かれと思って」が、本番を止める
演習では、3つの失敗をわざと起こします。1つも止めたくないと考えて厳しくした設定のせいで、メンテナンスが終わらなくなる。更新の権限を渡したつもりが、台数を変える操作だけ断られる。よく分からない設定を省いたら、負荷が来ても自動で増えなくなっている。
どれも、設定は入れたのに肝心なときに効かなかった、という本番でよくある形です。特に最後の1つは、アプリが普通に動いているので気づきにくいのが怖いところです。
壊れたときの順番を、先に決めておく
後半は、監視、アップグレード、障害対応です。障害の最中は誰でも焦ります。焦って「とりあえず消す」と、原因の手がかりも消えます。記録して、影響を見て、層ごとに確かめて、止血して、確認して、振り返る。この順番を先に決めておくのは、焦っても同じ動きができるようにするためです。
最後に、本番に出す前のチェックリストと、6日間のふり返りをまとめました。全ページは特集トップから読めるので、あとで読み返すときのために、トップをブックマークしておいてください。
https://shinichi.noguchi.jp.net/feature/kubernetes/05-production-operations.html