「システム障害しょうがいはなぜ起おこるのか？」の対談たいだんの前日ぜんじつに得えた体験たいけんと気きづき

火災報知器かさいほうちきが鳴なり響ひびくカレー屋やでの経験けいけんは、障害しょうがい対応たいおうの大おおきな学まなびだった

2024年ねん05月がつ10日とおか 09時じ00分ふん更新こうしん

文ぶん● 大谷おおやイビサ　編集へんしゅう●ASCII

　渋谷しぶやのカレー屋やで会食かいしょくの途中とちゅう、突然とつぜんの火災報知器かさいほうちき！　その日ひの会食かいしょくは5人にんだったが、経験けいけん豊富ほうふなマーケターと経営けいえい伴走ばんそう者しゃがいたことで、「これこそ正ただしい障害しょうがい対応たいおうでは？」という素晴すばらしい学まなびを得えることができた。当日とうじつの模様もようをレポートするとともに自身じしんの気きづきを書かき連つらねておきたい。

乾杯かんぱいを終おえ、前菜ぜんさいを食たべた終おえたあとに店みせに異変いへんが

突然とつぜんの火災報知器かさいほうちき！　あなたならどうする？

　その日ひのカレー会食かいしょくは、前菜ぜんさいとワインを楽たのしみ、さあいよいよメインのカレーという段階だんかいで火災報知器かさいほうちきが鳴なり響ひびいたことで、一気いっきに様相ようそうが変かわった。上うえの階かいで火災かさいが発生はっせいしたというアナウンスだ。1回かい目めはともかく、2回かい目めの館内かんないアナウンスが出でた段階だんかいで、店内てんないは「これは訓練くんれんや誤あやま放送ほうそうではなく、本当ほんとうに火災かさいでは？」という空気くうきが流ながれ始はじめた。

　会食かいしょくの参加さんか者しゃは5人にんだったが、カレーのことしか頭あたまにない私わたしは「誤あやま放送ほうそうだから、店みせの人ひとが確認かくにんしてくれるに違ちがいない」と思おもっていた。「どうせ悪わるいことは起おこらないだろう」と予見よけんしてしまう絵えに描えがいたような正常せいじょう性せいバイアスだ。しかし、残のこりのメンバーは違ちがう。「10階かいで火事かじとアナウンスしている」「ここって5階かいだから、飛とび降おりて逃にげるのは無理むり」「これは早々そうそうに避難ひなんした方ほうがいい」と、他たのお客きゃくに先駆さきがけて1階かいに降おりることを決きめた。

　迅速じんそくに店みせから出でることを判断はんだんできたのは、会食かいしょく相手あいてだった名なうてのマーケターと経営けいえい伴走ばんそう者しゃが経験けいけん豊富ほうふだったからにほかならない。2人ふたりのベテランは、おそらく私わたしのような正常せいじょう性せいバイアスに取とり憑つかれた経営けいえい者しゃやマネージャーを何人なんにんも見みており、そのデメリットを痛感つうかんしたのだろう。「すぐに逃にげた方ほうがよい」と迅速じんそくに判断はんだんし、メンバーのコンセンサスをとって、従業じゅうぎょう員いんの指示しじに従したがい、階段かいだんから1階かいに降おりた。過去かこの雑居ざっきょビルの火事かじのニュースを考かんがえても、いったん火ひが回まわってしまったら、確たしかにビル内ないはパニックになるはずだ。

　避難ひなんした人ひとたちは雨空あまぞらの中なか、ビルを見上みあげていたが、われわれは早急そうきゅうに別べつのカレー屋やに移動いどうした。実じつはここだけは普段ふだんカレーばかり食たべている私わたしの知見ちけんが生いきており、会食かいしょくできる近所きんじょのカレー屋やにスムーズに移動いどう。前菜ぜんさいとワインの次つぎに出でてくるはずだった会食かいしょくの続つづきをそのまま別べつの店みせで楽たのしむことができた。もちろんメニューは違ちがうが、座席ざせきごと別べつの店みせに移動いどうしてしまった感かんじだった。

　その後ご、店みせから連絡れんらくがあったが、火災報知器かさいほうちきは誤報ごほうだった。結果けっかから見みれば、「そのまま店みせで会食かいしょくを楽たのしめばOKだったのでは？」という意見いけんも出でるだろうが、私わたしはそうは思おもわない。場所ばしょは移うつったものの、迅速じんそくな判断はんだんの結果けっか、忙いそがしいメンバーの時間じかんを無駄むだに消費しょうひすることなく、会食かいしょくを楽たのしむことができたからだ。

迅速じんそくな判断はんだん、RPO/RTOの考かんがえ方かた　システム障害しょうがいはやはり人ひとの問題もんだい

　もう1つよかったのは、イレギュラーな事態じたいへの対応たいおうそのものが大おおきな学まなびだったからだ。実じつは私わたしの翌日よくじつの仕事しごとは、システム障害しょうがいについて別べつ媒体ばいたいの編集へんしゅう長ちょうと対談たいだんすること。システム障害しょうがいが会社かいしゃや世よの中なかに与あたえるインパクト、システム障害しょうがいはなぜ起おこるのか、どうやって防ふせぐのかを思考しこうしながら、スライドを作つくったあとの会食かいしょくだったのだ。そのため、この日ひの出来事できごとは実体験じつたいけんとしてシステム障害しょうがいを捉とらえ直なおすいいきっかけとなった。

　われわれの生活せいかつを支ささえるシステムは、日々ひびさまざまな形かたちで障害しょうがいを起おこしている。その原因げんいんはハードウェアやソフトウェアの障害しょうがい、自然しぜん災害さいがい、ヒューマンエラー、セキュリティ侵害しんがいなど多岐たきに及およぶ。もちろん、バックアップ、クラスタリング、HA（High Availablity）、セキュリティ対策たいさくソフトなど、こうした障害しょうがいに対応たいおうしたソリューションも数多かずおおく存在そんざいする。最近さいきんではAIによる可視かし化かや自動じどう化か、テストツールも増ふえ、人手ひとでをかけずにシステム障害しょうがいに対応たいおうできる可能かのう性せいが出でてきた。

　しかし、先さきほどのカレー屋やの騒動そうどうで学まなんだのは、やはりシステム障害しょうがいへの対応たいおうはどこまで行いっても人ひとの問題もんだいということだ。前述ぜんじゅつした通とおり、現場げんばでは「店内てんないで火災報知器かさいほうちきが鳴なり続つづける」というアラートに対たいして、ベテランが「本当ほんとうに火事かじかもしれない」というリスク、「普段ふだんなかなか会あえないメンバーの会食かいしょくで時間じかんがもったいない」というビジネス的てきな妥当だとう性せいから、いち早はやく避難ひなんの判断はんだんを下くだした。これはBCPやバックアップ計画けいかくで重要じゅうようなRTO（Recovery Time Objective：目標もくひょう復旧ふっきゅう時間じかん）やRPO（Recovery Point Objective：目標もくひょう復旧ふっきゅう時点じてん）の考かんがえ方かたそのものだ。正ただしい情報じょうほう収集しゅうしゅうとリーダーの迅速じんそくな判断はんだんの重要じゅうようさをつくづく痛感つうかんする。

　また、私わたしもいち早はやく別べつのカレー屋やに他たのメンバーを誘導ゆうどうできたわけだが、これもクラウド障害しょうがいの対応たいおうに通つうじるモノがある。2021年ねん夏なつに起おこったAWSの東京とうきょうリージョンの障害しょうがいでは、AZ内ないでのシステム冗長じょうちょう化かが、そのままサービスダウンの有無うむにつながった。今回こんかいの場合ばあい、たまたま私わたしがカレー屋やのマップを整備せいびしていたから他たの店みせへのマイグレーションがスムーズだったが、やはり障害しょうがいを前提ぜんていとしてシステムを設計せっけいする「Design For Failure」は、どの場面ばめんでも金言きんげんとなりうるのだと感かんじられた。逆ぎゃくに私わたしの課題かだいは正常せいじょう性せいバイアスからの脱却だっきゃくだ。

　今日きょうこの会食かいしょくメンバーでなければ、この学まなびにはつながらなかった。実じつは、お店みせの好意こういでその日ひの食事しょくじ代だいは払はらわなくてもよいことになったのだが、当然とうぜんながら申もうし訳わけなく感かんじる節ふしもあり、会食かいしょくを中断ちゅうだんした残念ざんねん感かんもある。今回こんかいは貴重きちょうな学まなびを体験たいけんしたので、次回じかいはしっかり本命ほんめいだったカレーを楽たのしみたい。

大谷おおやイビサ

ASCII.jpのクラウド・IT担当たんとうで、TECH.ASCII.jpの編集へんしゅう長ちょう。「インターネットASCII」や「アスキーNT」「NETWORK magazine」などの編集へんしゅうを担当たんとうし、2011年ねんから現職げんしょく。「ITだってエンタテインメント」をキーワードに、楽たのしく、ユーザー目線めせんに立たった情報じょうほう発信はっしんを心こころがけている。2017年ねんからは「ASCII TeamLeaders」を立たち上あげ、SaaSの活用かつようと働はたらき方かたの理想りそう像ぞうを追おい続つづけている。