2019年8月23日13時ごろに発生したAWS障害でえらいこっちゃ！

2019年8月25日2022年10月23日日常AWS

先日の2019年8月23日13時ごろに発生した大規模なAWS障害に当ブログも被害をうけました(><)今回はそんな日記的なブログです。

AWSとは

AWSとは、Amazon web servicesの略でAmazonのサービスであります。このAWSを利用することでAmazonのインフラを一般人でも気軽に利用することができます。

つまりは、世界中の人が利用する巨大なショッピングサイトであるAmazonと同じ環境を誰でも気軽に使うことができちゃうんってことです。

なので、世界中でも日本中でも結構使っている企業やアプリ、サイトが使っているわけです。

2019年8月23日に発生した大規模なAWS障害とは

どうやらサーバ機器を冷やすための冷却システムに障害があり、過熱状態となり障害が発生したみたいです。

「Amazon Elastic Compute Cloud」（EC2）の東京リージョンを構成する4つのデータセンター（アベイラビリティーゾーン、AZ）の内の1カ所。AZ内の制御システムに問題が発生し、複数の冗長化冷却システムに障害が起きたという。結果として、AZ内の少数のEC2サーバが過熱状態となり、障害として表面化したとしている。

冷却システムは午後3時21分に復旧。午後6時30分までに、ほぼ全てのストレージ（EBSボリューム）とインスタンスが復旧したという。

https://www.itmedia.co.jp/news/articles/1908/23/news117.html

東京リージョンとは

東京リージョンとは、簡単に言うとAWSの東京データセンターです。

AWSは世界中で展開している為、世界各地に拠点があります。その為、今回のAWS障害で影響を受けたサービスで日本が多いのは東京リージョンを利用している為です。

AWS障害で障害報告を行ったサービス

今回のAWS障害で障害報告を行ったサービス(AWSの東京リージョンを利用していた日本のサービス)は、以下のサービスだったようです。

• 決済系
  • PayPay サービス断続的に使用不可
  • BillingSystem（PayB） クラウド事業者のネットワーク障害

• SNS系
  • mixi 接続障害
  • ピグパーティ ログイン障害
  • 株探 AWS障害
  • teacup. クラウドサービス障害
  • GameWith AWS障害

• 暗号資産取引系
  • バイナンス AWS障害
  • フィスコ（Zaif） AWS障害
  • GMOコイン 接続障害

• 社内システム系
  • 日本通運 メールシステム障害

• サービス系
  • 郵便局（クリックポスト） AWS障害
  • NTTドコモ（dTV、dマガジン） 一部利用できない等の影響
  • ドコモ バイクシェア AWS障害
  • ドコモ・ヘルスケア クラウドサービス不具合
  • ちよくる システム障害
  • 楽天（ラクマ）
  • 楽天チケット システム不具合
  • ふるなびトラベル AWS障害
  • 朝日新聞デジタル システム不具合
  • 日本経済新聞電子版 更新停滞
  • 週刊東洋経済プラス AWS障害
  • SmartNews AWS障害
  • Hulu AWS障害
  • ローソン ネットワーク障害
  • スターバックスコーヒージャパン システム障害
  • イオンシネマ サーバー障害
  • コカコーラ（コークオン） 通信障害
  • ピザハット AWS障害
  • 駅すぱあと AWS障害
  • あすけん クラウドサーバー障害
  • まぐまぐ AWS障害
  • Sansan ネットワーク障害
  • SmartHR AWS障害
  • freee AWS障害
  • Backlog AWS障害
  • Bizseek AWS障害
  • CLIP STUDIO 接続障害
  • LanCul AWS障害
  • Progate 社外の通信サービスシステム障害
  • ネイティブキャンプ AWS障害
  • GLOBIS AWS障害
  • グッピーズ サーバー運営会社障害
  • type転職エージェント AWS障害
  • 信州大学 eALPS AWS障害
  • Serverworks AWS障害
  • 東レACS AWS障害
  • JBCC AWS障害
  • SavaMoni 監視基盤要因による表示遅延
  • バッファロー サーバー障害
  • 癒し処 倉田屋 システム障害
  • 求人＠飲食店.COM AWS障害
  • サンメディア（ARROW） システム障害
  • ヘルスケアシステムズ（カラダチェック） システム障害
  • 店舗デザイン.COM AWS障害
  • KENKEY AWS障害
  • 高崎モータースクール バスシステム予約障害
  • ルネサンス システム障害
  • NEXWAY（NEXLINK） AWS障害
  • Paravi コンテンツ視聴障害

• EC系
  • ユニクロ AWS障害
  • 東急ハンズ Webサーバ障害
  • 小学館（PALSHOP） サーバー障害
  • PIXTA AWS障害
  • STORES.jp AWS障害
  • SHOPLIST AWS障害
  • 駿河屋通販サイト AWS障害
  • PCワンズ AWS障害
  • ドスパラ 通信障害
  • Anker Japan AWS障害
  • アリスブックス AWS障害
  • iich データセンターネットワーク障害
  • FREAK’S STORE システム障害
  • Snow peak AWS障害
  • IDEA online システム障害
  • マザーハウス サーバー障害
  • エレクター システム障害

• ファンクラブ・公式サイト・アプリ系
  • アクサ生命保険 AWS障害
  • 日本相撲協会 通信障害
  • 東京ヤクルトスワローズ サーバー障害
  • オリックス・バファローズ システム障害
  • 福岡ソフトバンクホークス サービス障害
  • 日本サッカー協会 AWS障害
  • 名古屋グランパス サーバー障害
  • 北海道コンサドーレ札幌 AWS障害
  • Movie Walker サーバー障害
  • バンダイチャンネル 接続障害
  • マイナビ研修サービス サーバーエラー
  • ワコム 接続障害
  • WHILL システム障害
  • とらや ネットワークシステム障害
  • AISAN TECHNOLOGY システム障害
  • Crevo AWS障害
  • GOODSMILE RACING 接続障害
  • ポルノグラフィティ 接続障害
  • Perfume 通信障害
  • ディーンフジオカ データセンター障害
  • サザンオールスターズ データセンター障害
  • パスピエ AWS障害
  • A.C.E JAPAN AWS障害
  • スターダストチャンネル サーバー障害
  • 東映特撮ファンクラブ 動画サービス障害
  • NOISE MANIA AWS障害
  • ペライチ システム障害
  • AKB48チーム8 サーバー障害
  • SKE48 Mobile AWS障害
  • 水瀬いのり 接続障害
  • うたの☆プリンスさまっ♪ Shining Live」2周年特設サイト AWS障害
  • SiM App AWS障害
  • アイドルマスター シャイニーカラーズ サーバー障害
  • 小林愛香公式FC（チケット申込） サーバー障害
  • 魔法少女ザ・デュエル 大規模サーバー障害

• ゲーム系
  • ドラゴンネストM AWS障害
  • DMM GAMES 接続障害
  • パズル＆ドラゴンズ 機器調整メンテナンス
  • 誰ガ為のアルケミスト 通信障害
  • メイプルストーリーM 接続遅延
  • アイドルマスター SideM　LIVE ON ST@GE！ 通信障害
  • イケメンライブ AWS障害
  • ブレイブ フロンティア 通信障害
  • KOF’98 UM OL サーバー側大規模通信障害
  • グラフィティスマッシュ AWS障害
  • きららファンタジア AWS障害
  • SINoALICE 通信障害
  • 逆転オセロニア ログイン障害
  • ららマジ ログイン障害
  • バンドリ！ ガールズバンドパーティ！ 接続障害
  • ガールズ＆パンツァー 戦車道大作戦！ AWS障害
  • イケメン源 AWS障害
  • 戦艦帝国 AWS障害
  • ドラゴンボールZ ドッカンバトル 接続障害
  • かんぱに☆ガールズ サーバー障害
  • 幽☆遊☆白書 100%本気(マジ)バトル 公式 サーバー障害
  • プリキュア つながるぱずるん サーバー障害
  • ジョジョのピタパタポップ 一部のサーバー障害
  • ドラゴンボールZ ブッチギリマッチ サーバー障害
  • HiGH&LOW 通信障害
  • 駅メモ！ 他社クラウドサーバー障害
  • ゴシックは魔法乙女 サーバ提供会社大規模通信障害
  • キングスレイド AWS障害
  • ツキパラ サーバー障害
  • グランドチェイス 日本AWS障害
  • アイドリッシュセブン AWS障害
  • クラッシュフィーバー 通信障害
  • スターライトステージ 通信障害
  • 仮面ライダーゲームインフォ サーバー提供会社 大規模通信障害
  • FFブレイブエクスヴィアス データセンター障害
  • 城とドラゴン AWS障害
  • バトルフェスティバル サーバー障害
  • HANDEAD ANTHEM サーバー大規模通信障害
  • 踊り子クリノッペ 接続障害
  • スタンドマイヒーローズ AWS障害
  • スーパーロボット大戦DD AWS障害
  • 鋼鉄戦記C21 Webサービス障害
  • 東京喰種 通信障害
  • 共闘ことばRPG コトダマン 国内の大規模サーバー障害
  • NEWSに恋して サーバー障害
  • オルタナティブガールズ2 ログイン・接続障害
  • ミリオンダウト サーバー障害

• その他
  • ホビーセンターカトー 運転見合わせ
  • AtCoder AWS障害
  • クリスタルボルリユニオン サーバー通信障害
  • SAO メモリーデフラグ 緊急メンテナンス

さいごに

今回の大規模なAWS障害で影響が出た日本のサービスってめちゃめちゃありますね^^;
確かにクラウドでサーバ運用する便利さだったり、インフラ運用はかなり便利です。

ただ、今回の1件でクラウドサービスの分散化であったり、アベイラビリティゾーンの分散化(Multi A-Z)とかが重要視されたみたいです。

UTの日常

冒頭で触れたように今回のAWS障害でUTの日常も障害をうけました。。。具体的には、障害が回復してからもEC2インスタンスのEBSへアクセスできなくなりました(><)

結果、EC2を新しくインスタンスを立ち上げNginx、PHP-fpmを構築し、WordPressをインストール。そしてテーマを用意。それから画像を配置などなどを行った(汗)

まぁRDSのデータベースが無事だったのがめちゃめちゃでかい！(間違えて別のデータベースに接続し、データが消えたかとめちゃ焦りましたが)

っということで、みなさんもバックアップやスナップショットを定期的に保存しておくことをオススメします！(当たり前ですがｗ)