CloudflareのCDNが全面的に約30分ダウンし、世界中のWebサイトが影響を受ける。原因はソフトウェアの動作不良。ロールバックで対応

2019年7月3日

大手CDNプロバイダのCloudflareが提供するCDNサービスが、世界協定時7月2日14時50分頃(日本時間7月2日午後11時50分頃)から約30分にわたり、世界中で全面的にダウンしました

fig1

これによりCloudflareをCDNとして利用している世界中のWebサービスやアプリケーションが、「HTTP 502」(不正なゲートウェイ)のエラーコードなどを返し、アクセスできなくなったり使えなくなりました(ちょうど僕もRSSリーダーのFeedlyで大量のニュースをチェックしていたところ、FeedlyがCloudflareを使っていたためにこの障害に巻き込まれて、Feedlyにアクセスできなくなりました)。

Publickeyでは、このCDN障害の影響がどのようになっているのか、世界中の主要なサービスの障害状況を把握し、表示しているDowndetector.comのCloudflareのページを参照したところ、Downdetector.comもCloudflareのCDNを利用していたらしく、Downdetector.com自身も502エラーで表示されない状況でした。

下図はCloudflareが復旧した直後のDowndetector.comによるCloudflareの影響を示したもの。世界中で影響を受けていることが分かります。

fig2

Cloudflareはブログ「Cloudflare outage caused by bad software deploy」で、この障害の原因がソフトウェアの問題だったと説明。ロールバックにより解決したと説明しています。

For about 30 minutes today, visitors to Cloudflare sites received 502 errors caused by a massive spike in CPU utilization on our network. This CPU spike was caused by a bad software deploy that was rolled back. Once rolled back the service returned to normal operation and all domains using Cloudflare returned to normal traffic levels.

本日、約30分にわたり、Cloudflareのサイトは私たちのネットワークにおけるCPU利用率の急激なスパイクによって502エラーを引き起こしていました。このCPUのスパイクは問題のあるソフトウェアをデプロイしたことが原因で、すでにロールバックされています。ロールバック後、サービスは正常な状態に戻り、Cloudflareをお使いのすべてのドメインは正常なトラフィックのレベルに戻っています。

同社は今後、さらに詳細な障害報告をするとしています。

(追記)同社はその後、ブログを更新。ファイアウォールの新ルールに含まれていた正規表現が原因であることを明らかにしました。

Tags: クラウド クラウド障害 Cloudflare

このエントリーをはてなブックマークに追加
ツイート
follow us in feedly





タグクラウド

クラウド / AWS / Azure / Google Cloud
コンテナ / Docker / Kubernetes
クラウドネイティブ / サーバレス
クラウド障害 / 運用・監視

プログラミング言語 / 開発ツール
JavaScript / Java / .NET / WebAssembly
HTML/CSS / Web標準

アジャイル開発 / スクラム / DevOps / CI/CD
ソフトウェアテスト・品質
ローコード/ノーコード開発

データベース / RDB / NoSQL / 機械学習・AI
Oracle Database / MySQL / PostgreSQL
Office / 業務アプリケーション

ネットワーク / HTTP / QUIC / セキュリティ
OS / Windows / Linux / VMware
ハードウェア / サーバ / ストレージ

業界動向 / 働き方 / 給与・年収
編集後記 / 殿堂入り / おもしろ

全てのタグを見る

Blogger in Chief

photo of jniino

Junichi Niino(jniino)
IT系の雑誌編集者、オンラインメディア発行人を経て独立。2009年にPublickeyを開始しました。
詳しいプロフィール

Publickeyの新着情報をチェックしませんか?
Twitterで : @Publickey
Facebookで : Publickeyのページ
RSSリーダーで : Feed

最新記事10本