8月22日 (月) 15時30分頃 から 16時10分頃 まで、一部のスペースに対して、Backlogにアクセスしづらい状態が発生しておりました。ご利用の皆様にはご迷惑をおかけして大変申し訳ございませんでした。

[障害の概要]

本日8月22日(月)15時30分頃 データベースの負荷が高い状態が発生いたしました。 対応を行い、16時10分頃復旧したことを確認しました。

[障害の影響範囲]

一部のスペースに対して、Backlogにアクセスしづらい状態が発生しておりました。

[障害発生の経緯]

15:09 データベースにてデッドロックが発生
15:30 アプリケーションサーバからエラーメッセージを検知
15:34 アクセスに支障をきたす状態と判断し、Twitter で一次報告
15:43 データベースのフェイルオーバーを実施
15:48 アプリケーションサーバの復旧を確認するが高負荷状態が継続
16:09 高負荷状態が継続しているため、Twitter で中間報告
16:38 通常通りのアクセスができるようになったため、Twitter で復旧報告

[障害発生の原因]

データベースでデッドロックが起き、CPU負荷が高くなりデータベースが応答を返せなくなっておりました。
デッドロックの原因については現在調査中です。

[対策]

1. データベースサーバのスケールアップ

8/22 23:00 頃よりデータベースのスケールアップを実施します。
無停止で実施するため通常通りご使用できます。

2. デッドロックの原因の調査改善

デッドロックの原因を調査し改善を行います。

Backlog をご利用しづらい状態が続いて誠に申し訳ございません。安心してBacklogをご利用いただけるよう、改善を進めてまいります。