2013年12月26日 11:09 AM
一部スペースにてBacklogにアクセスできなかった件のご報告 (2013年12月25日)
12月25日(水) 16:54分頃 から 17時14分頃まで、一部のスペースにてBacklogにアクセスできない問題が発生しておりました。
ご利用のみなさまには、大変ご迷惑をおかけして申し訳ございませんでした。
[障害の概要]
16時47分頃、アプリケーションサーバの高負荷を知らせるアラートを検知しました。
そのアラートを受けてサーバを監視しておりましたが、高負荷の状態は収まらなかったため、16:54分頃から全アプリケーションサーバを停止しました。
その後、各サーバの状況を注視しながら起動を行い、17時14分頃に全てのサーバが正しく動作していることを確認しました。
[障害の影響範囲]
一部スペースにて、Backlogをご利用できない状況となっておりました。
なお、クライアントからの共有ファイル / Subversion / Git への接続には影響有りませんでした。
[障害発生の経緯]
- 16:47 アプリケーションサーバの高負荷を知らせるアラートを検知
- 16:54 高負荷の状態が収まらなかったため全アプリケーションサーバを停止し、Twitter で状況を報告
- 17:14 各サーバの起動と正常動作を確認
- 17:27 Twitter で復旧報告
[障害発生の原因]
特定のご利用スペース・ご利用条件にて、画面表示時に高い負荷がかかる場合がございました。
詳細な原因は引き続き調査中です。
(2014/01/14 追記) 共有ファイル上に大量のファイルがアップロードされた際、プロジェクトホームの表示に負荷がかかる仕組みとなっておりました。
[対策]
原因を特定した上で、負荷がかからないように対応いたします。
(2014/01/14 追記) 大量のファイルがアップロードされた場合でも、必要以上の負荷をかけないように改善いたしました。
先日に引き続き、年末でご利用が多いタイミングで障害を引き起こしてしまったこと、誠に申し訳ございませんでした。
ユーザの皆様に安心してご利用いただけるよう、引き続き改善を進めます。