2016年10月4日 9:54 AM
Backlog の一部の環境で課題のキーワード検索が正常に動作しない問題が発生しておりました (2016年10月03日)
10月03日 (月) 10時16分頃 から 17時40分頃 まで、一部のスペースに対して、課題のキーワード検索が正常に動作しない問題が発生しておりました。ご利用の皆様にはご迷惑をおかけして大変申し訳ございませんでした。
[障害の概要]
10月03日 (月) 10時16分頃より課題のキーワード検索用のインデックス更新ジョブが増えてジョブが遅延しました。対応を行い、17時40分頃復旧したことを確認しました。
[障害の影響範囲]
一部のスペースに対して、課題のキーワード検索時に、障害発生以降に更新された課題が正しく検索に引っかからない問題が発生しておりました。
[障害発生の経緯]
10:16 インデックス更新ジョブの遅延を検知
10:20 調査を開始
10:50 解決するまでに時間がかかると判断したため、Twitter で一次報告
14:00 調査した結果、大量の課題更新リクエストがあったことがわかる
14:10 溜まったジョブが実行されるように対応を開始する
18:04 すべてのジョブが実行されたため、Twitter で復旧報告
[障害発生の原因]
種別の削除リクエスト時に大量の課題更新リクエストが発行されることがあり、ジョブ実行スピードがジョブ登録数に追いついていなかった。
[対策]
1. アプリケーション側のジョブ登録ロジックを見直し
Backlog をご利用しづらい状態が続いて誠に申し訳ございません。安心してBacklogをご利用いただけるよう、改善を進めてまいります。