2016年1月29日 1:32 AM

一部のスペースにて、課題のキーワード検索の結果が正しくない状態となっておりました (2016年01月28日)

一部のスペースにて、1月28日(木)15時00分頃から1月29日1時00分現在、課題のキーワード検索の結果が正しくない状態となっております。来週2月7日(日)までを目処に復旧活動を行っており、復旧の際には再度こちらの障害報告に追記いたします。ご利用の皆様には、ご迷惑をおかけしていること大変申し訳ございません。

[1月30日(土)23時45分 追記]
正常に検索できるよう、対応を行いました。ご迷惑をお掛けしたこと、申し訳ございませんでした。

[障害の概要]
1月28日(木)14時50分過ぎより、課題の検索インデックス更新処理に遅延が発生しておりました。経過観察していたところ、19時35分頃にサーバの高負荷のため、いったんサーバ再起動を行いましたが、その際に遅延が発生していた分の検索インデックスが正しく生成されていない状態となっております。その結果、該当時間に更新された課題に対して、キーワードによる検索が正しくできない状態です。

なお、対象となっている課題に対しても、該当の時間以降に更新があった場合は再度検索インデックス更新処理が実行されるため、正常に検索できる状態となっております。

[障害の影響範囲]
一部のスペースにて、該当時間に更新された課題のキーワード検索の結果が正しくない状態となっております。

[障害発生の経緯]

  • 14:50 課題の検索インデックス更新処理に、遅延発生を検知。更新処理に遅延は発生していたものの、生成自体は行えていたため、経過を観察
  • 19:35 サーバ高負荷のため、サーバ再起動。その際、遅延していた分の検索インデックス更新処理が実行されていない状態となっている

[障害発生の原因]
検索インデックス更新処理の遅延と、サーバ負荷の複合的な要因によるものです。それぞれの根本原因は、現時点では判明していません。

[障害復旧の方法]
検索インデックス更新処理が実行されなかった課題について、更新処理を手動で実行する予定です。

なお、課題検索以外のご利用に極力影響を与えないよう、夜間もしくは休日に実行する予定です。そのため、復旧までに少しお時間をいただくこと、ご理解ご協力ください。

[対策]
1. 検索インデックス更新処理の見直し
サーバ再起動時にも、検索インデックス更新処理に影響を与えないよう、更新処理を見直します。

ユーザの皆様には、現在も継続してご迷惑をお掛けしていること、大変申し訳ございません。引き続き対応を進めます。

一覧に戻る