bookendサービス障害報告2023年4月12日(水)にbookendサービスで発生いたしました障害により、お客様ならびに関係の皆様には多大なご迷惑をお掛け致しました事、深くお詫び申し上げます。(約45分間)2.障害の内容アイドックの管理するサーバ内で作動しているbookendサービスにおいて、外部からのリクエストに対して応答に非常に時間がかかっており、一部タイムアウトしてしまう状態でした。現在は復旧を完了しており、すべての機能が正常に動作しております。障害によるサービスの影響範囲は以下の通りです。bookendのWebサイトで障害復旧が完了した旨を告知5.障害原因12:00頃にbookend管理コンソールにて、大量のコンテンツデータの検索処理が実行され、一時的にデータベースの負荷が急激に高くなった影響で後から実行されたHTTPリクエストもクローズされないままになり、サーバのリソースを徐々に圧迫してしまい、外部からのリクエストへのレスポンスにも非常に多くの時間がかかる状態となっておりました。仮想サーバを追加し、該当サーバをロードバランサから外して再起動しました。7.再発防止策bookend管理コンソールで実行される処理を見直し、大量のコンテンツデータの検索に伴うデータベース負荷増大が発生しないように修正します。今回原因となったサーバリソースに関する監視項目を追加し、一定の値を超えた場合にアラートを出しようにします。アラートが出た場合、仮想サーバの追加および該当サーバをロードバランサから外し再起動するようにします。