平素はロジメーターをご活用頂き、誠にありがとうございます。
5/16(月)17時45分~20時30分の間に発生したCSVダウンロードおよび再計算の障害について、恒久対応のご報告です。
【原因】
今回の改修に伴い、CSVの出力最大レコード量を最大で12倍にいたしましたが、途中計算において一時的にさらに4倍程度のメモリを利用していることが分かりました。
この分を考慮したサーバ容量がなく、5/16の17:45頃に想定される最大級のリクエストが発生したことで、メモリをいちどきに占有し、後工程に必要なメモリが確保できず、処理がほぼ進まないという状況に陥り、障害状況が発生いたしました。
【恒久対応】
容量計算を再実施し、処理に必要な十分なサーバ容量を追加で確保いたしました。
対応後、7日間の集中監視を実施して、余裕を持ちながら稼働していることを確認しております。
【継続的な改善】
今回の対応で処理の停止は発生しなくなりましたが、多数のユーザー様から最大級のリクエストを同時に受け付けた場合には、待ち時間の長期化が発生する可能性がございます。
今後も継続的に使用状況を監視し、ユーザー様の利用量に従って、処理台数の増強と負荷分散を実施してまいります。
あらためまして、ユーザーの皆さまにご迷惑をおかけしたことを心よりお詫び申し上げます。
引き続き、ロジメーターの機能拡充と品質向上に努めてまいります。
今後とも変わらぬご愛顧をいただきますよう、何卒よろしくお願い申し上げます。