2021.12.4 16:09
本日(2021.12.4)14:48から15:20にかけてサービス障害が発生しました。また、本障害発生の直前にサービスが不安定な状態になっていました。
ご迷惑をおかけし申し訳ございません。
原因:DBサーバの自動切り替わりによって一時的な性能低下が発生しました。この影響で、ユーザからのリスエストを処理するだけの十分な能力が発揮できなくなり、処理がタイムアウトするようになりました。これは一時的なもののため、システムが自律的に能力を回復しましたが、サービス再稼働後に集中したアクセスに耐えきれず、再び処理がタイムアウトするという状態を繰り返していました。
対策1:サービス再稼働直後のアクセス集中に耐えられるように、アプリケーションサーバを増設しました。
また現在追加の対策として以下を実施中です。
対策2:DBサーバの自動切り替わりによる一時的な性能の低下を抑止する策。
対策3:DBサーバの負荷スパイクに対して追加の余力をもたせる強化策。
2021.12.4 16:55追記
追加の対策2および対策3を実施致しました。
2021.12.4 15:14
現在ペンギンカルテがご利用いただけません。
復旧に向け対応中です。
ご迷惑をおかけし申し訳ございませんがしばらくお待ちください。
0コメント