ニフクラ Information

このページではニフクラのトラブル・メンテナンス情報をお知らせしていきます。
 « 年末年始対応について 【訂正】クラウド型バックアップサービス(Acronis Backup Cloud for ニフクラ)メンテナンス実施のお知らせ【12/02~03】 » 
2019年11月19日(火)

トラブル情報オブジェクトストレージ障害について

平素はニフクラをご利用いただきまして、誠にありがとうございます。

ニフクラのオブジェクトストレージ(east-2リージョン)におきまして、2019年10月10日以降、
APIが無応答または500番エラーを返すという障害が断続的に発生しております。
ご迷惑をおかけしており大変申し訳ございません。
障害対応が長期化していることから、対処状況につきまして本Informationにて情報発信してまいります。
更新のある部分に (*) を付けています。

■障害発生時間
・2019年10月10日(木) 13:22~13:35
・2019年10月17日(木) 04:01~06:10、16:32~17:51
・2019年10月23日(水) 08:25~09:58
・2019年10月29日(火) 06:40~09:34
・2019年10月29日(火) 22:58~2019年10月30日(水) 00:53
・2019年11月13日(水) 16:17~17:08
・2019年11月18日(月) 19:45~20:58 (*)
・2019年11月19日(火) 02:45~03:11 (*)

■影響範囲と発生事象
オブジェクトストレージ(east-2リージョン)※
 ・コントロールパネルおよびAPIにおいて、無応答または500番のエラーレスポンスが発生する場合がある。

なお、本障害の影響により、以下の機能において利用しづらい状況が発生しております。
 ・各ゾーンでのISOイメージのアップロード
 ・ESSの配信ログのログダウンロード
 ・RDBの自動バックアップ

※west-1リージョンのオブジェクトストレージは正常稼働中です。
※本障害に伴うオブジェクトストレージ内のデータロストは発生しておりません。

■障害原因
・詳細について調査中
east-2リージョンのオブジェクトストレージを構成する機器の一部において、2019年10月10日にハードウェア故障が
発生したため、以降、データの冗長性回復処理を実施しております。
この回復処理に伴ってストレージシステムが断続的に負荷の高い状態となっており、オブジェクトストレージ(east-2 リージョン)のコントロールパネルおよびAPIにおいて無応答または500番のエラーレスポンスが発生しやすい状態となっております。

■対処状況
データの整合性およびアクセス性の維持を最優先事項として復旧対応を進めております。
・冗長性回復処理に伴う負荷低減対策の実施
・ストレージベンダーを交えて更なる負荷低減策並びに根治対応の検証の実施

★2019年11月1日 14:00 追記
本障害の根治対応を進めることを目的としまして、11月2日(土)00:00から11月5日(火)06:00にかけて、終日緊急メンテナンス作業を実施させていただきます。
本作業に伴いまして、コントロールパネルおよびAPIの応答遅延やエラー応答が断続的に発生する可能性がございます。
ご迷惑をお掛けしますが、完全復旧に向けて必要な対処のため何卒ご理解くださいますようお願いいたします。

★2019年11月15日 09:05 追記
本障害の根治対応を進めることを目的としまして、11月15日(金) 19:00~11月18日(月) 07:00にかけて、終日緊急メンテナンス作業を実施させていただきます。
本作業に伴いまして、コントロールパネルおよびAPIの応答遅延やエラー応答が断続的に発生する可能性がございます。
ご迷惑をお掛けしますが、完全復旧に向けて必要な対処のため何卒ご理解くださいますようお願いいたします。

■復旧見込み
現時点では、2019年12月中旬の完全復旧を見込んでおります。
状況により変動する可能性がありますので、変更があった際は本Informationにてお知らせいたします。

■お客様にて実施可能な回避策
恐れ入りますが以下の回避策についてご検討願います。
・エラーが発生した場合、時間をあけてから再度リクエストする。
・west-1リージョンのオブジェクトストレージを利用する。

投稿者 ニフクラスタッフ 2019年11月19日(火) | 固定リンク
 « 年末年始対応について 【訂正】クラウド型バックアップサービス(Acronis Backup Cloud for ニフクラ)メンテナンス実施のお知らせ【12/02~03】 »