Written by 平素よりユニットホスティングをご利用いただきありがとうございます。
先ほど一部ネットワークにつきまして接続が不通となる障害が発生いたしました。障害内容について以下に詳細を記載いたします。
Posts in category 障害情報
【復旧】物理サーバ障害発生のお知らせ
2011/4/5(火) 12:17 ～ 12:43ネットワーク障害 復旧のお知らせ
Written by 平素よりユニットホスティングをご利用いただきありがとうございます。
先ほど一部ネットワークにつきまして接続が不通となる障害が発生いたしました。
障害内容について以下に詳細を記載いたします。
仮想ホスト障害復旧のお知らせ
平素よりユニットホスティングをご利用いただきありがとうございます。
この度は長時間の停止がありましたこと、深くお詫びいたします。
今回の障害内容について以下に詳細を記載いたします。
仮想化ホスト障害のお知らせ
平素よりユニットホスティングをご利用いただきありがとうございます。
現在仮想サーバを管理しているホストのうち、マスタサーバが異常作動を起こしております。
これに伴い、下記のサービスについてご利用頂けません。
■ 影響範囲
1. ユニットホスティング管理画面からのサーバ起動、シャットダウン、再起動、電源ON/OFF
2. ユニットホスティング管理画面からのサーバ作成、サーバ初期化、サーバ複製
3. ユニットホスティング管理画面からのスナップショット作成、スナップショットからの複製
4. ユニットホスティング管理画面からの対外共用ネットワークの追加
5. ユニットホスティング管理画面からの専用ネットワークの追加、専用ネットワークのインターフェース追加
6. ユニットホスティング管理画面からのコンソールのご利用
7. ユニットホスティング管理画面からのパフォーマンスモニターのご利用
※ 稼働中のサーバについては影響ございません。（16:25の追記を御覧ください）
現在、復旧に向けて対処を行っており、復旧予想時刻は16:00前後を予定しております。
ご利用中のお客様には大変ご迷惑をおかけいたしますが、今しばらくお待ちいただけますよう
ご理解とご協力をお願いいたします。
■16:25 追記
物理サーバ2台にストレージ接続障害が見つかりを再起動しております。当該物理サーバ上にあるサーバについては、物理サーバ再起動後・順次再起動させて頂きます。
■17:30 物理サーバの復旧完了。仮想マシンを順次復旧中です。
■21:00 お客様の仮想マシンについては復旧を完了しております。不都合などございましたらサポートまでご連絡をお願いします。
サーバの再起動及びその後ネットワークが不安定による障害のご報告
平素よりユニットホスティングをご利用いただきありがとうございます。
■ 経緯
12/22 20:00時頃ユニットホスティングのフロントエンドから仮想化サーバの管理ソフトウェアに対するリクエストが過多となったため、
仮想化サーバの管理ソフトウェアが高負荷により応答がなくなる状態になりました。
これにより、ユニットホスティングのサーバ管理画面の利用に支障をきたす事になったため、
負荷を別物理サーバに退避する対応を取りましたが足りず物理サーバ自体を再起動することに致しました。
21:30分頃物理サーバの再起動にあたり、一部お客様のサーバについても物理サーバと共に止む無く再起動させていただきました。
この時、に冗長化された仮想ルータの一つも一緒に再起動させて頂きましたが、この再起動が不完全だったため一部のネットワークの疎通が不安定になる事態となりました。
ユーザ様よりご指摘をいただき、調査を進め原因を特定し翌12/23 1:30頃仮想ルータを復旧し、現在は安定して稼動しております。
■ 原因
・APIのアクセスの過多
・仮想ルータの起動時の設定
■対策
・APIリクエストに対するウェイトの実施を行わせていただきました。
・仮想ルータの設定を修正いたしました。
この度は、多大なるご迷惑をお掛けして申し訳ありません。深くお詫びさせていただくと共に再発防止に取り組んでまいります。
ルータ障害による一部ネットワーク接続障害の発生と復旧のご報告
平素よりユニットホスティングをご利用いただきありがとうございます。
本日、4:30頃ユニットホスティングを構成するルータの1箇所が接続障害を起こしました。これにより該当ネットワークにあるサーバが外部ネットワークへ接続出来なくなっておりました。
現在は、ルータを復旧しサービスが正しく動作していることを確認しております。
■ 影響範囲
10.12.0.0/24の範囲にローカルIPをもつサーバ
■ 原因
外部ネットワークへの接続障害
■ 進捗
- 4:30 頃 障害発生
- 11:30 頃 障害復旧
影響をうけたお客様にはご迷惑をお掛けしまして申し訳ありません。ユニットホスティングでは今後耐障害性を向上させるための方策を実施していきます。
何卒よろしくお願いします。
ルータ障害による一部ネットワーク接続障害の発生と復旧のご報告
本日、19:30頃ユニットホスティングを構成するルータの1つ接続障害を起こしました。これにより該当ネットワークにあるサーバが外部ネットワークへ接続出来なくなっておりました。
現在は、ルータを復旧しサービスが正しく動作していることを確認しております。
■ 影響範囲
10.12.0.0/24の範囲にローカルIPをもつサーバ
■ 原因
物理サーバのストレージへの接続障害
■ 進捗
19:30 頃 障害発生
20:00 障害復旧
被害に会われたお客様にはご迷惑をお掛けしまして申し訳ありません。
今後ともユニットホスティングをよろしくお願いします。
2010年8月14日以前に作成されたサーバ複製時のトラブル
8月14日以前に構築されたサーバについて、サーバ構築時のネットワーク設定に冗長なところがあり、サーバ複製時にその設定がネットワークの自動検出を妨げる結果となっております。冗長なネットワーク設定を削除することで正常に動作いたします。
※サーバ複製の機能を使わない場合はこの作業は不要です。
ハードウェア障害による一部サーバのリブートによる復旧のご報告
本日、16:32 頃ユニットホスティングを構成する物理サーバの1つがストレージと接続障害を起こしました。そこで緊急対処として故障した物理サーバを切り離し、お客様の仮想サーバを別の正常稼動している物理サーバに退避致しました。
また、退避にあたりファイルシステムを正しくマウント出来ていないサーバに関して、再起動を実施させていただきました。その後経過を監視しておりますが、現時点で正常稼動を確認しております。
■ 影響範囲
故障した物理サーバ上でサーバを起動していた仮想サーバ
■ 原因
物理サーバのストレージへの接続障害
■ 進捗
16:32 障害発生
17:21 障害サーバから正常サーバへ移動後リブート
17:30 障害復旧確認
被害に会われたお客様にはご迷惑をお掛けしまして申し訳ありません。
今後ともユニットホスティングをよろしくお願いします。
最近のコメント