[しみず]

10時現在、引き続き復旧作業中です。新しい情報はまだありません。

公式アナウンスがあり次第、お知らせします。

[しみず]

引き続き、復旧作業中。

We continue to work to restore power to the data center and bring all affected customer servers online.


次回更新予定は、12時です。なお、最新情報があれば、すぐにお知らせします。

[しみず]

同じ質問がサポート窓口で続きましたので、ここに掲載しておきます。

復旧作業が完了するまでに外部から送信されたメールは、

送信元に不達エラーが届きます。
但し、送信元のメールサーバー設定によっては、不達時に一定期間繰り返し送信しますので、その場合は、復旧後、遅延して届きます。

[しみず]

12時20分現在、新しい情報はありません。引き続き、電力導入前の初期テスト中。
公式アナウンスがあれば、お知らせします。

[suzuki417]

いったいどれだけ時間がかかるのでしょう？
3時間、とか５・６時間とか気安く数字を使わないで下さい。

以前からサーバー移転などで手間がかかり、その割りにそれほど料金が安いわけでもない。
素人がエラーで困った場合、メールで的確に質問できないので電話サポートがないのも不便。
外国製メーラーも使い辛いし、登録や更新の際、何から何までユーザーが手続きをしないといけない。
本件でのしみずさんの対応にはある程度の誠意を感じられるが、もうどめいん屋を利用するのは止めます。

[しみず]

最新情報です。

以下、要点のみ列記　＊は訳者のコメント
--------------------------------------------------------------------------
昨日のH1データセンター火災爆発事故後の現状報告をいたします。
＊施設は合計5つ有り、そのうち1つで事故が発生。

過去28時間の間、ご迷惑をお掛けして申し訳ございません。

サーバーの接続性維持が貴殿のビジネスにおいて、一番重要なことであるのを深く認識しております。

ただ今、時間との戦いで全力を挙げて復旧作業を行っております。

幸い、サーバー本体には被害は及んでいないのですが、復旧に必要な各種機材を調達、被害状況を調査するにつれ、データセンタ－内の被害は、当初予想を大幅に超える規模であることが判明しました。

1階フロアーの電源設備室の３つの壁が元の場所から数メートル吹き飛び、フロアーに電源を供給する「床下配線」も破壊されていました。

この悪いニュースだけではなく、いいニュースもあります。

データセンター2階フロアーへの電力配線を確保し、ネットワークの接続性を確保する
ことができそうです。
今後、数時間のうちに、この改造に必要な空調設備、他機材を稼働させます。

この方法で6000台のサーバーマシンを復旧する予定です。
今後、４，５時間で稼働準備ができるでしょう。

ダラスにある、他のデータセンター施設からも応援を求め、この復旧作業でトラブルが起こらないようにします。＊6000台のサーバー稼働開始作業

明日の日の出までには、6000台のサーバー復旧が完了するでしょう。
＊日本時間で6月2日20時～22時ごろ

次に床下配線に被害が及んだ1階フロアーにある3000台のサーバーマシンについてですが、
周辺環境に当初予想より大幅に大きな被害が及んでおり、

今後、2段階の復旧作業を実施予定です。

１．明日の夕方までに、電力供給のための一時的配線処理を行います。
　　これは一時的なものになります。
　　1週間程度は「発電機」を使って、この一時的な方法で接続を維持します。
　　＊日本時間6月3日午前8時ごろ完了予定

２．この発電機を利用した電力供給を行っている間に完全復旧に必要な機材を調達して、
　　正常な電力供給状態に戻すことになります。

以上、決して、ご満足いただける形ではないかもしれませんが、現状可能な最善の対応です。

完全復旧に向けての努力を最優先にしておりますので、今しばらくお待ちください。



As previously committed, I would like to provide an update on where we stand following yesterday's explosion in our H1 data center. First, I would like to extend my sincere thanks for your patience during the past 28 hours.  We are acutely aware that uptime is critical to your business, and you have my personal commitment that The Planet team will continue to work around the clock to restore your service.

As you have read, we have begun receiving some of the equipment required to start repairs.  While no customer servers have been damaged or lost, we have new information that damage to our H1 data center is worse than initially expected. Three walls of the electrical equipment room on the first floor blew several feet from their original position, and the underground cabling that powers the first floor of H1 was destroyed.

There is some good news, however.  We have found a way to get power to Phase 2 (upstairs, second floor) of the data center and to restore network connectivity.  We will be powering up the air conditioning system and other necessary equipment within the next few hours.  Once these systems are tested, we will begin bringing the 6,000 servers online.  It will take four to five hours to get them all running.

We have brought in additional support from Dallas to have more hands and eyes on site to help with any servers that may experience problems.  The call center has also brought in double staff to handle the increase in tickets we're expecting.  Hopefully by sunrise tomorrow Phase 2 will be well on its way to full production.

Let me next address Phase 1 (first floor) of the data center and the affected 3,000 servers.  The news is not as good, and we were not as lucky.  The damage there was far more extensive, and we have a bigger challenge that will require a two-step process. For the first step, we have designed a temporary method that we believe will bring power back to those servers sometime tomorrow evening, but the solution will be temporary.  We will use a generator to supply power through next weekend when the necessary gear will be delivered to permanently restore normal utility power and our battery backup system.  During the upcoming week, we will be working with those customers to resolve issues.

We know this may not be a satisfactory solution for you and your business but at this time, it is the best we can do.

We understand that you will be due service credits based on our Service Level Agreement.  We will proactively begin providing those following the restoration of service, which is our number priority, so please bear with us until this has been completed.

I recognize that this is not all good news. I can only assure you we will continue to utilize every means possible to fully restore service.

I plan to have an audio update tomorrow evening. 

Until then,

Douglas J. Erwin
Chairman & Chief Executive Officer

[しみず]

引き続き、最新情報が分かり次第、ご案内します。

[pcsos]

怖いですなー。もしかしてテロ？

このデータセンターはとても脆いと感じたのは私だけでしょうか。

苦肉にも先日、某YOMIURIで、サイバーテロによるWEBが閲覧できない状態が続き、
その損害額として、契約成立の機会を逃すなどして被った損失を1日あたり約5000万円と
試算していました。

データセンターの防災、セキュリティ対策に問題が無かったのか？どうか、
直接的な過失が無いとはいえ、責任が全く無いわけではない。
30時間以上も復旧できないことについて、
ある程度の損害補償も考えなくてはいけないのでは？と思います。

[hitsuji]

34番目の投稿者さま（suzuki417）へ

> 3時間、とか５・６時間とか気安く数字を使わないで下さい。

３時間とか５・６時間というのはデータセンターからのメールを翻訳しているだけでしみず氏の見解ではないのでは？

> 以前からサーバー移転などで手間がかかり、その割りにそれほど料金が安いわけでもない。

「料金が安いわけでもない」って……　安いのでは？

> 素人がエラーで困った場合、メールで的確に質問できないので電話サポートがないのも不便。
> 外国製メーラーも使い辛いし、登録や更新の際、何から何までユーザーが手続きをしないといけない。

「電話サポートはしない，サポートの面倒見はぶっきらぼう」を承知の上で借りているのでは？

> 本件でのしみずさんの対応にはある程度の誠意を感じられるが、もうどめいん屋を利用するのは止めます。

あなたも書いていますが，しみず氏なりに誠意を感じさせる対応をしてくれていると思われます。
いっときの感情でその対応者に不愉快な思いをさせるような書き込みをすべきではありません。

しみず氏はおそらくあなたのような客が他の業者のサーバーに移ることを歓迎すると思いますよ。

----

しみずさん，お疲れ様です。
復旧するまで気が休まらないでしょうが，利用者の皆様のためにがんばってください。

[ラスク]

私もhitsujiさんと８０％同じ事書こうと思ったけど言い合いに
なったり荒れるのも嫌だったんで書かなかったけど

>もうどめいん屋を利用するのは止めます。

これについては、ここに書く事では無い。とだけ忠告しておきます。

[しみず]

自分のドメイン名の収納先サーバーが
果たして1階フロアー分なのか、2階フロアー分のなのか、については、現状分かりません。

整理して、照会予定ですが、その回答がくる前に作業が開始されるような気がします。

[しみず]

この記事で書いたことですが、
http://domainya.biz/smf/index.php/topic,64.msg174.html#msg174

記事引用
---------------------------------------------------------------------------------------------------
今回、合計５つある大規模施設の内、1つの施設で火災事故が発生したわけですが、
以下、詳細説明です。

次のネームサーバーを担当しているＤＮＳマシンが、火災事故発生施設で運営されていました。
ns1.ev1servers.net
ns2.ev1servers.net
ns5.ev1servers.net
ns6.ev1servers.net

結果的に、
１．火災事故が有った施設に設置されているサーバーマシン、
２．他の施設に設置されているが、ＤＮＳサーバーが事故にあっているため接続できない状態になっているマシン。

と接続不能の原因は大きくは、２つに分かれています。

ping してＩＰアドレスが返ってくるマシンは事故が起こっていない施設にありますので、ＤＮＳサーバーが稼働開始すると接続開始するはずですが、
自分が利用している接続プロバイダのＤＮＳ情報更新時間の違いによって、接続開始時間はまちまちにあると思います。

現在、事故のあった施設で運営していたメインのＤＮＳサーバーを別施設に移動して、復旧作業を実行中です。
-----------------------------------------------------------------------------------------------

上記接続不良原因で、「２」番に該当するドメイン名では、 収容先データセンターには異常はなく、
今回、事故の有った施設に収容されていたＤＮＳサーバーの不具合が原因で、現在接続できない状態になっています。
＝ドメイン名が正確に名前解決出来ないのが原因で接続しない状態
　この場合、ＩＰアドレスを指定して接続すると、メールサーバー、ＦＴＰサーバーには接続出来ます。

上記に該当するドメイン名の内、enom社登録扱いになっているものについては、
これを　enom社のネーム－サーバーに変更して、直接　ＩＰアドレスを指定設定したほうがいいように考えています。

この件は、現状ままで復旧を待つ方がいいか、変更した方がいいか、しばらく検討して、本日18時までにどうするか、決定いたします。

[naka]

　この場合、ＩＰアドレスを指定して接続すると、メールサーバー、ＦＴＰサーバーには接続出来ます。

メールサーバーの場合、IP アドレスを指定しての接続とは、メーラーのアカウント設定で具体的にどうすれば良いのでしょうか？
受信メールサーバーの「mail.ドメイン」の前にIP アドレスを指定し「***.***.***.***.mail.ドメイン」でしょうか？

[しみず]

質問は sales@domainya.net へのメール、あるいは、サポート窓口を利用してください。
サポートフォームを利用する場合、フォームには、メール受信出来るメールアドレスを記載してください。
＊gmail などの無料メールアドレスでＯＫ

この掲示板スレッドに投稿しても対応できません。

[naka]

了解しました。