[しみず]

引き続き復旧作業を実施中です。
DNS関係のサーバーは、別の施設で稼働開始、DNS情報の拡散を始めています。
ServerCommand　にあるデータベース関係の処理もあと1時間程度で完了予定

一部サーバーマシンをテスト的に、現在の施設から、別の施設へ移動処理して
みましたが、これは、ネットワーク、電力、空調などの負荷が大きくなりすぎることが
判明したため、緊急対策としては対応停止しました。

現時点では、復旧時間は午前3時頃の予定ですが、、まだ、確定していません。
引き続き最新情報が分かり次第お知らせします。


The team here at The Planet continues to work through the various issues that we continue to encounter. We are still making progress on the previous items that I mentioned in my last post. DNS infrastructure has been migrated to another data center and propagation has begun. We are working through some database issues with ServerCommand and fully expect those to be resolved within the next hour.

I’d also like to address the idea of migrating from one data center to another. During the early stages of the H1 data center we opportunistically relocated some customers to another data center. However, due to network and data center (power/cooling) constraints, this option is no longer available and requests for migration cannot be honored. Please rest assured that our teams are working diligently to return service to all affected customers.

At this time we do not have an Estimated Time to Repair at present; we should have a better estimate this morning. Our staff and management continue to work through the night and morning-- we will continue to provide hourly updates.

[しみず]

午前0時現在、新しい情報はありません。

[しみず]

早期復旧のために、さらに多くの人員が手配されています。
DNSサーバーの情報拡散および、
servercommand などのネットワーク系統の障害有無を確認中。

なお、現時点では、復旧時間は、まだ確定していません。
引き続き最新情報が分かり次第、お知らせします。

More teams from The Planet are coming along with more contractors from key vendors for electrical and facilities to help get H1 online. At this time, DNS infrastructure continues to propagate. ServerCommand servers are installed, but the teams are making sure all networking is intact and ready. In the meantime, please call our support lines for any issues. Additional support techs are available.

At this time, we do not have an updated Estimated Time to repair. Please continue following this thread for updates.

[しみず]

午前1時30分現在、新しい情報はありません。

[しみず]

午前2時現在、新しい情報はありません。
当初の発表では、mid-afternoon ごろの復旧予定とのでしたので、米国時間午後1時あたり＝日本時間午前3時ごろとご案内しましたが、
遅れる可能性があります。

最新の復旧予定時間については、まだ、データセンタからの最新の公式アナウンスがありませんので、待機中。
ご迷惑をおかけして申し訳ありません。

[ラスク]

夜遅くまでお疲れ様です。
明日の朝までには復旧できるといいですね。

[しみず]

以下、最新情報です。

残念ながら、当初の予定より、復旧時間が、かなり遅れそうです。

データセンター施設へテスト用初期電源を開始できるのが日本時間午前7時頃になります。
この時点で、ネットワーク、電源設備の動作テストを実施、空調システムを起動して、
動作環境をモニター開始、この調整に約4時間程度かかります。
＝日本時間で午前11時頃に調整テスト作業終了予定

テスト終了後、「今回影響を受けている、約9000台のサーバーマシンへ」徐々に電力を投入します。

以上、作業予定ですので、さらに詳細が分かり次第、お知らせします。
日本時間午前5時頃に、再度、最新状況をご案内予定です。

To keep you up-to-date, here is the latest information about the outage in our H1 data center.

We expect to be able to provide initial power to parts of the H1 data center beginning at 5:00 p.m. CDT. At that time, we will begin testing and validating network and power systems, turning on air-conditioning systems and monitoring environmental conditions. We expect this testing to last approximately four hours.

Following this testing, we will begin to power-on customer servers in phases. These are approximate times, and as we know more, we will keep you apprised of the situation.

We will update you again around 2:30 p.m. this afternoon.



-----
Urvish Vashi
Director, Product Management
The Planet

[しみず]

次回更新予定は、午前5時過ぎです。

[zen]

昨日から、未だサーバーとの接続が出来ません。復旧予定の午前3時は過ぎましたが、どうなったのでしょうか

[しみず]

午前6時現在、いまだ、復旧作業続行中です。

現在、データセンターへの照会アクセスが殺到している模様で、電話、ＵＲＬへのアクセスが出来ない状態ですので、しばらく、現状様子見しています。
引き続き、最新情報が分かり次第、ご案内予定。

[しみず]

最新情報です。要約

現在、ネット上の各種サイトでプラネット社のデータセンター火災事故について話題になっている為、
サポート掲示板を運営しているサーバーへの接続負荷がかなり大きくなっています。
掲示板処理用サーバー台数を増加したのですが、まだ、接続状態が悪いので状況報告をより早く、簡単に行うための代案を検討しています。

先にご案内した「日本時間午前7時」に予定している「電力開通テスト」以外の新しい情報はありません。引き続き作業中。


As you may have already noticed, our forum servers continue to lag due to very heavy load. This is in part to due to the fact that our outage is now being carried on several sites (including Slashdot). Even though we added servers to our forums last night, we are looking at alternatives at this time to provide simple status updates quickly.

We have no other update at this time regarding our planned power test at 5:00pm.

Regards,


We are continuing to pursue plans as noted in our last message, and we have no additional updates at this time. At 4:30, we will plan to issue another message.

The networking teams are ensuring connectivity to bring ServerCommand back online. Please expect another update on ServerCommand shortly. We are seeing fewer DNS issues as the new addresses continue to propagate.

Our primary focus is to hit our 5:00pm CDT initial power test and all necessary staff are onsite and are working diligently to hit this deadline. Additional staff and spare server hardware is being delivered in on site in preparation for bringing customer servers online pending a successful power test.

[しみず]

次のように各種ニュースサイトで取り上げられていますので、データセンターへのアクセスが集中している模様

Texas-Based Server Provider Explosion Affects 9,000 Servers, 7,500 Customers
http://www.allheadlinenews.com/articles/7011131199

さきほど、データセンターサポート窓口との接続を再確保しましたので、引き続き、最新情報が分かり次第、この掲示板でご案内します。

現時点では、昨夜午前3時にご案内したテスト作業が実施されています。

一部引用
-----------
残念ながら、当初の予定より、復旧時間が、かなり遅れそうです。

データセンター施設へテスト用初期電源を開始できるのが日本時間午前7時頃になります。
この時点で、ネットワーク、電源設備の動作テストを実施、空調システムを起動して、
動作環境をモニター開始、この調整に約4時間程度かかります。
＝日本時間で午前11時頃に調整テスト作業終了予定

テスト終了後、「今回影響を受けている、約9000台のサーバーマシンへ」徐々に電力を投入します。
----------

[しみず]

引き続き復旧作業中です。

電力開通が安全に行われるための初期テストの進行状況で
今後のさらに正確な作業スケジュールをご案内します。

次回　最新状況ご案内は、午前10時ごろを予定しています。

We continue to pursue our plans to provide initial power to our H1 data center this evening. It will take several hours to assure power can be safely restored to the facility. Based on how the initial work goes, we will have more information to provide you in the upcoming hours. We will post another update by 7:30 pm tonight.


大変ご迷惑をお掛けしていますが、今しばらくお待ちください。

[pcsos]

障害発生から24時間をとうに過ぎている。

仕事に支障が出ている。

サーバ移転も含めて遅くとも48時間以内に完全解決を望む。

[q_ma3]

ご自分の不注意でのダウンでは無いとは言え、対応にさぞお疲れのことでしょう。
当方は、ホームページダウンと、メールサーバーに接続できない状態が続いておりますが、まあ大丈夫でしょう。
早く復旧すると良いですね。