[しみず]

最新情報です。

ns1.ev1servers.net、ns2.ev1servers.net　のゾーンファイル設定が完全に同期していないことは確認しております。
ロードバランスされているそれぞれのサーバーについて、すこしづつ調整作業を実行中。
このゾーンファイルの同期は日本時間4日早朝には終了予定。

We are aware that the zone files for ns1. and ns2.ev1servers.net are not completely in sync. We are systematically taking each of the load balanced nameservers offline to update each individual server's zone files. We expect re-syncing of the zone files to be complete early tomorrow morning.

[しみず]

収容マシン及びプラネット内での利用データセンターの変更について
-------------------------------------------------------
今回、事故が起こったデータセンターに収容されていたマシンに収容されているドメイン名について

先ほど、次の記事でご案内した通り
http://domainya.biz/smf/index.php/topic,64.msg231.html#msg231

一部引用
-------------
新しい電力室への切り替え時に「ある程度の接続停止時間」が必要であるとして、
この切り替え作業を土曜日の深夜、6月7日、あるいは6月14日に実施する予定です。
-------------

が予定されていますので、この切り替え作業による接続停止を防止するために、
すでに再接続が開始していて、サーバーの状態が正常なのを確認したマシンから順に

プラネット社の他のデータセンターで運用しているマシンへ移動処理を行います。

遅くとも、木曜日までに、移動するドメイン名を決定して、金曜日中に移動完了予定です。
該当者には、水曜日までに、ご連絡しますので、しばらくお待ち下さい。

[しみず]

この記事にある、207.218.248.47　については、13時まで待ってみて、まだ、同じ状況であれば、再度データセンターの担当者に照会予定です。

207.218.248.47　について続報です。

まだ、ネットワークに少し問題があります、207.218.248.47　については、まもなく解決予定。

Dear Customer,

We are still have some small issues with our network. Your issue should be resolved soon. For more information please see http://service-update.theplanet.com/

Thank you,
PurtisJ
Technical support
www.theplanet.com

[しみず]

12時25分
207.218.248.47 ですが　
データセンター担当者へ作業状況についての照会チケットを送信しました。

現在、回答待ち。　

14時30分まで待って、回答が無い場合、再度照会予定です。

[しみず]

本件ですが、該当ユーザーへのメール連絡は水曜日午後15時頃を予定しています。

収容マシン及びプラネット内での利用データセンターの変更について
-------------------------------------------------------
今回、事故が起こったデータセンターに収容されていたマシンに収容されているドメイン名について

先ほど、次の記事でご案内した通り
http://domainya.biz/smf/index.php/topic,64.msg231.html#msg231

一部引用
-------------
新しい電力室への切り替え時に「ある程度の接続停止時間」が必要であるとして、
この切り替え作業を土曜日の深夜、6月7日、あるいは6月14日に実施する予定です。
-------------

が予定されていますので、この切り替え作業による接続停止を防止するために、
すでに再接続が開始していて、サーバーの状態が正常なのを確認したマシンから順に

プラネット社の他のデータセンターで運用しているマシンへ移動処理を行います。

遅くとも、木曜日までに、移動するドメイン名を決定して、金曜日中に移動完了予定です。
該当者には、水曜日までに、ご連絡しますので、しばらくお待ち下さい。

[しみず]

最新情報です。

まだ、復旧していない　207.218.248.47　について、14時37分サポートチケットを再送信しました。
次回、16時30分まで待って、再度督促予定。

プラネット社のユーザー掲示板を見る限り、
9000台の内１０％がまだ、復旧していない　900台程度、但し、順次、復旧中。それと、待ち行列が300件くらい、通常、4、５時間待ち程度、と言う状態のようです。
ただ、これは、プラネットの正式情報ではありませんので、あくまでも、まだ、オフラインの人が書き込んでいるものを眺めて、想像している次第です。


今回は、サポートチケットだけではく、チャットでサポート依頼も行いました。　＞結果は、今、しばらくお待ち下さい。個別マシンについて、全力で対応中とのこと。


以下、要点のみ、
チケット連絡後、6時間過ぎているのだが、現状を教えて下さい。

＞技術部の担当へ転送

207.218.248.47　を再起動してもらえませんか、まだ、オフラインなので、
6時間前にサポート依頼を送信したのですが、、

＞6時間前なら、まだ、電力が来ていないはずです。ほとんどのマシンは稼働しているのですが、まだ稼働していない分は個別に対応中です。まもなく復旧するでしょう。

待ち時間は後どのくらいですか？

＞完了予定時間は分かりません。

では、今、ちょっと行ってきて、チェックしてもらえませんか？
大勢の順番待ちがあるのでしょうか？

50時間以上、ダウンしているので、ちょっと、きついです。

＞私は、データセンター内にはいるわけではないで、、でも、今、技術担当は
ほぼ全員、この事故対応に取りかかっていますから、出来る限り早く復旧するようにします。

そうですか、分かりました。早く復旧するようにお願いします。ご苦労様です。

＞どういたしまして。

では、どうも、


Please wait while we find an agent to assist you...
You have been connected to Andrew S.
Andrew S: Hi! Thanks for conacting The Planet's Billing Care Team. May I please have your Login I.D. and last 4 characters of your password to Server Command or Orbit please. Please feel free to ask about our promotions
Customer: *****
Andrew S: How may I assist you today?
Customer: please tell me the current status of 207.218.248.47 , it is on the 1st floor and still offline
Customer: submitted a TT ticket about 6 hours ago and no update yet
Andrew S: Please hold one moment while I transfer you over to a technician. Thank you!
Andrew S: Thank you for choosing The Planet again my name is Andrew and I hope you have a great day!
You have been connected to Travis B.
Travis B: Thank you for contacting The Planet! How can I assist you today?
Customer: yes reboot 207.218.248.47 please it is on the fired floor and still off line yet after your phase 2 operation.
Customer: TT is this 48******PLNT, 6 hours waiting now
Travis B: 6 hours ago, power was still out. Most servers are up. The ones that are not are being worked on and will be up shortly
Customer: how longer do I have to wait ?
Travis B: I do not have an estaimted time of completion
Customer: well, can you just go and check it now or is there a long queue before me ?
Customer: over 50 hours down time is just too much !
Travis B: I am not physically at the data center. But every single technician is working on this. It will be up as soon as we can.
Customer: I see, then I hope it back online soon then , thank you for your hard work.
Travis B: You are most welcome
Customer: bye now
Your session has ended. You may now close this window.

[しみず]

最新情報です。

207.218.248.47
216.12.208.203　の2台がオフラインになっています。

このうち、
216.12.208.203　はこれまでオンラインだったのですが、つい先ほど、再度接続不能となりました。
共通しているのは、どちらも、事故の有った１階フロアーに設置されているマシンだということです。

想像では、ネットワーク関係の配線を処理しているのだと思いますので、作業に関係する接続停止だと思います。
最新状況は不明、とりあえず、午後4時34分サポートチケットを更新しておきました。

次は18時30分頃、再度、照会予定。

参考までに、サポートチケットの画面キャプチャを添付

[しみず]

最新情報です。

バックアップ用発電機の１つでトラブルが発生し、空調ユニット及び無停電装置への
電力供給が不安定になりました。

空調ユニットと無停電装置はサーバーラックの基本部分ですので、調整のため
しばらくの接続停止しています。

ただいま、対策チームが各種機材を点検しております。点検調整完了後、接続再開します。

これは、1階フロア収容マシンにのみ、影響します。

207.218.248.47
216.12.208.203　　が影響を受けています。

Due to an issue with one of our backup generators, we've noted inconsistent power distribution to our CRACs (air conditioning units) and PDUs. Because these key components are fundamental to server racks, customers may note some downtime currently.

We have our data center operations and facilities teams checking the generators, CRACs, PDUs and racks to restore connectivity.

UPDATE: This issue appears to only affect phase 1.

[しみず]

最新情報です。

バックアップ用発電機のトラブルは　１階フロアーにある　およそ　1500台のマシンへ影響しています。
サーバーへの電力供給は続いていますが、トラブルが解決するまでは、
接続を遮断しています。

207.218.248.47
216.12.208.203　　が影響を受けています。


The backup generator issue is affecting around 1/2 of phase 1. From most recent reports, servers have power, but until the issue is resolved, they may not be accessible.

[しみず]

最新情報です。

データセンターのアクセス用ルーターが発電機トラブルの影響を受けています。
ユーザーのマシンはラック内で電力供給を受けていますが、アクセスルーターの電力が
復旧するまで、接続できなくなります。

The Customer Access Routers in H1, Phase 1 have been affected by the generator issues. While customer servers in racks may be powered on, they will not be accessible until the access routers have power restored.

[しみず]

207.218.248.47
216.12.208.203　　について　

今回の事故があったデータセンター施設の1階フロア収容マシン3000台に含まれることが分かりましたので、

復旧、およびサーバーの安定動作を確認後、
できるだけ早い時期にプラネット社の他のデータセンタに確保している新マシンへ、収容しているユーザーアカウント、ファイルなどを移動することにします。
ＷＥＢファイルの移動処理、現在のメールアカウント作成、仮パスワード設定などは、今回弊社で代行処理しますので、ユーザー側で特にすることはありません。

今回移動を決定した理由は、

１．このまま、発電機による利用を続けていると不安定な状態が再発する可能性がある。
２．時間の問題で、1階フロア収容マシンについては、新設した電力室への切り替えが起こり、
　　その時点で、再度、長時間に渡り、接続不能となることが確実である。

の２つです。

該当ユーザーには、明日4日水曜日の18時頃までに、メール連絡予定です。

少し、バタバタすることになりますが、安定稼働を確保するためですので、ご容赦下さい。

[しみず]

最新情報です。

空調ユニットに電力が戻りました。現在、被害対策チームが発電機の安定性を確認中です。
調査後、できるだけ早く各ラックへ通電開始します。

CRAC units are back online. The facilities and data center operations teams are verifying the stability of the generator, and they will restore power to the PDUs as quickly as possible.

[しみず]

現在、接続が不安定なのは次の理由だと想像しています。

１．事故があったデータセンターに、ＤＮＳサーバーが設置されている。
このＤＮＳサーバーは　ns1.ev1servers.net　ns2.ev1servers.net　ns5.ev1servers.net　ns6.ev1servers.net　を管理している。

２．1階フロアーへの電力供給は、電源設備室が爆発したので、現在、一時的に発電機を使っている、
３．バックアップ用発電機の電力が不安定になり、空調装置、無停電装置、ラックユニットなどの電力へ影響した。
４．メインルーターも影響を受けたので、ＤＮＳサーバーへの接続が停止した。
５．事故がなかったデータセンター施設にあるマシンであっても、そのドメイン名が　ns1.ev1servers.net　ns2.ev1servers.net　ns5.ev1servers.net　ns6.ev1servers.net
というネームサーバーを使っている場合、ネームサーバーが停止したので、ドメイン名を名前解決できなくなり、接続障害が発生。

という流れ、発電装置の安定化対策を急いでいるようですので、しばらくお待ち下さい。

[しみず]

現状ままだと、電力供給が原因となって不安定になる可能性のあるＤＮＳサーバー

ns1.ev1servers.net
ns2.ev1servers.net
ns5.ev1servers.net
ns6.ev1servers.net

を設定しているドメイン名について、サーバーでの安定動作が期待できませんので、
ネームサーバー設定を変更可能な場合、弊社で変更処理します。
＝ enom社扱いになっているドメイン名について対応可能。
　　domain people社扱いになっているドメイン名については対応不可。

この設定変更を行っても、利用している接続プロバイダのＤＮＳ情報が最新のものに更新されるまで、接続状況に変化はありませんが、
時間さえ経てば安定化しますので、１つづつドメイン名の登録状態を確認して、変更処理を実施します。

[しみず]

一部訂正、記事中

PDU は無停電装置ではなくて、- Protocol Data Unit -- ネットワーク機器の一種。ルーターみたいなもの

無停電装置は、　UPS です。　勘違いしてました。