FSCKVPS ล่ม เข้าไม่ได้เลยตั้งแต่หลังเที่ยงคืน

[archi]

มีใครใช้ บริการที่นี้บ้าง เจอปัญหาเหมือนผมอ่ะป่าว หรือผมเป็นคนเดียว ช่วยมาแชร์กันหน่อยคับ
ใช้มาตั้งนานไม่เคยเจอปัญหาเลย มาคราวนี้ ล่มไปเกือบวัันแล้ว รายได้หายหมด   

[hermiss]

Bad Gateway
The proxy server received an invalid response from an upstream server.


Additionally, a 502 Bad Gateway error was encountered while trying to use an ErrorDocument to handle the request.


--------------------------------------------------------------------------------

Apache/2.0.63 (Unix) mod_ssl/2.0.63 OpenSSL/0.9.8e-fips-rhel5 mod_auth_passthrough/2.1 mod_bwlimited/1.4 FrontPage/5.0.2.2635 PHP/5.2.8 Server at www.fsckvps.com Port 80

[garnice]

ขอด่าาาาาาาาาาาาาาาา

ผมก็ใช้อยู่ครับ เซงมากๆๆๆๆๆๆๆๆๆๆๆ

เข้ายังไม่ได้เลย

แล้วอีกอย่าง

UIP ของผม 18000+ น่ะคร้าบบบบบ

ไม่เคยล่ม แล้วมาล่ม คนหายหมดแน่ๆๆๆๆๆ 

[archi]

ได้ข้อมูลจาก support แล้วคับ 

#############################################################

At approx 7pm GMT VASERV HyperVM was hacked and it appears that all nodes have some level of damage. We are currently working on the situation and will be putting updates here.

Currently we have no ETA on this

23:18 GMT. We are going to bring the support desk back online shortly so we can start getting a track of where customers are.

Per DC

LA FSCKVPS - People are onsite working on the system

WireSix Atlanta - People are working onsite

TMS - Expecting someone onsite within 1 hour

UK - We have 4 people onsite and gauging status

Overall it looks like /boot on the nodes has been removed. Some nodes are definitly missing /vz data and others have it intact. We will be going node by node to get things going ASAP.

Our HyperVM db's are intact so this means we can link everyone to their VPS


23:56 GMT: We now have a rolling action plain in place for all nodes and are starting checks/restores. Please note we are expecting at least 24-48 hours to get things even remotly stable

00:32 GMT: We have so far done some test rebuilds on 5 boxes and results look semi promsing for the root VPS data (/vz). /etc/ was removed meaning config files need rebuilding however this is easy enough to do from HyperVM database. As it stands we will NOT be giving public access to HyperVM for the forseable future. We may/may not still use it internally via some very strong firewall controls. For rebuilds etc we will be asking people to do support tickets etc
01:45 GMT: We are finding some empty nodes bu generally we would estimate 80-90% of data is intact. We have started to bring a few customers onine and will be bringing others online/informing about node status in the next few hours. Currently we are still working with onsite staff + providers to restore access to servers. We are still standing by our 24-48 hour window

############################################################

[เรารักนายนะน้องฟี่]

อ่าว เวรกรรม ผม 2 แอค คนละ ดาต้าเซ็นเตอร์ ไปหมดเลย 

[Poomkupz]

เวรกำ เวปผม ดับ หมดเลย  เอามาเพิ่มให้ครับ

05:05 GMT: vz1uk.vaserv.com restore
server3.fsckvps.com restored
vz5uk.vaserv.com - full data loss
vz7uk.vaserv.com - full data loss

ทำใจครับ ผมมีแบคอัพทุกวัน คงไม่ได้เสียหายมาก 

แต่ ว่าทราฟิคนี่จะเป็นเอาหนัก   

[sathdr]

เซ็งเหมือนกัน วางไว้ตั้ง 5 เว็บ  ว่าแต่ข้อมูลจะหายปะคับเนี่ย ต่อไป backup ทุกวันดีกว่า  เสียวเจงๆ

[Poomkupz]

อัพเดทเพิ่มครับ

05:22 GMT: We have approx 90% of the fsckvps nodes now online and are working on restroing VPS access. Currently we are putting everone on the same basic config just so things are up and will go round setting correct limits when things are calmer.
For LA vaserv ndoes all have been reloaded but need configs re-creating which we will do once our HyperVM VASERV is restored, through there won't be public access to start with, if at all. VAServ Texas are about all restored. UK we are about 50% of the way through and have 3 people working flat out on it
05:33 GMT server5.fsckvps.com restor

อีกไม่นาน คงใช้ได้ปกติ อดทนรอ ไปก่อน 

[sathdr]

คุณ Poomkupz ไปเอารายละเอียดมาจากไหนเหรอครับ 

[mixture]

Texas ไม่มีข้อมูลหายใช่หรือเปล่าครับ  

edit : ดันมาล่มตอนส่งเว็บ review อีก โอ้ยยยยยยยย 

[Poomkupz]

คุณ Poomkupz ไปเอารายละเอียดมาจากไหนเหรอครับ 

http://www.vaserv.com/ คาดว่าเป็นเว็ปแม่ของมันครับ

05:33 GMT server5.fsckvps.com restored
05:36 GMT server7.fsckvpscom restored
05:43 GMT servr9 appears to have full data loss
05:48 GMT server8.fsckvps.com full data loss
05:52 GMT server6.fsckvps.com restored

ของผม อยู่ server 16 กับ 17 อีกนานไหมเนี้ยกว่าจะถึงของผม 

Texas ไม่มีข้อมูลหายใช่หรือเปล่าครับ 

edit : ดันมาล่มตอนส่งเว็บ review อีก โอ้ยยยยยยยย 

ขอให้เป็นงั้น ครับ เพราะผมก็อยู่ที่ texas 

[sathdr]

ของผมอีกไกลเลย server36 

[TAXZe]

ลูกค้าอีกคนที่ส่งมาให้

Subject: FSCK VPS Issues
Date: Mon, 8 Jun 2009 00:28:52 -0400
From: [email protected]


At approx 10pm GMT last night a hacker gained access to our HyperVM install via what we believe was an unpatched exploit even though our HyperVM install was totally up to date. As part of this the hacker deleted b//ot on all of our VPS nodes as well as some VPS user data. Currently we are working to restore access as quickly as possible and are aiming to have everyone up within 48 hours. Please do bear with us at this difficult time
Rgds

Rus Foster
FSCKVPS

[Poomkupz]

ลูกค้าอีกคนที่ส่งมาให้

Subject: FSCK VPS Issues
Date: Mon, 8 Jun 2009 00:28:52 -0400
From: [email protected]


At approx 10pm GMT last night a hacker gained access to our HyperVM install via what we believe was an unpatched exploit even though our HyperVM install was totally up to date. As part of this the hacker deleted b//ot on all of our VPS nodes as well as some VPS user data. Currently we are working to restore access as quickly as possible and are aiming to have everyone up within 48 hours. Please do bear with us at this difficult time
Rgds

Rus Foster
FSCKVPS

ผมก็ได้รับแล้วครับเมลนี้

โฆษณา โทรมาถามอย่างไวเลย 

[aussavin]

ตอนนี้ดีแล้วครับ 12.18

[sathdr]

ตอนนี้ดีแล้วครับ 12.18

ขึ้นแล้วเหรอครับ ของผมยังไม่ขึ้นเลย  ไปกินข้าวรอดีกว่า

[Poomkupz]

06:43 server17.fsckvps.com total data loss อยากตายครับ Server ของผม สุดท้ายไม่รอด  

รอลุ้น 16 อีกจะรอดไหมเนี้ย   

[sathdr]

ระหว่างนี้ คุ้ยหา backup ในเครื่องดีกว่า 

[nukk]

เพิ่งจะย้ายเว็บครบ 100%
ดับสนิท....


ตูย้ายเว็บมาทำไมฟ่ะเนี่ย

[sathdr]

ถ้า data loss จะทำยังไงดีคับ ของผมใกล้เข้ามาให้ลุ้นแล้ว