UPDATE nr. 7:
s-au terminat de copiat datele salvate pe un nou hard disk (din pacate s-au scris extrem de greu din cauza numarul imens de fisiere), acesta va ajunge in datacenter azi in jurul pranzului si se va atasa la server. Apoi vom incepe restaurarea datelor pentru clientii care au solicitat acest lucru si ii vom contacta pe cei care au cerut doar salvarea datelor separat.
Fiecare client va fi contactat separat in functie de modul in care a solicitat restaurarea datelor.
=================
UPDATE nr. 6:
datele din matricea RAID au fost recuperate in totalitate (baze de date, mailuri si fisiere websiteuri). In acest moment se scriu aceste date pe un HDD care a fi conectat in server pentru repunerea lor online sau in functie de solicitarile clientilor pentru punerea la dispozitia acestora.
Am inteles ca in aceasta seara ne vor parveni, se scriu destul de greu, sunt 180 GB de date dar zeci de milioane de fisiere. Speram ca maine cel tarziu toate problemele sa fie remediate.
Tinem sa precizam ca deja s-a achizitionat un server nou-nout care va fi livrat maine, cu memorie RAM dubla fata de cel actual (16 GB ), HDD-uri, procesoare, placa de baza si controller RAID noi si clientii actuali vor fi migrati pe acel server.
De asemenea trebuie sa mentionam ca dupa migrare backupul se va face de 2 ori pe zi si se vor retine ultimele 7 zile de backup.
===============
UPDATE nr. 5:
revenim cu vesti mai bune:
se pot recupera bazele de date, fisierele si emailurile peridute in urma incidentului descris mai jos. cei de la savedata.ro chiar ne-au trimis o baza de date recuperata pentru verificare si totul pare in regula. toate bazele de date vor fi recuperate pana maine iar apoi se va incepe lucrul la mailuri si fisiere websiteuri.
viteza de recuperare a datelor este de circa 1GB pe ora si sunt circa 130 GB de recuperat: 30 GB de baze de date si 100 GB de mailuri si fisiere. s-a convenit sa se inceapa cu bazele de date si sa se incheie procesul cu fisierele siteurilor web.
tot procesul va dura circa 3 zile, noi speram insa sa incepem sa intram in posesia macar a bazelor de date incepand cu maine seara.
oricum vom mai posta un update aici in cursul zilei de maine.
================
UPDATE nr. 4:
firma de recuperare de date ne-a comunicat urmatorul lucru:
Cele 2 hard disk-uri stricate erau ambele in acelasi mirror, deci la oricare din ele se reuseste recuperarea se vor putea restaura datele. In cursul zilei de ieri au incercat recuperarea de pe unul din disk-uri (foarte zgariat), fara succes, si astazi lucreaza la al doilea, care momentan arata mai bine, dar nu au un raspuns clar inca. A ramas sa ne auzim mai dupa masa cu detalii daca se va reusi sau nu recuperarea de pe acest hard.
================
UPDATE nr. 3:
HDD-urile au ajuns la firma savedata.ro la ora 10 azi-dimineata, ni s-a spus ca vom primi un diagnostic si estimare de timp in cursul zilei de azi.
Clientii care au solicitat restaurare de backup vor fi contactati prin email sau li se va raspunde la tichete daca au folosit sistemul de support de la noi de pe site.
================
UPDATE nr. 2:
Toate hard diskurile de pe acel server au devenit inoperabile, ele defectandu-se simultan in matricea RAID. In acest moment ele au fost inlocuite deja cu hard diskuri de capacitate identica si s-a restaurat un backup facut de noi pe un server extern.
Din pacate acel backup este din data de 14 septembrie (din cauza unui bug in softul de backup r1soft.com). Cei care detin websiteuri foarte dinamice este posibl sa constate ca lipsesc date din perioada 14 Septembrie - prezent (posturi din forumuri, articole de pe blog), adica websiteul restaurat din backup este cel din 14 Septembrie.
In acest moment exista 2 posibilitati de remediere a problemei:
1. restaurarea dintr-un backup recent detinut de client (este putin probabil sa existe asa ceva astfel ca speram intr-o rezolvare cu ajutorul punctului 2 de mai jos)
2. restaurarea de pe hardurile originale care maine dimineata la prima ora vor fi trimise spre diagnosticare la firma de recuperare de date www.savedata.ro. Maine vom afla daca se pot recupera datele pierdute si in ce proportie, noi speram ca va fi cat mai aproape de 100%.
Va rugam sa ne contactati daca aveti un website dinamic si doriti restaurare de backup mai recent. De asemenea, daca doriti mai multe detalii tehnice despre aceasta problema va rugam nu ezitati sa ne contactati.
Ne cerem scuze pentru intrerupere si va multumim pentru intelegere.
Va asiguram ca echipa noastra a lucrat fara oprire la restaurarea serverului si va vom sta la dispozitie in zilele urmatoare pentru recuperarea datelor acolo unde este necesar.
================
UPDATE nr. 1: problema de pe serverul NANO este destul de grava, toate HDD-urile s-au defectat simultan iar datele de pe ele pot fi recuperate doar din backup-urile faceute de noi pe un server extern.
In acest moment atat personalul megahost.ro cat si colegii din datacenterul Simpliq ne ocupam de restaurarea datelor.
Vom reveni cu updateuri pe masura ce restaurarea va evolua.
=========
In aceasta seara a intervenit o problema simultan cu 2 dintre cele 4 HDD-uri de pe acest server.
In acest moment se cloneaza cele 2 functionale astfel incat serverul sa aiba din nou 4 HDD-uri in stare de operare in matrice RAID 10. Dupa ce clonarea va fi finalizata se va reporni serverul.
Din pacate acest lucru presupune o perioada de downtime de circa 2 ore.
Va multumim pentru intelegere si ne cerem scuze pentru intrerupere.
www.megahost.ro
Saturday, October 1, 2011
