Havárie na sklonku dne
Přidáno 23 Bře 2008 v 18:26:04
Dovolil jsem si vypůjčit titulek od českého autora Dušana Hamšíka
. K havárii nedošlo na sklonku dne, ale ráno při pravidelném zálohování. V domácím serveru mam disky v RAIDu (naštěstí). Ráno odjela Katka k babičce a dědečkovi kde Kačka tráví prázdniny a mě nechala se seznamem co mám udělat doma. Tak jsem v klidu šel stahnout poštu. Freemaily si nechávám přeposílat na server domu – schránku 50GB Vám nikdo neposkytne, že. Jenže Kmailu se nějak nechtělo načíst složky a nové maily. Navíc mi na schránku co mám mimo nepřišel mail o ukončeném zálohování. Protože má Kmail s IMAPem celkem problémy zavřel jsem ho a akci opakoval. Nic. Tak jsem se přihlásil na server a zjistil neúměrné zvýšený load. Server není žádný blesk s 256MB RAM a jakákoliv operace nad standard se projeví zatížením. Sám IMAP není zrovna mírný a tak díky snaze o načtení mailů z konference linux@linux.cz + freemaily visel imapd v procesech.
cat /proc/mdstat
ukázal, že hde3 vypadnul z raidu (md0 je navíc root partisna) a ten běží v degradovaném stavu. Tak jsem ho rychle označil jako fail a vyhodil ze všech raidů. V /var/log/messages byly povzbudivé hlášky:
Mar 23 05:27:30 pandion kernel: hde: dma_timer_expiry: dma status == 0x20Mar 23 05:27:30 pandion kernel: hde: DMA timeout retry
ar 23 05:27:30 pandion kernel: hde: status error: status=0x7f { DriveReady DeviceFault SeekComplete DataRequest CorrectedError I
ar 23 05:27:30 pandion kernel: hde: status error: error=0x7f { DriveStatusError UncorrectableError SectorIdNotFound TrackZeroNot
ar 23 05:28:03 pandion kernel: ide2: reset: success
Pokusil jsme se stopnout vsechny nepotřebné služby – IMAP, MysQL, apache, sambu ale pri pokusu o stopnuti IMAPu server zatuhnul. Po rebootu když jsem se připravoval na nejhorší naběhlo vše jak má a v logu žádné hlášky o chybách disku. Takže klid před bouří. Odvážil jsem se zpátky přidat partišny do RAIDů.
mdadm /dev/md0 -a /dev/sde3
a pak podobně u zbytku. Zhruba po půlhodině bylo vše hotové…
Samozřejmě není vyhráno – Nastala nutnost další akce: záloha + výměna disku. Druhá část musí počkat – nejsem jako v práci, kde je disků dostatek a výměna se řeší okamžitě. Kompletní záloha už běží. Našel jsem doma v šuplíku starý PATA disk o kapacitě 60 GB (strašně píská, a tak není v žádném compu). Vlastním USB rámeček, a tak jsem disk připojil jako USB mass storage a vesele se rsyncuje
rsync --progress -ae -x --exclude=/proc/ --exclude=/sys/ --exclude=/tmp/ --exclude=/dev / /media/usbTagy: Linux
Související příspěvky
Žádné komentáře MiZi | Linux |