Výpadek serveru Holly
Odstávka konektivity
Krátká odstávka webserveru Abel
Krátká odstávka webserveru Archie
Další krátká odstávka bude provedena v noci z 29. na 30.10.
Odstávky webserverů
Odstávka přijímacího SMTP serveru a serveru Abel
Dnes v noci bude na cca 10 minut odstaven primární přijímací SMTP server (pro všechny politiky) a dále na cca 1 hodinu webserver Abel. Důvodem je výměna a posílení hardware.
SMTP server byl mimo provoz přibližně od 0:00 do 0:08, Abel od 23:58 do 1:03.
Odstávka přijímacích SMTP serverů a webserveru Archie
Servisní odstávky serverů
Abel byl mimo provoz přibližně v čase 0:20 - 0:34, Archie 1:15 - 1:35 a SMTP servery 1:40 - 1:45.
Odstávka webserverů Archie a Kryton
Kryton byl mimo provoz od 0:34 do 0:46, Archie v časech 0:49 - 0:51 a 1:07 - 1:18.
Odstávka serveru Abel
Odstávka byla přesunuta na noc z 13.8. na 14.8. Server byl mimo provoz od 0:27 do 0:38.
Servisní odstávky serverů
Archie byl mimo provoz přibližně od 0:25 do 0:37, Rampa 0:42 - 0:48, Abel 0:50 - 0:59 a pak 1:15 - 1:19. Odstávka Krytona byla odložena.
Odstávka serveru Holly
Služby byly mimo provoz přibližně v časech 1:35 - 1:45 a 3:05 - 3:15.
Odstávka serveru Holly
Při výměně bohužel došlo k neočekávaným problémům, server byl mimo provoz cca od 3:30 do 7:00.
Odstávka webserverů Archie a Kochanski
Server Kochanski byl mimo provoz od 23:58 do 0:02, server Archie od 0:08 do 0:15.
Odstávka POP3/IMAP a webserveru Archie
Poštovní server byl mimo provoz cca od 0:05 do 0:25, webserver od 0:36 do 0:42.
Výpadek serveru Kochanski
Stroj byl vrácen do provozu asi v 16:05. Několik desítek minut ještě budou probíhat obnovy diskových polí, což se může negativně projevit na odezvě serveru.
Odstávka POP3/IMAP
Předpokládaná doba odstávky se protáhla, server byl mimo provoz od 23:55 do 3:20. Bohužel se nepodařilo provést všechny potřebné úpravy, v noci z 8.6. na 9.6. proto bude provedena ještě jedna podobná odstávka. Služby byly mimo provoz cca od půlnoci do 2:45, plánované změny byly provedeny.
Výpadek webserveru Archie
Odstávka POP3/IMAP
Služby byly mimo provoz přibližně od 23:50 do 0:05.
Přesun POP3/IMAP
Server byl mimo provoz přibližně od 0:45 do 2:45.
Odstávka POP3/IMAP
11:18: Vývoj z posledních minut bohužel ukázal, že výměnu je nutné provést již nyní. Administrátoři jsou na cestě do serverovny.
12:55: Bohužel jsme narazili na další problémy, na řešení stále pracujeme. Server stále může být chvílemi nedostupný.
16:20: Z technických důvodů byl dočasně odstaven webmail, poštovními klienty je pošta dostupná. V uplynulých hodinách bylo třeba server restartovat cca po 30-40 minutách provozu.
20:30: Webmail byl vrácen zpět do provozu. Přibližně od 17:30 se výše zmiňované problémy neobjevily, přesto pracujeme na finálním řešení - přesunu celého stroje na nový hardware a jiný operační systém a architekturu. Taková změna je velmi náročná a zřejmě ji nebude možné stihnout během dnešní noci. Přes den ji provádět nechceme - znamená to úplné odstavení serveru na několik hodin.
Výpadek POP3 a IMAP
Dnes ve 14:00 došlo k výpadku hlavního poštovního serveru (POP3 a IMAP), problém řešíme.
14:20: bylo potřeba zásahu v serverovně, stroj byl restartován a nyní probíhá kontrola souborového systému. Server byl vrácen do provozu cca ve 14:50, nyní ještě bude probíhat obnova diskového pole, což se může projevit zhoršenou odezvou služeb v několika následujících hodinách a zpožděním doručení nových zpráv do schránek.
Odstávka serveru Archie
Odstávka serveru Holly
Server byl odstaven od 0:06 do 0:09.
Stěhování serverů
Dnes v noci proběhne avizovaný přesun hlavních hostingových technologií do nové serverovny. Přibližně ve 20:00 bude odstavena klientská sekce, samotné stěhování začne někdy po půlnoci. Servery budou po přesunu vraceny do provozu postupně, přesun posledních bude dokončen někdy v ranních hodinách.
První servery byly odstaveny kolem 0:45, poslední byl vrácen do provozu krátce po 6:00. Doba odstávek jednotlivých strojů většinou nepřesáhla 60 minut. V sobotu mezi 18:00 a 18:25 byla provedena optimalizace konfigurace sítě, změny v nastavení mohly způsobit několikasekundové výpadky spojení.
Odstávka serveru Kryton
FTP, SFTP/SCP a klientská sekce byly vypnuty od 01:00, server byl poté úplně odstaven od 02:35 do 02:39. Při přesunu dat bohužel došlo u některých souborů nahraných přes PHP ke změně systémového vlastníka, pokud na své doméně narazíte na tento problém, obraťte se na zákaznickou podporu.
Odstávka POP3, IMAP, SMTP a MySQL 5
Odstávka POP3, IMAP
Odstávka byla odložena, o novém termínu budeme informovat.
Odstávka serverů
Holly byl odstaven přibližně od 1:00 do 2:00, MySQL 5 pak od 3:00 do 4:00.
Před 9:00 byla databáze dvakrát asi na 3 minuty odstavena, bohužel se zřejmě projevila nějaká chyba v nové verzi MySQL.
Odstávky serverů
Server Archie byl odstaven v době 01:02 - 01:05, server Dibbley byl odstaven v době 01:16 - 01:20
Výpadek MySQL 5 pro server Dibbley
Odstávka SMTP serveru
Přetížení MySQL pro webserver Kochanski
Výpadek serveru Dibbley
Provoz byl obnoven ve 12:10. Po spuštění bude probíhat synchronizace diskových polí, proto může být nějaký čas zhoršena odezva serveru. Kolem 14:30 byl kvůli přetížení server odpojen od vnější sítě, problém je bohužel závažnější, než se zdálo. Server byl vrácen do sítě v 16:15, provedené kontroly bohužel neodhalily žádný problém. Sychronizace polí byla odložena na noc.
17:40: Bohužel se ukázalo, že v současné podobě je systém nestabilní a po několika minutách provozu dojde k jeho přetížení bez externí příčiny. Na vině je zřejmě řadič hardwarového raidu. Server bude vyřazen ze sítě a přenesen na nový hardware (a tam bude vytvořen softwarový raid). Časovou náročnost této akce je momentálně těžké odhadnout, určitě to bude několik hodin.
22:45: Nakonec jsme se rozhodli pro jiné řešení, i když variantu přesunu na jiný hardware stále necháváme jako zálohu. Proběhla výměna jednoho z disků, nyní probíhá resynchronizace pole, probíhat bude zřejmě celou noc (dá se proto očekávat zhoršená odezva serveru). Přibližně v časech 19:20-19:30 a 21:45-22:15 byl server kvůli úpravám mimo provoz.
9.3.: Noční práce na serveru bohužel nakonec ukázaly nutnost přesunu na nový hardware. Přes den se mohou objevovat krátké výpadku webserveru. Stroj je pod neustálým dohledem administrátora v serverovně, v noci bude proveden přesun.
11.3.: Dibbley bude na novém hardware spuštěn přibližně ve 22 hodin, server by neměl být mimo provoz více než 2 minuty.
11.3.: V době od 23:45 do 00:15 byl server dvakrát odstaven na několik minut. V současné době již server Dibbley jede na novém hardware.
Výpadky SMTP serveru
K dalšímu cca 10-minutovému výpadku došlo okolo 21:00.
Odstávka serveru Kryton
Odstávka se oproti předpokladu protáhla, server byl mimo provoz přibližně v časech 0:10 - 0:12 a pak 0:30 - 1:50.
Problémy s MySQL 5
Odstávka serveru Kryton
Výměna disku proběhla 2.3. v 0:18, server byl mimo provoz asi 2 minuty. Přibližně v 0:45 však došlo k havárii jiného disku v právě synchronizovaném poli. Bohužel došlo ke ztrátě uživatelských dat na serveru (dat z FTP). V současné době (2:14) je stroj odstaven a probíhá obnova dat ze zálohy provedené 1.3. v ranních hodinách. Změny v souborech provedené během dne 1.3. jsou bohužel ztraceny, je třeba je provést znova (čili znovu nahrát či smazat příslušné soubory). Provoz serveru byl obnoven v 8:30. Hluboce se omlouváme za způsobené problémy.
Odstávka serveru Kryton
Server byl mimo provoz od 0:25 do 1:25.
Výpadek poštovního serveru
Výpadek MySQL pro webserver Archie
Spojení bylo obnoveno ve 20:05.
Výpadek poštovního serveru
Update 17:00 - došlo k havárii serveru, v tuto chvíli dochází k opravám souborového systému. Provoz byl obnoven v 17:20.