Havárie serveru Abel
Provoz byl obnoven v 19:35.
Krátké odstávky serverů
Odstávka je přesunuta na noc z 20.12. na 21.12.
Databázový server Kocour byl odstaven od 0:40 do 0:44, webserver Kochanski od 0:48 do 0:52.
Krátká odstávka MySQL 4
Server Robik byl odstaven v době od 01:14 do 01:16.
Odstávka webserverů
Server Abel byl odstaven v době od 00:03 do 00:14, server Archie byl odstaven v době od 00:17 do 00:28. Dále jsme provedli neplánovanou odstávku poštovního serveru z důvodu úpravy hardware v době od 01:00 do 01:33 a dále serveru Kochanski v době od 01:38 do 01:45 z důvodu posílení hardware.
Stěhování serveru
Výpadek serveru Kochanski
Provoz byl obnoven ve 12:48. Na serveru probíhá obnova diskových polí, z toho důvodu může být zpomalena odezva serveru.
Odstávka serverů
Databázový server byl odstaven od 0:45 do 0:48, webserver Archie od 0:50 do 1:00, poštovní server cca od 1:05 do 1:30. Na poštovním serveru probíhá kontrola a obnova diskových polí, z toho důvodu bude 23.11.2006 zpozděno doručování pošty.
Odstávka serverů
Databázový server queeg byl odstaven v době od 01:13 do 01:20.
Poštovní server esorimmer byl odstaven v době od 01:53 do 02:10 a od 02:20 do 02:35.
Výpadek serveru Archie
Provoz byl obnoven ve 22:13.
Odstávka klientské sekce
Odstávka hlavního poštovního serveru
Od 0:20 do 1:00 byl mimo provoz adminserver na poštovním serveru, od 0:35 do 0:40 byly vypnuty veškeré poštovní služby.
Krátký výpadek MySQL 5
Odstávka hlavního poštovního serveru
Odstávka proběhla od 1:30 do 3:00.
Odstávka databázových serverů Queeg a Robík a poštovního serveru
Servery byly postupně odstaveny mezi 2:00 a 2:30, každý na cca 10 minut.
Výpadek IMAP, POP3 a SMTP
Provoz byl obnoven ve 14:15.
Výpadek webserveru Dibbley
Odstávka hlavního poštovního serveru
Dnes v noci mezi 1:30 a 3:00 proběhla odstávka hlavního poštovního serveru z důvodu výměny hardware.
V noci na 28.9. proběhne další odstávka z důvodu analýzy výkonu stroje, zjišťování a prevence možných problémů. Odstávky hlavního poštovního serveru z důvodu optimalizace výkonu a případných dalších výměn hardware plánujeme i na další noci v průběhu víkendu, tak aby nebyl dotčen běžný provoz. Problémy zatím přetrvávají, projevují se nepravidelnými krátkými výpadky spojení.
Krátké výpadky poštovního serveru
V noci bude server na několik minut odstaven, bude provedena výměna síťových karet.
27.9.2006 01.00 Na serveru byl zjištěn závažnější problém s hardware, který výměna síťových karet nevyřešila. Z tohoto důvodu bude server nahrazen celý, následující noc.
Výpadek MySQL 5
Problém byl vyřešen v 17:00.
Výpadek poštovního serveru
Dnes v 11:39 došlo k výpadku síťové karty na poštovním serveru, situaci řešíme.
Server se vrátil do provozu v 11:44. K dalším pětiminutovým výpadkům došlo kolem 12:00 a 12:30.
Výpadek hlavního poštovního serveru
Výpadky se týkaly odesílacího smtp serveru, který nebyl dostupný přibližně 15 minut při každém výpadku. Dále přijímacího smtp serveru politiky D, což způsobilo okolo 23 hodiny prodlevu v doručování e-mailů o cca 1 hodinu.
Výpadek poštovního serveru
Dnes v 18:42 došlo k výpadku hlavního poštovního serveru, situaci řešíme. .
Provoz byl obnoven v 18:49. Další sedmiminutový výpadek následoval ve 20:30.
Odstávka hlavního poštovního serveru
Server byl odstaven mezi 2:20 a 2:30.
Odstávka hlavního poštovního serveru
Server byl odstaven v době od 01:45 do 02:30
Odstávka poštovního serveru
Dnes v noci bude odstaven hlavní poštovní server. Doba odstávky by neměla překročit 20 minut.
Odstávka serveru proběhla mezi 22:40 a 23:30. V noci 1.9.2006 bude poštovní server odstaven ještě na cca 1 hodinu z důvodu výměny 2 disků.
Odstávka serverů
Dnes v noci dojde ke krátké odstávce webserverů s PHP 4 - bude nasazena nová verze PHP. Odstávky jednotlivých webserverů by neměly překročit 5 minut. Zároveň bude kvůli kontrole hardware odstaven i hlavní poštovní server, zde bude odstávka delší - cca 20 minut.
Odstávky jednotlivých webserverů proběhly mezi 2:00 - 3:00 hodinou, nepřekročily předpokládanou dobu. Odstávka poštovního serveru byla zrušena.
Zpoždění doručování pošty
Kvůli problémům s jedním z disků v hlavním poštovním serveru může ve špičkách docházet ke zpoždění doručení pošty. Zpoždění může být několik minut až několik desítek minut. Pracujeme na nápravě.
Výpadek poštovního serveru
Provoz byl obnoven asi v 18:50.
Krátký výpadek poštovního serveru
Výpadek serveru Dibbley
Bylo potřeba zásahu v serverovně, stroj byl vrácen do provozu v 11:40.
Výpadek poštovního serveru
Provoz byl obnoven ve 12:03.
Odstávka databázového serveru Kocour
Odstávka byla přesunuta na 2.7. od 0:00 hodin. Odstávka proběhla od 23:58 do 0:23.
Krátké výpadky poštovního serveru
Přesun serverů
Přesun začal někdy po 0:30, poslední ze serverů byly vráceny do provozu asi v 7:00.
Krátký výpadek poštovního serveru
Odstávka klientské sekce
Klientská sekce byla nepřístupná od 20:00 do 21:00.
Odstávka poštovního serveru
Odstávka byla zrušena.
Odstávka serveru Dibbley
Server byl mimo provoz od 1:07 do 1:09 a od 1:45 do 1:47.
Odstávka serveru Dibbley
Server byl mimo provoz mezi 0:17 a 0:48.
Odstávka MySQL 5
Server byl mimo provoz od 1:00 do 1:30.
Problémy s databázovým serverem Kocour
Odstávka webserveru Abel
Výpadek MySQL 5
Problém byl vyřešen v 10:20.
Přetížení databázového serveru Kocour
Stroj byl mimo provoz cca od 13:04 do 13:12.
Výpadek připojení na databáze ze serveru Abel
Výpadek spojení na databázi z webserveru Abel
Spojení bylo mimo provoz cca od 10:45 do 11:10.
Výpadek webserveru Abel
Odstávka MySQL 5
Server byl mimo provoz od 2:21 do 2:47.
Delší odstávka webserveru Abel
Server byl mimo provoz mezi 3:56 a 5:45.
Odstávka MySQL serveru Kocour, webserveru Dibbley a MySQL serveru pro webserver Kochanski
Odstávka každého ze serverů trvala zhruba 1-2 minuty, proběhla kolem 0:45.
Špatná odezva databázového serveru Kocour
Krátký výpadek webserveru Kochanski
Omezení v poštovním systému
Problém byl vyřešen kolem 15. hodiny. Původně zamítnuté zprávy by měly být postupně doručeny.
Prodlevy v doručování pošty
Výpadek webserveru Kochanski
Odstávka webserveru Dibbley
Webserver byl mimo provoz od 0:49 do 0:51.
Odstávka webserverů
Výpadky konektivity
Další cca desetiminutový výpadek nastal kolem 16:00. Pracovníci společnosti Casablanca Int. na odstranění problémů pracují.
Vyjádření spol. Casablanca INT:
Vazeny zakazniku,
vcera, tj. 4. kvetna 2006 v case mezi 15:20 a 16:05 hodinou doslo k distribuovanemu DoS utoku na jiste zakaznicke technologie. V dusledku tohoto doslo k pretizeni jednoho ze smerovacu a naslednemu zhorseni internetove dostupnosti vyuzivane Vasimi servery.
Za zpusobene problemy se velice omlouvame.
Výpadek databázového serveru k webserveru Dibbley
Problém je bohužel závažnější, než se zdálo, předpokládané plné zprovoznění systému je po 12:00. Provoz byl obnoven ve 12:30, systém budeme nadále sledovat.
Odstávka poštovního serveru
Odstávka byla přesunuta na noc z 3.5. na 4.5. Odstávka se znovu odkládá - proběhne v noci z 4.5. na 5.5.
Odstávka proběhla před 2. hodinou ranní.
Výpadek webserveru Kochanski
Výpadek databázového serveru Kocour
Výpadek poštovního serveru.
Server byl zprovozněn v 15:30.
Odstávka poštovního serveru
Odstávka proběhla mezi 0:52 a 0:58.
Výpadek poštovního serveru
Dnes v 11:39 došlo k výpadku poštovního serveru, problém řešíme.
Provoz byl obnoven ve 12:10. V době přibližně od 15:00 do 17:20 byl omezen provoz odesílacího SMTP serveru.
Odstávka MySQL pro webserver Dibbley
Server byl mimo provoz mezi 0:24 a 0:46, proběhla aktualizace programového vybavení.
Odstávka poštovního serveru
Dnes v noci bude kvůli aktualizaci programového vybavení na 15-60 minut (podle průběhu) odstaven poštovní server.
Mezi 3:42 a 4:12 byl na serveru omezený provoz - nebylo možné odesílat poštu. Od 5:12 do 5:14 byl server kompletně odstaven.
Výpadek webserveru Kochanski
Výpadek webserveru Kochanski
Výpadek poštovního serveru
Přijímání pošty bylo obnoveno cca v 11:55, odesílání asi o 20 minut déle. Omlouváme se za způsobené potíže.
Výpadek poštovního serveru
Spojení bylo obnoveno v 16:48, omlouváme se za způsobené potíže.
Odstávka poštovního serveru
Server byl mimo provoz mezi 1:52 a 2:14.
Výpadek webserveru Kochanski
Omezený provoz SMTP serveru
Odstávka serveru Kocour
Server byl mimo provoz mezi 1:18 a 1:25.
Výpadek konektivity
Výpadek webserveru Kryton
Odstávka webmailu, hostingových stránek a serveru Kocour
Kocour byl mimo provoz od 0:34 do 0:44, ostatní služby od 0:02 do 0:07.
Výpadek konektivity
Připojení bylo obnoveno ve 22:07.
Výpadek MySQL pro server Kochanski
Výpadek webserveru Kochanski
Výpadek webserveru Kochanski
Přibližně v době od 8:15 do 9:00 byl špatně dostupný webserver Kochanski. Na vině byl skript jednoho z klientů. Problém se na několik minut opakoval přibližně v 10:45, možné další příčiny jsou v šetření.
Výpadek proudu v serverovně
Výpadek webserveru Kochanski
Odstávka většiny serverů
Výpadek webserveru Kochanski
Výpadek webserveru Kochanski
Výpadek webserveru Kochanski
Problém způsobil PHP skript jednoho z klientů.
Odstávka databázového serveru Kocour
Odstávka proběhla mezi 1:47 a 1:51.
Výpadek konektivity
Od 14:40 do 14:58 bylo mimo provoz připojení všech našich serverů umístěných v serverovně spol. Casablanca INT, podle telefonického rozhovoru s pracovníkem společnosti Casablanca šlo opět o problémy s routerem.
Během dne se výpadek konektivity opakoval ještě několikrát, kolem 19:30 a mezi 21:14 - 21:18.
Vyjádření spol. Casablanca INT:
Vazeny zakazniku,
v navaznosti na vcerejsi oznameni o problemech zasilame doplnujici technicke informace k nastale situaci.
Ve vecernich hodinach doslo na nasi strane k opakovanemu reloadu paterniho prepinace. Pri podrobne diagnostice bylo zjisteno, ze se jedna pravdepodobne o hardwarove selhani. V dusledku toho bylo zarizeni okamzite vymeneno za nahradni a v prubehu noci rovnez doslo k postupnemu prepojeni datacentra na novou 10G ready technologii.
Za zpusobene problemy se velice omlouvame.
Casablanca INT
Odstávka MySQL serverů
Odstávka MySQL na Kocourovi proběhla v 0:28, na Robikovi v 0:31. Servery byly mimo provoz necelou minutu.
Výpadek konektivity
Vyjádření poskytovatele připojení:
[...]
dne 17.1.2006 kratce po 19. hodine doslo k masivnimu DDoS utoku na stroj jednoho naseho zakaznika, v dusledku cehoz byl na nekolik malo minut pretizen jeden z routeru. Za zpusobene problemy se velice omlouvame.
[...]
Krátky výpadek webserveru Kochanski
Výpadky databázového serveru Kocour, webserveru Kochanski
Bohužel chyba existuje i v poslední verzi 4.0.26, databázový systém krátce po půlnoci opět havaroval. Stránky klienta, jehož aplikace spouští konkrétní problematický dotaz, byly dočasně odstaveny, hledáme vhodné řešení.
Odstávka databázového serveru Robik
Odstávka proběhla v 0:20, systém byl mimo provoz asi 2 minuty.
Výpadek webserveru Kryton, databázového serveru Kocour
Od 9:45 do 11:00 měl server Kocour opět problémy s vyřizováním požadavků, příčinou tentokrát byly administrativní procesy na serveru. Za způsobené potíže se omlouváme.
Od 13:40 do 14:45 byl Kocour mimo provoz, nové jádro bylo nahrazeno starým.
Odstávka poštovního serveru, databázového serveru Kocour a webserveru Kryton
Odstávka poštovního serveru a serveru Kryton byla přesunuta na noc ze 13.1. na 14.1., databázový server Kocour už není potřeba odstavit, změna konfigurace proběhla restartem při výpadku proudu 12.1.
Odstávka se v obou případech protáhla, Kryton byl mimo provoz od 1:05 do 1:44, poštovní server byl mimo provoz zhruba od 2:15 do 3:15.
Výpadek proudu v serverovně
Výpadek databázového serveru Kocour
Výpadek webserveru Abel
Provoz služby byl obnoven před 15:45, problém byl způsoben agresivním přístupem ke službám serveru z jedné konkrétní IP adresy.