Vývoj a dění v síti - Září 2011

1.9.2011 - úderem první minuty a třicáté vteřiny nového měsíce se zbláznila masarka. Ludva už nepracoval, tak si toho ani nevšiml. S podivem data přenášela, ale nefungovaly žádné další služby, především DNS server. Takže lidé, co mají nastavený na počítači jen jeden měli smůlu. Horší bylo, že se na ní nedalo přihlásit ani lokálně, zadání jména (a obecně psaní na klávesnici) fungovalo, ale nic víc. Takže musel po půl deváté ráno nastoupit restart. Ještě že skříně pocházející z windows počítačů mají vůbec resetovací čudlík. Náběh trval hóóódně dlouho - původcem problémů je nejspíš SCSI řadič Adaptec (žádné ořezávátko z mongolska), nejenom že brzdil vypisováním chyb bootovací proces serveru, ale pak ještě nejspíš zablokoval loading modulů (nejspíš ovladač právě toho řadiče). Možná nejhorší na tom je, že se ten řadič vůbec nepoužívá. Monty tedy poslal SMSky s oznámením problému. Za pět vteřin po odeslání se masarka umoudřila a naběhla. Od té doby je zatím v pořádku. Škoda - navzdory ČEZu měla totiž uptime přes 408 dnů.

12.9.2011 - dodělali jsme renovaci přístupového bodu Exner. Vybudován byl nový stožár kvůli likvidaci světelné reklamy, na které to do této doby viselo. Vyměněna elektronika, místo jednoho routříku starajícího se o všechno tam jsou tři. Pod střechou se namontoval rack, kde je veškerá zbylá technologie, už nejsme úplně závislí na špatně přístupné serverovně firmy. Díky tomu také bude v budoucnu tento přístupový bod v podstatě stoprocentně zálohován - z každého půjde jeden páteřní spoj do jiného místa KHnetu (i když ten starý je mizerný i po výměně zařízení na obou stranách). Stará páteř je na Zeuse, nová je přes panelnet umorise na neptuna a nejnovější bude snad brzy Alcoma v pásmu 10GHz přes Skola (Malín). A když už se to dělalo, vznikla i nová sektorová anténa - tedy třetí přístupový bod v pásmu 5GHz namířená nahoru do kopce na domečky. Bohužel tam trochu překáží stromy okolo fotbalového hřiště.

A další várka problémů: aniž by byla bouřka nebo tak něco podobného, opět odešla wifi karta v malešově. Už nevíme jak ji tam ochránit. A večer padly Chlístovice. Opět bez předchozích známek problémů.

Po poledni někdo nebo něco vyhodilo jističe na kostele Sv. Jakuba.

13.9.2011 - masarka chce přivést ludvu do hrobu. A to pomalu a brutálně. Nejenom, že se prvního září zbláznil server jako takový a tedy přes pětset lidí mělo s internetem smůlu, ale dnes pro změnu hlavní switch. On fungoval ... na všech portech ... bohužel kromě toho hlavního - spoje směr Neptun. Takže opět měli všichni smůlu, neboť jakožto záložní spoj už žádnou zálohu nemá. Gigabitový spoj plechac-zeus je totiž už přes měsíc na reklamaci, už druhé za ty dva roky. Tedy závada o to horší, že ovlivnila i vše za plechacem, tedy i Jakub, Baterku, Kaňk, Hlízov, Starý Kolín.

14.9.2011 - přesně ve 13:00 velký výpadek elektřiny v Kutné Hoře. Někde od Sedlece až k vnitřnímu městu, tedy asi dva ze tří přívodů elektřiny do KH. Trval až přibližně do 14:50 (plus pár pokusů o zapnutí dříve). Dle kuloárních zpráv byly nějaké plánované práce na primáru do KH. A dle upřesňujících zpráv někde u Biosky dole. A zjevně se jim něco nepovedlo ... A potvrzuje to i stále trvající výpadek (je 16:34) právě okolo Biosky, kousek Družební ulice. Osobní návštěva opravářů ve výkopu ovšem uvedla vše na pravou míru, jedná se obyčejnou (v KH běžnou) poruchu - výbuch kabelu vysokého napětí pod chodníkem u administrativní budovy Tebisu (je to mimo areál kotelny).

Nejvíc k naštvání je, že v pondělí nám byl dodán další záložní zdroj, který by už měl zajistit výdrž hlavní serverovny zeus kompletně cca na 3 hodiny. Jenže nejenom, že se to ludvovi řeklo až dnes (kdyby nebyl výpadek, tak se to asi nedozví nikdy), ale stejně je jejich montáž naplánovaná na některý víkend. Je to holt k vzteku.

K večeru se zjistilo, že na panelnetu Trebisov2 odešly dva switche ze čtyřech. Takže to ludva s montym okolo deváté večer vyměnili. Potom se jeli zeptat kopáčů, jak dlouho bude ještě blackout. Dost nešťastně prohlásili, že ještě dlouho ... ale kabely už měli vykopané, upravené a zjevně připravené k propojení.

Po desáté večer jsme ještě zjistili, že Exner je nějaký divný. Ale to se dalo čekat, je tam všechno nové, dva dny a kousek namontované (v době blackoutu vlastně necelé dva dny). Důležitější zařízení na střeše, stará se o ap1 a ap3 a především je do něj připojený momentálně využívaný dobrý páteřní spoj, bylo zblázněné, jinak se to vysvětlit nedá. Wifi klienti nebyli vůbec připojení, karta nedokázala nascanovat žádnou síť, jako kdyby byla vypnutá. A na kabelu mezi tímto zařízením a routerem v racku na půdě byly obrovské rozdíly v latencích (0 nebo také 900 ms) a co je ještě horší, byla i ztrátovost. V době hledání tohoto problému se ovšem zařízení samo restartovalo, bez záznamu v logu nebo jakékoliv jiné indicie. Po náběhu už to jede - jak wifi klienti, tak ten kabel do routeru. Ale i tak z toho máme ten divý pocit - software najednou nedokáže ukázat verzi BIOSu. Předtím to uměl.

Po půlnoci ještě ludva řešil problém s IPv6 na marsu. Nějak nám to neroutovalo. Po několika minutách nadávání (neboť server Mars nepadnul) byla pozornost zaměřena na server Zeus. A také že jo - na jednom jediném síťovém rozhranní (a že jich tam pěkných pár kousků je) si usmyslel, že nevytvoří tzv. Link scope IPv6 adresu. A ta je nutné pro správnou funkci dynamického routingu (ospfv3). Ale už mu vůbec nevadilo, že Global adresu nastavil, byť tím pádem úplně k ničemu. A ještě zvláštnější bylo, že to způsobilo úplnou nefunkčnost na marsu - záložní trasa totiž existovala a routovala správně, akorát to bylo prd platné. 

Dodatek: už je 1:00 následujícího dne. Na zmíněných Bios, Bios2, Bios3 a Druzebni2 stále ještě elektřina nejde. Kdežto Tebis byl napraven chvilku po osmé večerní. Update: spuštěno v 1:45.

Upřesnění: slovo BIOS znamená Basic Input Output System - tedy základní programové vybavení počítačů které má na starosti základní konfiguraci a nastavení počítače před předáním práce do Operačního Systému (Windows, Linux, atp). V pojetí zařízení Routerboard je to Firmware. Ale slovo Bios (velké,malé,malé,malé) je označení pro tělocvičnu u železniční trati, patří pod ulici Puškinská. A také tak nazýváme panelnety v té oblasti vzniklé.

Zkratka OS je Operační Systém, nebo také Občanské sdružení, vyberte si dle kontextu

To vše upřesňujeme jen tak pro jistotu, aby nevzniklo nedorozumění

15.9.2011 - byla vyměněna wifi karta ap1.malesov. Neexistuje snad místo v republice, které by žralo ty karty v takové míře, jako Malešov.

16.9.2011 - dodělána renovace přístupového bodu Remeslo. Trochu nám vadilo, že jsme se k našim zařízením nemohli o prázdninách dostat, takže došlo k přesunu na lepší místo. Zároveň jsme vybudovali spoj pro další KHDOŠ projekt - pro občanské sdružení Sršni (přípravka až junioři hokejisti).

19.9.2011 - ihned po ránu opět někdo vyhodil jistič na kostele Sv. Jakuba. A tentokrát nás neminul výstup až nahoru na věž, neboť se pravděpodobně díky tomu porouchal i switch.

To, že opět nejde elektřina v oblasti Onomyšl je už normální. Naštěstí to bylo zjevně plánované.

21.9.2011 - krásné probuzení. Opět výpadek elektřiny v Kutné Hoře. Naštěstí jenom pár minut. Zato ve stejném rozsahu jako naposledy. První ztráty jsou jeden routerboard (ap1+ap2) a UPSka na Kojakovi - nenadává, neřve, ale vydrží asi pět vteřin.

Večer jsme zjistili opět malý problémek s elektřinou. UPSky najednou hlásí cca o 10V nižší vstupní napětí, než odpoledne. Stalo se to někdy okolo šesté hodiny večerní. Na plechaci už jí to ani nestačí, pokles na 213V kompenzuje, naštěstí ještě nejde trvale na baterii. Update: zajímavé - do čtvrt hodiny po nahlášení někdo hnul regulátorem a už je to v pořádku. I na žárovkách to bylo poznat.

A neštěstí nechodí samo, ale ve společnosti jiných. Odešel disk v serveru XenB - tam jsou virtuály např. webu a spousty jiných. Ach jo.