  |
Za poslednú hodinu: 89 meraní | ||||
|
inzercia |
|||||
 
neprihlásený 
| Štvrtok, 21. novembra 2024, dnes má meniny Elvíra |
|
Dlhé výpadky veľkého webhostingu spôsobil zrejme problematický procesor Atom C2000
Slovensko
Spoločnosť to avizovala v detailnom vysvetlení príčin výpadku pre DSL.sk. Ako sme informovali v tomto článku, pred dvomi týždňami v pondelok 7. novembra približne o 17. hodine začal veľký výpadok služieb Webglobe - Yegon. Webglobe - Yegon je druhým najväčším registrátorom slovenských .sk domén a zrejme tak aj druhým najväčším webhostingom, nefungovalo tak množstvo slovenských webov. Podľa stanoviska spoločnosti bola väčšina služieb sfunkčnená do 18:30, niektoré weby a služby nefungovali ani pred 20. hodinou a podľa stanoviska sa niektoré VPS servery podarilo spoločnosti stabilizovať až pred 22. hodinou. Následne v sobotu tohto istého týždňa sa výpadok zopakoval, začal v sobotu neskoro večer a vyriešenie problémov spoločnosť avizovala až v nedeľu ráno. Spoločnosť pre DSL.sk pomerne detailne vysvetlila výpadok aj predpokladanú príčinu. V jednom z dátových centier využívaných spoločnosťou v Bratislave vypadol v pondelok 7. novembra jeden z dvojice core prepínačov, cez ktoré je zabezpečovaná konektivita celej infraštruktúry spoločnosti v tomto dátovom centre. Spoločnosť má redundantné riešenie a pri výpadku jedného core prepínača by nemalo prísť k problémom. Prepínač podľa stanoviska ale prešiel do stavu, v ktorom bez ohľadu na konfiguráciu routoval dátovú prevádzku do všetkých sietí a spôsobil podobný problém ako broadcast storm. Problém samotného prepínača sa odstránil jeho reštartom. Spoločnosť ale využíva rozličné klastrové riešenia pre zabezpečenie vysokej dostupnosti vrátane distribuovaného súborového systému Ceph a virtualizačných platforiem VMware a Proxmox, medzi uzlami ktorých počas problémov nefungovala komunikácia. Následne tak prebiehala synchronizácia klastrových riešení obmedzená rýchlosťou diskov, čo spôsobilo výrazné predĺženie výpadkov. Dáta zákazníkov neboli podľa spoločnosti nijako ohrozené, nevznikli nijaké nekonzistencie a neprišlo k strate dát. Spoločnosť po prvom výpadku ale nezistila príčinu problémov core prepínača. "Po prvom výpadku sme vzhľadom na veľmi neštandardnú situáciu zapojili do riešenia aj externého dodávateľa špecializujúceho sa na sieťovu infraštruktúru. Po audite konfigurácie sme nenašli žiadnu príčinu, ktorá by nasvedčovala podobnému správaniu. Nasadili sme dodatočné logovanie a sledovanie aktivity," uviedol pre DSL.sk Matúš Kosa, CTO spoločnosti. V sobotu prišlo k výpadku ale opäť, tentokrát s rovnakými prejavmi vypadol druhý core prepínač. V čase výpadku mal podobný uptime ako prvý core prepínač v čase jeho výpadku. "Po ďalšom výpadku v sobotu a analýze logov sa dá tento problém s najväčšou pravdepodobnosťou prisúdiť CPU použitým v týchto zariadeniach Intel Atom z radu C2000, pri ktorých sa môže vyskytovať istá degradácia časom," uviedol Kosa. Spoločnosť to ale nevie na 100% potvrdiť, podľa svojho stanoviska ale vylúčila všetky ostatné možnosti. Problémy so špecializovanými procesormi Intel Atom C2000 pre servery a rozličné sieťové a úložné systémy sú dlhodobo známe, v minulosti na ne upozorňovali Intel aj napríklad výrobcovia rozličných sieťových zariadení. Kvôli degradácii môže prísť k problémom s časovacím signálom v rozhraní LPC, Low Pin Count, a to môže podľa upozornení z predchádzajúcich rokov viesť k nenabootovaniu systému alebo vypnutiu sa procesora. Podľa informácií dodávateľa pre Webglobe - Yegon existujú ale aj prípady, kedy prepínače s týmto CPU rovnako ako v prípade týchto výpadkov prestali routovať a posielali dátovú prevádzku do všetkých VLAN. Spoločnosť preto pristúpila k výmene týchto core prepínačov. Spoločnosť mala následne problémy aj minulý týždeň. Tieto boli už ale spôsobené inou príčinou, intenzívnymi DDoS útokmi. 
Najnovšie články: Diskusia:
Pridať komentár | ||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
| ||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
