Maanantai, 18.8.2008

Ongelma Nebulan konesalissa katkoi sunnuntaina yhteyksiä ja verkkopalveluita

Internet-operaattori Nebulan Lauttasaaren konesalissa UPS-järjestelmiä syöttävä pääkeskus vaurioitui sunnuntai-iltana noin kello 19. Valmistusvian takia ylikuumentunut pääkytkin suli ja katkaisi yhden vaiheen sähkönsyötön, Nebula kertoo tiedotteessaan. Vika esti sähkönsyötön UPS-järjestelmille ja tämän vuoksi sähkönsyttö katkesi osaan palvelimista akkukapasiteetin loputtua.

Palvelinongelmat koskettivat noin 1500 palvelinta ja 8000 asiakasta. Internetissä konesalin sähkönsyöttöongelma näkyi mm. Telkku.com, Nettiauto.com, City.fi, Uusisuomi.fi ja myös Sektori.com -palvelujen toimimattomuutena. Valtaosa palveluista saatiin toimintaan myöhemmin illalla noin kello 21:45. Nebulan mukaan palvelinkeskuksen sähkönsyöttö on edelleen vajaa ja pääkeskuksen korjaustöitä jatketaan tänään. Korjaustöistä ei pitäisi aiheutua uusia katkoksia asiakkaille.

Lue juttu oma, 18.8.2008 09:12. Lähde: Nebula

Rekisteröidy ja kirjaudu sisään, jos haluat kommentoida.

Kommentit ( 9 uutta / 9 )

pistettä. Näytä vain kommentit joilla on vähintään

	Re: Ongelma Nebulan konesalissa... susi, 22.8.2008 10:55:48	Pisteet: 0

Taitaa Nebulan pomot vihdoin ja viimein kuunnella sitä kahdennetun virransyötön perään mankunutta järjestelmäsuunnittelijaa... ;)

	Re: Ongelma Nebulan konesalissa... lifer, 18.8.2008 10:10:00	Pisteet: 0

"Korjaustöistä ei pitäisi aiheutua uusia katkoksia asiakkaille."

Eipä vastaa kyllä muutama meidän palvelin vieläkään..

	Re: Ongelma Nebulan konesalissa... Akiro, 18.8.2008 10:56:47	Pisteet: 0

"Korjaustöistä ei pitäisi aiheutua uusia katkoksia asiakkaille." Eipä vastaa kyllä muutama meidän palvelin vieläkään..

www.sosiaalisestirajoittuneet.fi is an alias for dedik-236.nebula.fi

Ja alhaalla tuntuu olevan vielä tätä kirjoittaessa, liekö jäänyt pojilta muutama "vähemmän tärkeä" palvelin käynnistämättä katkoksen jälkeen.

	Re: Ongelma Nebulan konesalissa... mtoivo, 18.8.2008 12:11:19	Pisteet: 0

Hallitsemattomien / hallittujen virtakatkosten jälkeen on aina jännä seurata, että nouseeko 500päivää putkeen päällä ollut vanha beigeboxi vielä pystyyn. Voihan aina olla, että kiintolevyn laakerit ovat sen verran kulahtaneet, ettei skulaa. Tietysti hyvä raidi pelastaa monesti, mutta melko usein jostain raid5-levyrikostakin toipuminen kestää hetken, kun puuttuva data lasketaan takas, ja käyttäjän toimia kaivattaisiin siihenkin. Uudet raid-ohjaimet sen toki tekevät lennossakin. Ihan näin ajatuksena, jos osa palvelimista ei kerran vieläkään skulaa.

Itellenikin muuan asiakas soitteli, että olinko sössinyt päivityksessä jotain, kun sivustot eivät näy. Kävi sitten ilmi, että rikkinäiset sivustot olivat vielä nebulan palvelimilla, siirtoa odottelemassa.

	Re: Ongelma Nebulan konesalissa... oma, 18.8.2008 12:55:05	Pisteet: 0

Meillä kävi niin hyvin, että "vanha beigeboksi" aka. Sektori.com nousi vielä 500d rajapyykin ylitettyään ylös, onneksi. Erilaisten hardisongelmien esiintyminen näissä tilanteissa ei tosiaan ole mitään kovin harvinaista.

Hieman huvittuneenakin olen lueskellut eri keskustelupalstoilta viestejä, joissa ihmetellään että (verkko)palvelut ovat vain yhden konesalin varassa. Käytännössä olematon osa Suomen perusverkkopalveluista (pl. pankki, ym. kriittiset palvelut) on kahdennettu, hajautettu maantieteellisesti ydiniskun kestäviin bunkkereihin ja legioonan verran ylläpitäjiä valvoo jatkuvasti palvelinklusterin toimintaa 24/7. Se ei vain ole kustannuksiltaan mahdollista Suomen kotimarkkinoille suunnatuissa palveluissa.

Ja olihan viime viikolla myös Google Apps -palveluissa toimintahäiriöitä, eli ei se pilvilinnoihin perustuva äärihajautettu toimintamallikaan ole haavoittumaton.

Testing

	Re: Ongelma Nebulan konesalissa... bungle, 18.8.2008 13:16:50	Pisteet: 0

Se ei vain ole kustannuksiltaan mahdollista Suomen kotimarkkinoille suunnatuissa palveluissa.

Eilen pimeni kyllä oma Nebulan ADSL yhteyskin tuon takia vaikkei kotini ole lähelläkään Lauttasaarta. Ilmeisesti tuolla oli ainakin Nebulan DNS palvelimia tms. Mahdollisesti reitittimiä Nebulan verkosta ulkomaailmaan? Toki tämä ongelma sattui juuri silloin, kun olin uudelleen konffannut kotini verkkoa ja epäilin aluksi omaa virhettä. Kännykällä pääsin tarkistamaan viketiedotteita, jotka myöskään ne eivät aluksi latautuneet, koska mkl. nämä palvelimet olivat alhaalla.

Noi UPSit on kyl maailmanlopun vehkeitä. Niiden pitäisi juurikin auttaa tällaisissa tilanteissa, mutta kun sekään ei mene aina niin. Eli silloin kun UPSia tarvittaisiin, niin ne hajoavat. Tämä on sattunut myös omalla kohdallani. Eli sähkön mennessä poikki, UPS syttyi palamaan sen sijaan, että olisi tarjonnut varavirtaa ja aikaa palvelimien hallittuun alasajoon. No tähän varmasti auttaisi UPSien säännöllinen testaaminen vetämällä niistä virtoja pois.

--
"See the animal in his cage that you built, are you sure what side you're on?" -- Trent Reznor

	Re: Ongelma Nebulan konesalissa... mtoivo, 18.8.2008 16:23:23	Pisteet: 0

Noi UPSit on kyl maailmanlopun vehkeitä. Niiden pitäisi juurikin auttaa tällaisissa tilanteissa, mutta kun sekään ei mene aina niin. Eli silloin kun UPSia tarvittaisiin, niin ne hajoavat. Tämä on sattunut myös omalla kohdallani. Eli sähkön mennessä poikki, UPS syttyi palamaan sen sijaan, että olisi tarjonnut varavirtaa ja aikaa palvelimien hallittuun alasajoon. No tähän varmasti auttaisi UPSien säännöllinen testaaminen vetämällä niistä virtoja pois.

Juu, ja jos ei syty palamaan niin akut ovat aivan varmasti finaalissa. Akun loppumisestahan ilmoitetaan vasta, kun akku on totaalisen kuollut ja olisi pitänyt vaihtaa aikapäiviä sitten. Ne UPSien testinapit tietysti joskus saattavat jotain vinkkiä, mutta kyllä niinkin on käynyt, että edellisellä viikolla testattu upsi on kyykännyt hyvin pienestä sähkökatkosta. Melkein ainoa vaihtoehto on kunnon palvelin, jossa tietysti on vähintään pari virtalähdettä ja mahdollisuus useampaan syöttöönkin (vielä sillätavoin, että kaikista syötöistä saa jokainen virtalähde sähköä) ja näihin sitten erilliset upsit kiinni. Pidetentää katkon aikanakin kestävyyttä, kun ovat käytännössä rinnan kytkeytyt. Katkottoman sähkönsyötön järjestämisessä on usein kyse vain rahasta, eli siitä, kuinka kahdennettu se sähkönsyöttö todellisuudessa onkaan. Harva hostaaja tarjoaa palvelimen kakkosvirtalähteeseen erillisä sähkönsyöttä, samasta kiskosta ne tulevat...

	Re: Ongelma Nebulan konesalissa... wolvie, 18.8.2008 20:54:19	Pisteet: +1

Hieman huvittuneenakin olen lueskellut eri keskustelupalstoilta viestejä, joissa ihmetellään että (verkko)palvelut ovat vain yhden konesalin varassa. Käytännössä olematon osa Suomen perusverkkopalveluista (pl. pankki, ym. kriittiset palvelut) on kahdennettu, hajautettu maantieteellisesti ydiniskun kestäviin bunkkereihin ja legioonan verran ylläpitäjiä valvoo jatkuvasti palvelinklusterin toimintaa 24/7. Se ei vain ole kustannuksiltaan mahdollista Suomen kotimarkkinoille suunnatuissa palveluissa.

Itse olen ollut jonkun kerran kuuntelemassa kuinka asiakas päivittelee konesalin kahdennuksen puuttumista. Joka kerta kerroin että meiltä löytyy yhteistyökumppani jonka konesaliin kahdennukset voidaan sijoittaa. Kertaakaan asiakas ei ole ollut halukas maksamaan tuosta kahdennuksesta.

Kaikkien mielestä olisi ehdottoman tärkeätä kahdentaa kaikki mutta kukaan ei siitä haluaisi maksaa joten kaikki palvelutalot yrittävät etsiä kultaista keskitietä. Yleisin toteutus on kahdentaa kaikki mahdollinen yhden laitetilan sisällä.

	Re: Ongelma Nebulan konesalissa... mtoivo, 18.8.2008 13:08:18	Pisteet: 0

Meillä kävi niin hyvin, että "vanha beigeboksi" aka. Sektori.com nousi vielä 500d rajapyykin ylitettyään ylös, onneksi.

Heh. Kysäisepä immotilta, että kuinka sen popkorni on jaksanu pyöriä vanhoilla romuilla vuodesta toiseen ;)

Ongelma Nebulan konesalissa katkoi sunnuntaina yhteyksiä ja verkkopalveluita

Rite Ventures sijoittaa Nebulaan

TeliaSoneralle ennätysmäärä IP-osoitteita

Radionetin teknologiaa Tukholman keskusrautatieasemalle

Kymmenen nettitaksia aloittaa Helsingissä

NTT Docomo tuo i-moden Eurooppaan