Dedi alhaalla (taas)

[weatherc]

Menee vaan mielenkiintoisemmaksi tämä touhu.
Nyt se pysyy hengissä 3-4 tuntia kerralla, 3 kerta jo tänään menossa...

[systeemi]

Niin en osaa sanoa, mutta voisihan tässä jokainen hieman tarkistaa mikä voisi aiheuttaa. Itselläni oli tuolla auringossa sivut jonkin aikaa ja ongelmia ei ollut. Yksi koodi heittää erroria vuorokauden alussa, kun laskurille ei vielä ole dataa. Mutta sekään ei koskaan kaatanut palvelinta tai sivua.

Voisiko FTP-yhteyksien lukumäärässä olla syy?

[weatherc]

Normi errori php:ssä ei kaada palvelinta. Silloinhan vain kyseinen skripti failaa ja loppuu siihen, just tyyliin jos joku päivämäärää uppuu tai jotain.

FTP:t ovat yksi joka käynyt mielessä myös. Kun riittävästi yhteyksiä niin ainakin vanhalla dedillä ne oli innokkaasti esillä I/O-topissa. Nytten on disk-troughtput siinä 10 MB/s korvilla joten matalalla sekin. Toisaalta ovat max FTP-yhteyttä per IP rajoitettu joten mikään IP ei pääse sillä lailla lyömään sitä jumiinkaan ja FTP:t ovat koko ajan top:in alapäässä.

Yks idea mitä kohta teen on että pysäytän kaikki omat/sivujen cronit. Kun ollut 24h pystyssä niin palautan ne yks sivusto kerrallas 24h väliajoin (sekä omat osissa). Se ainakin kertoisi että onko joku croni syypää.

Btw. cpanelista pystyy asentamaan 11.36:sen jos haluaa, centos 6.2:sta ei.

[systeemi]

Yks idea mitä kohta teen on että pysäytän kaikki omat/sivujen cronit. Kun ollut 24h pystyssä niin palautan ne yks sivusto kerrallas 24h väliajoin (sekä omat osissa). Se ainakin kertoisi että onko joku croni syypää.

Btw. cpanelista pystyy asentamaan 11.36:sen jos haluaa, centos 6.2:sta ei.

Pysäytin omat cronit. Pakkohan tässä on alkaa kokeilemaan kaikki mahdollinen.

[systeemi]

Lainattu eräältä foorumilta. Voi niitä palvelimen kaatumiseen olla moniakin syitä.

Asiakas valitteli kun järjestelmämme palvelin kaatuu aina öisin joskus neljän aikoihin. Ongelmaa selvitettiin ensin ohjelmistopuolella mahdollisimman pitkälle muutaman viikon sessioiden ajan. Eikä ongelmaan tuntunut pääsevän mitenkään käsiksi. Alkoi tuntumaan että itse koneessa ei ole mitään vikaa ja vaikka kone oli vaihdettu toiseen samanlaiseen joka oli asennettu alusta asti uudelleen ei mitään ongelmia löytynyt. Lopuksi koneen virtakaapelin väliin kytkettiin laite joka mittaa jännitettä ja virrankulutusta ympäri vuorokauden ja loggaa tiedot flashille.

Edelleen kone kaatui. Sitten kun aloimme purkamaan dataa tallentimesta havaitsimme mielenkiintoisen ilmiön. Logista puuttui kaikki tiedot noin 7 minuutin ajalta. Kuitenkin samassa virransyötössä olleet muut palvelimet olivat pysyneet pystyssä.

Tilanne ei ottanut selvitäkseen. Päädyimme tulokseen, että mä haluan olla koneen vieressä ja nähdä kun se sammuu. Ei siinä muu sitten auttanut kun ottaa pari termaria kahvia välipalaa ja läppäri ja istua ikävässä humisevassa serverihuoneessa.

Olin juuri nukahtamassa kun huoneen ovi aukeaa. Unen tokkurassa ihmettelin että mitäh? Kuka tänne nyt. Siivooja lapsin sisään. Koska tiloissa ei ollut vapaita töpseleitä otti siivooja lähinnä ovea olevan pistokkeen pois ja kytki pölynimurin siihen... Ei s**tanan s**tana! Hyvä etten tappanut siivoojaa juuri siihen paikkaan...

No se juttu tuli selvitetyksi. En kyllä ymmärrä miksi helvetissä siivoojalla pitää olla palvelintiloihin avaimet. Pitäisi tätä olennaisena tietoturvariskinä. Toisaalta onhan se mukavaa ettei pölyt pyöri nurkissa. Toivottavasti avaa kotelot ja imuroi sisäpuoleltakin.

[weatherc]

Pysäytin omat cronit. Pakkohan tässä on alkaa kokeilemaan kaikki mahdollinen.

Totta.
Mä en pysäyttänyt mutta sekä EWN:än että BO-tiilien cronit hidastin 4 minuuttiin. Nyt ainut nopeampi croni on serverstatus-croni.

Koska homma toimis oikein hyvin kunnes about 3 viikkoa sitten tapahtui jotain niin mielestäni tuossa piilenee sypää kunhan sen vaan löytää.
Eli joku muutos jota tehty sinä ajankohtana sen aiheuttanee.

Se *voi* olla cpanel-päivitys, nyt en tiedä milloin se on päivittynyt nykyiseen 11.38-vesioon.
Se voi myös yhtä hyvin olla joku tutka-skripti (FMI,BO), niin shell- kuin php-skripti.
NSD:tä en silleen epäile koska se on toiminut aikasemminkin.
En myöskään yleisesti ottaen epäile kartta-häkkyröitä koska nekin ovat toimineet aikasemmin, joskin se voi olla joku yksittäinen niistä kylläkin. Karttatiili-häkkyrät tosin ovat rajoitettu 2 coreen 8:sta mahdollisesta ja tiilet menevät RAM:iin eikä GFS:ä/YR:ä tehdä dedillä tällä hetkellä.

En ole ainakaan vielä myöskään löytänyt mitään yhdistävää tekijää kaatumisten ajankohdissa, ovat olleet vuorokauden joka puoellla.

[weatherc]

4:s kerta tänään kun painellaan reset-namiskaa....

[weatherc]

Ja 5:s kerta...

Nyt täytyy kyllä ruvet tekee jotain radikaalia asialle...Siis aamulla...

[weatherc]

Ei perkele, 6:s kerta...

[systeemi]

Sellainen ajatus tuli mieleen että tässähän oli nyt se SSD-kovo. Ainakin itsellä oli sen kanssa aluksi paljonkin ongelmaa juuri kaatulin vuoksi. Miten ne tuolla palvelin talon päässä seuraavat raudan toimintaa?