Käyttökatkos 27.8.2018

Ylläpidon tiedoituksia ja höpötystä sivustoa koskien
Avatar
geocache.fi
Geocache.fi
Geocache.fi
Viestit: 760
Liittynyt: To 27.09.2012 23:47

Käyttökatkos 27.8.2018

Viesti Kirjoittaja geocache.fi » Ti 28.08.2018 1:43

Kuten moni ehkä huomasikin, Geocache.fi oli nurin 27.8.2018 n. klo 16:00 - 23:30 palvelinongelman vuoksi. Tässä lisätietoa asiasta (pistin sulkeisiin vähemmän teknisiä selityksiä asioihin).

Toinen tietokantapalvelin katosi yllättäen verkosta. Syyksi paljastui RAID -levyohjaimen DIMM:n ECC -virhe (eli palvelimen levyjä ohjaavassa härpäkkeessä tapahtui muistivirhe vähän kansantajuisemmin). Palvelin pakotettiin käyntiin mutta tietokanta oli vaurioitunut yllättävässä sammumisessa.

Tietokannasta löytyi viottunut taulu joka poistettiin. Tästä huolimatta tietokanta ei käynnistynyt vaikka virheitä en enää tietokannasta löytynyt uusissa tarkastuksissa. Koska tietokantaa ei millään keinolla saanut normaalisti käyntiin oli ainoa vaihtoehto rakentaa koko tietokanta uusiksi dumpista (tietokannan koko sisällön sisältävä tiedosto).

Tämä tietokantapalvelin on se, joka sisältää kaiken kätködatan. Koska esimerkiksi kätkölokeja on yli 20 miljoonaa on tietokanta suuri ja raskas. Siksi virhetarkastuksissa menee kymmeniä minuutteja ja tietokannan uudelleenrakentaminen ottaa tunteja. Niinpä katkos venähti todella pitkäksi.

Nyt kaikki on taas kunnossa eikä dataa kadonnut. Tällä hetkellä kuitenkaan ei ole tiedossa, oliko kyseessä vain satunnainen bittisolmu vai toistuuko ongelma. Selvittelemme palvelimen tilannetta päivänvalolla.

Mietimme myös mahdollisuuksia saada sivuston palvelinpuoli varmemmaksi. Vaikka käytössä onkin kolme palvelinta niin niissä ei riitä tehot siihen, että voisi rakentaa järjestelmän missä viottuneen palvelimen tehtävät pystyisi kaksi jäljelläolevaa hoitamaan. Niinpä tavalla tai toisella täytyy saada lisäkapasiteettia kuvioihin. Mutta katsotaan mitä keksimme kunhan tässä toivumme tämänkertaisesta yllätyksestä ;)

Pahoittelut katkoksesta!

// haksu10
Kattava ohje tilasto-ongelmien ratkaisemiseen
Kaikki ohjeet * Yhteydenotot (Yhteydenotot vain ko. sivun ohjeistuksen mukaan)

Maikkari
Viestit: 38
Liittynyt: Pe 20.03.2015 17:15

Re: Käyttökatkos 27.8.2018

Viesti Kirjoittaja Maikkari » Ti 28.08.2018 9:07

"Pikkuvikoja, helppo korjata", tuumailtiin Katsastus -elokuvassa. (Ja ilmeisesti Skiftesvikin kirjassakin, jota en ole lukenut. Häpeillen tunnustan.)

Ylläpidon tiedotteen luettuani (ja myös sulkeissa olevat) arvostus ylläpidon toimintaan pysyy yhä tapissaan. Tekisi mieleni sanoa Spinal Tap -elokuvan kitaravahvistimen säätöä mukaillen: "Sivuston ylläpidon arvostus on mulla ykkösestä kymppiin asteikolla ykstoista."

Kunnioittaen kiittäen, erittäin tyytyväinen sivuston aktiivikäyttäjä

Maikkari
Turbo -jäsen (pikkurahoja, helppo tukea)

Avatar
tsahkali
Viestit: 328
Liittynyt: Ti 04.11.2014 11:06

Re: Käyttökatkos 27.8.2018

Viesti Kirjoittaja tsahkali » Ti 28.08.2018 12:17

Kaikella kunnioituksella....
Kun sivut kaatuivat, tuli virheilmoitus ja teksti, että Naamakirjassa on lisätietoja.
Voisiko sen puolensivun 'Kirjaudu/liity' lätkän muuttaa postimerkin kokoiseksi, jotta se ei haittaisi lukemista?

Avatar
Forestress
Viestit: 174
Liittynyt: La 17.09.2011 12:20

Re: Käyttökatkos 27.8.2018

Viesti Kirjoittaja Forestress » Ti 28.08.2018 13:12

Sydän jätti pari lyöntiä väliin, kun sivusto ei auennut eilen ja luin kannan rikkoontumisesta. Melkein ei pystynyt nukkumaankaan, kun mietti, että mitähän akrobatiatemppuja se Haksu taas siellä saa suorittaakaan. Mutta jonkun voltin se on taas heittänyt, ja tänä aamuna sivu aukeaa taas nätisti. On se hurja!
:D
--- Forestress - Forest is my Fortress ---

WileE.Coyote
Viestit: 18
Liittynyt: Ke 20.07.2016 13:15

Re: Käyttökatkos 27.8.2018

Viesti Kirjoittaja WileE.Coyote » Ti 28.08.2018 14:52

tsahkali kirjoitti:Kaikella kunnioituksella....
Kun sivut kaatuivat, tuli virheilmoitus ja teksti, että Naamakirjassa on lisätietoja.
Voisiko sen puolensivun 'Kirjaudu/liity' lätkän muuttaa postimerkin kokoiseksi, jotta se ei haittaisi lukemista?
Se on Naamakirjan yleinen ominaisuus, ei Geocache.fin sivun.

Ihan rauhassa, Haksu, ei hätää. Eikös se ole tietotekniikan ensimmäinen sääntö, että ei se jos joku hajoaa vaan kun se hajoaa... Siksi on varmuuskopiot, jotka ovat varmasti kunnossa.

Onwards and upwards.

Avatar
tsahkali
Viestit: 328
Liittynyt: Ti 04.11.2014 11:06

Re: Käyttökatkos 27.8.2018

Viesti Kirjoittaja tsahkali » La 01.09.2018 10:14

WileE.Coyote kirjoitti:
tsahkali kirjoitti:Kaikella kunnioituksella....
Kun sivut kaatuivat, tuli virheilmoitus ja teksti, että Naamakirjassa on lisätietoja.
Voisiko sen puolensivun 'Kirjaudu/liity' lätkän muuttaa postimerkin kokoiseksi, jotta se ei haittaisi lukemista?
Se on Naamakirjan yleinen ominaisuus, ei Geocache.fin sivun.
Sen lapun kokoa voi säätää.
Kun se on kohtuu kokoinen ja aloillaan, voi sivua selata.
Liitteet
naamakirja.jpg
naamakirja.jpg (46.54 KiB) Katsottu 7241 kertaa

Vastaa Viestiin

Palaa sivulle “Ylläpidon tiedotteet”