Sivustolla ongelmia 28.6.2018 iltayöstä

Ylläpidon tiedoituksia ja höpötystä sivustoa koskien
Avatar
haksu10
Viestit: 3071
Liittynyt: Ke 20.12.2006 19:22
Paikkakunta: Karkku (Sastamala)
Viesti:

Sivustolla ongelmia 28.6.2018 iltayöstä

Viesti Kirjoittaja haksu10 » Pe 29.06.2018 1:40

Tässä tarkempi (teknisempi) selvitys ongelmista 28.6.2018.

Geocache.fi -sivustolla oli pahoja ongelmia alkaen kello 22:40 jälkeen ja jatkuen noin tunnin ajan. Sivusto saattoi ilmoittaa sulkeutuneensa ylikuorman vuoksi, kertoa tietokantaongelmista, esittää vain tyhjän sivun taikka sivusto ei vastannut ollenkaan. Keskustelualue oli ajoittain myös kadoksissa.

Ongelmien monimuotoisuus johtui taustalla tapahtuneesta rankasta taistelusta, missä yritin saada palvelimet hallintaan samalla selvittäen, mitä ihmettä tapahtuu. Kun sivuston avasi oli vain vajaa puoli minuuttia aikaa tehdä selvitystä ennen kuin palvelimet alkoivat kaatumaan. Yhdessä vaiheessa toisella tietokantapalvelimella havaitsemani jumittava kyselyrypäs oli jälkikäteen tarkasteltuna homman avain, vaikka sillä hetkellä ei asialla tuntunut olevan merkitystä kaaoksen keskellä. Kiitokset taas salaperäiselle Mr. Jussille joka auttoi selvittämään tilannetta ja sulki pois vääriä ajatuksiani mitä on tapahtumassa.

Nyt tilanne on normalisoitunut ja muistona tapahtuneesta on enää kätkötietosivun lokeista puuttuvat linkit käyttäjien geocaching.com -profiileihin. Nämäkin on tarkoitus palauttaa kunhan saan seuraavan version kätkötietosivusta suunniteltua ja kehitettyä. Nykyinen alkaa selkeästi yskimään koska Suomen kätköihin loggauksia tehneitä kätköilijöitä on jo vallan mahdottomat määrät ja lokeja alkaa joissakin kätköissä olemaan jo melkoisesti.

Mainitsen että aina on pieni mahdollisuus sille, että nyt ongelman syyksi todettu sivuosuus olisikin seuraus eikä varsinainen syy. Toki tietokannassa jumittaneet lausekkeet sekä kaikki lataustilastot osoittavat kätkötietosivuun mutta silti jää pieni epäilys: miksi yllättäen ja niin niin voimakkaana ongelma ilmaantui? Saattaa olla, että tämä on vain odottanut tapahtumistaan ja nyt kätköilijänimimerkkien määrä, samaan hetkeen osuneet megaa varten kätköjä katselevien käyttäjien pyynnöt ja jotkut muut sattumanvaraiset asiat saivat palvelimien syöksykierteen aikaan.

Pahoittelut etten ongelmavaiheessa mihinkään sosiaaliseen mediaan ehtinyt pistää viestiä, mitä on tapahtumassa. Tilanteessa oli vain pakko pyrkiä selvittämään mitä tehdä ja kerätä samalla mahdollisimman paljon tietoa www- ja tietokantapalvelimilta jotta on jotain, mistä voi yrittää päätellä tapahtumien kulkua eikä vain todeta "oho, no toivottavasti ei toistu". Nyt viimein pääsi hengähtämään ja tiedotetta rustaamaan.

Kaikesta selvityksestä huolimatta kaiken varalta sanon "oho, no toivottavasti ei toistu" koska ikinä ei tiedä, mitä tuotokseni tekevät... :roll:

Avatar
Pretty.Killswitch
Viestit: 425
Liittynyt: Ti 29.05.2012 10:01
Paikkakunta: Savo

Re: Sivustolla ongelmia 28.6.2018 iltayöstä

Viesti Kirjoittaja Pretty.Killswitch » Pe 29.06.2018 2:47

En osaa sanoa näkyykö kaikki tapaukset siellä päässä, mutta ainakin tällä viikolla on ollut satunnaisia yskähtelyitä jonkin verran muitakin. Kaikista ei ole tullut kelloa katsottua, mutta ainakin Jun 26, 2018 9:51 PM (gc.comin aikaleimalla) on melko varma tapaus. Tuliketulla ei saanut sivustoon yhteyttä ehkä noin kymmeneen minuuttiin, ja IsItDown sanoi myös, että "It is not just you. The server is not responding..."
X

Avatar
haksu10
Viestit: 3071
Liittynyt: Ke 20.12.2006 19:22
Paikkakunta: Karkku (Sastamala)
Viesti:

Re: Sivustolla ongelmia 28.6.2018 iltayöstä

Viesti Kirjoittaja haksu10 » Pe 29.06.2018 21:33

Pretty.Killswitch kirjoitti:En osaa sanoa näkyykö kaikki tapaukset siellä päässä, mutta ainakin tällä viikolla on ollut satunnaisia yskähtelyitä jonkin verran muitakin. Kaikista ei ole tullut kelloa katsottua, mutta ainakin Jun 26, 2018 9:51 PM (gc.comin aikaleimalla) on melko varma tapaus. Tuliketulla ei saanut sivustoon yhteyttä ehkä noin kymmeneen minuuttiin, ja IsItDown sanoi myös, että "It is not just you. The server is not responding..."
Kiitos huomiosta!

Tässä on pää sekaisin kaiken säädettävän ja muiden syiden vuoksi joten enää ei kaikkea tajua saati muista. Hämärä mielikuva oli että kerran tällä viikolla täytyi välipotku antaa palvelimelle eli toviksi tipauttaa se verkosta kuorman vähentämiseksi. Tovin mietinnän jälkeen alkoi asiat muistumaan mieleen.

Tutkin vielä valvontatietoja ja kyllä vaan, 26.6 on www-palvelin yskinyt melkoisesti eli 21:24, 21:39, 21:45 ja 21:59 on kirjattu hälytys liikakuormituksesta. Palvelin ei ole tuolloin ole lähtenyt liikaa keulimaan vaan omatoimisesti hoitanut itseään kuntoon mun ollessa iltapalalla. Kun sitten huomasin että jotain outoa tapahtuu aloin potkimaan palvelinta, mutta julkaisuvaiheen ollessa käynnissä oletin että kuormaongelma johtuu apin suuremmasta takkuisuudesta (julkaisut aina nostavat muutenkin kuormitusta).

Tämän päivän sivuston suorituskyky- ja tilastodataa katsellessa näyttää siltä, että eilinen vika-analyysi oli aivan oikea. Niinpä tarkastelin tilannetta tuon kätkötietosivun osalta pidemmällä aikavälillä ja ensimmäinen merkki satunnaisesta ongelmallisuudesta löytyi 22.5. Sen jälkeen satunnaisia ongelmia on ollut kiihtyvällä tahdilla ja viimeisen viikon sisällä on sitten enemmäkin viitteitä ongelmista. Jälkikäteen näitä on niin helppo havaita kun tietää, mitä etsiä :)

Mutta ehkäpä nyt ongelmat ovat kokonaan poissa...
7.7.2018 jälkeen kirjoittamani viestit olen kirjoittanut yksityishenkilönä ja kätköilijänä "haksu10", en sivustoon liittyvänä taikka sen ylläpitäjänä.
Kyseistä päivämäärää edeltävät viestit voivat olla sivustoon liittyviä ylläpidollisiakin viestejä.

Vastaa Viestiin

Palaa sivulle “Ylläpidon tiedotteet”