Geocache.fi suurremontti 2019

[mnmat]

Sama ongelma kuin mikkopitilla. Lisätilastoissa ja ihan perustilastoissakin häikkää kuntien osalta. Tänään aamulla oli vielä normitilanne.

[Zergei]

Huomasin juuri saman, jakaumassa näkyvät löytämättömien lisäksi vain omat kätköni, mutta ei löytöjäni tai denareitani.

[Zergei]

Viime päivinä myös tuntuu etusivun päivityksessä olleen poikkeavaa viivettä - tuoreet kätköt näkyvät korostettuina eli loggaamattomina vaikka ekasta loggauksesta olisi useita tunteja. Aikaisemmin löytö-status on päivittynyt ripeästi, onkohan yhteydessä tuohon tilasto-ongelmaan?

[geocache.fi]

Pahoittelut ongelmista löydettyjen suhteen. Tilanne (toivottavasti) korjaantumassa mutta hitaammin kuin toivoisin. En kuitenkaan viitsi enää pistää lisää tehoa koska jos yrittää liian nopeasti päivittää kaikkia käyttäjiä ajan tasalle on lopputulos se, että hommat menee pahemmin solmuun ja käyttäjiltä katoaa kaikki tieto löydetyistä...

Viime päivinä myös tuntuu etusivun päivityksessä olleen poikkeavaa viivettä - tuoreet kätköt näkyvät korostettuina eli loggaamattomina vaikka ekasta loggauksesta olisi useita tunteja. Aikaisemmin löytö-status on päivittynyt ripeästi, onkohan yhteydessä tuohon tilasto-ongelmaan?

Tähän liittyen löytyi jokin ajatuspieru jo 9.4. tehtynä. Tässä on meno ollut sellaista matalalentoa (ja jatkuu yhä vaan) että järjellä ei välillä ole mitään tekemistä hommien suhteen. Muutama klooni lisää täytyisi vielä tehdä itsestään että ehtisi ajatellakin...


// haksu10 & haksu10clone1, haksu10clone2

[Zergei]

Kloonisota on kääntynyt voitoksi, etusivu näyttää nyt järkevältä ja vilkaisemani kuntasivustotkin olivat odotetunlaisia.

[fifixi]

Suosikit sivu epäkunnossa(nimimerkit sensuroitu). Ongelma oli jo eilen illalla.

Koodi: Valitse kaikki

select * from geocachelogdataUTF where hidden='0' and LOWER(user) in('nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','fifixi','nimimerkki','nimimerkki','nimimerkki','nimimerkki') and unix_timestamp(date) > unix_timestamp(now()) - 86400*14 order by LOWER(user),logid desc

[geocache.fi]

Suosikit sivu epäkunnossa(nimimerkit sensuroitu). Ongelma oli jo eilen illalla.

Koodi: Valitse kaikki

select * from geocachelogdataUTF where hidden='0' and LOWER(user) in('nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','fifixi','nimimerkki','nimimerkki','nimimerkki','nimimerkki') and unix_timestamp(date) > unix_timestamp(now()) - 86400*14 order by LOWER(user),logid desc

Ei ole todellista... mitä täällä tapahtuu? Nyt kuitenkin fiksattu ja kiitos ilmoituksesta!

// haksu10

[v v a m team]

Vielä löytyy anomalioita: tilastosivulle https://www.geocache.fi/players/finlogs.php on jossain välissä ilmaantunut uusia, kovan kirivaihteen päälle laittaneita nimimerkkejä. Ensimmäinen tällainen löytyy noin listan sijalta 36. nimimerkilla "koppana", sen sijaan tutumpi nimimerkki "köppänä" lie hävinnyt jonnekin muualle kätköilemään? Kovaa kisaa keskinäisestä paremmuudesta käyvät sijoilla 165. ja 166. (mahdollisesti sisarukset?) "Nörppis" ja "Norppis", joista toki heistäkin vain Norppiksella on geocaching.com:in mukaan noille sijaluvuille oikeuttava määrä löytöjä. Vastaavasti sijoilla 463.-464 löytyvät sekä "Rakettiryhmä" että "Rakettiryhma", heilläkin kuitenkin melkoinen ero geocaching.com:in mukaan. Vastaavia saattaisi löytyä paljon muitakin jos jatkaisi tilaston läpikäymistä, nämä nyt löytyivät vain ensimmäistä tilaston välilehteä vilkaistessa.

Eikä tämä toki mikään tärkeysjärjestykseltään kiireinen korjattava liene, kunhan huomasin moisen.

Huonot uutiset: Kaikki 22 miljoonaa loggausta sisältävä taulu on liian suuri muokattavaksi
Huonommat uutiset: Kaikki 22 miljoonaa loggausta sisältävän taulun käyttäjänimen merkistö on väärä
Huonoimmat uutiset: haksu10 alkaa olemaan uponnut merkistömereen

Ongelmia ei varsinaisesti pitänyt olla mutta datamäärä ja tilastointijärjestelmä on niin laaja, että mahdollista on että jossain homma meni pieleen. Toinen vaihtoehto on että ongelman perustana olikin vain vanhaa dataa jota ei ole muunnettu uuteen formaattiin. Mutta en pystynyt sanomaan mikä on todellista ja mikä yksisarvisten loikkien aiheuttamia sateenkaaria.
---

Toistaiseksi voi siis tilastoissa tapahtua mitä hyvänsä enkä pysty vannomaan, että vieläkään kaikki menee kohdalleen. Nyt kuitenkin on runko viimein tältä osin kunnossa ja ehkäpä tästä pääsemme vielä tanssimaan keijujen kanssa kukkaiskedolle!

// haksu10

Vielä palaan tähän löytömäärätilaston hankalahkoon ongelmaan, joka ei aivan ratkennut tehdyillä toimilla. Parhaiten asia selvinnee, kun tekee esimerkiksi haun
https://www.geocache.fi/players/finlogs ... ku=#result

Järjestyksessä listalta tässä sorttauksessa löytyy seuraavanlaisia tapauksia, esimerkkien avulla:
1. Matisons! 152 1 1 1 1 3 1 0 0 0 0 0 0 0 0 12888 160 13193
- ok, ulkomainen käyttäjä, jolla suurin osa selvittämättömiä ulkomaanlöytöjä
2. Nörppis 20 0 0 0 0 0 0 0 0 0 0 0 0 0 0 10560 20 10580
- fault, kotimainen käyttäjä, jolla todellisuudessa vain 20 löytöä, peri jossain kohtaa myös "Norppis":in löydöt, jotka nyt näkyvät selvittämättöminä ja on laskettu mukaan kokonaislöytömäärään
4. Rakettiryhma 183 5 0 0 0 0 2 0 0 0 0 0 0 0 0 6159 190 183
- ok/fault kotimainen käyttäjä, jolla todellisuudessa vain 183 löytöä, on perinyt jossain kohtaa myös "Rakettiryhmä":n löydöt, jotka nyt näkyvät selvittämättöminä mutta joita ei ole laskettu mukaan kokonaislöytömäärään
17. kaisakali 8383 150 13 146 185 141 88 20 16 16 0 0 0 0 0 2305 9158 10937
- ok, kotimainen käyttäjä, jostain syystä suuri määrä selvittämättömiä ulkomaanlöytöjä

Ei todellakaan ole mikään maailmaa mullistava juttu, mutta aiheuttaa pientä vääristymää tilastoon muuten täydellisessä maailmassa niiden, ehkä muutamien kymmenien tai sadan nimimerkin osalta, joilla on ollut skandillinen tai skanditon "kaima" ja jotka jossain siirrossa ovat saaneet liki-kaimansa löydöt ansiotta omien löytöjensä jatkoksi. Tämän takia ei kenenkään kannata yöuniaan menettää. Näinkin tilasto lienee arviolta 99,95% tarkkuudella oikein.

[Forestress]

Tilastot: Onkohan labit nyt pudonneet pois (aiemmin mukana) seuraavien tilastokuvien kokonaismääristä: "Perustilasto", "Tilastofaktaa" ja "Suomen ranking kuva"? Oli vielä eilen ok.

[geocache.fi]

Vielä löytyy anomalioita: tilastosivulle https://www.geocache.fi/players/finlogs.php on jossain välissä ilmaantunut uusia, kovan kirivaihteen päälle laittaneita nimimerkkejä. Ensimmäinen tällainen löytyy noin listan sijalta 36. nimimerkilla "koppana", sen sijaan tutumpi nimimerkki "köppänä" lie hävinnyt jonnekin muualle kätköilemään? Kovaa kisaa keskinäisestä paremmuudesta käyvät sijoilla 165. ja 166. (mahdollisesti sisarukset?) "Nörppis" ja "Norppis", joista toki heistäkin vain Norppiksella on geocaching.com:in mukaan noille sijaluvuille oikeuttava määrä löytöjä. Vastaavasti sijoilla 463.-464 löytyvät sekä "Rakettiryhmä" että "Rakettiryhma", heilläkin kuitenkin melkoinen ero geocaching.com:in mukaan. Vastaavia saattaisi löytyä paljon muitakin jos jatkaisi tilaston läpikäymistä, nämä nyt löytyivät vain ensimmäistä tilaston välilehteä vilkaistessa.

Eikä tämä toki mikään tärkeysjärjestykseltään kiireinen korjattava liene, kunhan huomasin moisen.

Huonot uutiset: Kaikki 22 miljoonaa loggausta sisältävä taulu on liian suuri muokattavaksi
Huonommat uutiset: Kaikki 22 miljoonaa loggausta sisältävän taulun käyttäjänimen merkistö on väärä
Huonoimmat uutiset: haksu10 alkaa olemaan uponnut merkistömereen

Ongelmia ei varsinaisesti pitänyt olla mutta datamäärä ja tilastointijärjestelmä on niin laaja, että mahdollista on että jossain homma meni pieleen. Toinen vaihtoehto on että ongelman perustana olikin vain vanhaa dataa jota ei ole muunnettu uuteen formaattiin. Mutta en pystynyt sanomaan mikä on todellista ja mikä yksisarvisten loikkien aiheuttamia sateenkaaria.
---

Toistaiseksi voi siis tilastoissa tapahtua mitä hyvänsä enkä pysty vannomaan, että vieläkään kaikki menee kohdalleen. Nyt kuitenkin on runko viimein tältä osin kunnossa ja ehkäpä tästä pääsemme vielä tanssimaan keijujen kanssa kukkaiskedolle!

// haksu10

Vielä palaan tähän löytömäärätilaston hankalahkoon ongelmaan, joka ei aivan ratkennut tehdyillä toimilla. Parhaiten asia selvinnee, kun tekee esimerkiksi haun
https://www.geocache.fi/players/finlogs ... ku=#result

Järjestyksessä listalta tässä sorttauksessa löytyy seuraavanlaisia tapauksia, esimerkkien avulla:
1. Matisons! 152 1 1 1 1 3 1 0 0 0 0 0 0 0 0 12888 160 13193
- ok, ulkomainen käyttäjä, jolla suurin osa selvittämättömiä ulkomaanlöytöjä
2. Nörppis 20 0 0 0 0 0 0 0 0 0 0 0 0 0 0 10560 20 10580
- fault, kotimainen käyttäjä, jolla todellisuudessa vain 20 löytöä, peri jossain kohtaa myös "Norppis":in löydöt, jotka nyt näkyvät selvittämättöminä ja on laskettu mukaan kokonaislöytömäärään
4. Rakettiryhma 183 5 0 0 0 0 2 0 0 0 0 0 0 0 0 6159 190 183
- ok/fault kotimainen käyttäjä, jolla todellisuudessa vain 183 löytöä, on perinyt jossain kohtaa myös "Rakettiryhmä":n löydöt, jotka nyt näkyvät selvittämättöminä mutta joita ei ole laskettu mukaan kokonaislöytömäärään
17. kaisakali 8383 150 13 146 185 141 88 20 16 16 0 0 0 0 0 2305 9158 10937
- ok, kotimainen käyttäjä, jostain syystä suuri määrä selvittämättömiä ulkomaanlöytöjä

Ei todellakaan ole mikään maailmaa mullistava juttu, mutta aiheuttaa pientä vääristymää tilastoon muuten täydellisessä maailmassa niiden, ehkä muutamien kymmenien tai sadan nimimerkin osalta, joilla on ollut skandillinen tai skanditon "kaima" ja jotka jossain siirrossa ovat saaneet liki-kaimansa löydöt ansiotta omien löytöjensä jatkoksi. Tämän takia ei kenenkään kannata yöuniaan menettää. Näinkin tilasto lienee arviolta 99,95% tarkkuudella oikein.

Kiitos tarkennuksista ja esimerkeistä, millä sain tutkittua vikalukemia!

Tein lisätietokantakomennon millä komensin viralliset löytömäärät samoiksi kuin laskennalliset löytömäärät, tämä korjasi määriä. Tein myös pahimpien muiden virheiden käsin puukotuksen kantaan, mutta ainakin pienempiä virheitä on vielä paljon. Ei kuitenkaan ole järkeä käsipelin säätää laajemmin tietoja kun siihen on olemassa ihan automaattinen systeemi.

Samoin pistin pois käytöstä suojauksen, joka api -ongelmissa estää käyttäjän löytömäärän laskua. Tämä estää ongelmien jatkumista/toistumista koska tilastoihin ei jää maksimilukema mutta altistaa tilastot virheille jos Geocaching.com:n api -dataliitynnässä on ongelmia. Mutta eihän siinä koksaan vikaa le ole vikaa koskaanvikaa levikaakos kaa.

Nyt vain pitää odotella rauhassa arviolta 1-2 viikkoa, jotta tilastojärjestelmä saa itse laskettua kaikki käyttäjät. Tätä en enää kokeile kiirehtiä koska sen virheen traagisin seurauksin viikonloppuna tein.

// haksu10

[PeliMies4]

kävin kahtomassa sitä ja siin näki heti, että on kyllä jotakin muutosta. inkin minun mielestäni fontti on parempaa ja terävämpää. mitä vanhalle sivulle käy?

[geocache.fi]

Tilastot: Onkohan labit nyt pudonneet pois (aiemmin mukana) seuraavien tilastokuvien kokonaismääristä: "Perustilasto", "Tilastofaktaa" ja "Suomen ranking kuva"? Oli vielä eilen ok.

Todennäköisesti kun käsin piti säätää, yön aikana pitäisi korjaantua kun geocaching.com -tarkastukset tapahtuvat. Jos vielä huomenna on ongelma niin pistähän viesti asiasta niin koitan ehtiä setviä (nyt täytyy uuden apin kimppuun päästä toiveena, että ehkä vielä kesäkuussakin geocache.fi päivittyisi... aika näyttää miten käy...)

// haksu10

[mnmat]

Labit puuttuvat edelleen tilastoista...

Kiitos, kun jaksat säätää näitä!

[geocache.fi]

Labit puuttuvat edelleen tilastoista...

Kiitos, kun jaksat säätää näitä!

Kiitos huomiosta!

Näköjään eilinen suojauksen poisto aiheutti sen, että määrät pääsivät laskemaan ns. todellisten löytöjen tasolle eli lab cachet (joita muuten uusikaan geocaching.com:n api -dataliityntä ei tunne) eivät pysyneet mukana.

Tein nyt hommat eri lailla ja rakentelin tuon suojauksen erillisenä härpäkkeenä. Se osannee nyt pistää numerot oikein, ainakin jos lupa käyttäjätietojen käyttöön on voimassa.

Toki mikään ei ole varmaa ja vielä virheellisten tietojen korjauslaskennat ovat käynnissä suurelta osalta käyttäjiä joten täydellisesti ei suojausta voi käyttäkään. Mutta en tosin edes tiedä, miten paljon tästä vanhasta toteutustavasta edes jää jäljelle jos uuden api -dataliitynnän saa säädettyä käyttöön, voi poistua näitä erinäisiä härpäkkeitä.

Kiitos kiitoksesta!

// haksu10

[Forestress]

Labit puuttuvat edelleen tilastoista...

Tein nyt hommat eri lailla ja rakentelin tuon suojauksen erillisenä härpäkkeenä. Se osannee nyt pistää numerot oikein, ainakin jos lupa käyttäjätietojen käyttöön on voimassa.

// haksu10

Nyt taas näyttäisi pelittävän! Kiitos, haksu!

[geocache.fi]

Geocaching.com:n uuden api -dataliitynnän käyttöönoton virittely on työn alla.

Testailua varten on kuitenkin tarve saada "Lupia käyttäjätietojen käyttöön" myös uuden apin puolelta, ja tässä siis tarvitaan käyttäjien apua.

Ensiksi maininta: nykyisen normaalin luvan käyttäjätietojen käyttöön voi antaa edelleen, siinä ei ole muutoksia.

Mutta ÄLÄ anna allaolevan ohjeen mukaan lupaa uuden apin käytöön mikäli käytät uutta apia itse, eli kätköilet esimerkiksi kännykällä taikka käytät jotain ohjelmaa (GSAK tms.) joka lataa uuden apin kautta dataa. Tämä siitä syystä että vahvistamattoman tiedon mukaan käyttäjän sallittu kokonaislatausmäärä laskettaisiin yhteen kaikista laitteista eikä rajat olisi enää laite-/ohjelma-/sivustokohtaisia.

Niinpä Geocache.fi:n testit voivat kuluttaa limiitin niin ettet voisi kätköillä kännyllä tms. Tosin hyvin pienissä määrin latauksia nyt tapahtuu mutta silti riski on olemassa.

Jos kuitenkaan et tarvitse uuden apin latausmääriä niin siirry osoitteeseen https://www.geocache.fi/api/ ja anna lupa samaan tapaan kuin nykyisin käytössä olevassa systeemissäkin (tuo geocaching.com:n osuus on hämäävästi täysin saman näköinen). Paluu Geocache.fi:n sivuille on karu mutta tässä ei vielä ole ehtinyt hienostella

Kiitos huomiostasi!

// haksu10

[geocache.fi]

vahvistamattoman tiedon mukaan käyttäjän sallittu kokonaislatausmäärä laskettaisiin yhteen kaikista laitteista eikä rajat olisi enää laite-/ohjelma-/sivustokohtaisia.

Ei pitäisi ikinä luottaa epämääräisiin lähteisiin... tämä ei pitänyt paikkaansa (ja omat testinikin vahvisti asian).

Joten nyt kaikki halukkaat voivat antaa luvan myös uuden Geocaching.com api -dataliitynnän osalta jo nyt tästä linkistä.

Osana uuden apin käyttöönottoa tulee lähiaikoina (kuitenkin viimeistään kesäkuun alussa) tuo "Lupa käyttäjätietojen käyttöön" olemaan pakollinen ja tapahtuu tämän em. uuden linkin kautta (koitan kehitellä tuolle luvalle paremman nimityksen). Tämä siitä syystä että Geocache.fi:ssä tulee käyttöön tulee uuden apin käyttäjäkohtaiset rajoitukset kätköjen lataus/näyttömäärille.

Koska varmasti moni kysyisi mitkä rajoitukset ovat niin käytännössä premiumkäyttäjille voidaan näyttää maksimissaan 16.000 uniikin kätkön tiedot. Tämä tarkoittaa sitä että saman kätkön tiedot voi katsoa monta kertaa / se voi tulla karttahaussa yms. moneen kertaan eikä se vähennä jäljellä olevien kätkönäyttöjen määrää.

Tässä tulee paljon muutoksia ja mahdollisesti ei-premiumien palveluitakin saa parannettua. Mutta mitään aikatauluja taikka suunnitelmia taikka vastauksia kysymyksiin en juuri tällä hetkellä pysty antamaan. Täällä on sivuston takana vain yksi äreä ukko joka juuri on vähän sinnepäin saanut sivuston uudelle palvelimelle pystyyn. Saman tien sitten joutui hyppämään tähän kaiken täydellisesti muuttavan uuden Geocaching.com api -dataliitynnän säätöön.

Voimat on jo loppu mutta menen siis raivolla eteenpäin...

// haksu10

[jmiettin]

Etusivun paikan vaihtolinkit oikealla ylhäällä eivät toimi oletetusti. Klikkaus aiheuttaa paikan vaihtumisen mutta sivu jää latautumatta. Paluu edelliselle lataa sivun uudessa sijainnissa.

[geocache.fi]

Etusivun paikan vaihtolinkit oikealla ylhäällä eivät toimi oletetusti. Klikkaus aiheuttaa paikan vaihtumisen mutta sivu jää latautumatta. Paluu edelliselle lataa sivun uudessa sijainnissa.

Yhden pienen ajatusvirheen tähän liittyen fiksasin mutten usko että se tätä olisi korjannut.

Mutta tarkennatko (koska millään en saa toistettua mitään epänormaalia) että mitä "sivu jää latautumatta" tarkalleen merkitsee, eli latautuuko pelkkä tyhjä sivu tms?

// haksu10

[jmiettin]

Etusivun paikan vaihtolinkit oikealla ylhäällä eivät toimi oletetusti. Klikkaus aiheuttaa paikan vaihtumisen mutta sivu jää latautumatta. Paluu edelliselle lataa sivun uudessa sijainnissa.

Mutta tarkennatko (koska millään en saa toistettua mitään epänormaalia) että mitä "sivu jää latautumatta" tarkalleen merkitsee, eli latautuuko pelkkä tyhjä sivu tms?

// haksu10

Käytössä Firefox 66 ja sijainnin vaihdossa tulee vain tyhjäsivu. Näköjään missä vain sivulla ollessa kun on nuo valinnat esillä.
Ja kun kurkkasin lähdekoodiin niin ei tullut yhtään merkkiä.