Re: Geocache.fi suurremontti 2019
Lähetetty: La 04.05.2019 22:18
Sama ongelma kuin mikkopitilla. Lisätilastoissa ja ihan perustilastoissakin häikkää kuntien osalta. Tänään aamulla oli vielä normitilanne.
Geocache.fi
Suomalainen geokätköilysivusto
http://geocaching.fi/keskustelu/
Geocache.fi suurremontti 2019
Sivu 7/18
Re: Geocache.fi suurremontti 2019
Lähetetty: La 04.05.2019 23:33
Huomasin juuri saman, jakaumassa näkyvät löytämättömien lisäksi vain omat kätköni, mutta ei löytöjäni tai denareitani.
Re: Geocache.fi suurremontti 2019
Lähetetty: La 04.05.2019 23:38
Viime päivinä myös tuntuu etusivun päivityksessä olleen poikkeavaa viivettä - tuoreet kätköt näkyvät korostettuina eli loggaamattomina vaikka ekasta loggauksesta olisi useita tunteja. Aikaisemmin löytö-status on päivittynyt ripeästi, onkohan yhteydessä tuohon tilasto-ongelmaan?
Re: Geocache.fi suurremontti 2019
Lähetetty: Su 05.05.2019 0:10
Pahoittelut ongelmista löydettyjen suhteen. Tilanne (toivottavasti) korjaantumassa mutta hitaammin kuin toivoisin. En kuitenkaan viitsi enää pistää lisää tehoa koska jos yrittää liian nopeasti päivittää kaikkia käyttäjiä ajan tasalle on lopputulos se, että hommat menee pahemmin solmuun ja käyttäjiltä katoaa kaikki tieto löydetyistä...
// haksu10 & haksu10clone1, haksu10clone2
Tähän liittyen löytyi jokin ajatuspieru jo 9.4. tehtynä. Tässä on meno ollut sellaista matalalentoa (ja jatkuu yhä vaan) että järjellä ei välillä ole mitään tekemistä hommien suhteen. Muutama klooni lisää täytyisi vielä tehdä itsestään että ehtisi ajatellakin...Zergei kirjoitti: ↑La 04.05.2019 23:38Viime päivinä myös tuntuu etusivun päivityksessä olleen poikkeavaa viivettä - tuoreet kätköt näkyvät korostettuina eli loggaamattomina vaikka ekasta loggauksesta olisi useita tunteja. Aikaisemmin löytö-status on päivittynyt ripeästi, onkohan yhteydessä tuohon tilasto-ongelmaan?
// haksu10 & haksu10clone1, haksu10clone2
Re: Geocache.fi suurremontti 2019
Lähetetty: Su 05.05.2019 0:21
Kloonisota on kääntynyt voitoksi, etusivu näyttää nyt järkevältä ja vilkaisemani kuntasivustotkin olivat odotetunlaisia. 
Re: Geocache.fi suurremontti 2019
Lähetetty: Ma 06.05.2019 20:57
Suosikit sivu epäkunnossa(nimimerkit sensuroitu). Ongelma oli jo eilen illalla.
Koodi: Valitse kaikki
select * from geocachelogdataUTF where hidden='0' and LOWER(user) in('nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','fifixi','nimimerkki','nimimerkki','nimimerkki','nimimerkki') and unix_timestamp(date) > unix_timestamp(now()) - 86400*14 order by LOWER(user),logid descRe: Geocache.fi suurremontti 2019
Lähetetty: Ma 06.05.2019 21:36
Ei ole todellista... mitä täällä tapahtuu? Nyt kuitenkin fiksattu ja kiitos ilmoituksesta!fifixi kirjoitti: ↑Ma 06.05.2019 20:57Suosikit sivu epäkunnossa(nimimerkit sensuroitu). Ongelma oli jo eilen illalla.
Koodi: Valitse kaikki
select * from geocachelogdataUTF where hidden='0' and LOWER(user) in('nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','nimimerkki','fifixi','nimimerkki','nimimerkki','nimimerkki','nimimerkki') and unix_timestamp(date) > unix_timestamp(now()) - 86400*14 order by LOWER(user),logid desc
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Ti 07.05.2019 14:24
Vielä palaan tähän löytömäärätilaston hankalahkoon ongelmaan, joka ei aivan ratkennut tehdyillä toimilla. Parhaiten asia selvinnee, kun tekee esimerkiksi haungeocache.fi kirjoitti: ↑Ti 23.04.2019 16:39Huonot uutiset: Kaikki 22 miljoonaa loggausta sisältävä taulu on liian suuri muokattavaksiv v a m team kirjoitti: ↑Ti 23.04.2019 11:55Vielä löytyy anomalioita: tilastosivulle https://www.geocache.fi/players/finlogs.php on jossain välissä ilmaantunut uusia, kovan kirivaihteen päälle laittaneita nimimerkkejä. Ensimmäinen tällainen löytyy noin listan sijalta 36. nimimerkilla "koppana", sen sijaan tutumpi nimimerkki "köppänä" lie hävinnyt jonnekin muualle kätköilemään? Kovaa kisaa keskinäisestä paremmuudesta käyvät sijoilla 165. ja 166. (mahdollisesti sisarukset?) "Nörppis" ja "Norppis", joista toki heistäkin vain Norppiksella on geocaching.com:in mukaan noille sijaluvuille oikeuttava määrä löytöjä. Vastaavasti sijoilla 463.-464 löytyvät sekä "Rakettiryhmä" että "Rakettiryhma", heilläkin kuitenkin melkoinen ero geocaching.com:in mukaan. Vastaavia saattaisi löytyä paljon muitakin jos jatkaisi tilaston läpikäymistä, nämä nyt löytyivät vain ensimmäistä tilaston välilehteä vilkaistessa.
Eikä tämä toki mikään tärkeysjärjestykseltään kiireinen korjattava liene, kunhan huomasin moisen.
Huonommat uutiset: Kaikki 22 miljoonaa loggausta sisältävän taulun käyttäjänimen merkistö on väärä
Huonoimmat uutiset: haksu10 alkaa olemaan uponnut merkistömereen
Ongelmia ei varsinaisesti pitänyt olla mutta datamäärä ja tilastointijärjestelmä on niin laaja, että mahdollista on että jossain homma meni pieleen. Toinen vaihtoehto on että ongelman perustana olikin vain vanhaa dataa jota ei ole muunnettu uuteen formaattiin. Mutta en pystynyt sanomaan mikä on todellista ja mikä yksisarvisten loikkien aiheuttamia sateenkaaria.
---
Toistaiseksi voi siis tilastoissa tapahtua mitä hyvänsä enkä pysty vannomaan, että vieläkään kaikki menee kohdalleen. Nyt kuitenkin on runko viimein tältä osin kunnossa ja ehkäpä tästä pääsemme vielä tanssimaan keijujen kanssa kukkaiskedolle!
// haksu10
https://www.geocache.fi/players/finlogs ... ku=#result
Järjestyksessä listalta tässä sorttauksessa löytyy seuraavanlaisia tapauksia, esimerkkien avulla:
1. Matisons! 152 1 1 1 1 3 1 0 0 0 0 0 0 0 0 12888 160 13193
- ok, ulkomainen käyttäjä, jolla suurin osa selvittämättömiä ulkomaanlöytöjä
2. Nörppis 20 0 0 0 0 0 0 0 0 0 0 0 0 0 0 10560 20 10580
- fault, kotimainen käyttäjä, jolla todellisuudessa vain 20 löytöä, peri jossain kohtaa myös "Norppis":in löydöt, jotka nyt näkyvät selvittämättöminä ja on laskettu mukaan kokonaislöytömäärään
4. Rakettiryhma 183 5 0 0 0 0 2 0 0 0 0 0 0 0 0 6159 190 183
- ok/fault kotimainen käyttäjä, jolla todellisuudessa vain 183 löytöä, on perinyt jossain kohtaa myös "Rakettiryhmä":n löydöt, jotka nyt näkyvät selvittämättöminä mutta joita ei ole laskettu mukaan kokonaislöytömäärään
17. kaisakali 8383 150 13 146 185 141 88 20 16 16 0 0 0 0 0 2305 9158 10937
- ok, kotimainen käyttäjä, jostain syystä suuri määrä selvittämättömiä ulkomaanlöytöjä
Ei todellakaan ole mikään maailmaa mullistava juttu, mutta aiheuttaa pientä vääristymää tilastoon muuten täydellisessä maailmassa
niiden, ehkä muutamien kymmenien tai sadan nimimerkin osalta, joilla on ollut skandillinen tai skanditon "kaima" ja jotka jossain siirrossa ovat saaneet liki-kaimansa löydöt ansiotta omien löytöjensä jatkoksi. Tämän takia ei kenenkään kannata yöuniaan menettää. Näinkin tilasto lienee arviolta 99,95% tarkkuudella oikein. 
Re: Geocache.fi suurremontti 2019
Lähetetty: Ti 07.05.2019 15:34
Tilastot: Onkohan labit nyt pudonneet pois (aiemmin mukana) seuraavien tilastokuvien kokonaismääristä: "Perustilasto", "Tilastofaktaa" ja "Suomen ranking kuva"? Oli vielä eilen ok. 
Re: Geocache.fi suurremontti 2019
Lähetetty: Ti 07.05.2019 15:47
Kiitos tarkennuksista ja esimerkeistä, millä sain tutkittua vikalukemia!v v a m team kirjoitti: ↑Ti 07.05.2019 14:24Vielä palaan tähän löytömäärätilaston hankalahkoon ongelmaan, joka ei aivan ratkennut tehdyillä toimilla. Parhaiten asia selvinnee, kun tekee esimerkiksi haungeocache.fi kirjoitti: ↑Ti 23.04.2019 16:39Huonot uutiset: Kaikki 22 miljoonaa loggausta sisältävä taulu on liian suuri muokattavaksiv v a m team kirjoitti: ↑Ti 23.04.2019 11:55Vielä löytyy anomalioita: tilastosivulle https://www.geocache.fi/players/finlogs.php on jossain välissä ilmaantunut uusia, kovan kirivaihteen päälle laittaneita nimimerkkejä. Ensimmäinen tällainen löytyy noin listan sijalta 36. nimimerkilla "koppana", sen sijaan tutumpi nimimerkki "köppänä" lie hävinnyt jonnekin muualle kätköilemään? Kovaa kisaa keskinäisestä paremmuudesta käyvät sijoilla 165. ja 166. (mahdollisesti sisarukset?) "Nörppis" ja "Norppis", joista toki heistäkin vain Norppiksella on geocaching.com:in mukaan noille sijaluvuille oikeuttava määrä löytöjä. Vastaavasti sijoilla 463.-464 löytyvät sekä "Rakettiryhmä" että "Rakettiryhma", heilläkin kuitenkin melkoinen ero geocaching.com:in mukaan. Vastaavia saattaisi löytyä paljon muitakin jos jatkaisi tilaston läpikäymistä, nämä nyt löytyivät vain ensimmäistä tilaston välilehteä vilkaistessa.
Eikä tämä toki mikään tärkeysjärjestykseltään kiireinen korjattava liene, kunhan huomasin moisen.
Huonommat uutiset: Kaikki 22 miljoonaa loggausta sisältävän taulun käyttäjänimen merkistö on väärä
Huonoimmat uutiset: haksu10 alkaa olemaan uponnut merkistömereen
Ongelmia ei varsinaisesti pitänyt olla mutta datamäärä ja tilastointijärjestelmä on niin laaja, että mahdollista on että jossain homma meni pieleen. Toinen vaihtoehto on että ongelman perustana olikin vain vanhaa dataa jota ei ole muunnettu uuteen formaattiin. Mutta en pystynyt sanomaan mikä on todellista ja mikä yksisarvisten loikkien aiheuttamia sateenkaaria.
---
Toistaiseksi voi siis tilastoissa tapahtua mitä hyvänsä enkä pysty vannomaan, että vieläkään kaikki menee kohdalleen. Nyt kuitenkin on runko viimein tältä osin kunnossa ja ehkäpä tästä pääsemme vielä tanssimaan keijujen kanssa kukkaiskedolle!
// haksu10
https://www.geocache.fi/players/finlogs ... ku=#result
Järjestyksessä listalta tässä sorttauksessa löytyy seuraavanlaisia tapauksia, esimerkkien avulla:
1. Matisons! 152 1 1 1 1 3 1 0 0 0 0 0 0 0 0 12888 160 13193
- ok, ulkomainen käyttäjä, jolla suurin osa selvittämättömiä ulkomaanlöytöjä
2. Nörppis 20 0 0 0 0 0 0 0 0 0 0 0 0 0 0 10560 20 10580
- fault, kotimainen käyttäjä, jolla todellisuudessa vain 20 löytöä, peri jossain kohtaa myös "Norppis":in löydöt, jotka nyt näkyvät selvittämättöminä ja on laskettu mukaan kokonaislöytömäärään
4. Rakettiryhma 183 5 0 0 0 0 2 0 0 0 0 0 0 0 0 6159 190 183
- ok/fault kotimainen käyttäjä, jolla todellisuudessa vain 183 löytöä, on perinyt jossain kohtaa myös "Rakettiryhmä":n löydöt, jotka nyt näkyvät selvittämättöminä mutta joita ei ole laskettu mukaan kokonaislöytömäärään
17. kaisakali 8383 150 13 146 185 141 88 20 16 16 0 0 0 0 0 2305 9158 10937
- ok, kotimainen käyttäjä, jostain syystä suuri määrä selvittämättömiä ulkomaanlöytöjä
Ei todellakaan ole mikään maailmaa mullistava juttu, mutta aiheuttaa pientä vääristymää tilastoon muuten täydellisessä maailmassa
Tein lisätietokantakomennon millä komensin viralliset löytömäärät samoiksi kuin laskennalliset löytömäärät, tämä korjasi määriä. Tein myös pahimpien muiden virheiden käsin puukotuksen kantaan, mutta ainakin pienempiä virheitä on vielä paljon. Ei kuitenkaan ole järkeä käsipelin säätää laajemmin tietoja kun siihen on olemassa ihan automaattinen systeemi.
Samoin pistin pois käytöstä suojauksen, joka api -ongelmissa estää käyttäjän löytömäärän laskua. Tämä estää ongelmien jatkumista/toistumista koska tilastoihin ei jää maksimilukema mutta altistaa tilastot virheille jos Geocaching.com:n api -dataliitynnässä on ongelmia. Mutta eihän siinä koksaan vikaa le ole vikaa koskaanvikaa levikaakos kaa.
Nyt vain pitää odotella rauhassa arviolta 1-2 viikkoa, jotta tilastojärjestelmä saa itse laskettua kaikki käyttäjät. Tätä en enää kokeile kiirehtiä koska sen virheen traagisin seurauksin viikonloppuna tein.
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Ti 07.05.2019 16:47
kävin kahtomassa sitä ja siin näki heti, että on kyllä jotakin muutosta. inkin minun mielestäni fontti on parempaa ja terävämpää. mitä vanhalle sivulle käy?
Re: Geocache.fi suurremontti 2019
Lähetetty: Ti 07.05.2019 22:01
Todennäköisesti kun käsin piti säätää, yön aikana pitäisi korjaantua kun geocaching.com -tarkastukset tapahtuvat. Jos vielä huomenna on ongelma niin pistähän viesti asiasta niin koitan ehtiä setviä (nyt täytyy uuden apin kimppuun päästä toiveena, että ehkä vielä kesäkuussakin geocache.fi päivittyisi... aika näyttää miten käy...)Forestress kirjoitti: ↑Ti 07.05.2019 15:34Tilastot: Onkohan labit nyt pudonneet pois (aiemmin mukana) seuraavien tilastokuvien kokonaismääristä: "Perustilasto", "Tilastofaktaa" ja "Suomen ranking kuva"? Oli vielä eilen ok.
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Ke 08.05.2019 11:59
Labit puuttuvat edelleen tilastoista...
Kiitos, kun jaksat säätää näitä!
Kiitos, kun jaksat säätää näitä!
Re: Geocache.fi suurremontti 2019
Lähetetty: Ke 08.05.2019 16:44
Kiitos huomiosta!
Näköjään eilinen suojauksen poisto aiheutti sen, että määrät pääsivät laskemaan ns. todellisten löytöjen tasolle eli lab cachet (joita muuten uusikaan geocaching.com:n api -dataliityntä ei tunne) eivät pysyneet mukana.
Tein nyt hommat eri lailla ja rakentelin tuon suojauksen erillisenä härpäkkeenä. Se osannee nyt pistää numerot oikein, ainakin jos lupa käyttäjätietojen käyttöön on voimassa.
Toki mikään ei ole varmaa ja vielä virheellisten tietojen korjauslaskennat ovat käynnissä suurelta osalta käyttäjiä joten täydellisesti ei suojausta voi käyttäkään. Mutta en tosin edes tiedä, miten paljon tästä vanhasta toteutustavasta edes jää jäljelle jos uuden api -dataliitynnän saa säädettyä käyttöön, voi poistua näitä erinäisiä härpäkkeitä.
Kiitos kiitoksesta!
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Ke 08.05.2019 17:44
Nyt taas näyttäisi pelittävän! Kiitos, haksu!geocache.fi kirjoitti: ↑Ke 08.05.2019 16:44Tein nyt hommat eri lailla ja rakentelin tuon suojauksen erillisenä härpäkkeenä. Se osannee nyt pistää numerot oikein, ainakin jos lupa käyttäjätietojen käyttöön on voimassa.
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Ke 08.05.2019 18:46
Geocaching.com:n uuden api -dataliitynnän käyttöönoton virittely on työn alla.
Testailua varten on kuitenkin tarve saada "Lupia käyttäjätietojen käyttöön" myös uuden apin puolelta, ja tässä siis tarvitaan käyttäjien apua.
Ensiksi maininta: nykyisen normaalin luvan käyttäjätietojen käyttöön voi antaa edelleen, siinä ei ole muutoksia.
Mutta ÄLÄ anna allaolevan ohjeen mukaan lupaa uuden apin käytöön mikäli käytät uutta apia itse, eli kätköilet esimerkiksi kännykällä taikka käytät jotain ohjelmaa (GSAK tms.) joka lataa uuden apin kautta dataa. Tämä siitä syystä että vahvistamattoman tiedon mukaan käyttäjän sallittu kokonaislatausmäärä laskettaisiin yhteen kaikista laitteista eikä rajat olisi enää laite-/ohjelma-/sivustokohtaisia.
Niinpä Geocache.fi:n testit voivat kuluttaa limiitin niin ettet voisi kätköillä kännyllä tms. Tosin hyvin pienissä määrin latauksia nyt tapahtuu mutta silti riski on olemassa.
Jos kuitenkaan et tarvitse uuden apin latausmääriä niin siirry osoitteeseen https://www.geocache.fi/api/ ja anna lupa samaan tapaan kuin nykyisin käytössä olevassa systeemissäkin (tuo geocaching.com:n osuus on hämäävästi täysin saman näköinen). Paluu Geocache.fi:n sivuille on karu mutta tässä ei vielä ole ehtinyt hienostella
Kiitos huomiostasi!
// haksu10
Testailua varten on kuitenkin tarve saada "Lupia käyttäjätietojen käyttöön" myös uuden apin puolelta, ja tässä siis tarvitaan käyttäjien apua.
Ensiksi maininta: nykyisen normaalin luvan käyttäjätietojen käyttöön voi antaa edelleen, siinä ei ole muutoksia.
Mutta ÄLÄ anna allaolevan ohjeen mukaan lupaa uuden apin käytöön mikäli käytät uutta apia itse, eli kätköilet esimerkiksi kännykällä taikka käytät jotain ohjelmaa (GSAK tms.) joka lataa uuden apin kautta dataa. Tämä siitä syystä että vahvistamattoman tiedon mukaan käyttäjän sallittu kokonaislatausmäärä laskettaisiin yhteen kaikista laitteista eikä rajat olisi enää laite-/ohjelma-/sivustokohtaisia.
Niinpä Geocache.fi:n testit voivat kuluttaa limiitin niin ettet voisi kätköillä kännyllä tms. Tosin hyvin pienissä määrin latauksia nyt tapahtuu mutta silti riski on olemassa.
Jos kuitenkaan et tarvitse uuden apin latausmääriä niin siirry osoitteeseen https://www.geocache.fi/api/ ja anna lupa samaan tapaan kuin nykyisin käytössä olevassa systeemissäkin (tuo geocaching.com:n osuus on hämäävästi täysin saman näköinen). Paluu Geocache.fi:n sivuille on karu mutta tässä ei vielä ole ehtinyt hienostella
Kiitos huomiostasi!
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: Pe 10.05.2019 23:40
Ei pitäisi ikinä luottaa epämääräisiin lähteisiin... tämä ei pitänyt paikkaansa (ja omat testinikin vahvisti asian).geocache.fi kirjoitti: ↑Ke 08.05.2019 18:46vahvistamattoman tiedon mukaan käyttäjän sallittu kokonaislatausmäärä laskettaisiin yhteen kaikista laitteista eikä rajat olisi enää laite-/ohjelma-/sivustokohtaisia.
Joten nyt kaikki halukkaat voivat antaa luvan myös uuden Geocaching.com api -dataliitynnän osalta jo nyt tästä linkistä.
Osana uuden apin käyttöönottoa tulee lähiaikoina (kuitenkin viimeistään kesäkuun alussa) tuo "Lupa käyttäjätietojen käyttöön" olemaan pakollinen ja tapahtuu tämän em. uuden linkin kautta (koitan kehitellä tuolle luvalle paremman nimityksen). Tämä siitä syystä että Geocache.fi:ssä tulee käyttöön tulee uuden apin käyttäjäkohtaiset rajoitukset kätköjen lataus/näyttömäärille.
Koska varmasti moni kysyisi mitkä rajoitukset ovat niin käytännössä premiumkäyttäjille voidaan näyttää maksimissaan 16.000 uniikin kätkön tiedot. Tämä tarkoittaa sitä että saman kätkön tiedot voi katsoa monta kertaa / se voi tulla karttahaussa yms. moneen kertaan eikä se vähennä jäljellä olevien kätkönäyttöjen määrää.
Tässä tulee paljon muutoksia ja mahdollisesti ei-premiumien palveluitakin saa parannettua. Mutta mitään aikatauluja taikka suunnitelmia taikka vastauksia kysymyksiin en juuri tällä hetkellä pysty antamaan. Täällä on sivuston takana vain yksi äreä ukko joka juuri on vähän sinnepäin saanut sivuston uudelle palvelimelle pystyyn. Saman tien sitten joutui hyppämään tähän kaiken täydellisesti muuttavan uuden Geocaching.com api -dataliitynnän säätöön.
Voimat on jo loppu mutta menen siis raivolla eteenpäin...
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: La 11.05.2019 9:19
Etusivun paikan vaihtolinkit oikealla ylhäällä eivät toimi oletetusti. Klikkaus aiheuttaa paikan vaihtumisen mutta sivu jää latautumatta. Paluu edelliselle lataa sivun uudessa sijainnissa.
Re: Geocache.fi suurremontti 2019
Lähetetty: La 11.05.2019 14:06
Yhden pienen ajatusvirheen tähän liittyen fiksasin mutten usko että se tätä olisi korjannut.
Mutta tarkennatko (koska millään en saa toistettua mitään epänormaalia) että mitä "sivu jää latautumatta" tarkalleen merkitsee, eli latautuuko pelkkä tyhjä sivu tms?
// haksu10
Re: Geocache.fi suurremontti 2019
Lähetetty: La 11.05.2019 17:55
Käytössä Firefox 66 ja sijainnin vaihdossa tulee vain tyhjäsivu. Näköjään missä vain sivulla ollessa kun on nuo valinnat esillä.geocache.fi kirjoitti: ↑La 11.05.2019 14:06Mutta tarkennatko (koska millään en saa toistettua mitään epänormaalia) että mitä "sivu jää latautumatta" tarkalleen merkitsee, eli latautuuko pelkkä tyhjä sivu tms?
// haksu10
Ja kun kurkkasin lähdekoodiin niin ei tullut yhtään merkkiä.