Muutoksia Geocache.fi -palvelussa

[haksu10]

Sivustolla on menossa suursiivous, jossa pyrkimyksenä on tehostaa toimintaa entisestään. Tämänhetkisiä muutoksia ovat seuraavat:

Lokiseuranta

Sanahaku on toistaiseksi poissa. Kätkössä ollut indeksointi toimi huomattavan heikosti eikä löytänyt haluttuja tuloksia. Tutkin onnistunko konffaamaan hakumoottoria järjevästi toimivaksi tai sitten täytyy etsiä uusi moottori.

Päiväerittely -vaihtoehto on myös poissa johtuen haun raskaudesta. Tulevaisuudessa tiedot tulevat löytymään erillisestä osuudesta järkevämmin toteutettuna ja ainakin osittain välimuistitettuna.

Kätköt joista ilmoitusta ei ole lähetytty jonkun eston takia

Sivulla esitetään jatkossa viimeisen 30 vuorokauden Ei hälytetty -tiedot. Tämän uskoisin olevan käyttäjille riittävän pitkä historia, vastalauseita toki saa esittää.

Muutoksen takana on yhä nopeammin kasvavat harrastajamäärät jonka myötä kätköjen sekä hälytyslistalaistenkin määrä nousee nopeasti. Niinpä tietokantakin näistä tiedoista laajenee nopeasti ja "Koko historia" -datamäärä oli jo niin suuri että tietokantataulun kanssa oli melkoisia ongelmia. Kaikki tiedot tallentuvat kuitenkin edelleen ongelmaratkaisua varten geocache.fi:n omaan arkistokantaan.

Edit: Lisätään vielä sen verran, että tänään on saattanut olla hitautta palvelussa ja mahdollisesti reaaliaikaisesti havaittuja loggauksia on tullut palveluun normaalia vähemmän. Tietokantoja on laajasti parannettu mm. indeksointeja lisäämällä ja tästä on aiheutunut hitautta tietokantaan. Pahoitteluni, nyt on ollut pakko säätää kriittisiäkin asioita myös aktiivisempina käyttäjäaikoina koska säätöprosessin laajuudesta johtuen aamuyöt eivät tällä hetkellä riitä

[haksu10]

Etusivulta on toistaiseksi poissa loggausmääräerittely (tänään,eilen,viimeisin viikko) sekä kätköjen käyttö/hylly/arkisto -tilanne.

Näiden tilastojen luonti 2.5 miljoonaa loggausta sisältävästä lokitaulusta otti jo melkoisia aikoja (puhutaan yli minuutista) ja hidasti näin kantaa. Tässäkin täytyy tehdä järkevämmät systeemit tietojen keräämiseen.

Vielä tänään voi olla hitautta / omituisia tyhjiä loggaustekstejä. Loggaustekstikantaan teen muutoksia ja siirtelen suurempaa määrää dataa joten tämä voi näkyä ongelmina. Pahoitteluni!

[ZeroOne]

Etusivulta on toistaiseksi poissa loggausmääräerittely (tänään,eilen,viimeisin viikko) sekä kätköjen käyttö/hylly/arkisto -tilanne.

Näiden tilastojen luonti 2.5 miljoonaa loggausta sisältävästä lokitaulusta otti jo melkoisia aikoja (puhutaan yli minuutista) ja hidasti näin kantaa. Tässäkin täytyy tehdä järkevämmät systeemit tietojen keräämiseen.

Kannattaa varmaankin harkita että pitäisikö tuo lokitaulu jakaa ajan mukaan osiin. Yksi vaihtoehto on tehdä jako käsin esimerkiksi tauluihin LOG_OLD, LOG_2010 ja LOG_2011 ja sitten dropata ja luoda nykyinen LOG-taulu uudestaan uniona noista kolmesta. Toinen vaihtoehto, mihin en itse ole tutustunut ja vasta äsken MySQL:n manuaaleja lukemalla keksin, on käyttää partitioita, mikä käsittääkseni vastaa jokseenkin edellistä toimenpidettä mutta automaattisena. Olet varmaan joskus tietokantapalvelimen speksit tänne postannut mutta en nyt niitä juuri nyt muista. Kuitenkin jos sinulla nyt on lokitaulussa 2,5 miljoonaa vaikka kilotavun mittaista riviä, siitä tulee 2,5 gigatavun taulu, joka ei välttämättä enää mahdu kokonaisuudessaan palvelimen muistiin (ainakaan samaan aikaan muun datan kanssa), jolloin haut tietysti hidastuvat rankasti. Taulun jakaminen osiin tavalla tai toisella mahduttaa taulun osia paremmin muistiin, jolloin vaikkapa vain viimeisintä viikkoa koskevat tilastot voisi ehkä generoida hyvinkin nopeasti. Lisäksi käsittääkseni jos taulussa on indeksi ajan perusteella, niin jonkun "select count(*)" -lauseen, jonka where-ehto kohdistuu tähän aikasarakkeeseen, ei tarvitse lukea itse taulua ollenkaan vaan indeksi riittää, jolloin ollaan taas nopeita. Tai jos pitää erotella loggaustyypit niin voihan sen indeksin luoda kattamaan ne kaksikin saraketta.

[haksu10]

Lokiseurannan uusi versio on tullut käyttöön

Vaikka ulkonäöllisesti lokiseurannassa ei suurempia muutoksia tapahdu, on koko hakujärjestelmä kirjoitettu täysin uusiksi. Tästä johtuen aluksi varmasti löytyy vielä bugeja ja niistä voi tässä ketjussa kertoa, kuten myös mahdollisista puuttuvista tarpeellisista ominaisuuksista (jotain voi olla tarkoituksella pois "tätä ei kukaan kaivanne"

Uuden lokiseurannan tavoitteena oli saada lokiseuranta nopeammaksi sekä ilman ehtoja että niiden kanssa. Aika näyttää kuinka hyvin tässä onnistuin. Muistutan kuitenkin että lokeja on jo 2.5 miljoonaa joten haku näiden joukosta on joka tapauksessa hidasta ja raskasta.

Merkittävimmät muutokset ja tietoutta

Suurin osa hauista on saanut merkittävästi lisää nopeutta, kuten suosikkien lokit, etäisyysehto jne.

Kaikkia hakutuloksia voi selata vanhempiin päin rajattomasti (kunnes haku muuttuu liian hitaaksi)

Hakulomakkeen alimmalla rivillä on "Odota enintään: x sek" jolla voi määrätä likimääräisesti, kuinka kauan on valmis odottamaan haun tuloksia. Koska aika tarkastetaan aina hakurupeamien välissä ei aikavalinta ole sekunnintarkka, eli palvelimen ollessa hitaalla voi muutamakin sekunti tulla ylimääräistä odotusaikaa.

Harvinaisempien loggaustapahtumien haku voi ottaa pitkänkin aikaa. Mikäli tuloksia ei löydy tai niitä ei löydy toivottua määrää voi kokeilla kasvattaa em. maksimiodotusaikaa (suositus toki on käyttää mahdollisimman lyhyttä odotusaikaa palvelimen kuormituksen kurissapitämiseksi).


Sana on vapaa, eli tähän ketjuun voi kommentoida uutta lokiseurantaa.

PS: koska uusi lokiseuranta joutuu vasta nyt tositoimiin on gc.com -efektikin mahdollinen, eli tositoimessa kaikki menee pieleen ja palvelimet yskii... tällöin voi vanha lokiseuranta palata käyttöön ongelman tutkimisen ajaksi.

[H&I.]

Onko nyt niin, että lokiseurannan sanahaku on lopullisesti poissa?

[haksu10]

Onko nyt niin, että lokiseurannan sanahaku on lopullisesti poissa?

Ei ole, vaan lokiseurannan sanahaku on poissa niin kauan kunnes siihen liittyneet tekniset ongelmat olen saanut ratkottua.

[illuZi0nist]

Lokiseurannan F-sarake (Löytänyt, DNF, omistaja) ei ainakaan minulla näytä mitään.

[haksu10]

Lokiseurannan uusi versio on tullut käyttöön

Fiksattu mm.
- Lokitekstien näyttö entiseen tapaan muille kuin premiumeille
- Olen löytänyt/dnf:nnyt/on oma kätkö -pikkuikonit

[haksu10]

Lokiseurannan uusi versio on tullut käyttöön

Fiksattu mm.
- Lokitekstien näyttö entiseen tapaan muille kuin premiumeille
- Olen löytänyt/dnf:nnyt/on oma kätkö -pikkuikonit

Fiksattu:
- Käyttäjälinkit toimii nyt, samoin käyttäjäinfo nimimerkin päällä hiirellä hosuessa.

[FireFox-71]

Enpä tiedä tuliko tämä oikeaan osastoon, vaan tähän tuuppaan silti...

Mystisesti itselleni ei ole paria hälyä tullut, vaikka sivusto väittää niiden lähetetyn, ainakin sen hälyvirheet osion mukaan.
Hälyvirheet osiosta en löydä kätköjä....

Keuruun "MEGAMIITTI", enkä
Railway Depot of Niinimaa

Molemmat asettuu tämänhetkisen hektisen hälyetäisyyden sissään, vaan puhelin ei kummastakaan kilahtanut

Toooooooosin, myönnetään...kummassakaan tapauksessa ei oltas lähdetty, semminkin kun toinen kätkö on miitti
Vaan missä vika?

Puhelimesta loppui akku ja käynnistin uudelleen, ja johan heti häly tulikin... tosin tunnin myöhässä, vaan välikös hällä..
Oliko vika sitten missä, enpä tiiä, mutta nyt näin Keuruun miitistä ei kuitenkaan häly ole koskaan minua tavoittanut, vaan sillä ei ole merkitystä

[haksu10]

Enpä tiedä tuliko tämä oikeaan osastoon, vaan tähän tuuppaan silti...

Mystisesti itselleni ei ole paria hälyä tullut, vaikka sivusto väittää niiden lähetetyn, ainakin sen hälyvirheet osion mukaan.
Hälyvirheet osiosta en löydä kätköjä....

Keuruun "MEGAMIITTI", enkä
Railway Depot of Niinimaa

Molemmat asettuu tämänhetkisen hektisen hälyetäisyyden sissään, vaan puhelin ei kummastakaan kilahtanut

Toooooooosin, myönnetään...kummassakaan tapauksessa ei oltas lähdetty, semminkin kun toinen kätkö on miitti
Vaan missä vika?

Puhelimesta loppui akku ja käynnistin uudelleen, ja johan heti häly tulikin... tosin tunnin myöhässä, vaan välikös hällä..
Oliko vika sitten missä, enpä tiiä, mutta nyt näin Keuruun miitistä ei kuitenkaan häly ole koskaan minua tavoittanut, vaan sillä ei ole merkitystä

No niin, ja ehdin jo tekemään hyvityksen "Railway Depot of Niinimaa" -kätköstä ja vasta kun painoin vastaamista näkyikin muuttunut viesti... nooh, olet 29 senttiä rikkaampi

Tiedossa ei tällä hetkellä ole että olisi mitään ongelmia ollut hälytysten lähetyksissä, mutta kyllä kuulen muilta käyttäjiltä jos onkin ollut jokin yleinen viive (niitä onneksi ei lie vuoteen ole ollut, onneksi...)

Mutta joku gsm -tekniikan tunteva voinee valoittaa mahdollisia verkkoteknisiä syitä tapahtuneeseen. Jos oikein muistelen niin jos viestiä ei saa perille ekalla kerralla (puhelin katveessa tms.) niin viestikeskus koittaa lähettää viestiä uudelleen pidentyvin väliajoin. Kun puhelimen käynnistää niin se karjaisee verkkoon olevansa kuulolla, ja tällöin jonossa olevat viestit koitetaan tunkea perille samantien.

Mutta miksi ei olisi ekalla kerralla päässyt perille, onkin sitten kysymys sinänsä. Toki kaikki on mahdollista, myös että viesti olisi ollut jossain lähetysketjussa jumissa, mutta tällöin varmastikin muitakin tapauksia kuuluu. Tuo "viesti perille kun puhelimen buuttasi" kuulostaisi vain tuolta em. selittämältäni tapaukselta.


Keuruun "MEGAMIITTI" - kätköstä ei kenellekään lähtenyt hälytyksiä. Tähän oli syynä tekniikkapuolelle jäänyt esto ajalta, jolloin hälytettäviä kätkötyyppejä ei vielä voinut valita. Tällöin miitit katsoin sellaisiksi että suurin osa käyttäjistä ei niistä hälytystä halua ja niinpä nämä olikin estetty. Esto vain oli jäänyt vieläkin hälytyshärveliin...

Mutta nyt miitit siis myös hälytetään jos omista asetuksista ne on asetettu hälytettäviksi. Periaatteessa oletuksena pitäisi olla (eli ellei ole itse muuttanut) että mistään miiteistä (event,cito,mega) ei hälytetä mutta kannattaa silti tarkastaa tilanne kun ikinä ei tiedä jos olen vaikka jotain oletusasetuksissakin saanut väärin määriteltyä

[FireFox-71]

... nooh, olet 29 senttiä rikkaampi

Täytynee tarjota kuppi kaffeeta kun kohille osuupi
kiitus vaivannäöstä siitä huolimatta...

Nyt vain harkitsen, kumman haastan oikeuteen, Nokian vai Saunalahden

[keka67]

Moro,

tässä ei ole kyse sivuston/palvelun toimivuuteen vaikuttavasta, vaan "kauneusvieheestä":

Edellisissäkin viesteissä mainittu Keuruun "Megamiitti" hieman räjäyttää miittikalenterin (http://www.geocache.fi/other/miitit/) kyseisen tapahtuman kohdalla, eli sivuston sorsat vuotaa selaimelle tekstinä.
Tapahtuu ainakin FireFox 5.0:lla ja IE 8:lla. Valistunut arvaus johtaa miitin nimen tuplalainausmerkkien parseroinnin pariin.

[Trulli]

Nyt vain harkitsen, kumman haastan oikeuteen, Nokian vai Saunalahden

Minä veikkaisin syylliseksi Nokiaa. Silloin tällöin kännyhälyt jäävät tulematta perille ja homma korjaantuu heti, kun pistän puhelimesta hetkeksi virrat pois. Lieventävänä asianhaarana Nokian suhteen täytyy tunnustaa, että geokännynä neljä vuotta ollut kommari on saanut kolhuja ihan tarpeeksi ja kerran se on sukeltanutkin. Ihme, kun ylipäätänsä enää toimii.

[haksu10]

Moro,

tässä ei ole kyse sivuston/palvelun toimivuuteen vaikuttavasta, vaan "kauneusvieheestä":

Edellisissäkin viesteissä mainittu Keuruun "Megamiitti" hieman räjäyttää miittikalenterin (http://www.geocache.fi/other/miitit/) kyseisen tapahtuman kohdalla, eli sivuston sorsat vuotaa selaimelle tekstinä.
Tapahtuu ainakin FireFox 5.0:lla ja IE 8:lla. Valistunut arvaus johtaa miitin nimen tuplalainausmerkkien parseroinnin pariin.

Kiitos huomiosta; olisi pitänyt tajuta testata myös se vaihtoehto että joku lykkää lainausmerkit nimeenkin

Nyt toivottavasti tuo toimii ja jään odottamaan millä muilla keinoilla saa miittisivun rikki

[torppari]

Lokiseurannassa - en tiedä onko tarkoituksellista vaiko ei - hakukriteereistä "Sija" (=Sijainti?) ei tunnu nykyversiossa enää pelittävän siten kuin aiemmassa. Eli hakukriteereissä sijainnin vaihtaminen ei "pure" vaan tulokset palautetaan sivun yläreunassa olevan "Sijainti"-tiedon mukaisesti. Eikä taida olla selainriippuvainenkaan tämä "ominaisuus", testattua tuli IE8:lla, Chrome13:lla ja FF6:lla.

[haksu10]

Lokiseurannassa - en tiedä onko tarkoituksellista vaiko ei - hakukriteereistä "Sija" (=Sijainti?) ei tunnu nykyversiossa enää pelittävän siten kuin aiemmassa. Eli hakukriteereissä sijainnin vaihtaminen ei "pure" vaan tulokset palautetaan sivun yläreunassa olevan "Sijainti"-tiedon mukaisesti. Eikä taida olla selainriippuvainenkaan tämä "ominaisuus", testattua tuli IE8:lla, Chrome13:lla ja FF6:lla.

Kiitos huomiosta! Tämä on nyt korjattu.

Geocache.fi:n etusivun Tilastot -kohtaan on nyt osittain palautettu tauolla olleet tilastot.

Osittain tarkoittaa, että tilastot raksutetaan kerran yössä heti puolenyön jälkeen. Lokimerkinnät -taulukosta puuttuu "tänään" -kohta, eli tilastosta näkee edellisen päivän loggausmäärän mutta ei ajantasaista kuluvan päivän tietoa. Mutta mennääs tällä nyt toistaiseksi eteenpäin.

[haksu10]

Lokiseurannan bugifix: nyt löytyy halutun kätköilijän lokit nimimerkin kirjainmerkkikoosta riippumatta

[Seq]

Lokiseurannan bugifix: nyt löytyy halutun kätköilijän lokit nimimerkin kirjainmerkkikoosta riippumatta

Case-insensitiivisyys on vahva lähes kaikissa vapaissa kentissä...

[Seq]

Nuuksion metsächillailu näyttää, ainakin minulla, olevan kolmen vuorokauden kuluttua, vaikka päivämäärän mukaan se olis huomenna...