EB:lle syötettävä FMI:n salamadata kattaa nyt koko Pohjoismaat. Päivitysväli muutettu 1 minuuttiin.
Mitä koitin katsoa EB:n js-koodia niin pitäisi nopeampi tahti toimia sellaisenaan, se on hakenut tuoreen filun 1 min välein tähänkin asti :)
Tais tulla vähän liikaa tehostettua tuota hakevaa häkkyrää ;D aamuinen isku Pohjanmerellä ei löydy kannasta. Asiaa tutkitaan jahka tuo raudanvaihto on valmis...
Nyt puskee ihan kivaan tahtiin FMI-salamoita ruotsin/norjan maalla kun pari bugia korjattu häkkyrässä/kannassa 8)
se isku lienee pikkuisen rannikon ulkopuolella 9.72660/ 3.81990° 05:25 suomen aikaa.. . Muutama tuhannen salamaahan jäi kirjautumatta.. itapäivällä laskeskelin että noin 3,5K.. ja nyt semmoiset 9,5 K...
Laittelin hieman koordinaatteja isommiksi.. ainakin kaikki mahtuu mukaan, eilenkinköhän se oli yksi salama moskovan ja minskin puolestavälistä.. ::)
https://opendata.fmi.fi/wfs?request=getFeature&bbox=-10,30,45,99&srs=EPSG:4326&&storedquery_id=fmi::observations::lightning::multipointcoverage&starttime=2020-05-23T00:03:00Z
Juu, täytyy vähän säädellä tuota bboxia nyt kun näkee että se toimii, tämän hetkinen on 2,54,36,71
Yks bugi oli se ettei kanta hyväksynyt kuin 1 iskun per sek eli aikaleima oli uniquena jostain syystä. Meni hetki löytää miksei kantaan mennyt kuin tuo 1/s vaikka logiin jonka tein tuuppas monikerroin iskuja.
eilen oli 0 -4.xxx joitakin sieltä shetlannin ja skotlannin länsipuolelta, olettaisi että ainakin toisinaan färsaaretkin näkyisi tutkassa... :D
Muuten.. tutkailin vähän ja se voimakkuuden jälkeen on maa vai pilvisalama ja sitten viimeinen vissiin virhemarginaali? ..
edit//
ei se ollut eillen, jossain niistä touokuun hau'uista kai...
Lainaus käyttäjältä: einari - lauantai, 23.05.2020, 20:26
Muuten.. tutkailin vähän ja se voimakkuuden jälkeen on maa vai pilvisalama ja sitten viimeinen vissiin virhemarginaali? ..
Juu, kolmas on maa/pilvisalama ja neljäs on virhemarginaali.
Nuo infot löytyy sieltä FMI:n isku-xml:stä kun plärää sitä alemmas:
Lainaa
<swe:DataRecord>
<swe:field name="multiplicity" xlink:href="https://opendata.fmi.fi/meta?observableProperty=forecast¶m=multiplicity&language=eng"/>
<swe:field name="peak_current" xlink:href="https://opendata.fmi.fi/meta?observableProperty=forecast¶m=peak_current&language=eng"/>
<swe:field name="cloud_indicator" xlink:href="https://opendata.fmi.fi/meta?observableProperty=forecast¶m=cloud_indicator&language=eng"/>
<swe:field name="ellipse_major" xlink:href="https://opendata.fmi.fi/meta?observableProperty=forecast¶m=ellipse_major&language=eng"/>
</swe:DataRecord>
Katselin noita salamajuttuja, EB FMI-valinnalla näytti puolta vähemmän kuin opendatan haku antoi, salamatilastonkin kartta laahasi muutaman kymmmenen jäljessä noin tunti sitten, sinänsä kuitenkin nuo olisi pitänyt mahtua siihen hakualueeseen..
onko niin että kirjaa vain viimeisimmän jos 5 min/ 1 min hakuvälillä hakee?
ainakin tuonne EWN:n karttaan pitäisi saada sillä minuutin haulla ja jos useampi aika tulee niin merkkaa kaikki.. onnistuuko 8)
Olisi myös hyvä että nuo kuvakkeet olisi isompia niin EB:ssä kuin EWN:ssä, näkisi "sokeakin" paremmin ::)
myös se tapahtuman aika olisi myös väreillä hyvä esittää.... sitten joskus ;)
LainaaOlisi myös hyvä että nuo kuvakkeet olisi isompia niin EB:ssä kuin EWN:ssä, näkisi "sokeakin" paremmin ::)
myös se tapahtuman aika olisi myös väreillä hyvä esittää.... sitten joskus
Väreillä nuo iät näytetään ja on näytetty koko ajan ;)
Koko johtuu osittain käytetystä WebGL:stä, osittain siitä että jos isompia niin ei ole kun yksi iso värimöykky heti jos pikkasenkin enemmän iskuja.
EB:tähän ei ole suunniteltu "pikkumöykyille" vaan siihen että toimisi myös sitten kun alkaa olemaan 500+ iskua/min.
LainaaKatselin noita salamajuttuja, EB FMI-valinnalla näytti puolta vähemmän kuin opendatan haku antoi, salamatilastonkin kartta laahasi muutaman kymmmenen jäljessä noin tunti sitten, sinänsä kuitenkin nuo olisi pitänyt mahtua siihen hakualueeseen..
onko niin että kirjaa vain viimeisimmän jos 5 min/ 1 min hakuvälillä hakee?
Kantaan pitäisi mennä aivan kaikki. Samoin pitäisi EB:n salamafilu saada kaikki koska se kirjoitetaan samalla kun ne dumpataan kantaan.
Mutta huomioi se, että jos on useampi isku samassa - tai lähes samassa - kohtaa niin ei kartasta välttämättä erotu kun yksi, vaikka siihen olisi piirretty 10 :kin samaan kohtaan. Nuo samalla sekunnille osuvat "eri iskut":han ovat monesti todella lähekkäin eli todennäköisesti saman iskun "eri osat" ja siten näkyvät kartalla käytännössä yhtenä iskuna.
Mutta noita pitää seurailla jahka tulee joku sopivan vilkas päivä (ja osuu itsekkin sopivasti koneen ääreen).
Niitä laskureita minä katsoin.. en karttaa... ;D
no ainakin ewn:n kuvaeet pitäisi olla samaa luokkaa kun lpt- jutut... sehän sitten voi zoommata jos on nipussa...
Mitä laskureita?
Et voi verrata EWN lpt-palleroita ja iskuja keskenään jo senkin takia että pari sataa palleroa voit piirtää millä tahanasa tavalla (pallerot ovat div-elementtejä) mutta jos teet saman kymmenellä tuhannellla iskulla on selain/kartta täysin jumissa. Ei riitä tehot selaimissa siihen. Unohtamatta sitä että lisäisi uusia iskuja parhaimmillaan 0.01 sekunnin välein. Tämä rajoittaa paljonkin sitä minkälainen se iskumerkki on.
Testattu meinaan on aikoinas ennen EB:tä. Tai se oli syy miksi piti keksiä jotain muuta tapaa saada merkit kartalle kun normi ikoni tai div. Raja kulkee siinä tuhannen-pari kohalla jonka jälkeen kartta muuttuu käytännössä käyttökelvottomaksi jos ne ikonit vielä jollain lailla saakin sinne piirrettyä ikonilla.
vertasin opendatan antamaa tietoa allaoleviin kuvien laskureihin.. :D
tämä seuranta oli reaaliaikaista..
nytkin opendata antaa 6 salamaa>63.66460 18.73350 1591071043 63.33590 19.11780 1591082198 63.36990 19.17670 1591082198 64.20650 17.30170 1591083257 64.19300 17.29720 1591083257 64.20880 17.29860 1591083424
nuo laskurit 2. 8)
jostain syystä eb:n laskuriin karttui vähemmän reloadista huolimatta samassa ajassa kuin salamatilaston karttaan...
noista... mitä sitten merkit ovatkaan.. voisi miettiä geocachen kuvakkeita.. ei puuroudu.. siellä on myös valittavissa koko.. ja ne ajalliset värimuunnokset.. siitäkin leikkaus..
Jos ottaa lähtökohdaksi sijainnin lähistön salamat.. ei koko hemmetin eurooppaa niiin varmaan tuon fmi:n datan voi esittää selkeämmin.. ja myös näyttää ne samoin kuin lämpötilat... alue tai tiili kerrallaan..?
Lainaanoista... mitä sitten merkit ovatkaan.. voisi miettiä geocachen kuvakkeita.. ei puuroudu.. siellä on myös valittavissa koko.. ja ne ajalliset värimuunnokset.. iitäkin leiaus
Haluan nähdä miten tuo mainostamasi geocachen kartta toimii kun se alkaa piirtää 10K iskua sinne kartalle, Veikkaan ettei kovin hyvin. Samainen Openlayers-pohjainen kartta on käytössä omassa salamatilastossa kuva-ikoineen ja se menee tukkoon jossain 4000 iskun kohdalla. Toisaalta, ymmärsitkö lukemasi edellissä postauksessani? Edelleenkin, parin sadan, tai tuhannen, iskun piirtäminen kartalle on ihan eri asia kun vaikkapa 10000 iskun piirtäminen niin että kartta pysyisi käyttökelposienakin.
Lainaa
nuo laskurit 2. 8)
jostain syystä eb:n laskuriin karttui vähemmän reloadista huolimatta samassa ajassa kuin salamatilaston karttaan...
Syitä voi olla monia. Kuten esim että jostain syystä iskut eivät ole tulleet riittävän nopeasti tuonne FMI:n dataan. Haku hakee tällä hetkellä edellisen 2 min iskut 1 minuutin välein.
EB hakee viimeisen 2h iskut, ei koko vuorokautta kuten salamatilasto tekee.
Osittain kait ymmärsin... mutta en kaikkea ::)
https://www.maanmittauslaitos.fi/tietoa-maanmittauslaitoksesta/ajankohtaista/lehdet-ja-julkaisut/positio-lehti/lehdet/positio-4 >> tuolla on oikeastaan samantyyppinen ajatus salamakartasta ja mikä siinä on olennaista.. pitää selata alaspäin ukkone-kohtaan..
Joten sen perusteella heitän ajatuksen edelleen että sijainti on se ratkaiseva... ja eniten kiinnostava, joten voisiko ajatella niin että esim. oman sijainnin ympäriltä sadan-parinsadan kilometrin säteeltä näyttäisi tilanteen isommilla kuvakkeilla ja sitten siirtyessä eri alueelle toimisi samoin..
mitenkähän iso tuo ylläolevan linkin kuvake mahtaisi olla..
Kyse ei ole ikonin koosta vaan millä tavalla se sinne karttaan laitetaan. Kuva-ikonin (kuten nuo salamaikonit) tai div-elementin (kuten EWN:än pallerot) toimivat hyvin määrättyyn määrään asti mutta kun niitä alkaa olemaan riittävästi selain/selainten javascript-tuki/mitä lie menee tukkoon. Eli potku ei riitä. Eli ongelma ei ole itse data vaan selaimet.
Tutkasivut ennen EB:tä käytti juuri noita kuvakkeita ja ne meni aina jumiin kun itse hauskuus alkoi. Joten EB suunniteltiinkin alusta asti isolle datamäärälle. Ja kyllä, voit olla varma siitä että kaikki keinot käytiin läpi muutaman tuhannen/10K "iskun" koedatalla.
Mainitsemasi karttojen (ja oman salamatilaston) käyttämät kuvaikonit olivat niistä huonoimmat.
Mutta myös sitä miten tuo datamassa käydään läpi. Mainitsemasi kartan näköjääs käyttämä "for (var i = 0; i < markers.length; i++) {"-looppi, jota itsekkin tulee monesti käyettyä, on niistä tavoista hitaimpia. Ei näkyvästi hitaampi pienellä datamäärällä mutta isolla kylläkin. Varsinkin kun tuo iskujen kokonaismäärä lasketaan jokaikisen iskun kohdalla erikseen....
Se että nuo EB:n WebGL-ikonit ovat niin pirpeloita ja ettei niiden kokoa voinut muuttaa (paras olisi että koko muutuisi zoomitason mukaan) otti itse asiassa itseäkin päähän varsinkin silloin tekovaiheessa.
Sitä en ole tutkinut olisko joku raapustanut kasaan Web-GL-palikkaa Leafletille jota voisi käyttää ja jossa olisi edes vähän säätömahdollisuuksia.
Hyvinhän nuo näkyvät...Jos haluut parempaa näkyvyyttä iskuille niin kannattaa vaihtaa mustaan pohjakarttaan ja/tai säätää sadetutkan näkyvyyttä pienemmälle tai poistaa se näkymästä....
Näyttää tuoreimmat iskut olevan n 1.5 min ikäisiä kun saapuvat EB:n kartalle (muutin nordicin EB:n tarkistusvälin FMI:n osalta 30 sekuntiin). Ihan kiltisti näyttää kyllä tulevan. :)
Samalla kun pläräsin tuota EB:n vajaan 2000 rivin js-koodia niin huomasin että itse asiassa siellä on säätö noiden iskujen kokojen suhteen. On 4 jos zoomi alle 8 ja 5 jos yli sen. Mitä nuo tarkoitaa ei koodi kerro mutta lienee pixeliä.
gl.vertexAttrib1f(gl.aPointSize, pointSize);
PS. Hiljaista on Geocachen euroopassa verrattuna BO-dataan ;D
Juu.. onhan se tyhjä ja ilmeisesti siksi kun hakee vain NORDLIS-verkon dataa.. eikä sitäkään kaikkea.. keskittynyt pääasiassa kotomaahan ja jonninverran lähialueisiin.. ::)
Ehkäpä tuo eurooppa-valinta on harhaanjohtava..... 8)
Paremmin näkyi nyt tulevan, eroa ei ollut kuin muutamia satoja niiden kahden nordicin salamadatan välillä... kun illalla yhdeksän tietämillä katselin niin kahden puolen 20K oli määrät...
Tokihan on puutteita myös geocahessa... paljonkin.. mutta sen visuaalisuuden takia sitä on mukavampi käyttää lähialueiden tarkasteluun.. kunnnes saa laajempana kyseisen FMI:n tarjoaman datan sinne EWN:n sivuille... ja salamat jotain mmuuta uin kärpäsen paska kartalla.. :o ;)
LainaaEhkäpä tuo eurooppa-valinta on harhaanjohtava.....
Lievästi sanottuna. Ennemmin kävijän kusettamista ja klikkejä mestästävä väärällä tiedolla.
Lainaamutta sen visuaalisuuden takia sitä on mukavampi käyttää lähialueiden tarkasteluun.. kunnnes saa laajempana kyseisen FMI:n tarjoaman datan sinne EWN:n sivuille... ja salamat jotain mmuuta uin kärpäsen paska kartalla..
Kannattaa pysyä sen käyttäjänä sitten. Nordicin n 5 miljoonaa vuotuista kävijää sekä lukemton määrä lisää niiltä muilta sivuilta joista EB ympäri Eurooppaa löytyy saattaa olla eri mieltä asiasta.
EB ei ole edes suunniteltu "hitaan päivitystahdin" FMI-data silmällä pitäen, se on siinä enemmän "kivana lisänä", vaan BO-datalle joka päivittyy oikeasti reaaliajassa (näet iskun, ja täplä voi ilmestyä kartalle ennekuin kuulet murinan) sekä Europpanlaajuiselle isolle datamäärälle. Siinähän on useastikkin tuo samainen 20K iskumäärä alta tunnissa mitä FMI-data sai eilen kasaan vuorokaudessa. Vilkkain tunti eilen oli FMI-datalla n 3700 iskua ja BO:lla n 9000 iskua.
Tutkailin BO:n tilastotaulukkoa myslissä, suurin iskumäärä tunnissa reilut 46000 ja vuorokaudessa reilut 600000 (tuossa kyl taulukko joka jäänyt vähälle käytölle, siitä voisi kyl kyhätä jotain tilastonpoikasta sivuillekkin asti jossain kohdin :D)
Niin pysynkin ja perusteet siihen on hyvät.. esim. naruskan/tuntsan suunnassa on ukkostanut ja kun seurasi näitä puheenaolevia tutkia niin kyllä fmi:n tutkat pesee kaikki muut... esim. BO ei reagoinut mitenkään toiseen aaltoon joka liikkui sodankylän suunnalta naruskalle päin... muutenkaat ei kaikea rekisteröinyt ja oletettavasti tarkkuuskin oli sitä sun tätä.. ihan voi katsoa sieltä BE:n puolelta vaihtamalla BO/FMI....
En sano että joku olisi ylivertainen kuin toinen.. mutta uskoisin että amattivermeet ovat kuitenkin siellä missä niitä on... antavat tarkemman kuvan.... :D
En mielestäni ole moittinut mitään näistä.. eikä se ole moittimista jos jotain pitää alueellisesti parempana..
Se miksi noita kävijöitä on paljon.. syy lienee se ettei sitä avointa salamadataa jaa muut... joten ei ole oikeastaan muita karttoja etelämpänä mitä seurata.. nuo englannin/ranskan... ym omat ovat aika surkeita...
Tuossa ajallisesti lähellä olevat leikkaukset...
Ei kyse ole sen kummallisemmasta kuin että tuolla kulmalla / pohjoisessa yleensäkkin lienee liian vähän BO-vastaanottimia jotta toimisi kunnolla. Kysehän on harraste-projektista joten ei muuta kun hankkimaan kymmenkunta vastaaotinta ympäri Lappia niin alkaa vastaanottokin olemaan ihan eri tasoa. ;)
Mitä tarkkuuteen tulee niin BO on täysin FMI-tasoa kunhan "kuulevia vastaanottimia" on riittävästi. Eikä se FMI:kään aina läheskään oikeeseen osu tahikka kaikkia kuule, siltä jää kuulematta yllättävänkin paljon iskuja varsinkin hiljaiseen aikaan/talvella.
Mitä ikoneihin/karttoihin tulee niin nykyään näyttää löytyvän muutama palikka Leafletille tuohon tarkoitukseen. Niitä ei ollut silloin joskus 2015 kun EB kyhättiin kasaan. Kuten
https://github.com/manubb/Leaflet.PixiOverlay
Miljoona ikonia kartalla:
https://manubb.github.io/Leaflet.PixiOverlay/many-markers.html
Noista alla olevista kuvista näkee BO-asemien sijainnit pohjoisessa ja keskisessä Euroopassa. Asemien vähäisyys siellä pohjoisessa vaikuttaa suoraan lopputulokseen ja Saksassa erittäin suuri lukumäärä tekee järjestelmästä ylivertaisen muihin verrattuna. Tällä ei ole mitään tekemistä ammattilais/harrastejärjestelmän kanssa. Itse laitoin vihreän aseman 2012 (on linjoilla edelleen) ja sinisen 2017. Toivottavasti pohjoisessa olisi halukkaita ja sitten myös asemia saatavilla. Saatavuus taitaakin olla tällä hetkellä suurin ongelma laajennettavuudessa.
"Ongelma" EB:n FMI-datassa on se että EB hakee datan x sekunnin välein. Jos ajatellaan että tuorein saatava data FMI:ltä on minuutin luokkaa ja EB hakee tuoreen filun 60 sek välein voi tuo tuorein data saapuessaan EB:lle olla vajaat 2 minuuttia vanhaa. Tämä riippuu tietty myös siitä että mistä kohtaa minuuttia EB alkaa raksuttamaan eli missä kohtaa minuuttia sivu latautuu. Muuttamalla tuota hakuväliä vaikka 30 sekuntiin tuottaisi vain turhaa liikennettä koska silloin käytännössä joka toinen haku tuottaisi saman filun/datan mitä edellinen haku.
Homman pitäisi toimia toiseen suuntaan, eli serveri lähettäis filun EB:lle heti kun tuore on saatavilla eikä niin että EB hakee sitä serveriltä määrätyn väliajoin.
Tällöin voisi myös kyhätä jotain tapaa hakea iskut FMI:ltä tiheämmin jos aktiviteettiä (ja vaikka hitaammin kun hiljaista) ja EB:n päivitystahti muokkautuisi tämän mukaan automaattisesti. Eli tarvis olla websocketti sille filulle (ja kuunteleva socketti EB:ssä) ;D
Parashan olisi jos FMI puskis tuoreet iskut ulos websocketilla normi XML-haun lisäksi mutta sitä lienee turha toivoa... ::) (voisivat kyl myös jo siirtyä tälle vuosituhannelle ja tuottaa json-filuja noiden XML-filujen sijaan ::))
Itse asiassa tarvis sadetutkakuville olla jotain saman tapaista. Nythän EB lataa tuoreet kuvat muistaakseni 5 min välein. Päivitystahti ei sinänsä muuttuisi mutta se hakisi ne heti kun uudet saatavilla. ;D
Hmm...
Tuli seurattua tuota FMI:n dataa pikkasen kun kolisee ihan kohtalaisesti datan kaakkoiskulmalla, pari havaintoa
1. Uusia iskuja EI ilmene dataan jatkuvasti vaan joka toinen minuutti. 1/krt min haulla oli joka toinen haku ilman uusia iskuja kun taas joka toisella oli niitä iso nippu. Sitä en tiedä onko tämä ip-rajoituettu, eli sama ip saa uutta dataa vain joka toinen min.
2. Vastaus ip-rajoitteeseen on luultavasti koska kun niitä tulee niin on data tuoretta ja viive tuoreimpaan iskuun n 35 sek.
Tuo 35 sek toistui kaikissa hauissa äskeisen seurannan aikana samoin että vain 2 min välein uutta dataa.
Tuli myös seurattua.. sekä vähän muutakin..
Kun hain juuri äsken manuaalisesti sitä salamadataa.. aluksi puolen minuutin, sitten 15 sek. ja lopuksi 10 sekunnin välein ja antoi joka kerta uutta dataa.. Siinä mielessä voisi ajatella että syy on muu kuin ip-osoitesuodatus... tosin voihan olla että jos liian tiheään hakee niin voi tehdä harvennusta.. näytti myös siltä ettei ainakaan sinne zalama.nettiin päivittynyt kaikki ajat...
Kun vertaa vaikka viimeisen 10 min. ajalta FMI:n ja BO:n iskumerkkejä kartalta niin huomaa eron selvästi myös baltiassa, joten eipä niillä boltekeilla, yms ole etelämmässäkkään kattavaa dataa...
tein huvikseni tunnukset Vaisalan Thunderstromiin.. sellaisen kokeiluvesion.. tosin viimeiseen tämän seudun salamointiin ei päässyt kiinni kun oli Ublock päällä... ei kärsi sitä ilmeisesti.. kuvan vaaleamman alueen salamointi pitäisi sitten näkyä.. toisessa kuvassa on solujen koko ja liike... ilmeisesti perustuu lentokenttien dataan enimmäkseen kun ne on kartassa...
LainaaKun vertaa vaikka viimeisen 10 min. ajalta FMI:n ja BO:n iskumerkkejä kartalta niin huomaa eron selvästi myös baltiassa, joten eipä niillä boltekeilla, yms ole etelämmässäkkään kattavaa dataa...
Ihan noin ykselitteienen ei asia ole. Riippuu myös esim että lasketaanko joka ikinen haarasalama omaksi salamaksi tai ei. FMI:n datahan on "tarkistamaton raakadata". FMI-datassa on myös duplikaatio iskuja joilla täsmälleen samat kordinaatit ja aikaleima, huomasin vaan kun koitin tehdä kantaan uniikiksi aikaleima+kordinaatit-kombolla mutta erroria huusi.