EWN Ennuste - julkaistu

[weatherc]

Ennusteen rakentaminen on vaiheessa jossa palikat ovat paikallaan ja toiminnassa. Vielä uupuu pientä säätöä sekä mm. css- ja käännös-osien yhdistäminen jotta toimisivat samaisilla filuilla mitä muukin EWN. Joten se saattaa olla ajoittain hitusen hajalla  

Tausta
Idea ennusteelle tuli mun Ruotsalaiselta vaki-testaajalta/ideanikkarilta Alexilta (Särö, Budskär-asema), eli "oma ennuste" jossa otetaan keskiarvot käytössä olevista datoista. Tämä tapahtui tuossa samaisessa vaiheessa kun aloitettiin EWN-häkkyrän uusiminen. Idea laitettiin mietintämyssyyn koska kuulosti varsin intresantilta

Tämän mahdollisti myös se että tuo Saksalainen WRF-kaveri löysi helpon,nopean ja kevyeen tavan dumpata x GB:n kokoisen GRIB-filun datat Mysqliin Wgrib2:lla. Ja vielä siten että pystyy rajamaan alueen jonka dumppaa sekä valikoimaan arvot jota tallennetaan.
Esim WRF-taulukot jossa Euroopan datat 9 km resolla (n 200K datapistettä) noin 10 arvolla (arvoja GRIB:ssä on noin 200) tekee noin 160 MB:n kokisen taulukon ja koko ~3 vrk ennusteesta tulee 87 taulukkoa (1/tunti).

Miten EWN-ennuste lasketaan?
Pienen fundeeramisen jälkeen päädyttiin tapaan jossa peruslaskelmassa otetaan simppelisti average+mean/2 olevista arvoista.

Datat?
Raakadatana on käytössä nippu lähteitä:
- Oma WRF
- GFS
- CMC (Kanadan vastine GFS:lle, 24 km resolla)
- "YR-ennuste" eli YR:n xml-filut
- FMI-ennuste (Suomen osalta)
- WXSIM - Jos haetun ennusteen lähistöllä (10 km säteellä) löytyy WXSIM-asema käytetään myös tätä

Miten saada oma WXSIM mukaan
Laita EWN:än asetuksiin urli lastret.txt-filuun ja EWN Ennuste nappaa sen mukaan kordinaattien perusteella
(Jos sulla on urli plaintext.txt-filuun ei tarvi muuttaa sitä, skripti osaa napata sen siitäkin kunhan lastret.txt on upattu)

Itse skripti
Suoraan myöntäen että skriptissä on vaikutteita erään Norsken tavasta näyttää ennusteita laitettiin myös tämä puoli uusiksi.
Häkkyrässä on peräti 6 tabia
- pikaennuste
- 2.5 vrk tunti-tunnilta 1h hyppelyin
- 7 vrk (~7.5 vrk) 3h hyppelyin
- 2.5 vrk "Extra"-taulukko jossa nipullinen nörtti-arvoja sekä Experimental-osasto jossa voidaan testailla eri arvoja  
- Vertailu - kaikki lähteet laitetaan samaan käppyrään tuloksena varsin mielenkiintoista häkkyrää  
- Kartat

Demo/Testsivu: http://www.nordicweather.net/test/frc/forecast.php (puhuu toistaiseksi vain lontoota)

[systeemi]

Tuleehan mahdollisuus muuttaa värit oman sivuston kaltaiseksi. ts.sellainen helppo tapa?

[weatherc]

Tuleehan mahdollisuus muuttaa värit oman sivuston kaltaiseksi. ts.sellainen helppo tapa?

Värit ja muut css:ät löytyy css-filusta joten, jep, onnistunee 
Esim taulukot käyttää kaikki samaa css:ää eli yksi muutos vaikuttaa kaikkiin taulukoihin.
Pitää vielä tarkistaa ettei siellä ole kovinkaan paljoa inline-tyylejä jäänyt roikkumaan. 

Yksi idea joka tuosta voisi myös kyhätä on tuo "lyhyt ennuste" jonka saisi esim etusivulle tyyliin tuo mikä mulla on WXSIM:stä (ja jonka osumatarkkuus on välillä vähän niin ja näin).

[systeemi]

Värit ja muut css:ät löytyy css-filusta joten, jep, onnistunee 
Esim taulukot käyttää kaikki samaa css:ää eli yksi muutos vaikuttaa kaikkiin taulukoihin.
Pitää vielä tarkistaa ettei siellä ole kovinkaan paljoa inline-tyylejä jäänyt roikkumaan. 

Yksi idea joka tuosta voisi myös kyhätä on tuo "lyhyt ennuste" jonka saisi esim etusivulle tyyliin tuo mikä mulla on WXSIM:stä (ja jonka osumatarkkuus on välillä vähän niin ja näin).

No niin taas ylitit itsesi ja tuli todella sellaista mille on tilausta. Täytyy muistaa jotenkin.

[angle]

Huh huh, siis tuohan on ihan super hieno. Saat ruveta varautumaan siihen että Forecan ja FMI:n käyttäjät siirtyvät sun sivuille! 

[weatherc]

Huh huh, siis tuohan on ihan super hieno. Saat ruveta varautumaan siihen että Forecan ja FMI:n käyttäjät siirtyvät sun sivuille! 

mmmm... 

Toivelistalla olisi että saisin jotenkin dumpattua mysliin YR:n tarjoamat netcdf:ät "Arome 2.5 km" sekä "Best fit 4 km" ennusteista. Sitten alkaisi tuo lähdeosasto olemaan aika kuosissa eikä nojaisi niin paljoa noihin jenkki-datoihin
Mitä pikkasen ihmeellistä on että grib=>mysql löytyy helpolla muttei tuota netcdf=>mysql tai edes netcdf=>grib josta sen saisi sitten mysliin wgribillä.

Tuosta 2.5 km Aromesta pitää kyllä väsätä kartta jossain vaiheessa, reso alkaa olemaan sitä luokkaa että se lähinnä pyyhkii pöytää jollain 12 km Hirlamilla jota mm. FMI tarjoaa. 

[weatherc]

Koeajo mysliin YR:n 2.5 km Arome-filusta tehty onnistuneesti "muutaman" mutkan kautta 
Datapisteitä Aromen kattavalla alueella näyyttää olevan hulppeat 668000.

Ongelmaksi osoittautui se että tuo wgrib2, joka on ainut softa jolla ollaan onnistuttu saamaan grib-data mysliin, tarvii nimensä mukaisesti grib2-muotoisen filun eikä se ollutkaan niin yksinkertaista löytää tapa jolla saada netcdf:ä muutettua grib2:ksi. Ratkaisuksi löytyi CDO-niminen softa ja sillä ensin muuttaa netcdf => grib1 ja sitten grib1 => grib2.

[Zalama]

Tuleeko arkisto, josta voi vertailla ennustetta  toteutuneeseen ?
Kun mikään ei riitä...

[weatherc]

Tuo on ollut mietinnässä mutta en ole keksinyt mitään hyvää tapaa toteuttaa se, kuten pitäisikö ottaa "ennustearvoksi" vaikkapa arvo joka on +24 h nykyhetkestä vai miten.
Idehan olsisi todella mielenkiintoinen kyllä.

[weatherc]

Ruotsalaiset eli SMHI saanut BETA:n ulos ennuste-apistaan

Pikanen haku antoi että kattaa ainakin koko Suomen sekä ainakin aina 50°N asti eteläänpäin.
Ja meille ukkos-friikeille löytyy myös arvo nimneltään "Thunderstorm probablity" (toisin kun FMI:n API:sta)

Samalla sivulla käy ilmi että Norjalaiset sekä Ruotsalaiset ennusteet yhdistyvät vuoden 2014 aikana kun YR (met.no) sekä SMHI alkaa tuottamaan korkearesoluutioista ennustetta yhdessä. Jos saan veikata niin jotain tyyliin 2.5 km resolla mitä tuo Norsken Arome on nyt. Siinä jää FMI:n 12km Hirlam kakkoseksi että soi. Norsken Aromesta on muuten saatavilla lämpötila-ennuste 500 m resolla kattaen Norjan (sekä hitusen sen ympäriltä)  

Mitä noihin apeihin tulee niin vetää Ruotsalaiset pisimmän korren sen helppoudessa, data löytyy jsonina sekä haku suoraan kordinaateilla.
FMI jää auttamattomasti hännille tuossa käyttävyydessä, haku paikkakunnan nimellä sekä pirun hankala (ja jättikokoien) xml-filu sekä saatavilla oleva data tiukasti rajattu vain Suomeen.
Norjalaiset ovat siinä välissä, haku kordinaateilla sekä data xml-muodossa (tosin paljon helpommassa muodossa mitä FMI:llä).

Se mitä ihmetyttää on että myös Ruotsalaiset käyttää tuota INSPIRE-systeemiä (todennäköisesti myös Norjalaiset), miksi he saavat kasaan paljon kätsymmän datan mitä FMI??

Suomi mukamas pitäisi olla tietoteknikan edelläkävijä-maa. Ja pah sanon minä.