FMI avoin data beta ja sen kokeilut

[Jouzer]

Jes kiitti, listahan saatiin täyteen toki jos joku tietäväinen näitä lukee ja haluaa kirjoittaa tarkempaa tietoa noista epämääräisistä selityksistä, niin päivitän niitä.

Säteilyt selvisi, valitettavasti (mun kannalta) kaikki säteilyarvot on kumuloituja (ei hajua ajanjaksoista tässäkään). Vähentelemällä aikaisemmasta tuloksesta olisi mahdollista saada niitä itselle hyödynnettäväksi datasta, mutta se jääköön odottamaan toistaiseksi.

[weatherc]

Säteilyt selvisi, valitettavasti (mun kannalta) kaikki säteilyarvot on kumuloituja (ei hajua ajanjaksoista tässäkään). Vähentelemällä aikaisemmasta tuloksesta olisi mahdollista saada niitä itselle hyödynnettäväksi datasta, mutta se jääköön odottamaan toistaiseksi.

Yleensä ovat nuo kumuloivien aikajakso sama mitä datan väli ellei parametrin nimi/selitys muuta kerro, eli jos dataa on tunnin välein niin on jaksokin tunti, eli uusi - edellinen = arvo.

[Joppe]

Hieman jo näköjään unholaan painunut ketju, mutta kokeillaanpa herätellä henkiin..

Olen tuon FMI:n API:n kanssa itsekin hieman leikkinyt. Tausta omalta osalta on siinä, että rakentelen omaan eteiseen pientä infonäyttöä näyttämään lähimpien bussipysäkkien tilannetta (HSL:n api:sta kun saa nykyään pelkän aikatauluinfon lisäksi myös gps-perusteista dataa ihan oikeista ohitusajoista). Näyttöön jäi tyhjää tilaa, joten säätilahan siihen piti saada ja nälkä kasvaa syödessä, joten seuraavaksi ennusteet.. Tämä FMI:n api vaikutti alunperin sen verran mutkikkaalta, että ensin toteutin nuo openweathermap.org:n api:n avulla, mutta siinä varsinkin ennusteet osuvat niin huonosti, että FMI palasi takaisin tapetille.. yr.no:takin kokeilin, mutta en saanut sitä python2:lla toimimaan, joten se jäi siltä osin. No nyt kyllä "konvertoin" skriptinikin jo python3:lle ja nopsasti testasin, että nyt toimii jonkun muun tekemä python-kirjastokin ihan suoraan, joten sekin on kyllä vaihtoehto, mutta kyllähän Ilmatieteenlaitos kuulostaa silti luotettavimmalta taholta kertomaan Suomen sää.

Kovasti myös helpotti, kun löysin jonkun tekemän valmiin Python-skriptin periaatteessa samasta aiheesta:
https://wiki.helsinki.fi/display/SMEAR/FMI+data?preview=/243959959/243960512/getfmidata.py

Tuosta apinoin itselleni suoraan nuo parserointiosuudet, joten kiitoksia vaan jos vaikka tekijän silmiin viesti päätyy. Myös tämä ketju on luettu pariinkin kertaan kannesta kanteen, joten kiitoksia myös ketjun osallistujille, apua on jo ollut tästäkin.

Pari kysymystä tuosta FMI:n rajapinnasta kuitenkin:
-Eikö noille reaaliaikahavainnoille tosiaan ole tuota WeatherSymbol3:sta saatavilla? Se on ilmeisesti pelkän ennusteen puolella, en ole vielä FMI:n ennusteisiin paneutunut ollenkaan, tuosta reaaliaikaisesta minulla on tuossa versio joka suurinpiirtein muut tarvittavat tiedot kaivaa
-Mistä FMI:llä saa kuikuiltua auringon nousua/laskua, vai saako? Kyllä se ainakin Ilmatieteenlaitoksen omalla paikallisennustesivulla näkyy
-Mikä nyt on järjellisin "stored query" tuollaisen yksinkertaisen ennustetaulukon tekoon? Menee vähän sormi suuhun noiden kaikkien Hiramien ja hienojen termien kanssa.

[weatherc]

-Eikö noille reaaliaikahavainnoille tosiaan ole tuota WeatherSymbol3:sta saatavilla? Se on ilmeisesti pelkän ennusteen puolella, en ole vielä FMI:n ennusteisiin paneutunut ollenkaan, tuosta reaaliaikaisesta minulla on tuossa versio joka suurinpiirtein muut tarvittavat tiedot kaivaa

Ei taida olla muuta kun nuo numeeriset arvot saatavilla. Tietenkin niistä joissa esim. pilvisyys ja sateen intensiteetti pystyy kikkailemaan jonkun sortin ikonin jos haluaa.

-Mistä FMI:llä saa kuikuiltua auringon nousua/laskua, vai saako? Kyllä se ainakin Ilmatieteenlaitoksen omalla paikallisennustesivulla näkyy

Ei taida olla sitäkään. Mutta jos purkilla PHP asennettuna niin se osaa sen puolen varsin helpolla.

Koodi [Valitse] Laajenna


$sunri = date_sunrise(time(), SUNFUNCS_RET_STRING, $lat, $long, $zenith, $offset);
$sunse = date_sunset(time(), SUNFUNCS_RET_STRING, $lat, $long, $zenith, $offset);


-Mikä nyt on järjellisin "stored query" tuollaisen yksinkertaisen ennustetaulukon tekoon? Menee vähän sormi suuhun noiden kaikkien Hiramien ja hienojen termien kanssa.

Esim piste-ennusteella:
http://data.fmi.fi/fmi-apikey/API-AVAIN/wfs?request=getFeature&storedquery_id=fmi::forecast::hirlam::surface::point::timevaluepair&timestep=60&crs=EPSG::4326&latlon=61,23

[Joppe]

-Eikö noille reaaliaikahavainnoille tosiaan ole tuota WeatherSymbol3:sta saatavilla? Se on ilmeisesti pelkän ennusteen puolella, en ole vielä FMI:n ennusteisiin paneutunut ollenkaan, tuosta reaaliaikaisesta minulla on tuossa versio joka suurinpiirtein muut tarvittavat tiedot kaivaa

Ei taida olla muuta kun nuo numeeriset arvot saatavilla. Tietenkin niistä joissa esim. pilvisyys ja sateen intensiteetti pystyy kikkailemaan jonkun sortin ikonin jos haluaa.

-Ok, kiitos, sitten en taistele tuon asian kanssa enempää.

-Mistä FMI:llä saa kuikuiltua auringon nousua/laskua, vai saako? Kyllä se ainakin Ilmatieteenlaitoksen omalla paikallisennustesivulla näkyy

Ei taida olla sitäkään. Mutta jos purkilla PHP asennettuna niin se osaa sen puolen varsin helpolla.

Koodi [Valitse] Laajenna


$sunri = date_sunrise(time(), SUNFUNCS_RET_STRING, $lat, $long, $zenith, $offset);
$sunse = date_sunset(time(), SUNFUNCS_RET_STRING, $lat, $long, $zenith, $offset);


-Tuo kaipasikin näköjään vähän vain oikeanlaista lähestymistapaa. Purkki on Raspberry Pi ja kyllähän sinne asentuu mitä vaan, mutta löytyi tuohon tarkoitukseen näköjään pyyttonillekin valmis library ( https://github.com/jebeaudet/SunriseSunsetCalculator ), joka nyt jo ensiyrittämälläkin jotain aikoja tulosteli, joten sen saanee toimimaan kyllä. Tuolla asialla ei tosiaan tainnutkaan olla ennustamisen kanssa tekemistä, se olikin ihan laskettavissa oleva asia.

-Mikä nyt on järjellisin "stored query" tuollaisen yksinkertaisen ennustetaulukon tekoon? Menee vähän sormi suuhun noiden kaikkien Hiramien ja hienojen termien kanssa.

Esim piste-ennusteella:
http://data.fmi.fi/fmi-apikey/API-AVAIN/wfs?request=getFeature&storedquery_id=fmi::forecast::hirlam::surface::point::timevaluepair&timestep=60&crs=EPSG::4326&latlon=61,23

-Kiitos, tämä pitää testailla paremman ajan kanssa.

[huuhaa]

Voisko joku vastata typerään kysymykseen.. Eli koska itse en ole javascriptiin ym juuri perehtynyt, niin mitenkäs tuolta FMI Avoimesta Datasta saa tuotua sivuiille esimerkiksi tietyn paikkakunnan 5 vuorokauden sääennusteen?

https://github.com/fmidev/metoclient-ui  (tätä käyttäen??)

Siitä vaan en päässyt esimerkkejäkään katsoessani yhtään kärylle, että miten tuossa paikkakuntaa määriteltäisiin ja esimerkeissä ei myöskään api avainta ollut..

Tuon linkin siis sain kun asiaa fmi-betalta kyselin, että olisiko tuollaiseen esimerkkiä aloittelijalle...

Edit: Todettakoon sen verran, että yr.no tiedot sai ongelmitta javascriptillä ilman kokemustakin, mutta katson tänne jossain vaiheessa josko on tullut tietoa asiaan / viittausta oikeaan suuntaan.

[J.Jäntti]

Ensimmäiseksi, jotta dataa saa ulos avoimesta rajapinnasta, pitää hankkia API-avain, muutoin homma tyssää aika lailla siihen. Sellaisen saa, kun rekisteröityy avoimen datan käyttäjäksi. Alla oleva linkki vie sinut kyseiselle rekisteröintisivulle:
https://ilmatieteenlaitos.fi/rekisteroityminen-avoimen-datan-kayttajaksi

Se, mitenkä kysymässäsi paikassa määritellään "aloittelija" niin onkin sitten vähän toinen homma. Koska FMI:llä on avoimessa rajapinnassa dataa lievästi sanottuna huikea määrä, kannattaa tutustua ainakin ensin pikaohjeisiin, alla olevasta linkistä. Siitä saa selville miten kysely muodostetaan.
http://ilmatieteenlaitos.fi/latauspalvelun-pikaohje

Paikkakuntaa itsessään ei minun oman, huteran osaamiseni mukaan tuolta saa noudettua, vaan kaikki kyselyt kohdistetaan karttakoordinaateilla. Maanmittauslaitoksen palvelu [urlhttps://asiointi.maanmittauslaitos.fi/karttapaikka/]Karttapaikka[/url], auttaa koordinaattien hakemisessa.

[weatherc]

Paikkakuntaa itsessään ei minun oman, huteran osaamiseni mukaan tuolta saa noudettua, vaan kaikki kyselyt kohdistetaan karttakoordinaateilla. Maanmittauslaitoksen palvelu [urlhttps://asiointi.maanmittauslaitos.fi/karttapaikka/]Karttapaikka[/url], auttaa koordinaattien hakemisessa.

Ainakin ennen on myös pystynyt hakemaan paikkakunnan nimellä noita datoja, en tiedä toimiiko enään. Itse käytän koordinaatteja jo senkin takia että silloin saa varmasti sen haluamansa pisteen datan, sitä kun ei koskaan tiedä mihin jonkun paikkakunnan "keskipiste" on määritelty jos hakee nimellä.
Toinen helppo keino löytää jonkun paikan koodinaatit on Google Mapsista, zoomaa riittävän lähelle => oikealla hiirinamiskalla avautuvasta valikosta "Mitä täällä on?".

[Jouzer]

Tervehdys jälleen. Sääpalvelin on rokannut jo pidemmän aikaa ilman ongelmia, mutta nyt on alkanut merkillinen käyttäytyminen parin päivän sisällä.

Ohjelmani joka hakee sääennustukset on alkanut hälyyttelemään epäonnistuneista webgetfile yrityksistä. Ajattelin, että ehkä fmidata on laittanut jonkun DDos tyylisen eston kun mulla 12 hakua pamahtaa samalla sekunnilla joka tunti. No, ei auttanut vaikka jaksotin haun. Sitten kun painan ohjelmani hae manuaalisesti nappulaa, yleensä lataus onnistuu.

24 x 12 = jotain kolmensadan luokkaa eli tuo ilmatieteen laitoksen sivuilla mainittu 10 000 (? joku valtava luku se oli) maksimihakua vuorokaudessa ei täyty lähimainkaan API-avaimelle

Onko muilla ollut ongelmia nyt viimepäivinä?

Täytyy palata vanhan sorvin ääreen, nuo sähköpostihälytykset alkaa vähän jurnia.

[weatherc]

En ole kyllä huomannut mitään. Mutta jaksottaisin kyllä tuollaiset bulkkihaut niin että ainakin sekunti väliä. Ihan "just in case" ettei tuu bannia...
Se että saa hakea vaikkapa 10k hakua tunnissa ei tarkoita että ne sais hakea samalla sekunnilla kerralla pommina.