GFS:ät VPS:än omalta dataserveriltä

[weatherc]

GFS:ien data tulee nytten VPS:än omalta data-serveriltä.
Pienen trial-errorin jälkeen on nytten samanlainen dataserveri mitä NOAA:lla myös pystyssä VPS:llä.  

Ja kyllä, täysin luvallista ja ilmaista. Ohjeet miten sellaisen pistää pystyyn löytyy NOAA:n sekä GrADS:in sivuilla. NOAA:lla löytyy jopa skripti jolla hakea kaikki esim. 180 tunnin ennuste-grib-filut yhdellä komennolla (jotka ovat jaettuna 61 eri filuun á 3 tuntia) + että se osaa muutakin. kuten se että GFS:än kokohan on tuunetusti julmettuman suuri, testiajon jälkeen ilman säätöjä selveni että 180 tunnin GFS-ennuste 0.5 asteen resolla tekee noin 2.9 gigaa dataa
Mutta tähän on ameriikan poijjaat keksineet avun, nimittäin tuon hakuskriptin kanssa ei tarvi hakea kaikki 140+ arvoa vaan vain ne joka tarvitsee.
Laitoin ne jotka tarvitsen kartoille ja meteogrammille valituksi ja ajoin skriptin uudestaan ja kappas koko tippui alle 10%:iin, noin 240 megaan, ja tässä on yli 30 arvoa mukana.
Eli säästöä tuli sellaisen 2.6 Gigaa per kerta.
Vertailuna, aikasemmin haki koko mun kartta-setti noin 800 megaa dataa NOAA:lta per laaki, eli tähänkin tuli 500 megaa säästöä.

Tässä on pari jujuakin,
- Koska data haetaan keskitysti VPS:llä, sillä kun on huomattavasti parempi putki US-suuntaan kun meillä täällä peräkylässä niin 240 megan paketti hoituu noin 3 minuutissa, sisältäen hakuskriptiin sisäänrakennetut tauot jonka jälkeen se on 20 sekuntia myöhemmin ladattavissa VPS:ltä josta taas on hyvä putki tänne Suomeen.
- Koko pieneni kummasti
- nopeuttaa karttojen tekoa, itsellä ne hoituu nyt localhostista ja niille joille myönnetään pääsy dataan saa "Eurooppalisen" datanopeuden tunnetusti tunnkaisen US-putken sijaan.

Urli josta löytyy samanlainen dods-sivu kuin NOAA:lla ei tule yleiseen jakoon vaan kyselemällä voi saada pääsyn, jos ihan kiltisti pyytää  . Ehtona voidaan laittaa että joko sääasema tai tutka ja siihen liittyvä websivu, tosin tuo ei vielä takaa mitään. Tämä johtuu yksinkertaisesti siitä että NOAA:lla kun data lasketaan Teroissa eikä Gigoissa, eikä VPS:lläkään sitä ole rajattomasti.

[weatherc]

Nyt on NOAA:n GFS-datat päivittynyt vuorokauden verran automagiikalla tuonne data-serverille onnistuneesti, jonka nimi on muuten aika osuvasti GrADS dataserver.
En meinaa rakentaa mitään kauheata data-storgaea siitä, sillä se täyttäis VPS:n kovalevyn hetkessä, jopa tällä "partial downloadilla" jolla yhden ennusteen koko on nyt noin 290 megaa. Sen sijaan on aatos että aina olisi viime 24 tunnin ennusteet tallessa, näin pysyy haun polku aina samana, vain ajon aika muuttuu (esim 12z) muttei tarvi säädellä päivämäärien kanssa.

Myös omat kartat ovat nyt tulleet tänään tältä dataserveriltä eikä NOAA:lta kuin ennen. Ja mikä ero, ennen kesti koko setin teko tunnista kahteen, nyt koko yli 1000 kartan setti tuli 10 minuutissa tehtyä 

Vain Storm Relative helicivity-kartta ei näytä päivittyvän vielä, sitä täytyy tutkailla tarkemin.