Onderwerp: KNMI Basisgegevens nu beschikbaar

De server van het KNMI reageert nu weer prima, de bestanden zijn dus weer up-to-date.

Ik zag het. Nogmaals bedankt. Wat een service!

+1

Christiaan 676 schreef :
Ietsje offtopic, maar pfff, wat een verschrikking die nieuwe KNMI site.

Koeienletters, teksten waarvan alleen de eerste alinea zichtbaar is, veel links en informatie pleite... en dan nog beslaat de gewone verwachtingen-pagina opeens vier pagina's laptopscherm ipv 1-2. Je scrollt je een ongeluk.

Dan denk je, misschien is het ontworpen voor mobiele browsers? Nou oke, als je armen al jaren te kort waren is het nu beter leesbaar (nieuwsflits aan het KNMI: niet iedere Nederlander is boven de 50, en voor hen zijn er vele zoomfuncties). Maar je scrollt je een ongeluk.

Nu zelfs verticaal én horizontaal, door de enorme lege ruimtes in de lange termijn tabel.
Dan denk je slim te zijn en 'm landscape te bekijken. Dán zal er toch wel een groter deel van die tabel in beeld komen? Nee hoor, alleen de enorme lege ruimtes in de tabel worden nóg groter. Hoe groot je mobiele scherm ook is, je mag maximaal twee dagen tegelijk zien.

Ik ben benieuwd hoeveel overheidsgeld er in dit nieuwe design zit... maar ik zoek wel een overzichtelijkere site Jammer, het was ooit m'n 'thuispagina' voor algemene meteo.

(zo, ik ben m'n azijn voor vandaag weer even kwijt )

vooralsnog ben ik het met je eens, ik ben ook flink de weg kwijt bij KNMI.
Zal er eens een dagje voor gaan zitten.

Ze willen zeker een beetje op RTL en andere commerciëlen lijken, leuk voor het grote publiek.

wel aardig is de regenradar met daarin naar keuze temp of wind.

Christiaan 676 schreef : Grappig, maar "Het KNMI onderzoekt op welke manier jouw gegevens kunnen bijdragen" klinkt terecht al héél voorzichtig, zonder enthousiaste hobbymeterologen tegen de schenen te willen schoppen .

Op zich kunnen we dat al een tijdje in Windfinder zien, die site heeft ook zo'n groepje hobbyweerstationnetjes om zich heen verzameld. Je ziet er zelden metingen die enigszins lijken op die van naburige KNMI stations...

Ondervinden er meer mensen het probleem met de Harmonie GRIB op dit moment? Meest recente in mijn downloadmanager geeft de 6:00uur run van 31-03-2016. Als ik op de site kijk krijg ik ook geen nieuwere.

De server van de KNMI heeft de laatste tijd veel problemen. Ik download de grib-files automatisch 4 keer per dag bij de KNMI, en dat gaf in maart bij 36 van de 124 keer een probleem (Fout 502: Bad Gateway).
Ik moet mijn script nog een keer verbeteren, want als het weer online komt verwerkt mijn server het niet altijd in de goede volgorde.

Net gedownload: Model run: 2016-04-22 18:00 UTC

Xiphias schreef :
Ah, vandaar. Het was mij ook al opgevallen dat er niet altijd recente gegevens beschikbaar waren.
Succes met de revisie, Xiphias!

Zelf download ik de KNMI bestanden via FTP. Het downloaden zelf gaat goed alleen bevat het bestand nog oude data. Mijn script wacht 1 minuut en download dan nogmaals het bestand. De afgelopen weken lukte het mij uiteindelijk om de GRIB files te downloaden met de juiste data. Ook op de momenten dat de site van Euros Zeilen oude runs liet zien (zoals nu ), ideetje?

njtromp schreef : Bedankt voor de tip, dat werkt inderdaad wel. Ik heb de bestanden nu even handmatig bijgewerkt, maar ik zal het script binnenkort aanpassen om ook met FTP te kunnen werken i.p.v. HTTP. Ik had dat al eerder geprobeerd, maar toen werkte FTP niet helemaal lekker en HTTP wel.

Ik probeer controleer elke 5 minuten op nieuwe bestanden, en alleen als ik ook een nieuwe versie verwacht. Met de HTTP 502 error duurde het soms zelfs meer dan een minuut voordat een poging klaar was. Download je elke keer het hele bestand? Als je al een oude versie hebt kan je met de timestamp en bestandgrootte kijken of er al een nieuwe versie is, dan hoef je alleen te downloaden als er een nieuw bestand is. Ik gebruik hiervoor wget:

wget -m -nd -np --unlink ftp://anonymous@data.knmi.nl/d...oversion/0000/00/00/

Wanneer kreeg jij oude data en wanneer kreeg je dan de nieuwe? Was dat niet gewoon de data van een dag ervoor als er nog geen nieuw bestand beschikbaar was? De nieuwe bestanden komen tussen 3 en 4 uur na het begin van de model run online op de server van het KNMI, maar het precieze tijdstip is niet constant. Voor de run van 18 UTC is dat dus tussen 23 en 24 uur Nederlandse Zomertijd.

Xiphias schreef :
Met oude data bedoel ik inderdaad het bestand van de run van de vorige dag.

Het is een beetje een hack, maar het is wel direct zomer/wintertijd vast. Het bash-scipt draait via crontab 3 minuten van elk uur. In dit script bepaal ik welke run de laatste is (datum en tijd) en vergelijk dit met de mij gelukte run. Als er geen verschil is zijn we klaar. Anders download ik het bestand en controleer of daar de juiste bestanden in zitten. Zoniet dan is het KNMI blijkbaar nog niet zover dat de output gereed is. Het script wacht vervolgens 1 minuut en download dan weer het gewenste bestand. Zodra de bestanden daarin overeenkomen met de datum en tijd van de laatste run is het KNMI blijkbaar klaar en kan de inhoud geconverteerd worden voor ZyGrib.

De truc met wget ga ik zeker proberen. Ziet er veel belovend uit en is beduidend minder belastend voor de servers van het KNMI en voor het milieu

Er zit momenteel een probleempje in de software van het KNMI DataCentrum, daardoor komen er wel nieuwe bestanden online, maar dan met de data van 24 uur daarvoor. KNMI werkt aan een oplossing.

En dat vlak voor de 24 uurs....

WADnWIND schreef :
Dikke paniek! Boeienbestand RAK gesaboteerd, KNMI uit de lucht, draaiwinden en meetbrieven zonder spi.

What's next? Lading Fontijnkruid op plekken waar het nog nooit is geweest??

De GRIB-files lijken het weer te doen, hopelijk blijft dat zo.

KNMI Basisgegevens zijn nu even niet beschikbaar, alle downloads op data.knmi.nl geven een "403 Forbidden"-foutmelding. Dus ook even geen nieuwe GRIB-file op www.euroszeilen.utwente.nl/weer/grib/