Weather-Data

[matmar]

Bonjour MikoFRS,

 

Pour le diagnostic de brouillard j'avais trouvé ce document : http://www.meteo.fr/cic/meetings/2018/AMA/presentations/AMA_1402/12- AMA-Diag-brouillard-FDupont-20180214.pdf

 

 

Humidité et vent se trouvent facilement dans Arome par contre pour la visibilité Kunkel...

Tu peux trouver les données "originales" Arome sur cette excellente initiative open-data hébergée sur Amazon s3 : https://mf-models-on-aws.org/

 

[MikoFRS]

Wahou, on tape dans le high level !

Merci pour la source en tout cas c'est très intéressant.

 

Ca promet quelques longues soirée à se gratter la tête 🤪

[hermouparis]

Pour tes question @MikoFRS effectivement il n'y a pas de dates "fixes", ce sont les échéances du modèle donc elles évoluent au fil des runs. Pour le temps sensible, effectivement héhé le jeu c'est de manipuler toutes ces données pour en ressortir un temps sensible, au travers d'un algorithme qu'il faudra créer, du plus simple au plus complexe (tous les sites météo automatisés sont basés sur ce genre d'algorithme de traitement des données, avec des diagnostiques comme celui donné dans le message précédent pour le brouillard).

 

Super intéressant le lien que tu as envoyé @matmar , tu fais partie de l'équipe qui développe ça ? Ça permettrait de mon côté de rajouter des paramètres un à un sans télécharger les packages complets sur le site de MF.

Après on reste sur du format GRIB2, c'est quand même tout le but du projet de faire le téléchargement et la conversion en interne du serveur et de proposer directement des données décompressées en sortie de l'API.

Modifié 26 janvier 2022 par hermouparis

[MikoFRS]

Modérateurs : c'est à partir de quand que je peux poster avec carte blanche ?

 

@hermouparis Oui, ça va être sympa à créer j'imagine. Pour les dates, je m'adapterai avec un peu de bricolage

Si je comprends bien ton message, tu télécharges les grib2 que tu convertis ensuite en data json c'est ça ?

[Fred59_]

Ça vous intéresse pas de bosser pour IC ici, et m'aider à améliorer notre rubrique prévisions/modèles ? 😂

https://www.infoclimat.fr/recrutement

https://www.infoclimat.fr/contribuer 

[Sebaas]

il y a 40 minutes, MikoFRS a dit :

Modérateurs : c'est à partir de quand que je peux poster avec carte blanche ?

 

Une réponse favorable à Fred offre une carte blanche anticipée

Sinon, c'est en principe au bout d'une trentaine de messages.

[matmar]

il y a 31 minutes, Fred59_ a dit :

Ça vous intéresse pas de bosser pour IC ici, et m'aider à améliorer notre rubrique prévisions/modèles ? 😂

https://www.infoclimat.fr/recrutement

https://www.infoclimat.fr/contribuer 

 

Moi non 🙂 pas actuellement car je suis déjà développeur full-stack/DevOps à Météo-France.

Mais j'ai lu avec attention les offres de recrutement d'Infoclimat ainsi que le détail des technologies utilisées (dans l'interview du framablog) très intéressant, grande polyvalence), dont je connais la plupart. Par contre mes exigences salariales sont assez éloignés de celles que vous proposez 🙂 . En tout cas je vous souhaite bon courage pour trouver, je ne sais pas trop si cela sera facile, la concurrence des ESN..., CDI... etc...

On recherche aussi plusieurs développeurs actuellement (externe, CDD 3 ans) mais je ne mettrais pas les annonces par ici pour ne pas vous faire concurrence.

 

 

Modifié 26 janvier 2022 par matmar

[matmar]

Il y a 2 heures, hermouparis a dit :

Pour tes question @MikoFRS effectivement il n'y a pas de dates "fixes", ce sont les échéances du modèle donc elles évoluent au fil des runs. Pour le temps sensible, effectivement héhé le jeu c'est de manipuler toutes ces données pour en ressortir un temps sensible, au travers d'un algorithme qu'il faudra créer, du plus simple au plus complexe (tous les sites météo automatisés sont basés sur ce genre d'algorithme de traitement des données, avec des diagnostiques comme celui donné dans le message précédent pour le brouillard).

 

Super intéressant le lien que tu as envoyé @matmar , tu fais partie de l'équipe qui développe ça ? Ça permettrait de mon côté de rajouter des paramètres un à un sans télécharger les packages complets sur le site de MF.

Après on reste sur du format GRIB2, c'est quand même tout le but du projet de faire le téléchargement et la conversion en interne du serveur et de proposer directement des données décompressées en sortie de l'API.

 

Non, il me semble que https://mf-models-on-aws.org/ est une initiative à l'instigation de N. Baldec (https://meteo-parapente.com/) dans le but de se conformer à la directive Européenne Inspire qui vise à la fourniture en open-data des données météo.

Et comme c'est sur Amazon AWS (S3) (grâce à son Open Data Sponsorship Program) tu peux utiliser la lib python aws boto3 pour télécharger beaucoup plus vite les fichiers grib2. Et encore plus vite si tu multi-process.

 

Modifié 26 janvier 2022 par matmar

[MikoFRS]

Bonjour à vous tous,

 

@Sebaas héhé ok ok, alors je vais sortir mon plus beau nuage blanc !!

 

@Fred59_ Salut Fred, je serais en effet très honoré de vous aider, mais je crains d'être plus un boulet qu'autre chose pour vous. Je n'ai aucune formation en programmation, tout ce que je fais, c'est via du self-learning , donc ça fonctionne certes mais c'est probablement pas optimisé du tout et tient probablement du bricolage. Dans les points positifs, j'adore apprendre, je ne demande que ça, j'ai potentiellement du temps dispo à consacrer, le tout bénévolement. Vois si ces conditions te conviennent pour envisager quelque chose

Et... ☁️ je te propose mon plus beau nuage iridescent, qui change de couleur en fonction de tes envies, pour réaliser tes plus belles photos, en échange de déprogrammer la validation de mes messages 😇

[Fred59_]

il y a 27 minutes, matmar a dit :

 

Moi non 🙂 pas actuellement car je suis déjà développeur full-stack/DevOps à Météo-France.

Mais j'ai lu avec attention les offres de recrutement d'Infoclimat ainsi que le détail des technologies utilisées (dans l'interview du framablog) très intéressant, grande polyvalence), dont je connais la plupart. Par contre mes exigences salariales sont assez éloignés de celles que vous proposez 🙂 . En tout cas je vous souhaite bon courage pour trouver, je ne sais pas trop si cela sera facile, la concurrence des ESN..., CDI... etc...

On recherche aussi plusieurs développeurs actuellement (externe, CDD 3 ans) mais je ne mettrais pas les annonces par ici pour ne pas vous faire concurrence.

 

 

 

Oui, il n'y a pas photo, en terme de salaire, on ne pourra jamais s'aligner...

[matmar]

à l’instant, Fred59_ a dit :

 

Oui, il n'y a pas photo, en terme de salaire, on ne pourra jamais s'aligner...

 

 ce qui est rare est cher ;-)

[hermouparis]

Bonjour tout le monde !

J'ai pas mal eu le temps de travailler sur le projet ces derniers jours, et un serveur m'a été prêté (je remercie le prêteur, qui se reconnaîtra ) par la même occasion.

Je reviens ici dès qu'une version stable et un minimum documentée de l'API est sur pied !

Ça ne devrait pas tarder, quand les premières pierres sont posées tout va toujours plus vite...

 

En attendant, un petit lien de "teasing" si vous voulez suivre les avancées : https://api.weather-data.org/?lat=45.5648&lon=5.6536&model=AROME_0.01

 

Je me suis concentré sur l'API, ne cherchez pas un éventuel beau site web, il n'y en a pour l'instant pas, et ce n'est pas du tout la priorité (ça prend du temps ces bêtises !! 😛 ).

 

A+

[Thundik81]

Il y a 2 heures, hermouparis a dit :

[...] et un serveur m'a été prêté (je remercie le prêteur, qui se reconnaîtra ) par la même occasion. [...]

 

Un site de rencontres

---> []

[Merci Ra*]