Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

37
Données Météorologiques à l'heure d'internet : Quels enjeux pour la science, l'innovation et les citoyens ? Nicolas BALDECK, fondateur d'OpenMeteoData SO Data!, 14 Mars 2013, Saint Mandé

description

présentation du projet OpenMeteoData et des enjeux pour la recherche, lors de la conférence SO Data!, le 14 Mars 2013 à l'IGN Saint Mandé

Transcript of Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Page 1: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Données Météorologiquesà l'heure d'internet :

Quels enjeux pour la science, l'innovation et les

citoyens ?

Nicolas BALDECK, fondateur d'OpenMeteoDataSO Data!, 14 Mars 2013, Saint Mandé

Page 2: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

25% du PIB Françaisimpacté par la Météo

selon METNEXT - http://bit.ly/ZG4tWp

Page 3: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Idée reçue n°1 :"Les données météo sont disponibles" FAUX

Recherche :Gratuité, sous certaines conditions

Sinon : 10⁵ €

Datasets très richesDomaine publicPas très précis en europe

### Autresailleurs... Pas très completDifficile à trouver

Page 4: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Idée reçue n°2 :"Les données météo sont facilementaccessibles pour la recherche"

FAUX

● Licences très restrictivesEx : Convention Météo-France / Université de Rennes http://bit.ly/10HMrUQArticle 5 : "Les études conduites et publiées dans le cadre d'une obligation légale [...] ne bénéficient pas de la gratuité."Article 6 : "L'établissement s'engage [...] à ne pas utiliser les données et produit pour un développement qui fera l'objet de, ou contribuera à [...] une licence [...] le dépôt d'un brevet [...]"

● Formalités administratives● Données limitées, plus de données = nouvelle convention

● Pas de temps réel● DélaisEx : Labo SPE, UMR 6134 CNRS, pour la simulation des feux de forêt.Demandé un accès aux données ECMWF en Novembre. Pas de nouvelles à ce jour.

Page 5: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Idée reçue n°3 :"Les chercheurs utilisent lesdonnées Météo France / ECMWF"

● OUI si dans une grosse entité type CNRM

● NON pour beaucoup d'autres, car les démarches sont

trop lourdes. → utilisation données libres US

● Déjà 4 laboratoires publics ont contacté OpenMeteoData pour avoir des données, faute d'accès à celles des agences publiques.

Page 6: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Idée reçue n°4 :"La vente des données météorapporte de l'argent"

FAUX

Ordre de grandeur : "Prestations aux professionnels" de Météo France en 2011 (1)20M€ HT (~5% du budget) Quelle montant pour la vente des données ? Qui achète les données ?

290M€ de taxes manquées par an car pas d'industrie météo en Europe (2)

Marché météo valeur ajoutée : 20% de croissance aux US vs 1% en Europe (2)

+ 35M€ en taxes suite à l'ouverture de quelques données Néerlandaises (3)

Sources :1) Rapport Annuel Météo France - http://bit.ly/ZLYkub2) PRIMET - PSI in European Meteorology, and unfulfilled potential - http://bit.ly/y7L3uM3) Commission Européenne - Rapport POPSIS - http://t.co/L0JTNmK3ey

Page 7: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Idée reçue n°5 :"Diffuser les données coûte cher" FAUX

5 ans d'open datatéléchargements >> visites grand public

< 1% des coûts opérationelshttp://bit.ly/SZOSlp

yr.no, ~4 millions / semaine, 99,3% de satisfaction

Page 8: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,pour permettre aux

chercheurs de travailler

Page 9: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

ou

Récupérer les données US

Chercher un calculateur

Faire tourner un modèle

localCommencerà travailler

Trouver le bon interlocuteur

Faire les démarches administrative Attendre la réponse Commencer

à travailler

Mieux :Télechargerla donnée

Commencer àtravailler

Actuel :

Chercher les compétences

Page 10: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,parce que ça a marché chez

nos voisins européens

Page 11: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Pays Bas - KNMI

Commission Européenne - Rapport POPSIS - http://t.co/L0JTNmK3ey

Page 12: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Norvège - Met.no

Commission Européenne - Rapport POPSIS - http://t.co/L0JTNmK3ey

Page 13: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Espagne - AEMET (2010-2012)

● Universidad Pablo de Olavide - Projets de Master et de thèses pour les étudiants● Universidad Politécnica de Madrid

- Analyse des observations pour étudier la précision des capteurs- Impact de la pollution en temps réel

● Universidade da Coruña - Etude sur le cycle de vie des algues● Javalambre Astrophysical Observatory - Conditions météo pour le fonctionnement du télescope● Universidad Complutense de Madrid- Détection des météorites via les radars météo● Centro de Investigaciones Energéticas, Medioambientales - Risque de l'ozone sur la végétation● Administrador de Infraestructuras Ferroviarias - Eviter les accidents sur le réseau ferré● Meteológica SA - Données pour l'Energie, l'Eau, la lutte contre les feux de forêts● Club de vol libre Arcones - Amélioration de la sécurité des vols● Moi - Comparaison des données Espagnoles vs US en entrée du modèle WRF

Quelques ex-utilisateurs des données libres :

160 usages recensés par Félix Pedrera García, OKFN Espagnehttp://bit.ly/ZAHA5D

Page 14: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,pour favoriser

l'innovation

Page 15: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

10⁵€Grands groupes

PME

Startups

Développeur appli mobile

Bricolage au garage,futur Google

OuvertGrands groupes

PME

Startups

Développeur appli mobile

Bricolage au garage,futur Google

Page 16: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,pour apporter de

nouvelles compétences

Page 17: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

MathsPhysique

Météo

data

geekgéospatial

créatif

Page 18: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Exemple : meteo-parapente.comTechnos web modernes / météo intéractive

Contacté par le CEA Cadarache pour un développement similaire

Page 19: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,pour apporter de nouvelles idées

Page 20: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Améliorer les Land Uses des modèles avec les données OpenStreetMap?

Grande campagnesCORINEECOCLIMAPMODISévolution 5-10 ans

Crowdsourcing

évolution constante

Page 21: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Exemple descience citoyenne

Des planeurs et des parapentes pour mieux prévoir les mouvements de l'atmosphère

Page 22: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

vsLivetrackingGPS + baromètre

Page 23: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

NetCoupe Planeurs30 000 vols en 2011

Page 24: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Où sont les ascendances thermiques ?= Où vont se former les orages ?

Page 25: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Validation modèle vs volMouvements verticaux

Christof Maul / Nicolas Baldeck

Page 26: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,pour profiter de celle des

autres

Page 27: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Stations de mesures amateur

• ROMMA• FFVL• WeatherLink• Infoclimat

Page 28: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Blitzortung.orgDétection de foudre amateur

Page 29: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Ouvrir la donnée,mais comment ?

...

Page 30: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Le projet OpenMeteoDataLes données météo accessibles pour tous

Page 31: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Un projet ouvert

Ambition :Devenir le OpenStreetMap européen de la météo.

Open Data, mais aussi Open Science :- Comité d'experts scientifiques- Concertation collective- Collaboration avec le monde universitaire

Un an d'expérience : météo pour le parapente.Support de la Fédération Française de Vol Libre« un atout indéniable pour la sécurité »Championnat d'Europe de Parapente, sept 2012« cette collaboration fut un modèle du genre »

Page 32: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

L'infrastructureEntité légale : OpenMeteoDataAssociation loi 1901 d'intérêt généralFonctionnement démocratique.

Calculateur HPCactuellement ~10 cpus E5-2600 + infiniband (pour commencer)loi de Moore → = puissance Météo France pour AROME en 2008 (http://bit.ly/XSD2sQ)

Archivage Distribution

Financement- Dons / Mécénat- Subventions- Besoins "pro" (ex: bande passante garantie)

~ 30 000 € de collectés en 1 an dans le monde du parapente / planeur français.Combien pour tout le monde dans l'europe entière ?

Page 33: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Référencer les datasets libres

et les autres...

Page 34: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Aider les institutions à partager leur données

● Expliquer les bénéfices de l'Open Data● Expertise humaine● Plateforme technique● Visibilité / Communauté d'utilisateurs

Page 35: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Améliorer les prévisionsDonnées libres

Prévisions globales

Géographie régionnale

Supercalculateur OpenMeteoData(logiciels libre)

Assimilation / Couplage

Prévisions locales affinées

● Chercheurs● Startups● Collectivités● Passionnés● Développeurs● ...

Expertise Techniquebénévoles

Chercheurs, Ingénieurs, Etudiants, Retraités, Hackers

Modèles météo locaux

Postprocessing

Servez-v

ous !

Observations

Page 36: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Faciliter l'accès aux donnéesavec une interface unique

Filtresprécis

Panier Téléchargerla sélection

jeux de donnéescorrespondants

Code pour récuperer ces données via un langage de programmationPython / Java / C++ / PHP ...

Infos, specs, licence..

Page 37: Ouvrir les données météorologiques pour la recherche - OpenMeteoData - conférence SO Data

Lancement imminent !

merci

http://openmeteodata.org@OpenMeteoData

[email protected]

Nous sommes ouverts à toute collaboration