Post on 03-Apr-2015
Gestion des données d’environnement côtier
L’expérience de l’IFREMER
octobre 2009 Séminaire Seine Aval
octobre 2009 Quadrige – La Réunion 2009
Plan de la présentation
Contexte, historique
Architecture
Organisation
Valoriser : Surval
Perspectives
octobre 2009 Quadrige – La Réunion 2009
Quadrige : un vieux systèmeEn service depuis 1996
Plus de 3 millions de résultats, dont plus de 120 000 pour le REMI par exemple, des séries chronologiques sur 40 ans (premières données en 1974)
Regroupe des données de la surveillance littorale sur plus d’une trentaine d’années au niveau national ou local :
REPHY (PHYtoplancton), REMI (Microbiologie), RNO (Réseau National d’Observation), REBENT (Benthos, en cours), IGA (Impact des Grands Aménagements),+ REPOM (surveillance des Ports Maritimes)…+ Divers réseaux régionaux (ARCHYD depuis 96 sur Arcachon)
Utilisé par l’Ifremer et des partenaires (250 utilisateurs (1/4 hors Ifremer))
Fonctionnalités de saisies/validation-qualification/extractions de la donnée
Nombreux produits de diffusion / valorisation de la donnée
octobre 2009 Quadrige – La Réunion 2009
Préambule
SGBDr SYBASEModèle Quadrige
Outil de saisie
Outil de gestion des référentiels
Outil d’extraction
Bulletins de la surveillance
SGBDr ORACLEModèle Surval
Site WebEnvlit
Scripts SQLScripts S+
SIG
Scripts SQL
octobre 2009 Quadrige – La Réunion 2009
Quadrige²: 8 années/h/an sur 3 ans (Ifremer) 2004: organisation – modélisation 2005: premiers développements 2008: migration complète de la base et outil
de diffusion
Opérationnel en juillet 2008,
1 million d’euros en sous-traitance sur 3 ans 3000 jours de développement
MCO de 100 keuros / an.
Quadrige²: une nouvelle génération
octobre 2009 Quadrige – La Réunion 2009
Quadrige² et Surval : missions et objectifs
Intégration de nouveaux réseaux de surveillance, comme les réseaux benthique et aquacole,
Introduction de la dimension spatiale: Données vecteur et raster , Stocker, sélectionner et interroger à l’aide de fonctionnalités SIG.
Répondre à la demande croissante d’échange de données aux niveaux nationaux et internationaux,
SIEau, S3E, scientifiques.
Stocker de manière exhaustive les informations concernant la Directive Cadre sur l’Eau (législation européenne),
Diffuser la donnée environnementale qualifiée au grand public.
Système désigné comme la base de données de référencepour les eaux côtières par le ministère de l’environnement
dans le cadre du Système d’Information sur l’Eau
octobre 2009 Quadrige – La Réunion 2009
Les engagements de Q²
Un référentiel national à assumer: Outil de bancarisation clé en main avec interfaces d’import/export:
Interfaces de saisie centralisée, Interfaces d’imports de données avec formats nationaux, Interfaces de mise à disposition vers le SIE.
Etre exhaustif sur la donnée brute: Proposer un vrai service d’assistance pour des partenaires pour la
bancarisation, Réseaux/études divers et variés, DCE, en vue des calculs d’indicateurs.
Stocker la donnée interprétée (couches SIG),
Proposer des services de mise à disposition vers des Systèmes d’Informations extérieurs
SDDE, Partenaires institutionnels et scientifiques.
Suite d’outils intégrés pour la diffusion / valorisation: Outils statistiques, Outils SIG, Outils Web (type SURVAL sur ENVLIT), Services d’assistance pour la mise en place de ces outils.
octobre 2009 Quadrige – La Réunion 2009
Q² : organisation interne / externe
Comité de pilotage
Groupes de projet
MEEDDATOIEauDIRENAgences de l’eau
Comité de projet
Comité directeur
Équipe de développement
Responsable de projetChef de projet informatique
Chefs de départementsChef de programme
Groupes de travail du SIEAU
CSTS
Assistance à la maîtrise d’ouvrage
octobre 2009 Quadrige – La Réunion 2009
Vue générale fonctionnelle du système
Base de bancarisation
RigueurGestionComplétudeQualité
Entrepôt / Vue
SouplessePerformanceSignifianceAdaptabilité
Référentiels Internes
TaxinomiqueSextantBD Sismer
Données Extérieures
(Ifremer ou non)
Référentiels non Ifremer (IGN, SIE, taxons …)
Mises à jour régulières
Accès
Produits de valorisationSURVALIndicateursMiliquetus…
Accès
AgrégationIntégration
Accès
Produits liés à la gestionPonts vers l’entrepôtExtractions SANDRECartes REBENT…
Exports/Agrégations/Calculs
octobre 2009 Quadrige – La Réunion 2009
Quadrige² : missions et objectifs
Banque de données Quadrige2
Outils de Contrôle Qualité
Outils d’Analyse & de Synthèse
Données interprétées
Saisie
Importation
Réseaux de surveillance // études terrain
Réseaux de surveillance // études terrain
Observations directes et analyses laboratoires
Mesures par capteurs
Bases de données
« laboratoire »
Bases de données
« laboratoire »
Systèmes automatisés de mesure
Systèmes automatisés de mesure
Pérennité : Sauvegarde, Sécurité, …
Administration : Procédures, Contrôles des opérations, Assurance qualité
Diffusion(Requêtage, Visualisation,Publication)
Extractions(Extraction de
données)
Mise en réseau(Services intégrés)
Sites(s) Web:
SURVAL
Sites(s) Web:
SURVAL
Autres systèmes
d’information
Autres systèmes
d’information
Données observées
Référentiel
octobre 2009 Quadrige – La Réunion 2009
Un système ouvert : les entrées
Administration: import
Format national SANDRE
Intégration au programme spécifique
du partenaire
Fichier
anomalies
Mise à jour référentiels Ifremer
(paramètre/support/méthode/fraction
– Taxons)
Imports à fréquence régulière
Passage au
niveau national
BD centralisée
Q²
Partenaires SIE: Universités, MEEDDAT,
Agences, CQEL …
Saisie directe
Fichiers texte
Initialisation –
import en une fois
BD locales(Excel, ACCESS…)
OIEau (SANDRE)
octobre 2009 Quadrige – La Réunion 2009
Les différents types de données Q²
Données biologiques et mesures effectuées sur le biota Biomasse, prélèvements ponctuels et zonaux, prélèvements d’individus,
observations surfaciques …
Données géologiques Carottage et mesures sur l’échantillon
Données géophysiques et produits dérivés Sondeur multifaisceaux, sonar à balayage latéral, lidar Modèles Numérique de Terrain, bathymétrie
Orthoimagerie Orthophotographies littorales Images satellites
Données hydrologiques & biochimiques dans la colonne d’eau: Mesures ponctuelles, prèlèvements, analyses, profils verticaux, séries
temporels, palanquée de bouteilles …
Synthèses spatiales (couches cartographiques) Cartes d’habitats, cartes d’évolutions, déclinaison de nomenclature (EUNIS)
PhotographiesVidéos
octobre 2009 Quadrige – La Réunion 2009
Infrastructure et technologies
DMZ
Pare-feu
Extranet
Pare-feu
Intranet
Pare-feu
Serveur extranet
Serveur intranet
Serveurs de base de données,
Cartographique et d’archivage
Client externe
Login extranet
Client interne
Login intranet
octobre 2009 Quadrige – La Réunion 2009
Infrastructure et technologies
Architecture 3 tiers orientée service Le tiers client est une application riche construite sur le socle Eclipse RCP Le tiers métier est déployé dans un serveur d’application JBOSS Base de données Oracle 10g + ArcSDE Serveur cartographique ArcIMS
CORIOLIS
octobre 2009 Quadrige – La Réunion 2009
Prélèvement
MesuresDénombrements
Saisie / import dans Quadrige²
* Bonne
* Douteuse
* MauvaiseExperts
Diffusable par :• Saisisseur• Responsable de programme• Consultation intégrale
Diffusable par tous (sauf si moratoire)
Cycle de vie de la donnée
octobre 2009 Quadrige – La Réunion 2009
Surval: diffusion des données
Etapes de la diffusion de données
BaseQuadrige²
Cellule Q²
Traitements par produit - ETL Talend
Grand public
BaseSurval
Partenaires
Transfert en base
ExtranetInternet – Données Qualifiées
octobre 2009 Quadrige – La Réunion 2009
Surval: Flux de données
octobre 2009 Quadrige – La Réunion 2009
Surval: trois niveaux de consultation
1 - Choix d’un produit
2 - Carte
3 – Détails d’un lieu
octobre 2009 Quadrige – La Réunion 2009
Perspectives
Objectif national SIEau, S3E, DCE
Forte intégration des produits Bulletins, Site web envlit etc.
Cartographie au cœur des produits,Evolutivité,Perspectives:
Biodiversité, Internationales.