Gestion des données d’environnement côtier L’expérience de l’IFREMER octobre 2009 Séminaire Seine Aval

Plan de la présentation Contexte, historique Architecture Organisation Valoriser : Surval Perspectives octobre 2009 Quadrige – La Réunion 2009

Quadrige : un vieux système En service depuis 1996 Plus de 3 millions de résultats, dont plus de 120 000 pour le REMI par exemple, des séries chronologiques sur 40 ans (premières données en 1974) Regroupe des données de la surveillance littorale sur plus d’une trentaine d’années au niveau national ou local : REPHY (PHYtoplancton), REMI (Microbiologie), RNO (Réseau National d’Observation), REBENT (Benthos, en cours), IGA (Impact des Grands Aménagements), REPOM (surveillance des Ports Maritimes)… Divers réseaux régionaux (ARCHYD depuis 96 sur Arcachon) Utilisé par l’Ifremer et des partenaires (250 utilisateurs (1/4 hors Ifremer)) Fonctionnalités de saisies/validation-qualification/extractions de la donnée Nombreux produits de diffusion / valorisation de la donnée octobre 2009 Quadrige – La Réunion 2009

Préambule Outil de saisie Outil de gestion des référentiels SGBDr SYBASE Modèle Quadrige Outil de saisie Outil de gestion des référentiels Outil d’extraction Scripts SQL Scripts S+ SIG Scripts SQL SGBDr ORACLE Modèle Surval Site Web Envlit Bulletins de la surveillance octobre 2009 Quadrige – La Réunion 2009

Quadrige²: une nouvelle génération Quadrige²: 8 années/h/an sur 3 ans (Ifremer) 2004: organisation – modélisation 2005: premiers développements 2008: migration complète de la base et outil de diffusion Opérationnel en juillet 2008, 1 million d’euros en sous-traitance sur 3 ans 3000 jours de développement MCO de 100 keuros / an. octobre 2009 Quadrige – La Réunion 2009

Quadrige² et Surval : missions et objectifs Système désigné comme la base de données de référence pour les eaux côtières par le ministère de l’environnement dans le cadre du Système d’Information sur l’Eau Intégration de nouveaux réseaux de surveillance, comme les réseaux benthique et aquacole, Introduction de la dimension spatiale: Données vecteur et raster , Stocker, sélectionner et interroger à l’aide de fonctionnalités SIG. Répondre à la demande croissante d’échange de données aux niveaux nationaux et internationaux, SIEau, S3E, scientifiques. Stocker de manière exhaustive les informations concernant la Directive Cadre sur l’Eau (législation européenne), Diffuser la donnée environnementale qualifiée au grand public. octobre 2009 Quadrige – La Réunion 2009

Les engagements de Q² Un référentiel national à assumer: Outil de bancarisation clé en main avec interfaces d’import/export: Interfaces de saisie centralisée, Interfaces d’imports de données avec formats nationaux, Interfaces de mise à disposition vers le SIE. Etre exhaustif sur la donnée brute: Proposer un vrai service d’assistance pour des partenaires pour la bancarisation, Réseaux/études divers et variés, DCE, en vue des calculs d’indicateurs. Stocker la donnée interprétée (couches SIG), Proposer des services de mise à disposition vers des Systèmes d’Informations extérieurs SDDE, Partenaires institutionnels et scientifiques. Suite d’outils intégrés pour la diffusion / valorisation: Outils statistiques, Outils SIG, Outils Web (type SURVAL sur ENVLIT), Services d’assistance pour la mise en place de ces outils. octobre 2009 Quadrige – La Réunion 2009

Q² : organisation interne / externe Comité directeur Comité de pilotage Chefs de départements Chef de programme MEEDDAT OIEau DIREN Agences de l’eau Comité de projet CSTS Responsable de projet Chef de projet informatique Groupes de travail du SIEAU Équipe de développement Assistance à la maîtrise d’ouvrage Groupes de projet octobre 2009 Quadrige – La Réunion 2009

Vue générale fonctionnelle du système Mises à jour régulières Référentiels Internes Taxinomique Sextant BD Sismer Référentiels non Ifremer (IGN, SIE, taxons …) Accès Base de bancarisation Accès Rigueur Gestion Complétude Qualité Produits liés à la gestion Ponts vers l’entrepôt Extractions SANDRE Cartes REBENT… Produits de valorisation SURVAL Indicateurs Miliquetus… Accès Exports/Agrégations /Calculs Entrepôt / Vue Données Extérieures (Ifremer ou non) Souplesse Performance Signifiance Adaptabilité Agrégation Intégration octobre 2009 Quadrige – La Réunion 2009

Quadrige² : missions et objectifs Sites(s) Web: SURVAL Outils de Contrôle Qualité Réseaux de surveillance // études terrain Diffusion (Requêtage, Visualisation, Publication) Observations directes et analyses laboratoires Banque de données Quadrige2 Saisie Mesures par capteurs Données interprétées Extractions (Extraction de données) Données observées Bases de données « laboratoire » Importation Mise en réseau (Services intégrés) Référentiel Autres systèmes d’information Systèmes automatisés de mesure Outils d’Analyse & de Synthèse Pérennité : Sauvegarde, Sécurité, … Administration : Procédures, Contrôles des opérations, Assurance qualité octobre 2009 Quadrige – La Réunion 2009

Un système ouvert : les entrées Partenaires SIE: Universités, MEEDDAT, Agences, CQEL … Fichier anomalies Intégration au programme spécifique du partenaire Administration: import Q² Imports à fréquence régulière BD centralisée Format national SANDRE BD locales (Excel, ACCESS…) Initialisation – import en une fois Mise à jour référentiels Ifremer (paramètre/support/méthode/fraction – Taxons) Fichiers texte Passage au niveau national Saisie directe OIEau (SANDRE) octobre 2009 Quadrige – La Réunion 2009

Les différents types de données Q² Données biologiques et mesures effectuées sur le biota Biomasse, prélèvements ponctuels et zonaux, prélèvements d’individus, observations surfaciques … Données géologiques Carottage et mesures sur l’échantillon Données géophysiques et produits dérivés Sondeur multifaisceaux, sonar à balayage latéral, lidar Modèles Numérique de Terrain, bathymétrie Orthoimagerie Orthophotographies littorales Images satellites Données hydrologiques & biochimiques dans la colonne d’eau: Mesures ponctuelles, prèlèvements, analyses, profils verticaux, séries temporels, palanquée de bouteilles … Synthèses spatiales (couches cartographiques) Cartes d’habitats, cartes d’évolutions, déclinaison de nomenclature (EUNIS) Photographies Vidéos octobre 2009 Quadrige – La Réunion 2009

Infrastructure et technologies DMZ Extranet Client externe Intranet Login extranet Serveur extranet Client interne Pare-feu Login intranet Pare-feu Serveur intranet Pare-feu Serveurs de base de données, Cartographique et d’archivage octobre 2009 Quadrige – La Réunion 2009

Infrastructure et technologies Architecture 3 tiers orientée service Le tiers client est une application riche construite sur le socle Eclipse RCP Le tiers métier est déployé dans un serveur d’application JBOSS Base de données Oracle 10g + ArcSDE Serveur cartographique ArcIMS CORIOLIS octobre 2009 Quadrige – La Réunion 2009

Cycle de vie de la donnée * Bonne * Douteuse * Mauvaise Experts Mesures Dénombrements Contrôle Validation Qualification Temps Prélèvement Saisie / import dans Quadrige² Diffusable par : Saisisseur Responsable de programme Consultation intégrale Diffusable par tous (sauf si moratoire) octobre 2009 Quadrige – La Réunion 2009

Surval: diffusion des données Etapes de la diffusion de données Cellule Q² Base Quadrige² Transfert en base Base Surval Traitements par produit - ETL Talend Internet – Données Qualifiées Extranet Grand public Partenaires octobre 2009 Quadrige – La Réunion 2009

Surval: Flux de données octobre 2009 Quadrige – La Réunion 2009

Surval: trois niveaux de consultation 1 - Choix d’un produit 2 - Carte 3 – Détails d’un lieu octobre 2009 Quadrige – La Réunion 2009

Perspectives Objectif national Forte intégration des produits SIEau, S3E, DCE Forte intégration des produits Bulletins, Site web envlit etc. Cartographie au cœur des produits, Evolutivité, Perspectives: Biodiversité, Internationales. octobre 2009 Quadrige – La Réunion 2009