Gestion des données d’environnement côtier

Présentation au sujet: "Gestion des données d’environnement côtier"— Transcription de la présentation:

1 Gestion des données d’environnement côtier
L’expérience de l’IFREMER octobre 2009 Séminaire Seine Aval

2 Plan de la présentation
Contexte, historique Architecture Organisation Valoriser : Surval Perspectives octobre 2009 Quadrige – La Réunion 2009

3 Quadrige : un vieux système
En service depuis 1996 Plus de 3 millions de résultats, dont plus de pour le REMI par exemple, des séries chronologiques sur 40 ans (premières données en 1974) Regroupe des données de la surveillance littorale sur plus d’une trentaine d’années au niveau national ou local : REPHY (PHYtoplancton), REMI (Microbiologie), RNO (Réseau National d’Observation), REBENT (Benthos, en cours), IGA (Impact des Grands Aménagements), REPOM (surveillance des Ports Maritimes)… Divers réseaux régionaux (ARCHYD depuis 96 sur Arcachon) Utilisé par l’Ifremer et des partenaires (250 utilisateurs (1/4 hors Ifremer)) Fonctionnalités de saisies/validation-qualification/extractions de la donnée Nombreux produits de diffusion / valorisation de la donnée octobre 2009 Quadrige – La Réunion 2009

4 Préambule Outil de saisie Outil de gestion des référentiels
SGBDr SYBASE Modèle Quadrige Outil de saisie Outil de gestion des référentiels Outil d’extraction Scripts SQL Scripts S+ SIG Scripts SQL SGBDr ORACLE Modèle Surval Site Web Envlit Bulletins de la surveillance octobre 2009 Quadrige – La Réunion 2009

5 Quadrige²: une nouvelle génération
Quadrige²: 8 années/h/an sur 3 ans (Ifremer) 2004: organisation – modélisation 2005: premiers développements 2008: migration complète de la base et outil de diffusion Opérationnel en juillet 2008, 1 million d’euros en sous-traitance sur 3 ans 3000 jours de développement MCO de 100 keuros / an. octobre 2009 Quadrige – La Réunion 2009

6 Quadrige² et Surval : missions et objectifs
Système désigné comme la base de données de référence pour les eaux côtières par le ministère de l’environnement dans le cadre du Système d’Information sur l’Eau Intégration de nouveaux réseaux de surveillance, comme les réseaux benthique et aquacole, Introduction de la dimension spatiale: Données vecteur et raster , Stocker, sélectionner et interroger à l’aide de fonctionnalités SIG. Répondre à la demande croissante d’échange de données aux niveaux nationaux et internationaux, SIEau, S3E, scientifiques. Stocker de manière exhaustive les informations concernant la Directive Cadre sur l’Eau (législation européenne), Diffuser la donnée environnementale qualifiée au grand public. octobre 2009 Quadrige – La Réunion 2009

7 Les engagements de Q² Un référentiel national à assumer:
Outil de bancarisation clé en main avec interfaces d’import/export: Interfaces de saisie centralisée, Interfaces d’imports de données avec formats nationaux, Interfaces de mise à disposition vers le SIE. Etre exhaustif sur la donnée brute: Proposer un vrai service d’assistance pour des partenaires pour la bancarisation, Réseaux/études divers et variés, DCE, en vue des calculs d’indicateurs. Stocker la donnée interprétée (couches SIG), Proposer des services de mise à disposition vers des Systèmes d’Informations extérieurs SDDE, Partenaires institutionnels et scientifiques. Suite d’outils intégrés pour la diffusion / valorisation: Outils statistiques, Outils SIG, Outils Web (type SURVAL sur ENVLIT), Services d’assistance pour la mise en place de ces outils. octobre 2009 Quadrige – La Réunion 2009

8 Q² : organisation interne / externe
Comité directeur Comité de pilotage Chefs de départements Chef de programme MEEDDAT OIEau DIREN Agences de l’eau Comité de projet CSTS Responsable de projet Chef de projet informatique Groupes de travail du SIEAU Équipe de développement Assistance à la maîtrise d’ouvrage Groupes de projet octobre 2009 Quadrige – La Réunion 2009

9 Vue générale fonctionnelle du système
Mises à jour régulières Référentiels Internes Taxinomique Sextant BD Sismer Référentiels non Ifremer (IGN, SIE, taxons …) Accès Base de bancarisation Accès Rigueur Gestion Complétude Qualité Produits liés à la gestion Ponts vers l’entrepôt Extractions SANDRE Cartes REBENT… Produits de valorisation SURVAL Indicateurs Miliquetus… Accès Exports/Agrégations /Calculs Entrepôt / Vue Données Extérieures (Ifremer ou non) Souplesse Performance Signifiance Adaptabilité Agrégation Intégration octobre 2009 Quadrige – La Réunion 2009

10 Quadrige² : missions et objectifs
Sites(s) Web: SURVAL Outils de Contrôle Qualité Réseaux de surveillance // études terrain Diffusion (Requêtage, Visualisation, Publication) Observations directes et analyses laboratoires Banque de données Quadrige2 Saisie Mesures par capteurs Données interprétées Extractions (Extraction de données) Données observées Bases de données « laboratoire » Importation Mise en réseau (Services intégrés) Référentiel Autres systèmes d’information Systèmes automatisés de mesure Outils d’Analyse & de Synthèse Pérennité : Sauvegarde, Sécurité, … Administration : Procédures, Contrôles des opérations, Assurance qualité octobre 2009 Quadrige – La Réunion 2009

11 Un système ouvert : les entrées
Partenaires SIE: Universités, MEEDDAT, Agences, CQEL … Fichier anomalies Intégration au programme spécifique du partenaire Administration: import Q² Imports à fréquence régulière BD centralisée Format national SANDRE BD locales (Excel, ACCESS…) Initialisation – import en une fois Mise à jour référentiels Ifremer (paramètre/support/méthode/fraction – Taxons) Fichiers texte Passage au niveau national Saisie directe OIEau (SANDRE) octobre 2009 Quadrige – La Réunion 2009

12 Les différents types de données Q²
Données biologiques et mesures effectuées sur le biota Biomasse, prélèvements ponctuels et zonaux, prélèvements d’individus, observations surfaciques … Données géologiques Carottage et mesures sur l’échantillon Données géophysiques et produits dérivés Sondeur multifaisceaux, sonar à balayage latéral, lidar Modèles Numérique de Terrain, bathymétrie Orthoimagerie Orthophotographies littorales Images satellites Données hydrologiques & biochimiques dans la colonne d’eau: Mesures ponctuelles, prèlèvements, analyses, profils verticaux, séries temporels, palanquée de bouteilles … Synthèses spatiales (couches cartographiques) Cartes d’habitats, cartes d’évolutions, déclinaison de nomenclature (EUNIS) Photographies Vidéos octobre 2009 Quadrige – La Réunion 2009

13 Infrastructure et technologies
DMZ Extranet Client externe Intranet Login extranet Serveur extranet Client interne Pare-feu Login intranet Pare-feu Serveur intranet Pare-feu Serveurs de base de données, Cartographique et d’archivage octobre 2009 Quadrige – La Réunion 2009

14 Infrastructure et technologies
Architecture 3 tiers orientée service Le tiers client est une application riche construite sur le socle Eclipse RCP Le tiers métier est déployé dans un serveur d’application JBOSS Base de données Oracle 10g + ArcSDE Serveur cartographique ArcIMS CORIOLIS octobre 2009 Quadrige – La Réunion 2009

15 Cycle de vie de la donnée
* Bonne * Douteuse * Mauvaise Experts Mesures Dénombrements Contrôle Validation Qualification Temps Prélèvement Saisie / import dans Quadrige² Diffusable par : Saisisseur Responsable de programme Consultation intégrale Diffusable par tous (sauf si moratoire) octobre 2009 Quadrige – La Réunion 2009

16 Surval: diffusion des données
Etapes de la diffusion de données Cellule Q² Base Quadrige² Transfert en base Base Surval Traitements par produit - ETL Talend Internet – Données Qualifiées Extranet Grand public Partenaires octobre 2009 Quadrige – La Réunion 2009

17 Surval: Flux de données
octobre 2009 Quadrige – La Réunion 2009

18 Surval: trois niveaux de consultation
1 - Choix d’un produit 2 - Carte 3 – Détails d’un lieu octobre 2009 Quadrige – La Réunion 2009

19 Perspectives Objectif national Forte intégration des produits
SIEau, S3E, DCE Forte intégration des produits Bulletins, Site web envlit etc. Cartographie au cœur des produits, Evolutivité, Perspectives: Biodiversité, Internationales. octobre 2009 Quadrige – La Réunion 2009