Gestion des données d’environnement côtier

1. Gestion des données d’environnement côtier L’expérience de l’IFREMER octobre 2009 Séminaire Seine Aval

2. Plan de la présentation • Contexte, historique • Architecture • Organisation • Valoriser : Surval • Perspectives Quadrige – La Réunion 2009

3. Quadrige : un vieux système • En service depuis 1996 • Plus de 3 millions de résultats, dont • plus de 120 000 pour le REMI par exemple, • des séries chronologiques sur 40 ans (premières données en 1974) • Regroupe des données de la surveillance littorale sur plus d’une trentaine d’années au niveau national ou local : • REPHY (PHYtoplancton), • REMI (Microbiologie), • RNO (Réseau National d’Observation), • REBENT (Benthos, en cours), • IGA (Impact des Grands Aménagements), • REPOM (surveillance des Ports Maritimes)… • Divers réseaux régionaux (ARCHYD depuis 96 sur Arcachon) • Utilisé par l’Ifremer et des partenaires (250 utilisateurs (1/4 hors Ifremer)) • Fonctionnalités de saisies/validation-qualification/extractions de la donnée • Nombreux produits de diffusion / valorisation de la donnée Quadrige – La Réunion 2009

4. Préambule SGBDr SYBASE Modèle Quadrige Outil de saisie Outil de gestion des référentiels Outil d’extraction Scripts SQL Scripts S+ SIG Scripts SQL SGBDr ORACLE Modèle Surval Site Web Envlit Bulletins de la surveillance Quadrige – La Réunion 2009

5. Quadrige²: une nouvelle génération • Quadrige²: 8 années/h/an sur 3 ans (Ifremer) • 2004: organisation – modélisation • 2005: premiers développements • 2008: migration complète de la base et outil de diffusion • Opérationnel en juillet 2008, • 1 million d’euros en sous-traitance sur 3 ans • 3000 jours de développement • MCO de 100 keuros / an. Quadrige – La Réunion 2009

6. Quadrige² et Surval : missions et objectifs • Intégration de nouveaux réseaux de surveillance, comme les réseaux benthique et aquacole, • Introduction de la dimension spatiale: • Données vecteur et raster , • Stocker, sélectionner et interroger à l’aide de fonctionnalités SIG. • Répondre à la demande croissante d’échange de données aux niveaux nationaux et internationaux, • SIEau, S3E, • scientifiques. • Stocker de manière exhaustive les informations concernant la Directive Cadre sur l’Eau (législation européenne), • Diffuser la donnée environnementale qualifiée au grand public. Système désigné comme la base de données de référence pour les eaux côtières par le ministère de l’environnement dans le cadre du Système d’Information sur l’Eau Quadrige – La Réunion 2009

7. Les engagements de Q² • Un référentiel national à assumer: • Outil de bancarisation clé en main avec interfaces d’import/export: • Interfaces de saisie centralisée, • Interfaces d’imports de données avec formats nationaux, • Interfaces de mise à disposition vers le SIE. • Etre exhaustif sur la donnée brute: • Proposer un vrai service d’assistance pour des partenaires pour la bancarisation, • Réseaux/études divers et variés, • DCE, en vue des calculs d’indicateurs. • Stocker la donnée interprétée (couches SIG), • Proposer des services de mise à disposition vers des Systèmes d’Informations extérieurs • SDDE, • Partenaires institutionnels et scientifiques. • Suite d’outils intégrés pour la diffusion / valorisation: • Outils statistiques, • Outils SIG, • Outils Web (type SURVAL sur ENVLIT), • Services d’assistance pour la mise en place de ces outils. Quadrige – La Réunion 2009

8. Q² : organisation interne / externe EXTERNE INTERNE Comité directeur Comité de pilotage Chefs de départements Chef de programme MEEDDAT OIEau DIREN Agences de l’eau Comité de projet CSTS Responsable de projet Chef de projet informatique Groupes de travail du SIEAU Équipe de développement Assistance à la maîtrise d’ouvrage Groupes de projet Quadrige – La Réunion 2009

9. Référentiels Internes Taxinomique Sextant BD Sismer Produits de valorisation SURVAL Indicateurs Miliquetus… Vue générale fonctionnelle du système Mises à jour régulières Référentiels non Ifremer (IGN, SIE, taxons …) Accès Base de bancarisation Accès Rigueur Gestion Complétude Qualité Produits liés à la gestion Ponts vers l’entrepôt Extractions SANDRE Cartes REBENT… Accès Exports/Agrégations /Calculs Entrepôt / Vue Données Extérieures (Ifremer ou non) Souplesse Performance Signifiance Adaptabilité Agrégation Intégration Quadrige – La Réunion 2009

10. Quadrige² : missions et objectifs Sites(s) Web: SURVAL Outils de Contrôle Qualité Réseaux de surveillance // études terrain Diffusion(Requêtage, Visualisation,Publication) Observations directes et analyses laboratoires Banque de données Quadrige2 Saisie Mesures par capteurs Données interprétées Extractions(Extraction de données) Données observées Bases de données« laboratoire » Importation Mise en réseau(Services intégrés) Référentiel Autres systèmes d’information Systèmes automatisés de mesure Outils d’Analyse & de Synthèse Pérennité : Sauvegarde, Sécurité, … Administration : Procédures, Contrôles des opérations, Assurance qualité Quadrige – La Réunion 2009

11. Fichier anomalies OIEau (SANDRE) Un système ouvert : les entrées Partenaires SIE: Universités, MEEDDAT, Agences, CQEL … Intégration au programme spécifique du partenaire Administration: import Q² Imports à fréquence régulière BD centralisée Format national SANDRE BD locales (Excel, ACCESS…) Initialisation – import en une fois Mise à jour référentiels Ifremer (paramètre/support/méthode/fraction – Taxons) Fichiers texte Passage au niveau national Saisie directe Quadrige – La Réunion 2009

12. Les différents types de données Q² • Données biologiques et mesures effectuées sur le biota • Biomasse, prélèvements ponctuels et zonaux, prélèvements d’individus, observations surfaciques … • Données géologiques • Carottage et mesures sur l’échantillon • Données géophysiques et produits dérivés • Sondeur multifaisceaux, sonar à balayage latéral, lidar • Modèles Numérique de Terrain, bathymétrie • Orthoimagerie • Orthophotographies littorales • Images satellites • Données hydrologiques & biochimiques dans la colonne d’eau: • Mesures ponctuelles, prèlèvements, analyses, profils verticaux, séries temporels, palanquée de bouteilles … • Synthèses spatiales (couches cartographiques) • Cartes d’habitats, cartes d’évolutions, déclinaison de nomenclature (EUNIS) • Photographies • Vidéos Quadrige – La Réunion 2009

13. Infrastructure et technologies DMZ Extranet Client externe Intranet Login extranet Serveur extranet Client interne Pare-feu Login intranet Pare-feu Serveur intranet Pare-feu Serveurs de base de données, Cartographique et d’archivage Quadrige – La Réunion 2009

14. CORIOLIS Infrastructure et technologies • Architecture 3 tiers orientée service • Le tiers client est une application riche construite sur le socle Eclipse RCP • Le tiers métier est déployé dans un serveur d’application JBOSS • Base de données Oracle 10g + ArcSDE • Serveur cartographique ArcIMS Quadrige – La Réunion 2009

15. Cycle de vie de la donnée * Bonne * Douteuse * Mauvaise Experts Mesures Dénombrements Validation Qualification Contrôle Temps Prélèvement Saisie / import dans Quadrige² • Diffusable par : • Saisisseur • Responsable de programme • Consultation intégrale Diffusable par tous (sauf si moratoire) Quadrige – La Réunion 2009

16. Base Quadrige² Base Surval Surval: diffusion des données • Etapes de la diffusion de données Cellule Q² Transfert en base Traitements par produit - ETL Talend Internet – Données Qualifiées Extranet Grand public Partenaires Quadrige – La Réunion 2009

17. Surval: Flux de données Quadrige – La Réunion 2009

18. Surval: trois niveaux de consultation 1 - Choix d’un produit 2 - Carte 3 – Détails d’un lieu Quadrige – La Réunion 2009

19. Perspectives • Objectif national • SIEau, S3E, • DCE • Forte intégration des produits • Bulletins, • Site web envlit etc. • Cartographie au cœur des produits, • Evolutivité, • Perspectives: • Biodiversité, • Internationales. Quadrige – La Réunion 2009