Rappel structuration des données et bases de données

Présentation au sujet: "Rappel structuration des données et bases de données"— Transcription de la présentation:

1 Rappel structuration des données et bases de données
Système d’Information Géographique (SIG): Application dans le Domaine Marin et Côtier DAKAR-Sénégal Janvier 2017 Rappel structuration des données et bases de données par Mme NOUHA BARRAJ

2 Introduction Les données Marines: Mesures océanographiques physiques,
Mesures océanographiques chimiques, Plages de valeurs de paramètres marines.

3 Formats de données marines
Il existe de nombreux formats de données marines; nous reconnaissons actuellement 13 groupes. Nous allons naviguez à travers les plus importants pour voir leurs diversités.

4 Formats de feuille de calcul(1)
Les tableurs sont l'un des formats les plus populaires pour décrire les données marines. Ocean Data View peut lire à peu près tout tableur ASCII, en particulier ceux de son propre format.

5 Formats de feuille de calcul(2)
Également appelé «formats de table," ces ensembles de données peuvent être aussi petit qu'une simple table XYZ contenant des mesures simples (ou des estimations calculées) sur la surface XY, ou aussi complexe (une immense table d’une campagne, des stations, des identifiants de l'échantillon, des valeurs mesurées des paramètres, des flags de mesure de qualité, etc). le terme « tableur » est parfois également appliqué, un peu de manière incorrecte, le programme de logiciel qui gère les données, par exemple Microsoft Excel.

6 Formats d’archive Sont semblables à des feuilles de calcul, mais contiennent plus qu’un seul format d’une ligne. Typiquement, ils ont un format qui indique des informations d’une campagne, une autre information des stations, et un autre pour des valeurs mesurées des paramètres réels.

7 Formats raster et grille
Sont considérés généralement comme des tableaux de valeurs rectilignes (lignes et colonnes), souvent, dans les sciences de la terre, liés uniquement à des zones spécifiques de la surface de la terre (ou à un certain niveau au sein de son géosphère, hydrosphère ou de son atmosphère). Ces tableaux de valeurs réguliers sont généralement calculées à partir de mesures dispersées "monde réel" aux fins de rendre les données plus faciles à visualiser ou à analyser. Des images graphiques telles que des photographies (où les emplacements de tableau de valeur sont appelés pixels) sont inclus dans ce type.

8 Formats auto-descriptif
Une classe largement utilisée de formats qui accueille plusieurs types de contenu, y compris les informations de type vecteur et de l'information / de type grille raster. Les métadonnées nécessaires pour utiliser les données, telles que les unités de mesure, la géométrie de la grille, etc, sont inclus dans le fichier lui-même (NetCDF, CDL, HDF, formats Envisat) Le format NetCDF est le plus largement utilisé dans la communauté de données marines, car il prend en charge les données de la station et des données maillées.

9 Formats langage de balisage
Un langage de balisage est une langue artificielle en utilisant un ensemble d'annotations au texte qui donnent des instructions concernant la manière dont le texte doit être affiché (html, xml…).

10 Formats Vecteur Ce sont les fichiers contenant des représentations numériques des formes géométriques, telles que des points, des lignes, des courbes et des formes ou polygone (s), qui sont tous basés sur des équations mathématiques, pour représenter des images en infographie. C’est un apport essentiel aux systèmes d'information géographiques.

11 Normes de Métadonnées Une norme de métadonnées est un ensemble commun de termes et définitions qui décrivent des données.

12 Formas Papier Les données sur papier, y compris tous les types de revues, les journaux, les périodiques, etc.

13 Formats de Document Les données sont contenues dans des formats habituellement en liaison avec les documents numériques, y compris les formats propriétaires (par exemple DOC) ou en texte ASCII richement formatés.

14 Formats de Compression
Ces formats sont utilisés pour le stockage ou la transmission de données en utilisant une variété d'algorithmes de compression. Ce format peuvent être produit par des logiciels comme winrar, winzip…

15 Formats auxiliaires Ce sont généralement de petits fichiers qui contiennent des instructions (ou d'autres informations) qu’un programme exécutable a besoin pour utiliser le fichier de données. Ils sont beaucoup moins complètes que de véritables fichiers de métadonnées qui peuvent jouer des rôles similaires.

16 Formats de base de données relationnelle (1)
Ce sont (généralement) binaires, format interne utilisé par (souvent) des systèmes propriétaires relationnelles de gestion de base de données (SGBD), tels que Microsoft Access. L’utilisateur n’interagit presque jamais directement avec ces formats, mais il est généralement bien inclus dans l'utilisation du système. Les développeurs d'applications peuvent intégrer des paquets de SGBDR existantes dans leurs nouvelles constructions, ou peuvent écrire leur propre code, comme dans le cas de Ocean Data View.

17 Formats de base de données relationnelle(2)
Les formats relationnelles tirent leur nom du principe fondamental que les bases de données peuvent être analysées dans les structures de tables "liés" à l'autre par des liens fixes. Un exemple classique est le parsing des données des stations dans une campagne, des stations, et des valeurs des échantillonnages.

18 World Ocean Database(1)
En 1982, le chercheur américain Syd Levitus a publié un "Atlas climatologique de l'océan mondial» basé sur une collection mondiale de données qui est venu à être appelé le World Ocean Database (WOD). Depuis ce temps, un ensemble plus ou moins standard des analyses climatologiques, basé sur le WOD, a été développé, appelé l'Atlas Mondiale de l'Océan (AMO). Tant le WOD et le AMO (WOA Word Ocean Atlas) sont mis à jour et réédité régulièrement, nouvelle WOD /WOA ayant paru en 1994, 1998, 2001, 2005 , 2009 et 2013.

19 World Ocean Database(2)
Actuellement, l'activité de production WOD /WOA est officiellement nommé le projet de base de données Ocean World. Le WOD est la plus grande collection au monde du profil de l'océan et de données plancton disponibles sans restriction.

20 Système d'observation de l'océan mondial (GOOS)
GOOS est la composante marine du Système mondial d'observation de la Terre, qui comprend également un système mondial d'observation du climat (SMOC) et d'un système mondial d'observation terrestre (SMOC). La base de données GTSPP et Argo sont les principales composantes du GOOS.

21 Global Temperature and Salinity Profile Project (GTSPP)
GTSPP is a global database of temperature and salinity data maintained by the US NODC.  Portions of the same data are also available through the French Coriolis System.

22 Programme Argo Argo est un réseau mondial de flotteurs dérivants de profilage qui mesurent la température et la salinité.

23

24 Integration des données marines
L’intégration des données marines est un acte d'équilibrage entre les 3 concepts majeurs: formats, logiciels et données.

25 Integration des données marines
Dans les années passées, les scientifiques devaient bossez à travers de nombreuses conversions de format (y compris l'écriture de code nécessaire) pour faire des liens. Mais au cours des dernières années, une petite famille de formats flexibles, des programmes informatiques puissants et des sources de données en ligne flexibles ont apporté tout ensemble.

26 Integration des données marines

27

28 Normes des métadonnées
Données sur les données. Informations structurées, généralement dans les structures de table comme qui décrivent complètement les sources, le traitement, la qualité, le format et les caractéristiques de stockage d'ensembles de données. Les informations peuvent inclure des emplacements, temps, personnel, équipement, des algorithmes, ou de nombreux autres sujets d'intérêt.

29 Normes des métadonnées
Informations de métadonnées peut être utilisé à la fois pour la «découverte» d'ensembles de données dans le catalogue recherches, et pour les données "utiliser" lorsque les caractéristiques essentielles des données, telles que les unités de mesure, ne sont disponibles quelque part dans les métadonnées. Ce cours va utiliser la norme de métadonnées ISO

30 Flags de la qualité des données marines(1)
Tableaux récapitulatifs des indicateurs de contrôle de la qualité utilisés dans les ensembles de données pour indiquer les niveaux de qualité présumés de mesures.

31 Flags de la qualité des données marines(2)
Différents programmes et bureaux de gestion des données ont développé différents systèmes, nécessitant des protocoles de conversion spécifiques (également inclus) à être développé. Les codes peuvent être appliqueés aux mesures individuelles ou à des stations entières.