SITools Présentation de l’outil (2/2)

Présentation au sujet: "SITools Présentation de l’outil (2/2)"— Transcription de la présentation:

1 SITools Présentation de l’outil (2/2)
01/06/06 Institut d’Astrophysique Spatiale

2 Rappel Architecture SITools se base sur : Un SGBD (ou plus)
Catalogues de données (ou tables de données) Tables génériques de description Un serveur Apache Un serveur Tomcat Un ensemble de services de base (repository, catalogue, commande, espace utilisateur, …) Une interface web cliente (ou plus) Des SVAs Présentation SITools – IAS, juin 2006

3 . . . Existant Internet browser
Site C Description of services Site B Description of services Client Site A Description of services Connection bus between the various services Internet browser Site A Client Application (Web Server) Repository Site C Added-Value Services 2 User Space Added-Value Services 1 Command Processing Site B AVS 3 Catalog off-line Site N Added-Value Services N Dictionnaires des synonymes Catalog Catalog 1 Catalog 2 Data 1 . . . Service 1 Existant Présentation SITools – IAS, juin 2006

4 SGBD Ajout de 8 tables propres à SITools :
Classe (non utilisée) Type (non utilisée) Dataset : déclaration des tables comme jeu de données Dataset_properties : déclaration de méta données sur les jeux Properties_dependancies : déclaration des dépendances entre valeurs de métadonnées sur les jeux Properties_options : déclaration des valeurs de métadonnées multi-valuées Attribute : déclaration des champs de chaque jeu de données Attribute_dependancies : déclaration des dépendances entre valeurs de critères sur les attributs Attribute_options : déclaration des valeurs d’attributs multivaluées Description des tables de données existantes Eventuellement réparties sur plusieurs autres BDD Présentation SITools – IAS, juin 2006

5 Table : HIRES Présentation SITools – IAS, juin 2006

6 Table : DataSet Table : HIRES Présentation SITools – IAS, juin 2006

7 Table : Attribut Table : DataSet Table : HIRES
Présentation SITools – IAS, juin 2006

8 SGBD Table attribute Cf. ex MOST Présentation SITools – IAS, juin 2006

9 SGBD Type de l’attribut Simple Complexe
boolean, float, geometry, string, int, long, date, timestamp Complexe multi_string Multiple values string multi_int Multiple values integer multi_long Multiple values big integer multi_float Multiple values decimal multi_date Multiple values date multi_timestamp Multiple values date time multi_inter_int Multiple values of interval integer multi_inter_long Multiple values of interval big integer multi_inter_float Multiple values of interval decimal multi_inter_date Multiple values of interval date multi_inter_timestamp Multiple values of interval date time Multi  permet de gérer les attributs multivalués SITools crée automatiquement les tables supplémentaires nécessaires Présentation SITools – IAS, juin 2006

10 SGBD Attributs multivalués DataSet Table
Présentation SITools – IAS, juin 2006

11 SGBD Attributs multivalués Table : Attribut DataSet Table
Présentation SITools – IAS, juin 2006

12 SGBD Attributs multivalués Table : Attribut DataSet Table
Présentation SITools – IAS, juin 2006

13 Serveur Apache Apache 2 Placé devant Tomcat afin de n’ouvrir que le port 80 à l’extérieur Utilisation du mod_jk pour communiquer avec Tomcat Réalise l’authentification des utilisateurs (via un fichier de passwords et de groupes) Héberge l’espace utilisateur (WEBDav pour pouvoir associer des méta données aux données) Configuration Httpd.conf pour définir les droits Création d’un fichier d’utilisateurs et de groupes (via htpasswd) mod_jk.conf mod_dav.conf Présentation SITools – IAS, juin 2006

14 Serveur Tomcat Héberge les webapps des services SITools
Ne réalise aucune authentification (Apache) Version 5.5 de Tomcat utilisée Présentation SITools – IAS, juin 2006

15 Description des services : le catalogue
Interface de connexion aux bases de données Effectue toutesles requêtes SQL. Possibilité de proxy d’accès au SGBD (pas d’ouverture de la BDD à l’extérieur mais ouverture du service catalogue) Possibilité de définir plusieurs BDD pour un catalogue Une requête s’applique sur toutes les BDD déclarée dans SITools postgreSQL, MySQL, (pour Oracle rajouter les drivers JDBC) La BDD n°0 contient les tables descriptives de SITools Accès via JDBC (login/passwd) Possibilité de définir plusieurs catalogues pour une même instance. Présentation SITools – IAS, juin 2006

16 Description des services : le catalogue
Exemple MOST : Fichiers à configurer Log4j.properties Multibase.properties 1 fichier par base déclarée Catalogue.properties 2 bases définies : 0 : les tables SITools + une table « most » 1 : une table « most » contenant d’autres données MOST. Présentation SITools – IAS, juin 2006

17 Description des services : le repository
Service central de SITools Déclaration des catalogues utilisées dans l’instance Regroupement des jeux de données en graphe Association de SVA avec les jeux SVA de traitement, SVA d’aide à la sélection ( liste déroulantes, thumbnails, etc…) Gestion des synonymes par jeu de données Synonymes Convertisseurs Intervalles et bornage Gestion des utilisateurs et des groupes : 3 groupes : administrateur, utilisateur, simple utilisateur Droits d’accès aux jeux de données et aux services. Présentation SITools – IAS, juin 2006

18 Catalog Client Interface
SITOOLS Instance Catalog 1 Meta Model Catalog Service DataSet Model … DataSet Model 2 DataSet Model 1 Meta-data DataSet 1 Meta-data DataSet 2 Client Application Repository Super Catalog Catalog Client Interface Dictionary Associeted Synonyms Catalog 2 Transparent access to catalogs Identification of catalogs and access rights when user authentication is complete Association between Dictionary/catalogs when starting the SiTools instance Présentation SITools – IAS, juin 2006

19 Description des services : le repository
Exemple MOST : Fichiers à configurer Log4j.properties Repository.xml Administration.xml UserRights.xml Synonymes : Définition de 2 synonymes most_ra  most_ra2 Most_dec  most_dec2 Présentation SITools – IAS, juin 2006

20 Description des services : le service commande
Permet aux utilisateurs de déposer des données sur un espace utilisateur (DAV) Gestion des SVA Batch appliqués lors de la commande sur des jeux spécifiques (ex. transformation de format) Utilisation de l’API Jakarta Slide pour l’interface avec DAV. Configuration : Principalement le fichier eudav.properties Présentation SITools – IAS, juin 2006

21 Description des services : les SVA
Programmes indépendants  ajout de fonctions supplémentaires Tracé à la carte Zip Transformation Extraction Exemples disponibles et fournis avec SITools : Implémentation d’une interface Java Déclaration au niveau du repository Possibilité d’effectuer le traitement sur une autre machine Pas d’a priori sur la technologie employée (PHP, C, etc…) Traitement batch (synchrone ou asynchrone) ou interactifs Ex : Zip avec export, JDex, appel de webservices distants (NSSDC), … Présentation SITools – IAS, juin 2006

22 Description des services : l’IHM utilisateur
Accès Web authentifié aux principales fonctions d’un centre de données Recherche sur les jeux et sur les données Par critère Par thumbnails Par graphe Commande de données, interface de gestion de l’espace utilisateur Application de SVA Fonctions d’administration Configurable AppConfig.properties (où l’application trouve les autres services, etc) Eudav.properties (DAV) Tuning CSS JSP Présentation SITools – IAS, juin 2006

23 . . . Existant Internet browser
Site C Description of services Site B Description of services Client Site A Description of services Connection bus between the various services Internet browser Site A Client Application (Web Server) Repository Site C Added-Value Services 2 User Space Added-Value Services 1 Command Processing Site B AVS 3 Catalog off-line Site N Added-Value Services N Dictionnaires des synonymes Catalog Catalog 1 Catalog 2 Data 1 . . . Service 1 Existant Présentation SITools – IAS, juin 2006

24 Démonstration Avec l’instance par défaut (fruits & légumes)
Avec l’instance Cassini Présentation SITools – IAS, juin 2006

25 Exemples Quelques exemples d’instances de SITools
Modification du look (CSS, JSP) Présentation SITools – IAS, juin 2006

26 idem Présentation SITools – IAS, juin 2006

27 Présentation SITools – IAS, juin 2006

28 Un autre exemple Présentation SITools – IAS, juin 2006

29 Présentation SITools – IAS, juin 2006

30 Exemples Quelques exemples de services à valeur ajoutée
Présentation SITools – IAS, juin 2006

31 Utilisation d’un SVA Merge qui fait une mosaique des données
Présentation SITools – IAS, juin 2006

32 Présentation SITools – IAS, juin 2006

33 Un SVA qui va chercher le bon nom d’etoiles en Web services au CDS strasbourg
Présentation SITools – IAS, juin 2006

34 Présentation SITools – IAS, juin 2006

35 Présentation SITools – IAS, juin 2006

36 Présentation SITools – IAS, juin 2006

37 Présentation SITools – IAS, juin 2006

38 Un SVA carto Présentation SITools – IAS, juin 2006

39 Présentation SITools – IAS, juin 2006

40 SVA graphiques sur les données en base
Présentation SITools – IAS, juin 2006

41 Évolutions prévues Évolutions orientées V.O.
Implémentation des protocoles d’accès SIAP et SSAP pour des requêtes sous forme d’URL ou via webservices Création d’un proxy SIAP - SSAP Recherche par cône (position et rayon autour de la position) Création d’un type de critère spécifique Production des fichiers sous forme de VO TABLE Via un SVA de transformation. Présentation SITools – IAS, juin 2006

42 Évolutions prévues Amélioration de l’interface de gestion des utilisateurs Eviter à l’adminstrateur de devoir modifier des fichiers XML à la main Création d’un installeur rapide pour Linux ou Windows. Installation automatique de la version de démonstration (fruits et légumes) Support aux utilisateurs pour la mise en place des instances et support pour la réalisation de SVAs Présentation SITools – IAS, juin 2006

43 Merci de votre attention.
Conclusion SITools est disponible en ligne : Merci de votre attention. Présentation SITools – IAS, juin 2006