27 juin 2008ORI-OAI1 Projet ORI-OAI Outil de Référencement et dIndexation Réseau de portails OAI OpenIWorld Europe 2008 27 juin 2008.

Présentation au sujet: "27 juin 2008ORI-OAI1 Projet ORI-OAI Outil de Référencement et dIndexation Réseau de portails OAI OpenIWorld Europe 2008 27 juin 2008."— Transcription de la présentation:

1 27 juin 2008ORI-OAI1 Projet ORI-OAI Outil de Référencement et dIndexation Réseau de portails OAI OpenIWorld Europe 2008 27 juin 2008

2 ORI-OAI2 Sommaire Contour fonctionnel Concepts Mise en oeuvre Bilan Introduction Évolutions et projets connexes

3 27 juin 2008ORI-OAI3 3 Projet ORI-OAI Introduction

4 27 juin 2008ORI-OAI4 4 Contexte Les établissements universitaires Croissance de la création numérique institutionnelle (scientifiques, pédagogiques, administratifs, documentaires) Accessibilité aux ressources dans divers contextes Référentiel unique de documents, indexation professionnelle «Système Global dInformation» La structuration initiée par les projets nationaux (UNT, UNR, SI détablissement, PRES)

5 27 juin 2008ORI-OAI5 5 Contexte Les UNT (Universités Numériques Thématiques) Réflexion UNIT : évolution du portail et choix dune organisation en « réseau de portails OAI-PMH» Convergence sur les besoins de référencement et dindexation avec lUNT UVED Nécessité de mutualiser les outils et les moyens daccompagnement pour favoriser la démarche avec lensemble des UNT ORI-OAI : projet Open Source inter-UNT soutenu par la SD/TICE

6 27 juin 2008ORI-OAI6 6 Conduite du projet ORI-OAI Un groupe projet (établissements: Insa de Lyon, Université de Rennes 1, INPT, Université de Valenciennes) Un pilotage inter-UNT Une démarche douverture et déchange Site Web et listes de diffusion Groupes de travail (ressources pédagogiques, thèses, archives ouvertes)

7 27 juin 2008ORI-OAI7 7 Les acteurs du projet Avec le soutien du MENESRÉtablissementsUNT

8 27 juin 2008ORI-OAI8 Insertion de ORI-OAI dans létablissement

9 27 juin 2008ORI-OAI9 Insertion de ORI-OAI dans l'établissement Pourquoi intégrer ORI-OAI dans un établissement? La réponse est fonction de l'utilisation que l'on a de l'outil : ORI-OAI comme portail de ressources numériques Diffusion et partage des ressources Publication des productions de l'établissement ORI-OAI comme archive institutionnelle Diffusion et partage des ressources Publication des productions de l'établissement Conservation du patrimoine documentaire

10 27 juin 2008ORI-OAI10 Insertion de ORI-OAI dans l'établissement Mise en place de ORI-OAI dans l'établissement Deux modes de mise en place qui dépendent du contexte de l'établissement : ORI-OAI doit répondre a un besoin global Une réflexion transversale à mener Découpage du projet en plusieurs sous-projets Prise en compte des spécificités de chaque sous-projet ORI-OAI doit répondre a un besoin précis Action rapide inscrite dans une démarche à plus long terme Peut constituer un test pour un projet de plus grande envergure

11 27 juin 2008ORI-OAI11 Insertion de ORI-OAI dans l'établissement Éléments d'une démarche de projet de gestion des documents numériques : Une volonté politique en appui du projet Une communication autour du projet Auprès des utilisateurs tout au long du projet Auprès de la communauté Auprès des instances internes concernées Mise en place de groupes de travail transversaux impliquant tout les acteurs MOA : directions fonctionnelles MOE : Bibliothécaires, Cellule TICE, Informaticiens Utilisateurs : Enseignants-Chercheurs, Etudiants

12 27 juin 2008ORI-OAI12 Insertion de ORI-OAI dans l'établissement Insertion de ORI-OAI dans le Système d'Information Larchive institutionnelle avec ORI-OAI est une des composantes du SI ORI-OAI, en tant que référentiel de documents, alimente le SI (plateforme pédagogique, SI recherche, …) ORI-OAI, peut être alimenté depuis les autres référentiels du SI Principe de complémentarité avec les applications déjà existantes

13 27 juin 2008ORI-OAI13 ORI-OAI dans le réseau de l'établissement Larchive institutionnelle en réseau avec ORI-OAI Alimente les UNT en données sur les ressources pédagogiques larchive française des thèses numériques STAR larchive ouverte nationale des publications de la recherche HAL les moteurs de recherche mondiaux comme OAISTER, Google … Agrège des données en provenance de divers réseaux Utilise des référentiels locaux, nationaux ou internationaux Participe à la construction de référentiels et à leur publication Principe dinteropérabilité dans le respect de la subsidiarité

14 27 juin 2008ORI-OAI14 Contour fonctionnel Projet ORI-OAI

15 27 juin 2008ORI-OAI15 ORI-OAI – Points clés Gérer et publier les ressources numériques de létablissement Référentiel unique de ressources connecté au SI Production de métadonnées et diffusion des ressources produites par létablissement Valoriser la production de létablissement par une indexation de qualité Indexation avec des normes et standards Utilisation de classifications paramétrables articulés sur des standards comme Dewey

16 27 juin 2008ORI-OAI16 ORI-OAI – Points clés Partager les ressources numériques avec dautres établissements Exposition des fiches de métadonnées de létablissement Agrégation de fiches de métadonnées Accéder aux ressources numériques à distance en fonction des droits daccès Système de recherche avancée et thématique Définition des droits

17 27 juin 2008ORI-OAI17 ORI-OAI – Intégration au SI Interopérabilité avec l'ensemble des briques du SI (Moodle, GRAAL, HAL, application de la scolarite,...) ORI-OAI utilise des référentiels partagés : LDAP ORI-OAI propose le référentiel des documents numériques pour le SI (plateforme pédagogique, moteur documentaire, sites web de communication,...) ORI-OAI propose des référentiels métiers : les classifications des UNT Système didentification et dauthentification de létablissement : CAS, Shibboleth,... Intégration dans lENT : moteurs de recherche personnalisés

18 27 juin 2008ORI-OAI18 ORI-OAI – les fonctions indexation de qualité adaptée aux divers types de documents, classification pivot sur les métadonnées, texte intégral en respectant le droit dauteur, les licences et les droits daccès versions de publication, workflows, plusieurs schémas de métadonnées documents natifs toujours disponibles pour les auteurs protocole OAI/PMH, fédération didentités recherche diffusion publication web archivage référencement partage

19 27 juin 2008ORI-OAI19 Types de documents Ressources denseignement ressources pédagogiques multimédia, QCM, exercices, polycopiés numériques, … Travaux détudiants rapports de stage synthèses bibliographiques Travaux de recherche publications, pré-publications, rapports techniques Thèses, mémoires de Master Ressources documentaires éditoriales revues, livres électroniques

20 27 juin 2008ORI-OAI20 Travail fonctionnel Groupes de travail par types de ressources Ressources pédagogiques numériques Thèses Archives ouvertes Documents administratifs … Financement coopératif par les établissements

21 27 juin 2008ORI-OAI21 Synthèse Outil de Référencement et dIndexation mettre en réseau des ressources numériques + Protocole OAI/PMH échanger des données +.ORG développé en logiciel libre pour les UNT, UNR, les PRES, les établissements universitaires, … = ORI-OAI.ORG

22 27 juin 2008ORI-OAI22 Concepts Projet ORI-OAI

23 27 juin 2008ORI-OAI23 Concept de métadonnées

24 27 juin 2008ORI-OAI24 Concept de métadonnées Données liées à une ressource Attributs communs à un ensemble de ressources : titre, auteur, description Données liées à un contexte dutilisation Format générique (Dublin Core) Format spécifique Pédagogique : LOM, LOMFR, SupLOMFR Offre de formation : CDM Thèse : TEF Bibliographique : MARC

25 27 juin 2008ORI-OAI25 Concept de métadonnées Format de métadonnées semi-structuré basé sur un schéma XML structure imbriquée, récursive éléments répétables Rôle des métadonnées dans un entrepôt de données mise en commun dattributs, constitution densembles qualité de référencement vocabulaires fermés, saisie contrôlée gestion de la cohérence des données et des redondances

26 27 juin 2008ORI-OAI26 Classifications

27 27 juin 2008ORI-OAI27 Classification Décimale Dewey (CDD) Dewey Classification universelle Couvre tous les champs de la connaissance Organisation des connaissances en domaines Structure arborescente : du général au spécifique Représentation dun domaine par un indice numérique

28 27 juin 2008ORI-OAI28 Un exemple : 5 Science 53 Physique 54 Chimie 547 Chimie organique … Division Section Classe Classification Décimale Dewey (CDD)

29 27 juin 2008ORI-OAI29 Classifications spécialisées Objectif ? construction d'un « plan de classement » (autrement dit d'une classification simplifiée) Comment ? définition de domaines spécifiques aux besoins de la bibliothèque caractérisation de ces domaines, par des indices Dewey ou leur combinaison exploitation de l'indexation Dewey des documents

30 27 juin 2008ORI-OAI30 Classifications spécialisées Objectif ? Proposer des classifications plus précises et mieux adaptées aux besoins des utilisateurs Comment ? définition de domaines spécifiques caractérisation de ces domaines, par un ou plusieurs indices Dewey

31 27 juin 2008ORI-OAI31 classification Dewey = pivot pour la constitution de classifications spécifiques (UNIT, Valenciennes) Approche transposable aux ressources numériques (avantages : "bibliothèque" virtuelle ; classement possible d'une ressource dans plusieurs domaines ; réorganisation rapide et souple ; …) Classification pivot

32 27 juin 2008ORI-OAI32 Exemple Mon cours.pdf Métadonnées LOM Titre Titre = Technologies énergétique Classification Dewey Classification Dewey = 621.45 (Aéromoteurs, éoliennes)etc.

33 27 juin 2008ORI-OAI33 621.312 136* 621.312 42* 621.312 44* 621.45* 629.229 5* Exemple: classification UNIT 333.92* 621.312 136* 621.45* … Systèmes pour énergie renouvelable Technologies de lénergie éolienne … Energétique, énergie Classification UNIT … Electricité et électrotechnique

34 27 juin 2008ORI-OAI34 Exemple: classification Valenciennes Sciences, techniques, sport … Génie mécanique et énergétique 621* … Classification Valenciennes

35 27 juin 2008ORI-OAI35 Principe du référencement et de la diffusion

36 27 juin 2008ORI-OAI36 Titre Description Auteur Document Upload Demander la publication Procédure de publication (étape auteur) Entrepôt de ressources ORI-OAI Auteur Étape de saisie auteur Metadonnées Doc À publier Demander la publication

37 27 juin 2008ORI-OAI37 Procédure de publication (étape bibliothécaire) Entrepôt de ressources ORI-OAI Bibliothécaire Étape de saisie bibliothécaire Titre Description Auteur Document Metadonnées Doc Publié Publier Rejeter Publier Rejeter Classification Metadonnées

38 Douai, 24 et 25 mai 2007Les Printemps d'UNIT38 WorkFlow Privé En attente de publication Publié Demander à publier publier retirer rejeter [propriétaire, modérateur] [propriétaire] [modérateur] créer [tous] indexer désindexer Envoi mail modérateur Envoi mail propriétaire Positionner permissions Schématisation du processus : diagramme Etats / Transitions Etats (empruntables par la fiche) Transitions (changements détats) Conditions (pour les transitions) Actions (lors de transitions)

39 Douai, 24 et 25 mai 2007Les Printemps d'UNIT39 WorkFlow Privé En attente de publication Publié Demander à publier publier [propriétaire] [modérateur] créer [tous] indexer Envoi mail modérateur Positionner permissions Etats Transitions Conditions Actions Déroulement … (demande de publication de la fiche acceptée)

40 27 juin 2008ORI-OAI40 Projet ORI-OAI Principe des échanges

41 27 juin 2008ORI-OAI41 Entrepôt ORI-OAI Document Quest-ce quun entrepôt ORI-OAI ? Stockage des ressources numériques Métadonnées sur les documents LOM Dublin Core Etc. Métadonnées

42 27 juin 2008ORI-OAI42 OAI-PMH Protocole informatique d'échange de données Permet la collecte et le partage de références Fait intervenir deux types d'acteurs: Fournisseur de données (data provider) : met en forme les métadonnées les stocke dans un entrepôt définit éventuellement des ensembles Fournisseur de services (service provider) : envoie des requêtes aux entrepôts (grâce à un moissonneur) récupère les métadonnées exposées correspondantes les exploite en fournissant des services à valeur ajoutée

43 27 juin 2008ORI-OAI43 Open Archive Initiative (OAI) Etablissement A Moissonneur UNT, UNR, … Entrepôt Etablissement B Entrepôt OAI

44 27 juin 2008ORI-OAI44 OAI pour lutilisateur internaute Moissonneur OAI UNT Entrepôt Site Web UNT Recherche Accès au site Lancement de la recherche Résultat de la recherche Accès au 1 er document Accès au 2 ème document

45 27 juin 2008ORI-OAI45 OAI pour lutilisateur dun établissement Entrepôt ENT ? Moissonneur OAI Etablissement Recherche Accès à lENT Lancement de la recherche Résultat de la recherche Accès au 1 er document Accès au 2 ème document

46 27 juin 2008ORI-OAI46 Fédération didentités (Shibboleth) Entrepôt Shib Qui est-ce ? Un étudiant en médecine 2 ème année Tentative daccès au document Requête à létablissement « fournisseur didentités » Réponse à létablissement « fournisseur de services » Accès au document

47 27 juin 2008ORI-OAI47 UNIT Vue Consortium Site Web UNIT Moissonneur UVED Moissonneur Site Web UVED Etc…

48 27 juin 2008ORI-OAI48 UNIT Vue établissement Entrepôt Shib OAI UNR UVED.eu ENT Moissonneur PRES

49 27 juin 2008ORI-OAI49 Mise en oeuvre Projet ORI-OAI

50 27 juin 2008ORI-OAI50 Projet ORI-OAI Architecture

51 27 juin 2008ORI-OAI51 Fondations 8 modules Indépendants Ayant chacun un rôle précis Tous interopérables Dialoguent entre eux par Web Services Chaque module est très configurable Plusieurs configurations sont proposées par défaut pour sadapter au mieux aux besoins des différents établissements Possibilité de faire évoluer ou dintégrer dautres configurations

52 27 juin 2008ORI-OAI52 Architecture complète ESUP-serveur-WebDAV stockage des documents et gestion des authentifications ORI-OAI-repository entrepôt dexposition des métadonnées ORI-OAI-indexing moteur dindexation ORI-OAI-workflow gestionnaire du workflow de saisie des métadonnées ORI-OAI-vocabulary gestionnaire de vocabulaires ORI-OAI-harvesting moissonneur de métadonnées ORI-OAI-search moteur de recherche 8 modules interopérables ORI-OAI-md-editor éditeur de métadonnées Internet

53 27 juin 2008ORI-OAI53 Cas 1: producteur de données Référencement du lien vers le(s) document(s) Saisie des métadonnées via vocabulaires Vocabulaires dynamiques basés sur lindex Indexation des métadonnées Exposition OAI (optionnelle) Exposition des fiches par requêtes sur lindex Génération de sets OAI via le vocabulaire ESUP-serveur-WebDAV stockage des documents et gestion des authentifications ORI-OAI-repository entrepôt dexposition des métadonnées ORI-OAI-indexing moteur dindexation ORI-OAI-workflow gestionnaire du workflow de saisie des métadonnées ORI-OAI-vocabulary gestionnaire de vocabulaires ORI-OAI-md-editor éditeur de métadonnées

54 27 juin 2008ORI-OAI54 Cas 2: Agrégateur de données Internet ORI-OAI-repository entrepôt dexposition des métadonnées ORI-OAI-harvesting moissonneur de métadonnées ORI-OAI-indexing moteur dindexation ORI-OAI-vocabulary gestionnaire de vocabulaires Moissonnage des fiches de métadonnées via OAI Indexation des métadonnées Exposition OAI (optionnelle) Exposition des fiches par requêtes sur lindex Génération de sets OAI via le vocabulaire

55 27 juin 2008ORI-OAI55 Recherche de documents ORI-OAI-indexing moteur dindexation ORI-OAI-vocabulary gestionnaire de vocabulaires ORI-OAI-search moteur de recherche Génération des interfaces à partir du vocabulaire Recherche dans lindex Traduction de certains résultats via vocabulaire

56 27 juin 2008ORI-OAI56 Projet ORI-OAI Développement

57 27 juin 2008ORI-OAI57 Architecture technique Développement Java Technologies et standards Dublin Core LOM / LOMFR XML Lucene/Lius OAI-PMH Shibboleth Spring JSR-168 (intégration dans ENT, CMS, etc.) Etc. Licence GPL

58 27 juin 2008ORI-OAI58 Les distributions ORI-OAI Version 1.1.0 Disponible depuis le 19 juin 2008 Supporte différents types de documents Édition de métadonnées Ressources pédagogiques (LOM) Ressources « génériques » (Dublin Core) Moissonnage par OAI de ressources extérieures Tout format de métadonnées Pré-configuré pour Dublin Core, LOM et CDM Types dinstallation De production Configuration avancée De démonstration Auto-install dune application Windows

59 27 juin 2008ORI-OAI59 Les distributions ORI-OAI ORI-OAI est mis en place (ou en cours) par : UNIT UNR Nord-pas-de-Calais Université de Rennes 1 Université de Valenciennes INP de Toulouse / ENSEEIHT Université de Nancy 2 Université de Paris 5 Université de Paris 10 Université de Paris Sud Université de Bretagne Sud Université de Limoges INSA de Lyon IUFM de Bretagne Université de Brest Université de Bordeaux 1 Université du Mans Université de Versailles St-Cyr Educagri Etc.

60 27 juin 2008ORI-OAI60 Évolutions et projets connexes Projet ORI-OAI

61 27 juin 2008ORI-OAI61 Évolutions Version 1.5.0 Workflow Dépôt des documents depuis le workflow Gestion des droits daccès aux documents depuis le dépôt Utilisateurs locaux, groupes locaux et distants (shibboleth) Mise en place dun protocole de communication avec dautres plates-formes Moteur dindexation Indexation en texte intégral Crawler web pour les documents distants Moteur de recherche Nouveaux modes de recherche

62 27 juin 2008ORI-OAI62 Évolutions Système de stockage Refonte du système Évolutions générales du projet Identifiants et URL daccès des ressources uniques et pérennes Statistiques De recherche Daccès aux documents

63 27 juin 2008ORI-OAI63 Évolutions et autres projets Version 2.0.0 Référencement et publication dans larchive de létablissements des thèses avec le format TEF des publications de la recherche ORI-OAI / STAR Export de métadonnées TEF vers larchive nationale STAR ORI-OAI / HAL Échange des métadonnées et des ressources de larchive de létablissement avec larchive nationale HAL

64 27 juin 2008ORI-OAI64 Evolutions portées par les utilisateurs Mutualisation des supports daccompagnement et de communication Travaux des groupes fonctionnels Documentation utilisateurs Partage des développements et des configurations spécifiques nayant pas vocation à être publiés dans les versions courantes Ateliers de configuration Boîte à outils Réalisations Echanges entre ORI-OAI et les LMS Développement de lUVSQ : Connecteur Claroline – ORI-OAI CEPIA : connecteur générique LMS-ORI-OAI

65 27 juin 2008ORI-OAI65 Projet ORI-OAI Bilan

66 27 juin 2008ORI-OAI66 Bilan Fruit dun travail collaboratif Analyse des besoins multi-métiers enseignants/chercheurs cellule TICE bibliothécaires informaticiens etc. Rédaction des spécifications par les groupes de travail inter-établissements inter-UNT Paramétrage avancé pour répondre aux caractéristiques de chaque établissement Logiciel évolutif et libre

67 27 juin 2008ORI-OAI67 Repères Site du projet http://www.ori-oai.org Contacts Liste de discussion ori-oai-utilisateurs http://listes.univ-rennes1.fr/wws/info/ori-oai-utilisateurs Liste dinformation ori-oai-info http://listes.univ-rennes1.fr/wws/info/ori-oai-info

68 Douai, 24 et 25 mai 2007Les Printemps d'UNIT68 Démo / Screenshots ORI-OAI-Workflow ORI-OAI-MD-Editor ORI-OAI-Harvester ORI-OAI-Repository ORI-OAI-Search UNIT Université de Valenciennes

69 27 juin 2008ORI-OAI69 ORI-OAI-Workflow

70 27 juin 2008ORI-OAI70 ORI-OAI-Workflow

71 Douai, 24 et 25 mai 2007Les Printemps d'UNIT71 ORI-OAI-MD-Editor

72 Douai, 24 et 25 mai 2007Les Printemps d'UNIT72 ORI-OAI-Harvester

73 Douai, 24 et 25 mai 2007Les Printemps d'UNIT73 ORI-OAI-Repository

74 27 juin 2008ORI-OAI74 ORI-OAI-Search

75 27 juin 2008ORI-OAI75 ORI-OAI-Search

76 27 juin 2008ORI-OAI76 ORI-OAI-Search

77 27 juin 2008ORI-OAI77 ORI-OAI-Search

78 27 juin 2008ORI-OAI78 Moteur de recherche dUNIT

79 27 juin 2008ORI-OAI79 Moteur de recherche Univ. de Valenciennes

80 27 juin 2008ORI-OAI80 Licence Ce travail est mis à disposition sous une licence Creative Commons Vous êtes libres De reproduire, distribuer et communiquer cette création au public De modifier cette création Cette création est mise à disposition selon le Contrat Paternité- NonCommercial-ShareAlike 2.5 disponible en ligne http://creativecommons.org/licenses/by-nc-sa/2.5/ Remarque : Les transparents présentés ici ont été réalisés par : Rosa-Maria Gomez (INSA de Lyon) Yohan Colmant (Université de Valenciennes) Raymond Bourges (Université de Rennes 1) Monique Joly (INSA de Lyon) Alain Mayeur (Université de Valenciennes) François Jannin (EINSEEIHT – INP de Toulouse) Nolwen Huet (INSA de Lyon)