Projet ORI Outil de Référencement et dIndexation Colloque International TICE 2006 Toulouse, 25 octobre 2006.

Présentation au sujet: "Projet ORI Outil de Référencement et dIndexation Colloque International TICE 2006 Toulouse, 25 octobre 2006."— Transcription de la présentation:

1 Projet ORI Outil de Référencement et dIndexation Colloque International TICE 2006 Toulouse, 25 octobre 2006

2 TICE 20062 Sommaire Les fonctions du système Les fonctions du système Le partage des données et le contrôle daccès Démonstration dans un réseau de systèmes ORI Yohan Colmant Université de Valenciennes et du Hainaut-Cambrésis Quelle utilité pour un établissement ? Rosa María Gómez de Regil INSA de Lyon Introduction Alain Mayeur Université de Valenciennes et du Hainaut-Cambrésis

3 Toulouse, 25 octobre 2006TICE 20063 Introduction Projet ORI-OAI Valoriser et partager la production numérique scientifique, pédagogique et documentaire des établissements universitaires Valoriser et partager la production numérique scientifique, pédagogique et documentaire des établissements universitaires

4 Toulouse, 25 octobre 2006TICE 20064 Contexte Croissance de la création numérique institutionnelle (documents scientifiques, pédagogiques, administratifs, ressources documentaires..) Mise en place dune démarche « Système Global dInformation » à léchelle dun établissement Besoin dun référentiel unique de documents et dune indexation professionnelle Demande croissante daccessibilité aux ressources numériques dans différents contextes La structuration importante initiée par les projets nationaux (UNT, UNR, SI détablissement)

5 Toulouse, 25 octobre 2006TICE 20065 Historique Une réflexion au sein dUNIT sur lévolution du portail de lUNT et le choix dune organisation sous forme de « réseau de portails » sappuyant sur OAI-PMH Une convergence sur les besoins de référencement et dindexation avec lUNT UVED Une nécessité de mutualiser les outils et les moyens daccompagnement pour favoriser la démarche avec lensemble des UNT ORI-OAI : projet inter-UNT soutenu par la SD/TICE

6 Toulouse, 25 octobre 2006TICE 20066 But Répondre aux besoins de stockage, référencement, indexation et daccès aux documents Assurer la valorisation et la gestion pérenne des contenus numériques Développer un SGI en lien avec les ressources numériques dun référentiel unique de documents Partager les ressources numériques avec dautres établissements Donner laccès à distance et selon les droits

7 Toulouse, 25 octobre 2006TICE 20067 Le partage dans ORI Patrimoine pérenne pouvant se partager Avec les acteurs de létablissement Avec les partenaires des réseaux locaux, nationaux et internationaux de létablissement Avec les internautes En respectant les règles du numérique Droit dauteur Interopérabilité des systèmes Normes déchange Vocabulaire commun

8 Toulouse, 25 octobre 2006TICE 20068 Un système de gestion de documents Mise en place dun système de gestion de documents Mise en place dun système de gestion de documents Système de gestion et de publication des ressources numériques (gestion des droits, indexation LOM-FR, DC, TEF.., indexation classification des UNT) Système de production impliquant les acteurs concernés (workflows) Systèmes de partage (échange de métadonnées /OAI- PMH) Système de recherche avancé (métadonnées, texte intégral), accès thématiques

9 Toulouse, 25 octobre 2006TICE 20069 ORI-OAI Un groupe projet (établissements: Insa de Lyon, Université de Rennes 1, INPT, Université de Valenciennes) Un pilotage inter-UNT Un dispositif de communication et déchange avec les partenaires potentiels

10 Toulouse, 25 octobre 2006TICE 200610 ORI-OAI: Quelle utilité pour un établissement ?

11 Toulouse, 25 octobre 2006TICE 200611 ORI-OAI – Le cas de lINSA de Lyon INSA de Lyon Établissement Universitaire à vocation INTERNATIONALE 5500 étudiants (1er cycle intégré, cycles ingénieurs, masters recherche, doctorat) 500 enseignants chercheurs et chercheurs 12 filières de formation dingénieurs 10 masters Recherche 27 laboratoires de recherche dans 5 pôles 5 pôles Recherche Energie-Environnement, STIC, Matériaux, Mécanique, Biosciences 3 Filières internationales en 1er cycle EURINSA, ASINSA, AMERINSA 28% détudiants étrangers 75% de chaque promotion en séjour à létranger INTEGRATION FORMATION RECHERCHE

12 Toulouse, 25 octobre 2006TICE 200612 Les réseaux : une CONSTANTE Locaux PRES - PUL (Pole Universitaire Lyonnais) UNRRA AGERA (Alliance des Grandes Écoles de Rhône-Alpes) Nationaux CGE (Conférence des Grandes Écoles) Réseau INSA-UT, Réseau UNIT COUPERIN Internationaux de formation Offre internationale 5 INSA Graduate School of Science and Technology Master Erasmus Mundus en Mécanique Doubles diplômes : Irlande (Trinity College), Bresil (UFPR, UFU), Japon T OHOKU de recherche Formation Recherche en Environnement CEFCEET Chine, IFUWWT Inde Partenariat européen de recherche : 33 projets PCRD

13 Toulouse, 25 octobre 2006TICE 200613 La force du NUMERIQUE et dune bonne INDEXATION CITHER Thèses numériques 400 depuis 1999 68 000 visiteurs internautes en 2005 1 500 000 documents ouverts en 2005 POLYCOP Polycopiés numériques 50 depuis 2004 3800 visiteurs en 2005 (550 INSA, 250 INSA à distance, 3000 internautes) 11 000 documents ouverts en 2005 COUPERIN Revues numériques 5000 revues en 2005 2500 lecteurs INSA 150 000 articles lus

14 Toulouse, 25 octobre 2006TICE 200614 Ressources numériques et SYSTEME GLOBAL dINFORMATION Les établissements produisent ou acquièrent des ressources numériques qui constituent leur PATRIMOINE : documents pédagogiques, documents scientifiques, travaux détudiants, ressources documentaires, documents administratifs,… Le SGI utilise ces ressources numériques, stockées dans un REFERENTIEL UNIQUE de documents, pour IRRIGUER les applications du SI : site web et intranet de létablissement, plate forme pédagogique, plate forme de recherche, portail documentaire,…

15 Toulouse, 25 octobre 2006TICE 200615 Patrimoine pérenne et préservé à partager Avec tous les acteurs de létablissement Avec les partenaires des réseaux locaux, nationaux et internationaux de létablissement Avec les internautes En respectant les REGLES de « politesse » du numérique respect du droit des auteurs, interopérabilité des systèmes, normes déchange, vocabulaires communs pour sinscrire dans la CIRCULATION DE LA CONNAISSANCE

16 Toulouse, 25 octobre 2006TICE 200616 Construire les entrepôts et les voies de circulation Avec la Direction des Systèmes dInformation Se conformer aux règles choisies pour lENT Avec les organismes de normalisation (AFNOR) Élaborer les normes de métadonnées : TEF, LOM-FR Avec les communautés dutilisateurs (UNIT) Définir des services spécifiques à lUNT Définir un langage commun

17 Toulouse, 25 octobre 2006TICE 200617 Partager avec UNIT UNIT : Université Numérique Ingénierie Technologie 42 partenaires Portail daccès aux ressources numériques des partenaires ou des ressources développées dans le cadre dUNIT : réseau de portails OAI Portail UNIT / Réseau de portails Guichet dentrée sur les ressources numériques pédagogiques Ressources distribuées dans les établissements Mécanisme de partage des ressources : OAI-PMH étendu Indexer les ressources numériques Classification UNIT : spécialisée pour cette communauté : Classification internationale Dewey : UNIVERSALITE

18 Toulouse, 25 octobre 2006TICE 200618 Vocabulaires UNIT – Dewey Classification UNIT élaborée par les communautés UNIT points dentrée thématiques sur les ressources numériques Classification Dewey utilisée pour lindexation langage pivot international inter opérable avec les applications qui utilisent la Dewey (BU, Thèses) Correspondance UNIT/Dewey Chaque indice peut être « adopté » par plusieurs communautés Indice 621.45 : Aéromoteurs, éoliennes UNIT Energétique, énergie / Technologies de l'énergie éolienne UNIT Electricité et électrotechnique / Systèmes pour énergie renouvelable

19 Toulouse, 25 octobre 2006TICE 200619 Quelles fonctions pour ORI, outil de référencement et dindexation des ressources numériques Quelles fonctions pour ORI, outil de référencement et dindexation des ressources numériques

20 Toulouse, 25 octobre 2006TICE 200620 ORI Outil de Référencement et dIndexation le contexte

21 Toulouse, 25 octobre 2006TICE 200621 ORI – le contexte Partage des ressources numériques dans le cadre des universités numériques thématiques (UNT), des universités numériques en région (UNR) et des universitaires Interopérabilité des systèmes et possibilité daccès depuis les ENT des établissements au sein des UNT et UNR Mutualisation projet inter-UNT appui sur les réflexions « portail » UNIT, UVED, Injac/ESUP, SYNAPSE développement en logiciel libre

22 Toulouse, 25 octobre 2006TICE 200622 ORI – MOA Avec le soutien du MENESR UNTÉtablissements

23 Toulouse, 25 octobre 2006TICE 200623 ORI Outil de Référencement et dIndexation les points clés

24 Toulouse, 25 octobre 2006TICE 200624 ORI – Points clés Gérer et publier les documents numériques de létablissement Référentiel unique connecté au SI Accès thématique aux ressources Système de recherche avancée

25 Toulouse, 25 octobre 2006TICE 200625 ORI – Points clés Partager les ressources numériques avec dautres établissements enrichir loffre numérique augmenter la visibilité des ressources mutualiser les coûts Valoriser la production scientifique et pédagogique par une indexation de qualité Accéder aux ressources numériques à distance en fonction des droits daccès

26 Toulouse, 25 octobre 2006TICE 200626 Types de documents Ressources denseignement polycopiés numériques, exercices, ressources pédagogiques multimédia Travaux détudiants rapports de stage synthèses bibliographiques Travaux de recherche publications, pré-publications, rapports techniques mémoires de Master, mémoires de Thèse Ressources documentaires éditoriales revues, livres électroniques

27 Toulouse, 25 octobre 2006TICE 200627 ORI Outil de Référencement et dIndexation les fonctions

28 Toulouse, 25 octobre 2006TICE 200628 ORI – les fonctions indexation de qualité adaptée aux divers types de documents sur les métadonnées, texte intégral en respectant le droit dauteur, les licences et les droits daccès versions de publication, workflows, plusieurs schémas de métadonnées documents natifs toujours disponibles pour les auteurs protocole OAI/PMH recherche diffusion publication web archivage référencement partage

29 Toulouse, 25 octobre 2006TICE 200629 Classifications (appel à des référentiels) Classifications spécialisées pour les communautés (ex. UNIT) Classification internationale pivot (ex. Dewey) Métadonnées qualité adaptation des métadonnées au type de document (LOM, TEF, Dublin Core) Référencement

30 Toulouse, 25 octobre 2006TICE 200630 Synthèse Outil de Référencement et dindexation permet de mettre en réseau des ressources numériques permet déchanger des données via le protocole OAI/PMH est développé en logiciel libre est utilisé par les UNT et les établissements universitaires

31 Toulouse, 25 octobre 2006TICE 200631 Le principe de partage des données entre les partenaires dun établissement (échange selon le protocole OAI-PMH, accès authentifié par fédération didentité) Le principe de partage des données entre les partenaires dun établissement (échange selon le protocole OAI-PMH, accès authentifié par fédération didentité)

32 Toulouse, 25 octobre 2006TICE 200632 ORI Outil de Référencement et dIndexation Principe des échanges

33 Toulouse, 25 octobre 2006TICE 200633 Entrepôt ORI Document Quest-ce quun entrepôt ORI ? Stockage des ressources numériques Métadonnées sur les documents Dublin Core LOM-fr Etc. Métadonnées

34 Toulouse, 25 octobre 2006TICE 200634 Open Archive Initiative (OAI) Etablissement A Moissonneur UNT, UNR, … Entrepôt Etablissement B Entrepôt OAI

35 Toulouse, 25 octobre 2006TICE 200635 OAI pour lutilisateur internaute Moissonneur OAI UNT Entrepôt Site Web UNT Recherche Accès au site Lancement de la recherche Résultat de la recherche Accès au 1 er document Accès au 2 ème document

36 Toulouse, 25 octobre 2006TICE 200636 OAI pour lutilisateur dun établissement Entrepôt ENT ? Moissonneur OAI Etablissement Recherche Accès à lENT Lancement de la recherche Résultat de la recherche Accès au 1 er document Accès au 2 ème document

37 Toulouse, 25 octobre 2006TICE 200637 Fédération didentités (Shibboleth) Entrepôt Shib Qui est-ce ? Un étudiant en médecine 2 ème année Tentative daccès au document Requête à létablissement « fournisseur didentités » Réponse à létablissement « fournisseur de services » Accès au document

38 Toulouse, 25 octobre 2006TICE 200638 Fédération didentités (Shibboleth) Pour en savoir plus Tutorial JRES 2005 Pascal Aubry (Rennes 1), Florent Guilleux (CRU), Olivier Salaün (CRU) http://federation.cru.fr/doc/shibboleth-jres2005-article.pdf

39 Toulouse, 25 octobre 2006TICE 200639 UNIT Vue Consortium Site Web UNIT Moissonneur UVED Moissonneur Site Web UVED Etc…

40 Toulouse, 25 octobre 2006TICE 200640 UNIT Vue établissement Entrepôt Shib OAI UNR UVED.eu ENT Moissonneur

41 Toulouse, 25 octobre 2006TICE 200641 ORI Outil de Référencement et dIndexation Développement

42 Toulouse, 25 octobre 2006TICE 200642 Généralités ORI est composé de 7 modules Composants interopérables avec des outils existants Utilisation de standards comme OAI, XML Différentes versions des composants Portlet à intégrer dans un moteur type ENT Standalone: application indépendante Plusieurs distributions prévues Les modules peuvent être associés les uns aux autres suivant le cas dutilisation (UNT, UNR, établissement, …)

43 Toulouse, 25 octobre 2006TICE 200643 Technologies Technologies employées par tous les composants Java comme langage de programmation Spring comme framework de développement XML comme norme déchange

44 Toulouse, 25 octobre 2006TICE 200644 Les composants ORI ORI-OAI-workflow Description Outil de production Édition et stockage des métadonnées (avec WorkFlow intégré) Gestion des documents Technologies employées OsWorkflow comme moteur de workflow XForms/Orbeon pour lédition des métadonnées eXist/Spring XMLDB pour le stockage des métadonnées JSF pour la présentation Hibernate pour les données propres au composant Acegi Security pour sécuriser lapplication XFire pour la communication entre Spring et Orbeon

45 Toulouse, 25 octobre 2006TICE 200645 Les composants ORI ESUP-serveur-WebDAV Description Développé dans le cadre du consortium ESUP Portail Stockage des documents Gestion des droits daccès Compatible fédération didentités Technologies employées WebDAV comme norme déchange des données Serveur Jakarta/Slide comme socle

46 Toulouse, 25 octobre 2006TICE 200646 Les composants ORI ORI-OAI-harvesting Description Moissonnage OAI des fiches de métadonnées Technologies employées OAI-PMH comme norme déchange OAIHarvester2 (OCLC) comme bibliothèque OAI pour Java eXist/Spring XMLDB pour le stockage des métadonnées Quartz pour la programmation des moissons

47 Toulouse, 25 octobre 2006TICE 200647 Les composants ORI ORI-OAI-indexing Description Indexation des fiches de métadonnées provenant de ORI-OAI-workflow ORI-OAI-harvesting Moteur de recherche des fiches de métadonnées Crawler pour lindexation plein texte des documents Technologies employées Lucene comme moteur dindexation et de recherche Lius pour lindexation de plus haut niveau

48 Toulouse, 25 octobre 2006TICE 200648 Les composants ORI ORI-OAI-search Description Interface de recherche Thématique Avancée Technologies employées Spring MVC pour la présentation XSLT pour la présentation des fiches de métadonnées

49 Toulouse, 25 octobre 2006TICE 200649 Les composants ORI ORI-OAI-repository Description Entrepôt OAI des fiches de métadonnées locales Technologies employées OAI-PMH comme norme déchange OAICAT (OCLC) pour lexposition OAI

50 Toulouse, 25 octobre 2006TICE 200650 Les composants ORI ORI-OAI-vocabulary Description Gestion des classifications de documents Vocabulaires (mots-clefs, …) Multilinguisme Utilisé pour lédition des métadonnées et la recherche thématique Technologies employées JSF pour la présentation

51 Toulouse, 25 octobre 2006TICE 200651 Larchitecture ORI

52 Toulouse, 25 octobre 2006TICE 200652 Les distributions ORI DISTRIBUTION PACKAGES ORI-OAI WorkflowStockageRepositoryHarvestingIndexingSearchVocabulary EtablissementOUIOptionnel OUI Optionnel UNTOptionnelNONOptionnelOUI UNROptionnelNONOptionnelOUI Optionnel Catalogue régional de formations NON OptionnelOUI Démonstration

53 Toulouse, 25 octobre 2006TICE 200653 Calendrier Version 1.0 1 er trimestre 2007 Version fonctionnellement complète Support de différents types de stockage des ressources Limitation Si utilisation de ESUP-serveur-WebDAV: gestion des documents et droits daccès depuis lENT ESUP Portail Administration des composants par des fichiers XML Version 2.0 Date non communiquée Indépendance pour le positionnement des droits sur les documents Interface dadministration de tous les composants Gestion des statistiques de recherche, daccès Etc.

54 Toulouse, 25 octobre 2006TICE 200654 Acteurs du développement Équipe de pilotage avec des représentants dUNT Coordination fonctionnelle 1 personne Coordination technique 2 personnes Développement: 6 personnes 2 Université de Rennes 1 3 Université de Valenciennes 1 INP Toulouse Tests 8 personnes

55 Toulouse, 25 octobre 2006TICE 200655 Démonstration de la recherche dinformation et du partage de données dans un réseau de systèmes ORI Démonstration de la recherche dinformation et du partage de données dans un réseau de systèmes ORI

56 Toulouse, 25 octobre 2006TICE 200656 Démonstration Etape 1 Recherche dans des entrepôts de ressources locaux Etape 2 Recherche dans différentes moissons dentrepôts OAI

57 Toulouse, 25 octobre 2006TICE 200657 ETAPE 1 Recherche dans des entrepôts de ressources locaux ETAPE 1 Recherche dans des entrepôts de ressources locaux

58 Toulouse, 25 octobre 2006TICE 200658 INSA de Lyon À lINSA de Lyon les ressources sont gérées localement avec loutil ORI-OAI Recherche simple sur le mot « structure »

59 Toulouse, 25 octobre 2006TICE 200659 INSA de Lyon structure

60 Toulouse, 25 octobre 2006TICE 200660 Rennes 1 À luniversité de Rennes 1, les ressources sont gérées localement avec loutil ORI-OAI Recherche simple sur le mot « eau »

61 Toulouse, 25 octobre 2006TICE 200661 Rennes 1 eau

62 Toulouse, 25 octobre 2006TICE 200662 UNIT Les ressources sont gérées sur le site UNIT par un outil autre que ORI-OAI Recherche thématique sur le thème « Mécanique des solides et des structures » « Fondamentaux »

63 Toulouse, 25 octobre 2006TICE 200663 UNIT

64 Toulouse, 25 octobre 2006TICE 200664 ETAPE 2 Recherche dans différentes moissons dentrepôts ETAPE 2 Recherche dans différentes moissons dentrepôts

65 Toulouse, 25 octobre 2006TICE 200665 Etape 2 Moisson 1 INSA de Lyon, Université de Rennes 1, UNIT

66 Toulouse, 25 octobre 2006TICE 200666 Moisson 1: LOM INSA de Lyon, Rennes 1, UNIT Moissonneur Entrepôt OAI LOM OAI Entrepôt OAI LOM Entrepôt OAI LOM INSA de Lyon Rennes 1 Référencement Mutualisé UNIT

67 Toulouse, 25 octobre 2006TICE 200667 Moisson 1: LOM INSA de Lyon, Rennes 1, UNIT Recherche thématique sur le même thème que la recherche précédente sur le site UNIT « Mécanique des solides et des structures » « Fondamentaux »

68 Toulouse, 25 octobre 2006TICE 200668 Moisson 1: LOM INSA de Lyon, Rennes 1, UNIT

69 Toulouse, 25 octobre 2006TICE 200669 Etape 2 Moisson 2 INP de Toulouse, Université de Valenciennes, UMVF

70 Toulouse, 25 octobre 2006TICE 200670 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF Moissonneur OAI Entrepôt OAI LOM Entrepôt OAI LOM INP Toulouse Valenciennes Entrepôt OAI LOM UMVF

71 Toulouse, 25 octobre 2006TICE 200671 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF Recherche avancée sur le mot « environnement »

72 Toulouse, 25 octobre 2006TICE 200672 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF environnement

73 Toulouse, 25 octobre 2006TICE 200673 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF

74 Toulouse, 25 octobre 2006TICE 200674 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF Avantages du référencement avec le format LOM Recherche affinée avec des critères pédagogiques Recherche modifiée On ajoute le critère « Difficulté=moyen »

75 Toulouse, 25 octobre 2006TICE 200675 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF environnement moyen

76 Toulouse, 25 octobre 2006TICE 200676 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF

77 Toulouse, 25 octobre 2006TICE 200677 Moisson 2: LOM INP Toulouse, Valenciennes, UMVF

78 Toulouse, 25 octobre 2006TICE 200678 Etape 2 Moisson 3 BNF, MIT

79 Toulouse, 25 octobre 2006TICE 200679 Moisson 3: Dublin Core BNF, MIT Moissonneur OAI Entrepôt OAI DC Entrepôt OAI DC BNF MIT LOM

80 Toulouse, 25 octobre 2006TICE 200680 Moisson 3: Dublin Core BNF, MIT Recherche simple sur le mot « analyse »

81 Toulouse, 25 octobre 2006TICE 200681 Moisson 3: Dublin Core BNF, MIT analyse

82 Toulouse, 25 octobre 2006TICE 200682 Moisson 3: Dublin Core BNF, MIT

83 Toulouse, 25 octobre 2006TICE 200683 Moisson 3: Dublin Core BNF, MIT

84 Toulouse, 25 octobre 2006TICE 200684 Moisson 3: Dublin Core BNF, MIT Recherche simple sur le mot « structure »

85 Toulouse, 25 octobre 2006TICE 200685 Moisson 3: Dublin Core BNF, MIT structure

86 Toulouse, 25 octobre 2006TICE 200686 Moisson 3: Dublin Core BNF, MIT

87 Toulouse, 25 octobre 2006TICE 200687 Moisson 3: Dublin Core BNF, MIT

88 Toulouse, 25 octobre 2006TICE 200688 Repères Site du projet http://www.ori-oai.org Contacts Coordination fonctionnelle Rosa María Gómez de Regil DocINSA – INSA de Lyon rosa-maria.gomez@insa-lyon.fr Coordination technique Yohan Colmant Université de Valenciennes yohan.colmant@univ.valenciennes.fr

89 Toulouse, 25 octobre 2006TICE 200689 Licence Ce travail est mis à disposition sous une licence Creative Commons Vous êtes libres De reproduire, distribuer et communiquer cette création au public De modifier cette création Cette création est mise à disposition selon le Contrat Paternité-NonCommercial- ShareAlike 2.5 disponible en ligne http://creativecommons.org/licenses/by-nc-sa/2.5/ Remarque : Les transparents présentés ici ont été réalisés par : Rosa-Maria Gomez (INSA de Lyon) Yohan Colmant (Université de Valenciennes) Raymond Bourges (Université de Rennes 1) Monique Joly (INSA de Lyon)