Initiation à la bibliométrie Modèles, outils, méthodes Muriel Lefebvre MCF UT1 – Urfist muriel.lefebvre@ut-capitole.fr

I. Le contexte Scientométrie = mesure de l’activité scientifique Bibliométrie = mesure de l’activité scientifique à partir des publications Muriel Lefebvre – Urfist Toulouse

I. Origines : Loi de Lotka (1926) Solla Price : Nombre de scientifiques produisant n articles par unité de temps est proportionnel à 1/n2 Solla Price : nbre de chercheurs double tous les 20 ans (1964) Collèges invisibles Merton : Effet Matthieu (1968) Muriel Lefebvre – Urfist Toulouse

I. Utilisation de la bibliométrie Utilisation pour: veille technologique Sociologie des sciences évaluation de la recherche Publications aujourd’hui utilisées comme instrument de mesure pour évaluer qualité scientifique d’un auteur, d’une revue, d’un groupe de recherche, d’un pays Muriel Lefebvre – Urfist Toulouse

I. Contexte international Classement de Shanghaï http://www.shanghairanking.com/ARWU2013.html Classement européen de Leiden http://www.leidenranking.com/ranking Classement de l’Ecole des Mines de Paris http://www.mines-paristech.fr/Actualites/PR/Ranking2011FR- Fortune2010.html Classement européen U-Multirank Muriel Lefebvre – Urfist Toulouse

I. Contexte national Cadre de la LOLF/LRU Indicateurs de l’OST http://www.obs-ost.fr/ Muriel Lefebvre – Urfist Toulouse

II. L’évaluation Evaluation par les pairs : Evaluation qualitative du contenu qui conditionne la publication Evaluation quantitative Après publication, évaluation de la notoriété d’une publication Présupposé : article beaucoup cité est un très bon article Muriel Lefebvre – Urfist Toulouse

II.a. Evaluation qualitative Limites de ce système Rapporteurs pas toujours spécialistes anonymat difficile à respecter longueur de la procédure dimension subjective de la procédure anonymat favorise désengagement évaluation  vérification plagiat copinage Muriel Lefebvre – Urfist Toulouse

II.b. L’évaluation quantitative des publications Bases de données de citations Présupposé : un article beaucoup cité est un bon article Utilisation d’outils bibliographiques Exemple : ISI (Institute for Scientific Information) en 1958 par Eugène Garfield Muriel Lefebvre – Urfist Toulouse

III. Les indices de citations Web of Science (Thomson – ISI) 11 500 revues analysées – peu de SHS http://access.webofknowledge.com/ User ID: ssrtraining New Password: S@p3ucker Evaluer l’article : Science Citation Index Evaluer l’auteur : facteur h Evaluer la revue : Facteur d’impact Muriel Lefebvre – Urfist Toulouse

Nbre de publications du BRGM entre 2000 et 2010 Exercices Nbre de publications du BRGM entre 2000 et 2010 Muriel Lefebvre – Urfist Toulouse

Nbre moyen de citations du BRGM entre 2012 et 2014 Muriel Lefebvre – Urfist Toulouse

Article en français le plus cité de l’université Paul Sabatier Muriel Lefebvre – Urfist Toulouse

Part des publications de l’Université de Toulouse par rapport à la production scientifique française Muriel Lefebvre – Urfist Toulouse

Facteur d’impact de la revue dans laquelle les chercheurs du laboratoire de Jean Tirole publient le plus Muriel Lefebvre – Urfist Toulouse

III. Limites de ces outils critère sélection revuea anglais = langue de référence auto-citations Pratiques de citations variables Multiplicité des patronymes Identification des institutions (signature unifiée) Article très cité peut être très mauvais Muriel Lefebvre – Urfist Toulouse

III. Les indices de citations Scopus (Elsevier) 18 000 revues analysées Projet SCImago Google scholar Un périmètre indéterminé Logiciel « publish or perish » Un logiciel libre et gratuit Muriel Lefebvre – Urfist Toulouse

III. Multiplication des indicateurs Faculty of 1000, Facteur d’impact à 5 ans Facteur Y Altmetrics Mais aussi indice de rétractation… Muriel Lefebvre – Urfist Toulouse

IV. Problématique SHS Indicateurs bibliométriques peu pertinents Projet ERIH Liste CNRS des revues Liste AERES des revues JournalBase Muriel Lefebvre – Urfist Toulouse

IV. Les enjeux Notion d’auteur Enjeux épistémologiques Enjeux sociologiques Enjeux économiques Enjeux politiques Muriel Lefebvre – Urfist Toulouse