11 Les innovations de l’examen par les pairs aux IRSC, réelles et nécessaires Mark Bisby Vice-président, Recherche Université Laval, 11 avril 2006.

Présentation au sujet: "11 Les innovations de l’examen par les pairs aux IRSC, réelles et nécessaires Mark Bisby Vice-président, Recherche Université Laval, 11 avril 2006."— Transcription de la présentation:

1 11 Les innovations de l’examen par les pairs aux IRSC, réelles et nécessaires Mark Bisby Vice-président, Recherche Université Laval, 11 avril 2006

2 22 Examen par les pairs: le point de vue du demandeur

3 33 le point de vue du membre de comité

4 44 Plus de tout L'augmentation entre 1999-00 (CRM) et 2004-05 des :

5 55 Financement par thème de recherche 99-0004-05 biomédicalrecherche clinique services de santé santé de la population $0 $100 $200 $300 $400 $500 Mio 04-05 99-00 1.9X 2.4X 20.7X 9.2X

6 66 Nouveaux programmes (peut-être il y en a trop?) Alliances communautaires pour la recherche en santé Équipes interdisciplinaires de recherche en santé Équipes en voie de formation Subventions d'équipe Centres de développement de recherche Équipes interdisciplinaires de renforcement des capacités Subventions pour des projets pilotes Subventions de ressources de recherche Cadres de développement de la capacité autochtone de recherche en santé Programme de démonstration des principes Initiative stratégique pour la formation en recherche dans le domaine de la santé Programme des sciences aux affaires Des connaissances à la pratique Synthèses de recherche Subventions de planification et de développement Subventions d'établissement institutionnel Programme de possibilités internationales Etc.

7 77 Les nouveaux comités d'examen par les pairs réalisent le mandat élargi des IRSC (peut-être il y en a trop?) 2000-2001 Éthique, droit et sciences humaines appliqués à la santé Information et promotion de la santé Recherche sur la gestion des systèmes et la politique de la santé 2001-2002 Recherche en interventions et en évaluation dans les services de santé - A et B Déterminants psychosociaux, socio- culturels et comportementaux de la santé-B Santé des populations 2002-2003 Aspects biologiques et cliniques du vieillissement Santé des enfants Sexe social, sexe biologique et santé Perspectives des sciences humaines sur la santé Biologie du développement Application et échange des connaissances Mouvement et exercice Nutrition, aliments et santé Dimensions sociales du vieillissement 2003-2004 Sciences du comportement – C Physique médicale et imagerie 2004-2005 Santé de la population des autochtones 2005-2006 Soins palliatifs et soins en fin de vie Demandé L'environnement et la santé La recherche en santé dans les régions rurales et éloignées La bioinformatique La recherche en santé mondiale

8 88 Taux croissant des demandes, taux décroissant de succès

9 99 Programme de subventions de fonctionnement

10 10

11 11 L’examen par les pairs : un système fragile 19992005 Demandes 6,70010,200 Concours 33157 Comités 45120 membres des comités 8002,400

12 12 Les mythes L'examen par les pairs est utilisé comme s’il était possible de distinguer entre les "bonnes" et les "mauvaises" demandes (financées ou rejetées) qui diffèrent par.01 d'un point de cotation, ce qui n’est pas possible. C’est une loterie autour du seuil. Il y aura toujours ceux qui pensent que des erreurs ont été faites. Il est futile de chercher la perfection. 90% d'efforts pour une amélioration finale de 10% ! Mais il reste plusieurs problèmes réels...

13 13 Trop de travail pour tout le monde Trop de concours, souvent fournissant seulement des subventions à court terme et de basse valeur Trop de comités: chaque spécialité veut son propre comité, mais plusieurs passent en revue seulement un petit nombre de demandes Nous demandons trop d'information qui n'est pas essentielle pour faire un jugement scientifique De plus en plus difficile de recruter des membres de comité Qualité de revue en danger

14 14 Tenter l'impossible Impossible de différencier entre autant de très bonnes demandes, particulièrement avec la compression de l'échelle d'évaluation De plus en plus concurrentiel: la fiabilité et la validité des jugements doivent être aussi bonnes que possible La nouvelle méthode de répartition des subventions (100:0) entre les comités: le rang est plus important que la cotation (>3.5)!

15 15 Distribution des cotations: Subventions de fonctionnement, Concours de Septembre 2005 la gamme théorique la gamme utile

16 16 Tenter l'impossible Impossible de différencier entre autant de très bonnes demandes, particulièrement avec la compression de l'échelle d'évaluation De plus en plus concurrentiel: la fiabilité et la validité des jugements doivent être aussi bonnes que possible La nouvelle méthode de répartition des subventions (100:0) entre les comités: le rang est plus important que la cotation (>3.5)!

17 17 Âge des demandeurs et leur succès (Concours de subventions de fonctionnement, 2003-2005)

18 18