L'examen par les pairs est une composante essentielle du cycle de vie de la recherche et de l'érudition. Et pourtant, les activités d'évaluation par les pairs des chercheurs sont rarement reconnues comme une contribution fondamentale à la recherche. Dans le même temps, la nécessité d'encourager davantage de chercheurs à participer au processus d'examen pour traiter un nombre toujours croissant de manuscrits et de subventions se heurte à un désir croissant de trouver des moyens de renforcer la confiance dans les processus d'examen par les pairs. Le moment est venu de réfléchir de manière créative à la façon de créer des incitations (y compris la reconnaissance publique) et la confiance (par la validation).
La pratique de la reconnaissance de l'examen par les pairs
Avec cet état d'esprit dans, ORCID ainsi que F1000 se sont associés pour développer un moyen pratique de citer les activités d'examen par les pairs, basé sur un ensemble standard de termes et l'utilisation d'identifiants persistants. « Le processus d'examen par les pairs formel mais complètement transparent après la publication, utilisé à la fois sur le F1000Prime service de recommandation d'articles et sur les articles publiés dans F1000Recherche nous offre l'opportunité de maximiser le crédit que nous pouvons rendre à nos arbitres pour le temps et les efforts souvent importants nécessaires pour produire une bonne évaluation par les pairs – un travail qui reste généralement invisible », déclare Rebecca Lawrence, directrice générale de F1000Research. « Permettre aux arbitres à la fois de pouvoir citer leurs rapports d'arbitres souvent longs, ainsi que de les inclure sur des listes de leurs sorties telles que ORCID dossiers, est un grand pas en avant dans la reconnaissance adéquate de cette activité qui est essentielle pour l'avancement de la compréhension scientifique.
Travailler avec les Consortia Advancing Standards in Research Administration Information (CASRAI), nous avons établi un groupe de travail communautaire définir un ensemble de champs standard et des règles commerciales qui fonctionneraient dans les nombreux types d'examen par les pairs utilisés dans la publication, le financement, la gestion de la recherche universitaire et les présentations de conférence. Pour tous les types d'examens formels, nous avons constaté que le principal défi consistait à définir une norme suffisamment flexible pour permettre l'ensemble de l'examen, des processus anonymes en double aveugle à l'examen entièrement ouvert. En tant que groupe, nous avons conclu que, pour les examens anonymes, l'entité qui demande et gère les examens devrait fournir un nombre total d'examens pour cet examinateur sur une période de temps appropriée.
Recommandations du groupe de travail
Nous avons le plaisir d'annoncer la publication des recommandations du Groupe de travail pour un profil de données d'activité d'examen par les pairs. Le groupe de travail a conclu que les éléments de données de citation suivants devraient être utilisés pour décrire l'examen par les pairs :
- PERSONNE: Champs, y compris un identifiant de personne, décrivant la personne qui a effectué l'examen et qui est reconnue pour cette activité d'examen.
- EXAMEN: Champs, y compris un identifiant d'avis, décrivant l'avis lui-même. Dans le cas d'avis aveugles ou non partagés, ces informations peuvent être laissées en blanc.
- OBJET: Champs décrivant le sujet de l'examen, tels que l'article, la subvention ou un autre élément. Dans le cas d'avis aveugles ou non partagés, ces informations peuvent également être laissées en blanc.
- ORGANISATION: Champs, y compris un identifiant d'organisation, décrivant l'organisation qui reconnaît la personne pour l'activité d'évaluation, telle qu'un éditeur, une association ou un bailleur de fonds.
Pour articuler plus clairement les contributions et mieux s'adapter aux flux de travail typiques de l'examen par les pairs, le groupe de travail a recommandé que chaque contribution à l'examen soit décrite indépendamment. Par exemple, si une personne a effectué quatre révisions pour un journal particulier, quatre descriptions de révision seraient nécessaires pour décrire l'activité. Cependant, pour permettre l'anonymat, qui est parfois nécessaire pour l'activité d'examen par les pairs, l'agrégation des activités et des métadonnées minimales sont acceptables, avec uniquement la personne, l'organisation/la ressource qui a parrainé l'examen, le nombre d'examens sur une période donnée, et un identifiant de source unique tel qu'une page d'accueil répertoriant les examinateurs, requis pour reconnaître la contribution.
Mise en œuvre des recommandations
Plusieurs organisations prévoient d'adopter cette norme de citation d'examen par les pairs lors de la collecte, du stockage et de l'échange d'informations d'examen par les pairs. En avril 2015, le ORCID L'équipe technique a commencé le processus d'interprétation et de mise en œuvre des recommandations du groupe de travail, et nous lancerons cet été la prise en charge de l'examen par les pairs dans nos API et notre interface utilisateur. Voici ce que d'autres organisations prévoient :
- F1000 prévoit de mettre en œuvre le nouveau modèle de données de citation de revue pour publier l'activité de revue validée au réviseur ORCID via leur plateforme et travailler avec leurs partenaires pour faciliter l'intégration dans les workflows de révision de conférence.
- L'American Geophysical Union, travaillant avec eJournalPresse, envisagent de mettre en œuvre un workflow pour collecter ORCID Ids pour leurs réviseurs et post-validation de l'activité de révision au réviseur ORCID enregistrements utilisant la nouvelle norme de données.
- La revue Politics and Religion de l'APSA envisage de collecter ORCID des identifiants pour ses évaluateurs.
- Pairie de la science envisage d'intégrer ORCID et la norme de citation d'examen dans sa nouvelle fonction Profils d'examinateur.
- Europe PubMedCentral prévoit d'afficher des informations sur les évaluateurs et des liens vers des évaluations ouvertes.
- Lauriers envisagent de travailler avec ORCID pour tester les flux de travail et les API pour afficher les citations d'examen par les pairs dans une plate-forme de gestion d'impact tierce.
Nous appelons toutes les organisations qui utilisent l'évaluation par les pairs - éditeurs, bailleurs de fonds, associations, universités - à permettre à leurs arbitres d'obtenir un crédit approprié pour le travail qu'ils font. Aidez-nous à faire passer le mot !
Co-écrit par Rébecca Laurent, directeur général, F1000 Research.