Les éditeurs, les réviseurs et les universitaires reconnaissent le potentiel de l'annotation ouverte pour rationaliser et améliorer les formes traditionnelles d'évaluation par les pairs et créer un cadre pour de nouvelles pratiques. La transparence, au cœur de cette année Semaine d'examen par les pairs, dépend en fin de compte des choix de conception que les communautés font lorsqu'elles conviennent de la manière dont la recherche peut bénéficier d'un examen collectif. L'annotation ouverte peut considérablement améliorer le potentiel de transparence en permettant de nouvelles approches d'examen qui seraient autrement difficiles ou impossibles à réaliser.
L'annotation peut améliorer tous les types d'examen par les pairs, y compris l'examen en simple et double aveugle, l'examen ouvert et l'examen par les pairs après publication. En connectant des observations, des questions et des suggestions à des sélections de texte, les annotations permettent une conversation collaborative précise et fine au-dessus des documents qui peuvent persister dans toutes les versions et même après la publication. Annotant en groupes, qu'ils soient privés pour les critiques fermées ou publics pour les critiques ouvertes ou post-publication, les collègues et les pairs peuvent fournir différents types de commentaires en utilisant différents modèles, même sur le même article.
Hypothèse est une organisation à but non lucratif dédiée au développement et à la diffusion de technologies et de pratiques d'annotation ouvertes et basées sur des normes qui permettent à quiconque d'annoter n'importe où. Les éditeurs intègrent Hypothesis dans leurs plateformes pour prendre en charge les workflows de pré-publication tels que l'examen par les pairs et l'engagement post-publication avec des experts invités et des lecteurs en général. Les scientifiques et les chercheurs utilisent Hypothesis pour interagir avec des documents et leurs pairs, organiser des recherches et intégrer des ressources connexes au-dessus de textes existants. Les enseignants et les étudiants de la maternelle à la 12e année et de l'enseignement supérieur annotent avec Hypothèse pour intégrer l'enseignement et l'apprentissage directement dans le contenu numérique. Les journalistes utilisent Hypothesis pour connecter et discuter des documents dans la recherche d'investigation et enrichir la couverture d'autres textes.
Hypothèse et ORCID avoir une collaboration de longue date pour connecter les identifiants scientifiques dans les flux de travail de publication, les documents et les annotations afin d'établir des mécanismes fiables qui soutiennent la confiance, l'attribution et la transparence dans toutes les bourses. Les boursiers peuvent déjà ajouter leur ORCIDs à leurs profils Hypothesis et aux éditeurs et plateformes qui utilisent ORCID pour l'authentification peuvent désormais fournir automatiquement à leurs utilisateurs des capacités d'annotation.
Examen traditionnel par les pairs
Alors que les systèmes de soumission de manuscrits ont automatisé de nombreuses parties du processus traditionnel d'examen par les pairs, jusqu'à présent, le processus de travail des examinateurs a peu changé. La critique est toujours livrée via un document long et lourd qui fait référence aux numéros de page, de paragraphe et de ligne, envoyant les éditeurs et les auteurs à la chasse au trésor pour retrouver le texte associé. De plus, au fur et à mesure que le processus de révision progresse, tous ces chiffres peuvent perdre leur sens au fur et à mesure que le texte change. L'annotation en ligne amène la critique directement sur le texte pertinent et permet une conversation fluide avec des conseils éditoriaux.
Les frameworks d'annotation open source comme Hypothesis permettent aux systèmes de soumission d'incorporer des annotations directement dans leurs applications Web existantes, même en hébergeant les annotations localement s'ils le préfèrent. Les API permettent aux révisions annotées de s'écouler dans les tableaux de bord pour les éditeurs, les réviseurs et les auteurs, en respectant des autorisations granulaires qui indiquent qui peut (ou devrait) voir différents types de commentaires. Des fonctionnalités supplémentaires telles que le balisage personnalisé ou le filtrage peuvent être ajoutées facilement. Les auteurs et les réviseurs peuvent voir les annotations dans leur contexte au-dessus des documents eux-mêmes et via des documents de synthèse tels que des lettres de décision. Les liens profonds d'Hypothesis permettent également aux réviseurs et aux auteurs de connecter des passages spécifiques à des ressources supplémentaires sur le Web pour augmenter le processus de révision et le manuscrit final.
Examen par les pairs après publication
La post-publication ou l'examen par les pairs participatif est une autre itération de l'examen par les pairs traditionnel, mais même ici, un certain nombre de défis subsistent. Les lecteurs peuvent manquer de contexte sans accès aux données ou aux ressources supplémentaires que les évaluateurs pairs traditionnels pourraient recevoir. Tous les commentaires peuvent être regroupés dans un seul et même seau, quelle que soit l'expertise de l'examinateur. Les commentaires des lecteurs publiés sur les blogs ou sur Twitter peuvent très bien ne pas se connecter à l'article d'origine, de sorte que les autres lecteurs ne savent même pas que de tels commentaires existent. De plus, les réviseurs post-publication peuvent soumettre des corrections ou des mises à jour qui ne se connectent pas non plus efficacement aux documents originaux. Avec la manière dont le contenu est diffusé aujourd'hui sur plusieurs plates-formes, les lecteurs peuvent très bien ne fournir des commentaires que sur une seule copie de plusieurs en direct sur le Web.
La technologie d'annotation peut aider à éliminer ces obstacles. Grâce à l'utilisation d'annotations en ligne, des documents supplémentaires peuvent être connectés via des liens profonds, par des auteurs, des éditeurs de revues ou des réviseurs post-publication. Les lecteurs peuvent lier leurs commentaires à des parties particulières de l'article en fonction de leur expertise, ce qui permet aux autres lecteurs de se concentrer plus facilement sur ces domaines précis. Les liens profonds peuvent également relier les discussions qui se déroulent sur d'autres plateformes à la version publiée de l'enregistrement, qui peut également être utilisée pour fournir des corrections visibles par les lecteurs. Plus important encore, les URL relationnelles, les DOI et les empreintes PDF peuvent connecter les commentaires des réviseurs sur plusieurs copies d'articles publiés dans différents formats de documents sur différentes plates-formes d'hébergement.
Examen par les pairs des pré-impressions, des données et plus encore
En dehors des revues — pour les prépublications, les actes de conférence, les ensembles de données textuelles et d'autres travaux savants qui ne relèvent pas du processus traditionnel d'examen préalable à la publication — l'annotation peut fournir une capacité de collaboration tout aussi puissante. Seul un infime pourcentage de la littérature savante offre même la forme la plus rudimentaire de capacité de commentaire, donc généralement la bourse en ligne vit dans un endroit silencieux sans discussion ou examen critique facilement découvrable qui peut aider à améliorer le travail ou à informer les autres. Là où ils existent, les commentaires ne parviennent généralement pas à fournir une couche de transport significative pour les commentaires des pairs en raison de son manque d'ancrage spécifique dans les textes et de son manque de mécanismes pour connecter les identités des utilisateurs aux références savantes via ORCID et d'autres systèmes d'identité. À mesure que les pré-impressions font partie des flux de travail d'examen par les pairs, il est nécessaire que les remarques des examinateurs accompagnent les manuscrits jusqu'à la production et même jusqu'à la publication des versions du dossier. Diverses innovations ont été essayées au fil des ans, y compris des revues superposées comme Analyse discrète. Ceux-ci souffrent du même problème fondamental : ils opèrent à distance de l'article lui-même. L'annotation est un mécanisme puissant qui surmonte cette limitation et peut permettre l'expérimentation d'approches innovantes de rétroaction par les pairs d'une manière fondamentalement plus précise, découvrable et flexible.
Hypothèse et examen par les pairs
Apporter une puissante chaîne d'outils au flux de travail des éditeurs, des réviseurs et des chercheurs s'inscrit dans la mission d'Hypothesis d'apporter l'annotation à toutes les connaissances. En renforçant les processus d'examen par les pairs avec les mêmes outils de base que les chercheurs utilisent pour rédiger et mettre à jour leurs manuscrits, Hypothesis exploite la puissance des technologies basées sur des normes et interopérables qui tiennent les promesses du Web. Nous sommes ravis de travailler avec des partenaires pour explorer comment l'annotation peut rendre l'examen par les pairs plus transparent.
Si vous souhaitez voir comment fonctionne Hypothesis - que ce soit en tant qu'éditeur, auteur ou autre réviseur - vous pouvez expérimenter immédiatement, avant de faire des intégrations techniques, en créant vos propres groupes Hypothesis privés pour ajouter des annotations à vos journaux, prépublications et autres documents.
Contact pour en savoir plus sur l'évaluation par les pairs à l'aide de l'annotation ouverte avec Hypothesis.
