Peer review je základní součástí výzkumu a vědeckého životního cyklu. Přesto jsou činnosti vzájemného hodnocení výzkumných pracovníků zřídka uznávány jako zásadní příspěvek k výzkumu. Potřeba povzbudit více výzkumných pracovníků k účasti na procesu hodnocení za účelem řešení stále se zvyšujícího počtu rukopisů a grantů naráží na rostoucí touhu najít způsoby, jak vybudovat větší důvěru v procesy vzájemného hodnocení. Nastal čas kreativně přemýšlet o tom, jak na to budovat pobídky (včetně veřejného uznání) a důvěru (prostřednictvím validace).
Praxe uznávání vzájemného hodnocení
S tímto vědomím, ORCID a F1000 navázal partnerství s cílem vyvinout praktický prostředek k citování činností vzájemného hodnocení založených na standardní sadě termínů a použití trvalých identifikátorů. "Formální, ale zcela transparentní proces vzájemného hodnocení po publikaci použitý na obou F1000 služba doporučení článků a články publikované v F1000Výzkum poskytuje nám příležitost maximalizovat kredit, který můžeme vrátit našim rozhodčím za často značný čas a úsilí potřebné k vytvoření dobrého vzájemného hodnocení - práce, která obvykle zůstává neviditelná, “říká Rebecca Lawrence, výkonná ředitelka F1000Research. "Umožnit rozhodčím, aby byli schopni citovat své často zdlouhavé zprávy od rozhodčích, a také je zahrnout na seznamy svých výstupů, jako je ORCID záznamů, je významným krokem vpřed ve správném rozpoznání této činnosti, která je nezbytná pro rozvoj vědeckého poznání. “
Práce s normami konsorcia prosazujícími v informacích pro správu výzkumu (CASRAI) jsme založili a komunitní pracovní skupina definovat standardní sadu oborů a obchodní pravidla, která by fungovala napříč mnoha typy vzájemných hodnocení používaných při publikování, financování, řízení univerzitního výzkumu a konferenčních prezentacích. Napříč formálními typy revizí jsme zjistili, že hlavní výzvou bylo, jak definovat standard, který je dostatečně flexibilní, aby umožnil celou škálu revizí, od anonymních dvojitě zaslepených procesů po plně otevřenou revizi. Jako skupina jsme dospěli k závěru, že u anonymních recenzí by subjekt požadující a spravující kontroly měl poskytnout souhrnný počet recenzí pro daného recenzenta za příslušné časové období.
Doporučení pracovní skupiny
S potěšením oznamujeme zveřejnění doporučení pracovní skupiny pro a profil údajů o činnosti peer review. Pracovní skupina dospěla k závěru, že k popisu vzájemného hodnocení je třeba použít následující datové prvky citace:
- OSOBA: Pole, včetně identifikátoru osoby, popisující osobu, která provedla kontrolu a je pro tuto aktivitu kontroly uznávána.
- RECENZE: Pole, včetně identifikátoru recenze, popisující samotnou kontrolu. V případě slepých nebo jinak nesdílených recenzí mohou tyto informace zůstat prázdné.
- PŘEDMĚT: Pole popisující předmět recenze, například příspěvek, příspěvek nebo jiná položka. V případě slepých nebo jinak nesdílených recenzí mohou být tyto informace také prázdné.
- ORGANIZACE: Pole, včetně identifikátoru organizace, popisující organizaci, která osobu rozpoznává za účelem kontroly, jako je vydavatel, sdružení nebo donor.
Pro jasnější formulování příspěvků a pro lepší přizpůsobení typickým pracovním postupům vzájemného hodnocení pracovní skupina doporučila, aby byl každý příspěvek k recenzi popsán samostatně. Například pokud osoba provedla čtyři recenze pro konkrétní časopis, byly by k popisu aktivity potřeba čtyři popisy recenzí. Aby však byla zajištěna anonymita, která je někdy nutná pro činnost vzájemného hodnocení, jsou přijatelné agregace aktivit a minimální metadata, přičemž pouze osoba, organizace / zdroj, který recenzi sponzoroval, počet recenzí za určité časové období a jedinečný zdrojový identifikátor, například recenzenti hlavní stránky, kteří jsou povinni uznat příspěvek.
Prováděcí doporučení
Několik organizací plánuje přijmout tento standard citace peer review při shromažďování, ukládání a výměně informací peer review. V dubnu 2015 ORCID technický tým zahájil proces tlumočení a implementace doporučení pracovní skupiny a letos v létě zahájíme podporu pro vzájemné hodnocení v našich API a uživatelském rozhraní. Zde plánují některé další organizace:
- F1000 plánuje implementovat nový datový model citace recenzí, aby bylo možné poslat ověřenou aktivitu recenze recenzentovi ORCID záznamy prostřednictvím své platformy a ve spolupráci se svými partnery usnadňují integraci do pracovních postupů pro kontrolu konference.
- Americká geofyzikální unie, práce s eJournalPress, plánují implementaci pracovního postupu ke shromažďování ORCID ID pro jejich recenzenty a odeslání ověřené kontrolní aktivity recenzentovi ORCID záznamy pomocí nového datového standardu.
- Časopis APSA o politice a náboženství plánuje shromáždit ORCID ID pro jeho recenzenty.
- Šlechtický titul vědy plány na integraci ORCID a standard citace recenzí do nové funkce Profily recenzentů.
- Evropa PubMedCentral plánuje zobrazit informace recenzenta a odkazy na otevřené recenze.
- Sláva plánují spolupráci ORCID k testování pracovních postupů a rozhraní API pro zobrazování citací vzájemného hodnocení na platformě pro správu dopadů třetích stran.
Vyzýváme všechny organizace, které používají vzájemné hodnocení - vydavatelé, sponzoři, asociace, univerzity - aby umožnili svým rozhodčím získat řádný kredit za práci, kterou dělají. Pomozte nám šířit slovo!
Spoluautorem Rebecca Lawrence, Výkonný ředitel, F1000 Research.