Toto je hodnocení hostů Rupesh Paudyal, Vedoucí finanční politiky, UK Research and Innovation (UKRI)
Prokázání závazku k Peer Review
Britský výzkum a inovace (UKRI) nedávno implementovala ORCID Funkce rozpoznávání recenzentů v jejím systému financování Je-S. Poskytuje recenzentům UKRI možnost získat formální uznání za jejich recenzní příspěvek zobrazený v jejich ORCID profily.
UKRI byla jedním z prvních financujících na světě, který podepsal ORCID Otevřený dopis pro dárcea je prvním donorem, který je implementován ORCID Uznání recenzenta v jeho systému financování. Tato iniciativa ukazuje náš závazek k vzájemnému hodnocení a provádění ORCID v našich systémech financování v souladu s ORCID pokyny pro osvědčené postupy pro investory.
Zde vás provedu naší cestou při implementaci ORCID Ocenění recenzenta a sdílení získaných poznatků. Stručně řečeno, primární výzva při implementaci této funkce nebyla ve vývoji systému, ale spíše v pečlivých úvahách o ochraně dat, zásadách, požadavcích uživatelů a systému a mapě procesu.
Uznáváme příspěvek recenzentů UKRI, aniž by byly ohroženy naše zásady hodnocení
UKRI oceňuje úsilí, které recenzenti přispívají k posuzování žádostí o nás, což je podstatná součást procesu financování. Při podpoře našeho procesu kontroly a při přijímání nejlepších rozhodnutí o financování spoléháme na čas a odborné znalosti recenzentů. Odborníci každý rok provádějí pro UKRI desítky tisíc recenzí.
Vzhledem k tomu, že anonymita a důvěrnost jsou dva z principů v EU UKRI Zásady hodnocení a rozhodování, příspěvek našich odborných recenzentů není formálně uznán. Proto v současné době zkoumáme několik iniciativ, abychom lépe uznali, odměnili a stimulovali příspěvek posuzovatelů UKRI.
ORCID Uznání recenzentů nám poskytuje viditelný a ověřitelný způsob, jak veřejně ocenit naše recenzenty za jejich práci, aniž by byla ohrožena důvěrnost a anonymita procesu kontroly UKRI.
ORCID Uznávání recenzentů může také sloužit jako efektivní referenční bod pro recenzenty, kteří sledují počet recenzí, které pro UKRI v průběhu času provedli, což bude užitečné při podávání žádostí o propagaci a financování.
Politické úvahy
Začali jsme zásadními otázkami, které rozhodovaly o tom, kdo by měl mít nárok ORCID zkontrolovat kredity. Po několika kolech spolupráce s příslušnými zúčastněnými stranami napříč UKRI jsme se rozhodli ORCID kredity za recenze budou k dispozici, pouze pokud:
- Recenzent odešle „použitelnou recenzi“ prostřednictvím Je-S
- Recenze je předložena po 23. listopadu 2020 (datum implementace)
- O přezkoumané žádosti bylo rozhodnuto o financování
Zní to jednoduše, ale existuje několik detailů, které zvyšují složitost.
Tato funkce je v systému Je-S k dispozici pouze od 23. listopadu 2020. Získat tedy nárok budou mít pouze recenzenti, kteří po tomto datu odešlou recenze prostřednictvím Je-S. ORCID zkontrolovat kredity. UKRI je relativně nová organizace s devíti různými radami, které se vyvíjely nezávisle, dokud nebyly spojeny v roce 2018. Z tohoto důvodu mají naše rady v současné době samostatné systémy financování: sedm výzkumných rad a další průřezové programy používají Je-S; zatímco Innovate UK používá IFS.
As ORCID Rozpoznávání recenzentů je implementováno pouze v Je-S, recenze odeslané prostřednictvím IFS Innovate UK, historické recenze a recenze mimo systém nejsou v současné době způsobilé k přijímání ORCID zkontrolovat kredity od UKRI. Budeme však zkoumat potenciální výhody rozšíření této funkce na aplikace odeslané do Innovate UK v budoucnu.
Více než 97% recenzí obdržených v letech 2014–2018 prostřednictvím společnosti Je-S bylo klasifikováno jako „použitelné“. Jedná se o kontroly, které se používají v procesu hodnocení a rozhodování. Recenzenti si však nejsou vědomi stavu klasifikace své recenze v systému UKRI. I když stále nemáme kapacitu informovat jednotlivé recenzenty o stavu jejich kontroly, zveřejnili jsme seznam indikátorů, které naši zaměstnanci používají ke klasifikaci recenzí. Doufáme, že to bude sloužit jako užitečný průvodce pro naše recenzenty při podávání vysoce kvalitních recenzí. Zveřejňujeme také důvod, proč je recenze pravděpodobně klasifikována jako „nepoužitelná“.
Jedním z klíčových aspektů zásad bylo zajistit, aby nebyla narušena důvěrnost a anonymita našeho procesu kontroly. Proto je přenos dat z Je-S do ORCID nezahrnuje podrobnosti o jednotlivé žádosti, celé datum kontroly ani název rady UKRI, která recenzi vydala. Navíc nebudeme vydávat ORCID kontrolujte kredity, dokud nebude v žádosti učiněno rozhodnutí o financování. V souboru se zobrazí pouze níže uvedené informace ORCID evidence:
- Role: Recenzent
- Typ aktivity: Recenze
- Datum kontroly: Rok (např. 2020)
- Svolávající organizace: UK Research and Innovation (Swindon, GB)
- Zdroj: UKRI Systems
Požadavky na ochranu údajů
UKRI je správcem údajů pro veškeré informace, které systém UKRI odesílá do ORCID profil uživatelů Je-S. Informace o kontrole proto zasíláme na adresu ORCID jménem našich recenzentů, na základě jejich souhlasu. To znamená, že naši recenzenti se rozhodnou, zda udělí nebo odmítnou povolení společnosti UKRI zasílat jim informace o kontrole ORCID účet. Naši recenzenti by měli mít možnost kdykoli zapnout nebo vypnout oprávnění ze svého účtu Je-S. To dává našim recenzentům kontrolu nad výběrem recenzí, za které dostanou ORCID zkontrolovat kredit. Náš systém pouze odešle ORCID zkontrolovat kredity těm recenzentům, kteří ve svém profilu Je-S výslovně udělili oprávnění.
ORCID uživatelé mají plnou kontrolu nad správou informací zobrazených v jejich ORCID profil. Jako takový, ORCID uživatelé mohou okamžitě smazat nebo změnit viditelnost informací ze svého ORCID profil. Jako správce údajů musí UKRI také být schopen přijmout tento požadavek od ORCID uživatelé k vymazání informací generovaných UKRI ze svých ORCID profil. Proto jsme vyvinuli interní proces pro správu těchto požadavků a doporučujeme našim recenzentům, aby poslali e-mail našemu týmu nápovědy Je-S a požádali o odstranění údajů UKRI z ORCID účtu.
Procesní mapa a vývoj systému
Veškeré informace odeslané prostřednictvím Je-S - našeho front-end systému, kde uživatelé interagují s UKRI - jsou uloženy v interním systému back-office, který není uživatelům přístupný. Interní systém obsahuje informace o recenzích odeslaných prostřednictvím Je-S. Chcete-li zaslat kredity za recenzi ORCID, proces musí začít od interního systému.
Mapu procesu jsme navrhli tak, aby po splnění kritérií (uvedených v části „Zásady zásad“) byl z našeho interního systému zaslán revizní kredit společnosti Je-S. Jakmile je kontrolní kredit v Je-S, je kontrolní kredit vydán pouze ORCID, pokud recenzent dá UKRI výslovné svolení k zaslání těchto informací o recenzi ORCID profil. Recenzent musí své odkazy propojit ORCID iD se svým účtem Je-S k přijetí ORCID zkontrolovat kredity.
Jedna věc, kterou jsme na začátku projektu nezvažovali, je požadavek od ORCID k zobrazení informací o kontrole na externí webovou stránku vlastněnou UKRI. Myšlenka byla, že revizní aktivita, jak je zobrazena na ORCID, by bylo spojeno se záznamem kontrolní činnosti na webové stránce vlastněné UKRI. Uvědomili jsme si, že tento požadavek významně zkomplikuje vývoj systému, ochranu dat a požadavky zásad. Naším cílem bylo zobrazit uznání kontroly ORCID a ne na webové stránce UKRI. Proto jsme požádali ORCID zvážit vyjmutí UKRI z tohoto požadavku - a ORCID souhlasil!
Budování systému začalo po zmapování všech těchto detailů. Níže vidíte, jak informace o kontrole proudí ze systémů UKRI do ORCID.
Implementace
A konečně, implementace funkce vyžadovala rozvoj pokynů a informací pro členy výzkumné a inovační komunity, včetně recenzentů. V rámci implementace jsme vyvinuli obsah webových stránek na ORCID Uznání recenzenta, včetně FAQ zaměřených na recenzenty. Kromě toho jsme také provedli interní komunikační kampaň v rámci UKRI, kde jsme pro naše zaměstnance vytvořili interní FAQ a diapozitivy.
Jednou z nejdůležitějších věcí, které je třeba vzít v úvahu, je způsob, jakým tyto změny sdělujeme našim recenzentům. Za tímto účelem jsme upravili náš e-mail s pozvánkou k recenzi, aby zmínil možnost získání kreditů za kontrolu prostřednictvím ORCID a odkaz na webovou stránku UKRI pro více informací. Také jsme vydali komunikaci všem uživatelům, kteří připojili své ORCID ID pro Je-S, o kterém je informuje ORCID Rozpoznání recenzenta před implementací této funkce.
Zatímco vývoj probíhal, všimli jsme si toho ORCID aktualizovali své API (kód, který odkazuje ORCID s Je-S) od srpna 2017 a že předchozí API nemělo funkci, na kterou by se zasílaly kredity za recenze ORCID. To znamenalo, že naši uživatelé, kteří propojili své ORCID iD s jejich účtem Je-S do srpna 2017, nebude moci přijímat ORCID zkontrolovat kredity. Aby tito uživatelé mohli přijímat ORCID zkontrolovat kredity, budou muset odstranit své aktuální ORCID spojte se s Je-S a obnovte toto spojení. Proto jsme navrhli proces odstranění ORCID připojení z našeho systému, které mohou uživatelé Je-S kdykoli provést e-mailem JeSHelp@je-s.ukri.org. Dotčené uživatele jsme navíc o tomto požadavku informovali několik týdnů před implementací této funkce.
Uživatelé byli také informováni e-mailem, jakmile ORCID V našem systému byla spuštěna funkce rozpoznávání recenzentů.
Proč investovat do čističky vzduchu?
V tomto příspěvku na blogu jsem se pokusil poskytnout přehled přístupu UKRI k implementaci ORCID Uznání recenzenta. UKRI se zavazuje implementovat ORCID v souladu s osvědčenými postupy pro dárce a rádi se podělíme o zkušenosti s dalšími dárci, kteří uvažují o zavedení této funkce. Jak jsem již zmínil, nejdůležitější věcí, kterou jsme museli při přijetí této funkce vzít v úvahu, jsou politická rozhodnutí, požadavky na ochranu dat, systémové požadavky, mapování procesů a nakonec budování a implementace systému.