La revisione tra pari è fondamentale per molti flussi di lavoro di ricerca chiave: pubblicazioni, domande di sovvenzione, domande di promozione e possesso, invio di conferenze e altro ancora. Siamo lieti che ORCID membro Società reale Te Apārangi sta pianificando di utilizzare ORCID riconoscere il servizio di revisione tra pari per Fondo Marsden revisori del panel. Scopri di più sui loro progressi in questa intervista con Jason Gush, il loro Program Manager per Insights & Evaluation, e aspetta altri aggiornamenti nei prossimi mesi.
Per prima cosa, puoi parlarci un po' della Royal Society Te Apārangi e del Marsden Fund, e della tua attuale integrazione di ORCID via Nuova Zelanda ORCID Centro?
La Royal Society Te Apārangi è un'organizzazione non governativa di 150 anni autorizzata da una legge del Parlamento e responsabile del sostegno e dell'incoraggiamento della borsa di studio nelle scienze e nelle scienze umane e nell'incoraggiare l'apprezzamento e la consapevolezza delle stesse nel pubblico neozelandese. Come parte di queste responsabilità, siamo la sede dell'Accademia nazionale della Nuova Zelanda, distribuiamo medaglie e premi per l'eccellenza nella ricerca, amministriamo i titoli del New Zealand Journal e agiamo come amministratore di fondi per il governo, oltre a svolgere una serie di promozioni , educazione e attività di consulenza di esperti.
Il Marsden Fund è il più grande dei fondi che amministriamo ed è operativo da 24 anni. Ora è in qualche modo nuovo, essendo sia interamente per la ricerca avviata dai ricercatori che copre l'intera gamma di ricerche dalle scienze umane alle scienze sociali, alle scienze della vita, alle scienze fisiche, alla matematica e alle scienze dell'informazione. Con un round di finanziamento annuale e tassi di successo in genere intorno al 10%, ottenere una sovvenzione Marsden è considerato un giusto grado di prestigio.
La Società ha avuto il piacere di essere l'agenzia principale per la Nuova Zelanda ORCID Consorzio dal lancio del Consorzio nel 2016. Sostenuto dal nostro governo, il consorzio è ORCIDè la più diversificata dal punto di vista organizzativo e ha l'obiettivo di rappresentare tutti i ricercatori neozelandesi finanziati con fondi pubblici. Il Consorzio ha anche sostenuto lo sviluppo della Nuova Zelanda ORCID Hub per consentire ai nostri diversi membri di interagire con ORCID. The Hub è un'applicazione web con una semplice interfaccia utente che consente alle organizzazioni di leggere e scrivere su ORCID record con il permesso del titolare del record. Al momento, stiamo utilizzando l'Hub per affermare affiliazioni per il nostro personale, finanziamenti per i titolari di borse di studio e abbiamo appena iniziato a esaminare come possiamo rappresentare correttamente la revisione tra pari che è parte integrante di gran parte della nostra operazione.
Che tipo di lavoro tecnico ha intrapreso la Società per consentire il riconoscimento della revisione paritaria nell'Hub?
La revisione tra pari rappresentava una semplice estensione delle funzionalità dell'Hub. La principale complicazione è stata la creazione di strumenti per gestire il gruppo id referenziato in an ORCID revisione paritaria. Siamo molto fortunati ad avere un team di sviluppo capace e dedicato al Università di Auckland. Insieme, Radomirs Cirskis e Roshan Pawar lo hanno avviato e funzionante con la v4 dell'Hub che è stata lanciata a maggio.
Siamo entusiasti che la Royal Society Te Apārangi sia la prima ORCID membro di riconoscere i contributi di revisione per il finanziamento. Che tipo di recensioni verranno riconosciute?
Il Fondo registra circa 1,200 manifestazioni di interesse all'anno in un'ampia gamma di discipline. Per rendere pratica la valutazione, il Fondo è strutturato in 10 comitati disciplinari. Ogni panel valuta circa 120 manifestazioni di interesse e ne seleziona circa 24 da invitare a presentare una proposta completa. Queste 24 proposte vengono inviate a un target di tre (quasi esclusivamente) arbitri internazionali per un commento. I gruppi si incontrano di nuovo per esaminare le proposte, i commenti degli arbitri e le confutazioni degli investigatori, per selezionare i 12 che avranno successo.
Con i revisori attualmente anonimi, i contributi di revisione che più ci interessano e possiamo affermare sono il servizio svolto dai relatori.
Rendendo disponibile il riconoscimento della revisione tra pari ai membri del Marsden Fund, cosa speri di ottenere e quali sfide hai dovuto affrontare?
La revisione tra pari è una parte così importante dei nostri processi, quindi siamo alla ricerca di un modo chiaro, pulito e autorevole per affermare senza ambiguità che un particolare individuo ha fornito questo servizio. Speriamo che questo sia di valore per i relatori. Dato che spesso veniamo contattati per confermare che hanno fatto parte di un panel per altri processi di valutazione, vogliamo dare ai panelist la possibilità di condividere queste informazioni da soli.
La socializzazione dell'affermazione di ciò che è già informazione pubblica dovrebbe quindi essere banale. Invece, la nostra più grande sfida è stata tentare di adattare questo ruolo in ORCIDil modello di rappresentazione della peer review. Al contrario, quel modello si adatterebbe relativamente bene se il Fondo, o addirittura uno qualsiasi dei processi della Società, offrisse ai revisori l'opportunità di essere aperti sulla loro identità; tuttavia, al momento non è assolutamente così.
Quali approcci hai preso in considerazione, ad esempio, in termini di riconoscimento delle revisioni tra pari rispetto all'affiliazione al servizio?
I nostri pensieri iniziali erano di affermare questi ruoli nella sezione di revisione paritaria dei membri del panel ORCID record, sia perché pensavamo di poterlo fare funzionare sia, con la v2.1 del ORCID API, questo era l'unico gioco in città. Tuttavia, prendere confidenza con il modello di revisione tra pari ha mostrato che questo non era proprio adatto a ciò che volevamo affermare, cioè dove un'opera identificabile è oggetto di una revisione identificabile. Dopo le discussioni con il ORCID team, abbiamo deciso invece di attendere le affiliazioni ai servizi della v3.0.
Qual è stata la reazione finora dei ricercatori sull'opzione di far riconoscere il loro lavoro di revisione per la Società nel loro? ORCID disco?
È troppo presto per dirlo perché è ancora presto. Parte del perseguimento di ciò è stata la ricerca dell'approvazione del Marsden Fund Council che governa il fondo, e hanno sostenuto sia questa attività che le asserzioni di finanziamento in ORCID.
Quali sfide ha posto l'essere il primo a lavorare sul riconoscimento della revisione tra pari nel finanziamento e che consiglio daresti ad altri finanziatori che vorrebbero collegare e riconoscere la revisione tra pari?
La revisione tra pari è la più recente delle sezioni del ORCID record e, almeno nella v2.1, è solidamente orientato al concetto di un revisore che compone una recensione per un argomento per conto di un gruppo di revisione. Come finanziatore, le sfide erano che il soggetto doveva essere uno dei ORCIDi tipi di lavoro, mentre i gruppi di revisione possono essere uno di: editore; istituzione; rivista; conferenza; giornale quotidiano; notiziario; rivista; o servizio di revisione paritaria. Né si adatta davvero a un'organizzazione di finanziamento, in cui l'argomento non sarebbe un lavoro ma una sovvenzione, una proposta o una domanda. Il fatto che gran parte della revisione dei finanziamenti contestabili sia accecata rende anche la rigorosa applicazione di ORCIDIl modello di peer review non è pratico per noi al momento.
Se la Società si muovesse verso una revisione aperta, o almeno più aperta di quella attuale, varrebbe la pena rivedere l'approccio della revisione tra pari. Per altri finanziatori, una volta ORCID ha tipi di soggetti e tipi di organizzazione che si adattano, quindi è sicuramente possibile se stanno praticando la revisione aperta; tuttavia, le affiliazioni ai servizi stanno cercando di essere un approccio molto più universalmente applicabile nel frattempo.
Guardando al futuro, il riconoscimento della revisione tra pari fa parte del? ORCID roadmap per altri membri della Nuova Zelanda che utilizzano il ORCID Centro?
Tutti i principali finanziatori pubblici della ricerca in Nuova Zelanda fanno parte del nostro consorzio e questo è qualcosa che possono perseguire utilizzando l'Hub. Spero davvero di vedere questo tipo di riconoscimento esteso agli altri nostri finanziatori, dato il valore che riceviamo dal servizio dei revisori tra pari.