Ang Umaabot sa Pagsusi sa Pagpanukiduki: Usa ka Synthesis sa Kasamtangang mga Debate ug Kauswagan

Usa ka pangutana nga kaylap nga gidebatehan sa mga stakeholder sa tibuok kalibutan mao kung epektibo ba ang kasamtangang sistema sa pagtimbang-timbang sa panukiduki sa pag-ila sa de-kalidad nga panukiduki ug sa pagsuporta sa pag-uswag sa syensya. Sa bag-ohay nga mga tuig, ang mga kabalaka mibangon bahin sa mga limitasyon ug potensyal nga mga pagpihig sa tradisyonal nga mga sukatan sa pagtimbang-timbang nga kanunay napakyas aron makuha ang tibuuk nga epekto ug kalidad sa panukiduki. Tungod niini adunay dugang nga panginahanglan sa mga hingtungdan sa pagbag-o sa karon nga mga sistema sa pagsusi sa panukiduki.

Ang mga debate sa palibot sa reporma sa ebalwasyon sa panukiduki nakapunting sa lain-laing mga aspeto sa ebalwasyon lakip na ang panginahanglan alang sa lainlain ug inklusibo nga mga sukdanan sa ebalwasyon, ang papel sa peer review ug ang paggamit sa open science. Gipunting sa uban ang panginahanglan sa pagbalhin gikan sa pag-focus sa mga sukatan sa journal ngadto sa usa ka mas komprehensibo ug kwalitatibo nga pagsusi sa epekto sa panukiduki lakip ang kolaborasyon, pagpaambit sa datos, pakiglambigit sa komunidad…

Ang Umaabot sa Pagsusi sa Panukiduki naghatag usa ka pagrepaso sa karon nga kahimtang sa mga sistema sa pagsusi sa panukiduki ug naghisgot sa labing bag-o nga mga aksyon, tubag ug mga inisyatibo nga gihimo sa lainlaing mga stakeholder pinaagi sa daghang mga pananglitan sa kaso gikan sa tibuuk kalibutan. Ang tumong niini nga diskusyon nga papel mao ang pagtampo sa nagpadayon nga mga debate ug bukas nga mga pangutana sa kaugmaon sa pagsusi sa panukiduki.

Usa ka summary sa mga isyu nga giila, mga aksyon nga gihimo ug nagpabilin nga bukas nga mga pangutana base sa report makita sa infographic sa Center alang sa Science Kaugmaon website.

Ang Umaabot sa Pagsusi sa Pagpanukiduki: Usa ka Synthesis sa Kasamtangang mga Debate ug Kauswagan

Usa ka pagrepaso sa kasamtangan nga kahimtang sa mga sistema sa pagsusi sa panukiduki ug naghisgot sa pinakabag-o nga mga aksyon, tubag ug mga inisyatibo nga gihimo sa lain-laing mga stakeholder pinaagi sa pipila ka mga pananglitan sa kaso gikan sa tibuok kalibutan.

Basaha ang papel online o sa imong gusto nga pinulongan

Ang usa ka dinamiko ug inklusibo nga sistema sa panukiduki hinungdanon kaayo alang sa siyensya ug katilingban aron mapauswag ang sukaranan nga kahibalo ug pagsabut ug aron matubag ang labi ka dinalian nga mga hagit sa kalibutan. Apan ang sistema sa panukiduki ubos sa presyur tungod sa pagdugang sa mga gilauman gikan sa daghang mga aktor (lakip ang mga tigpondo, gobyerno ug industriya sa pagmantala), mga tensyon tali sa dinamika sa kompetisyon ug kooperasyon, usa ka nag-uswag nga sistema sa komunikasyon sa eskolar, usa ka agresibo - usahay - industriya sa pagmantala ug data analytics. ug limitado nga mga kapanguhaan. Kinahanglang dumalahon sa negosyo sa panukiduki kini nga mga gipangayo ug tensyon samtang gipadayon ang kalidad sa panukiduki, gisuportahan ang integridad sa panukiduki, nga inklusibo ug lainlain ug gipanalipdan ang sukaranan ug gigamit nga panukiduki.

Sa milabay nga dekada, kini nga mga pagpit-os sa, ug ang panginahanglan alang sa pagtubag sa, ang sistema sa siyensya giubanan sa labi ka kritikal nga mga pagpamalandong sa mga sistema sa pagsusi sa panukiduki ug pagsukod sa pasundayag. Bisan kung ang angay, sensitibo sa konteksto nga mga pamaagi alang sa pagtimbang-timbang sa kalidad ug epekto sa panukiduki hinungdanon, ang mga debate misamot bahin sa halapad, komplikado ug dili klaro nga mga epekto sa karon nga mga pamatasan sa pagtimbang-timbang ug mga sukatan sa kalidad ug kultura sa panukiduki, ang kalidad sa ebidensya nga nagpahibalo sa paghimo og palisiya, mga prayoridad sa panukiduki ug pagpanukiduki nga pondo, indibidwal nga mga trajectory sa karera ug kaayohan sa mga tigdukiduki. Sa pipila ka mga bahin sa kalibutan, adunay nagkadako nga pag-ila nga ang usa ka pig-ot ug simplistic nga set sa evaluative metrics ug indicators dili makatagbaw nga makuha ang kalidad, utility, integridad ug diversity sa research. Kanunay nga gigamit - kasagaran nga gibase sa journal - ang mga metrics napakyas sa pagkuha sa importante nga dugang nga mga dimensyon sa taas nga kalidad nga panukiduki sama sa makita sa mentorship, data-sharing, pag-apil sa mga publiko, pag-amuma sa sunod nga henerasyon sa mga iskolar ug pag-ila ug paghatag og mga oportunidad sa mga grupo nga kulang sa representasyon. Gawas pa sa hiktin ra kaayo nga sakup, ang isyu sa sayop nga paggamit sa metrics ug indicators makita usab nga makatuis sa mga insentibo alang sa kalampusan, makadaut sa pipila ka mga disiplina (lakip ang importante nga interdisciplinary ug transdisciplinary nga panukiduki) ug fuel predatory ug unethical publication practices.

Ang mga kampanya sa pagpugong sa sayop nga paggamit sa mga sukdanan, pagpalapad sa kalidad nga mga sukdanan ug pagbag-o sa kultura sa panukiduki nga mas sistematikong paagi pinaagi sa mga manifesto ug mga pahayag, mga prinsipyo ug mga reporma nagbutang sa entablado alang sa usa ka tibuok kalibutan nga debate sa panginahanglan sa pagreporma sa pagtuki sa panukiduki. Kini nga mga tingog karon nanawagan alang sa usa ka lakang gikan sa mga manifesto ngadto sa aksyon. Nahitabo kini batok sa background sa mga pagbag-o sa pagbag-o sa mga paagi diin gihimo ug gipahibalo ang panukiduki. Ang pagsaka sa open research frameworks ug sa social media, usa ka pagbalhin ngadto sa mission-oriented ug transdisciplinary science, ang pag-uswag sa open peer review ug ang transformative potential sa artificial intelligence (AI) ug machine learning nanginahanglan bag-ong panghunahuna kung giunsa pag-evaluate ang research ug researchers. .

Batok niini nga backdrop, ang Global Young Academy (GYA), ang mga InterAcademy Partnership (IAP) ug ang International Science Council (ISC) naghiusa sa pwersa sa pagkuha sa stock sa mga debate ug mga kalamboan sa research evaluation sa tibuok kalibutan, pagdrowing sa usa ka scoping nga grupo sa mga siyentipiko ug usa ka serye sa mga rehiyonal nga konsultasyon. Ang mga bag-ong pamaagi gihimo ug gi-pilot sa mga institusyon sa taas nga edukasyon ug mga tigpondo sa panukiduki sa pipila ka bahin sa kalibutan, ug daghan ang gilakip niini nga papel. Sa ubang mga bahin sa kalibutan, kini nga mga debate ug mga aksyon nagsugod o wala pa gani. Sa mga sistema sa panukiduki nga nag-uswag sa lainlaing mga rate, adunay peligro sa pagkalainlain ug pagkabahinbahin. Ang ingon nga pagkalainlain mahimong makompromiso ang homogeneity nga gikinahanglan aron mahimo ang kolaborasyon sa panukiduki ug mapadali ang paglihok sa tigdukiduki sa lainlaing mga heyograpiya, sektor ug disiplina. Bisan pa, ang usa ka gidak-on dili mohaum sa tanan ug adunay panginahanglan alang sa sensitibo sa konteksto nga mga paningkamot sa pagreporma sa ebalwasyon, pag-ila sa lokal nga mga hagit.

Uban ang pagtutok sa panukiduki sa publikong sektor ug ang pagtimbangtimbang sa panukiduki ug mga tigdukiduki, kini nga papel sa diskusyon kay global sa iyang panan-aw, nga naglangkob sa usa ka agenda nga kasagarang gidominahan sa mga kalamboan sa Europe ug North America: ang mga panlantaw sa rehiyon ug mga pananglitan sa nasudnong kalamboan ug reporma sa institusyon mao ang gipasiugda. Ang global ug kolektibong membership sa GYA, IAP ug ISC nagrepresentar sa usa ka halapad nga cross-section sa research ecosystem kansang lain-laing mga mandato makapadali sa tinuod nga sistematikong kausaban. Kini nga papel naningkamot nga magsilbing usa ka stimulus alang sa GYA, IAP ug ISC - isip mga plataporma alang sa mutual nga pagkat-on, eksperimento ug kabag-ohan - aron magtrabaho uban sa ilang mga miyembro, uban pang mga institusyon sa siyensya ug nag-unang mga konstituente sa tibuok kalibutan, sa pagsugod ug pag-uswag sa mga panag-istoryahanay, ug pagpalihok sa mas inklusibo. ug hiniusang aksyon.

Ang mga rekomendasyon para sa GYA, IAP ug ISC ug ang ilang mga miyembro (tan-awa ang seksyon 5) gihan-ay sa palibot sa ilang mga tahas isip mga tigpasiugda, mga ehemplo, mga innovator, mga tigpondo, mga magmamantala, mga evaluator ug mga kolaborator, nga adunay mga timailhan sa mga timeframe para sa aksyon. Kasagaran, kini nga mga aksyon naglakip sa paghimo og luna alang sa pagpaambit sa mga leksyon ug mga resulta gikan sa mga may kalabutan nga mga inisyatibo hangtod karon (aron magtukod usa ka komunidad sa praktis); sa medium nga termino, mag-co-convening sa multistakeholder fora uban sa mga importanteng constituencies sa pagdesinyo pag-usab ug pagpatuman sa research evaluation sa praktikal, konteksto-sensitive ug inclusive nga mga paagi; ug, sa mas taas nga termino, nag-aghat sa mga pagtuon sa nobela nga nakatampo sa umaabot nga panghunahuna, sensitibo sa paspas nga paglihok sa mga pag-uswag sa mga teknolohiya sa AI, mga pamaagi sa pagrepaso sa kaubanan ug reporma, ug media sa komunikasyon.

Ang quantitative metrics mahimong usa ka importanteng bahin sa research evaluation, sa transisyon ngadto sa mas bukas, responsable ug public-facing research system (Ang Royal Society, 2012) [2]. Apan sila usab ang usa ka bahin nga responsable sa pagpadako sa kultura sa panukiduki nga 'pagmantala o mawala' nga naglungtad sa tibuuk kalibutan, nga adunay makadaot nga mga epekto sa kalidad sa mga resulta sa panukiduki, ang integridad ug kasaligan sa mga sistema sa panukiduki ug ang pagkalainlain sa mga komunidad sa panukiduki (eg Haustein ug Larivière, 2014) [3]. Kini tungod kay ang metrics gigamit isip proxy para sa research nga kalidad sa mga institusyon, policymakers ug research funders, apan sila usa ka sukod sa mga output ug dili sa research quality o impact per se. Sa ingon, kini nga mga aktor dakog nahimo sa paghimo sa sosyal ug kultural nga konteksto diin ang panukiduki mahitabo, ug ang mga sistema sa reward ug promosyon sa akademya naghulma sa mga pagpili sa mga siyentipiko sa tanang yugto sa ilang karera (Macleod et al., 2014) [4].

“Ang paggamit sa bibliometric indices… isip proxy metrics para sa performance sa mga researcher usa ka sayon nga index sa assessment pero depekto kaayo. Kadaghanan nagbutang sa usa ka walay hunong nga pagtutok sa indibidwal nga kalampusan, pagwagtang sa suporta sa panukiduki pinaagi sa interes sa unibersidad sa taas nga epekto nga mga sukatan, pagpugos sa tanan sa 'pagmarka sa mga kahon' ug pagpahiuyon, samtang sila adunay importante nga papel sa pagtuis sa merkado sa publikasyon sa journal. Adunay dinalian nga panginahanglan alang sa reporma. ”

Pag-abli sa Record of Science (2021), ang International Science Council

Ang uban nga stakeholder nga komunidad nga adunay dakong gahum ug impluwensya sa panukiduki sa komunikasyon ug kahibalo sa produksyon mao ang sektor sa pagmantala. Ang mga sukatan nga gibase sa journal nahimong usa ka gamhanan nga insentibo sa pagmantala sa komersyal nga mga journal ug makapadasig sa kinaiya nga mahimong adunay seryoso nga epekto. Imbis nga hukman ang mga sangputanan sa panukiduki bahin sa mga merito sa siyensya, kini ang gihunahuna nga kalidad sa journal diin kini gimantala nga kanunay nga gidawat ingon ebidensya sa kalidad sa siyensya, nagmaneho sa usa ka labi ka komersyal nga merkado sa pagpatik base sa reputasyon kaysa sa siyensya. Ang mga gasto sa pag-abli sa pag-access kasagaran nga naangkon pinaagi sa mga bayad sa pagproseso sa tagsulat (APCs): kini mahimong hilabihan ka taas, ilabi na sa pipila ka mga bahin sa kalibutan, nga nagmugna og mga babag sa pagpanukiduki nga publikasyon alang sa mga tigdukiduki nga kabus sa kahinguhaan ug posibleng mameligro ang pagkabali sa internasyonal nga komunidad sa syensya. Ang mga kapeligrohan nga mahimong mas ug labaw nga nagsalig sa mga komersyal nga provider ug sa ilang mga termino sa paggamit sa tanan nga mga yugto sa proseso sa panukiduki nagmugna og usa ka lig-on nga kaso alang sa dili-ganansya nga mga alternatibo. Dugang pa, tungod kay ang bibliometric indicators naghatag sa dominanteng tinubdan sa mga insentibo sa mga unibersidad, kini nakapakunhod sa bili sa edukasyonal ug uban pang matang sa siyentipikong trabaho (sama sa pagtudlo ug tambag sa palisiya). Uban sa mga sistema sa pagtimbang-timbang sa panukiduki nga lagmit nga mopabor niadtong nakakuha og dagkong mga grants ug nagpatik sa mga journal nga adunay taas nga epekto nga mga hinungdan, adunay ebidensya nga nagsugyot nga ang mga tigdukiduki nga milampos na mas lagmit nga molampos pag-usab (ang 'Epekto ni Mateo', Bol et al., 2018) [5].

Kung ang eskolar nga pagmantala mahimong usa ka paagi sa pagtimbang-timbang kaysa komunikasyon, kini makadaut sa mga mopili sa pagpakigsulti sa ilang panukiduki sa ubang makahuluganon nga mga paagi (Ang taho sa ISC 2021) [6]. Naglakip kini sa kasagaran nga mga output (ug mahimo nga ang panguna nga salapi) sa Global Young Academy (GYA), InterAcademy Partnership (IAP) ug International Science Council (ISC): mga taho, mga papel sa pagtrabaho, hiniusang pahayag, mga editoryal sa opinyon, mga butang sa balita ug mga webinar . Ang ubang mga disiplina disbentaha usab: pananglitan, ang mga tigdukiduki sa engineering ug computer science diin (kasagaran mas paspas) ang komunikasyon pinaagi sa mga komperensya ug ang ilang mga proseso importante; ug kadtong anaa sa humanities ug social sciences nga kasagarang naggamit ug mga monographs, libro ug propesyonal nga mga magasin.

Ang uban mipili sa pagmantala sa espesipiko sa panukiduki o lokal nga mga journal, o dili makaarang sa pagmantala sa ilang panukiduki (bisan unsa ka taas ang kalidad) sa bukas nga access nga mga journal nga adunay taas nga epekto nga mga hinungdan (ug dungan nga taas nga APCs); ang ulahi nakadaot sa mga nasud nga ubos ang kita, labi na ang mga tigdukiduki sa sayo nga karera (ECRs). Kining sama nga mga tigdukiduki ubos sa grabe nga presyur alang sa tenured academic posts ug ang ilang kinaiya kusganong gikondisyon sa quantitative criteria nga gigamit sa research funding agencies ug institutional hiring ug promotion boards. Ang tintasyon sa paghunahuna uban ang mga timailhan (Muller ug de Rijcke, 2017) [7], ug bisan ang 'duwa' nga sistema, usa ka reyalidad para sa tanang tigdukiduki bisan asa sa kalibutan (eg Ansede, 2023) [8].

Ang mga pagpakita sa kini nga dula naglakip sa mga tigdukiduki (nahibalo o wala tuyoa) nga naggamit sa mga predatory journal ug mga komperensya aron madugangan ang ilang gidaghanon sa publikasyon (IAP, 2022 [lima]; Elliott et al., 2022 [10]), pagpatuyang sa self-citation ug falsifying peer reviews, plagiarism, impact factor inflation ug 'salami-slicing' (pagbahin sa usa ka dako nga pagtuon nga mahimo unta nga gitaho sa usa ka artikulo sa panukiduki ngadto sa mas gagmay nga gipatik nga mga artikulo) (Collyer, 2019) [11]. Ubos sa pressure, ang mga tigdukiduki mahimong matintal sa paggamit sa mga serbisyo nga manunukob nga adunay bugtong katuyoan nga makuha ang ilang mga PhD, ma-hire o ma-promote, o mapundohan ang ilang mga proyekto sa panukiduki (eg Abad-García, 2018 [lima]; Omobowale et al., 2014) [13]. Ang metrics-driven academia ug academic publishing systems nagduso sa maliputon nga mga insentibo: diin ang usa ka tigdukiduki nagmantala mas importante kay sa ilang gipatik.

Ang epekto sa kalidad ug integridad sa panukiduki dako kaayog kabalaka. Ang gidaghanon sa gibawi nga mga artikulo sa eskolar mitaas pag-ayo sa bag-ohay nga mga tuig, tungod sa pagpanukiduki ug pagpatik sa dili maayong pamatasan ug dili maayo o malimbungon nga mga datos. Ang mga journal mahimong molungtad og mga bulan ngadto sa mga tuig aron mabawi ang dili kasaligan nga panukiduki, diin kini mahimo nga gisitar sa daghang mga higayon ug naa sa publiko nga domain (Ordway, 2021) [14].

Ang pagpatigbabaw sa metrics-driven research evaluation walay duhaduha ug adunay mga diverging trends sa tibuok kalibutan kon bahin sa assessment reform, nga nameligro nga mabiyaan ang mga bahin sa research community. Sa pagtuki niini sa tibuok kalibutan nga talan-awon sa pagsusi sa panukiduki (Curry et al., 2020 [15]; nga gisumite), mopatim-aw nga daghang mga research ug funding nga mga institusyon sa mas taas nga kita nga mga nasud/rehiyon nagsugod sa paglakip sa mas lapad nga set sa mga indicators, sama sa qualitative 'impact measures', samtang ang bibliometrics nagpabilin nga nag-una sa mga institusyon sa 'Global South' [16] ], sa tanang disiplina. Kung walay mas inklusibo nga aksyon, adunay mga risgo nga mahimong usa ka divergence sa nasudnong mga sistema sa pagtasa, nga posibleng magpaila sa dugang pa nga sistema nga pagpihig ug mga potensyal nga dili pagkaangay sa panukiduki, ebalwasyon, pagpondo ug mga sistema sa pagmantala. Kini, sa baylo, mahimong makapugong sa internasyonal nga kolaborasyon sa panukiduki ug sa paglihok sa mga tigdukiduki. Sa paghimo og mga babag sa amihanan-habagatan nga kolaborasyon, mahimo usab kini nga makapugong sa dungan nga pagpalig-on sa mga ekosistema sa panukiduki sa Global South - ang lig-on nga pagtimbang-timbang sa panukiduki nagpalig-on sa mga ekosistema sa panukiduki ug pagsalig niini, gipakunhod ang posibilidad sa pag-agas sa utok ug makatabang sa pagtukod sa usa ka lig-on nga kapital sa tawo alang sa malungtaron. kalamboan. Bisan pa, ang usa ka gidak-on nga mohaum sa tanan nga mga bersyon sa kung unsa ang naglangkub sa maayo nga pasundayag nagmugna mga porma sa pamatasan nga dili kinahanglan nga makaayo sa pagkamaayo, patas, transparency ug paglakip. Aron sukdon ang mga nahimo sa mga iskolar nga milambo sa suportado, maayo nga kapanguhaan nga mga palibot diin ang mga oportunidad daghan, sa parehas nga paagi sa mga nakigbugno sa mga hagit ug nakabuntog sa mga babag sa mga kontra ug dili suportado nga mga palibot mao ang labing maayo nga kwestyonable (GYA, 2022) [17]. Daghang mga eskolar ang mibati sa makasaysayanon ug geograpikanhong pagpahigawas gikan sa komunidad sa panukiduki, nga gidasig sa dakong bahin sa paagi nga sila gisusi sa tibuok nilang mga karera. Sa dili pag-apil sa pipila ka mga porma sa panukiduki ug pagkapakyas sa paggamit sa lain-laing mga ideya sa tibuok kalibutan, adunay risgo nga ang kasamtangang mga pamaagi sa pagtuki sa panukiduki nagpasiugda sa usa ka mainstream/sumusunod nga kultura sa dominanteng mga modelo nga gipanamkon sa Kasadpan.

Ang mga tigdukiduki sa ubos nga kita nga mga nasud ug sa sayong bahin sa ilang karera nanginahanglan usa ka tingog aron sila makatabang sa paghulma sa bag-ong mga modelo sa pagtimbang-timbang sa mga paagi nga sensitibo sa konteksto nga angay alang sa katuyoan ug giasoy ang mga hagit nga ilang giatubang sa usa ka adlaw-adlaw. adlaw nga basehan. Ang GYA ug nagkadaghan nga mga National Young Academies naghatag sa mga ECR niini nga tingog, ug ang Ang GYA's Working Group sa Scientific Excellence [18] nagtanyag sa iyang mga panglantaw sa reporma sa research evaluation (tan-awa ang teksto sa ubos).

Mga panan-aw gikan sa komunidad sa tigdukiduki sa sayo nga karera

Ang mga tigdukiduki sa sayo nga karera (ECRs) labi nga nabalaka bahin sa mga gawi sa pagtimbang-timbang sa panukiduki tungod kay ang ilang mga palaaboton sa karera ug pagtinguha sa ilang agenda sa panukiduki hinungdanon nga nagdepende kung giunsa kini pagtimbang-timbang. Nagpahibalo kini sa mga pamaagi sa pagpondo, pag-hire ug promosyon sa mga paagi nga dili kanunay giisip nga patas ug patas.

Bisan kung klaro nga ang mga desisyon sa pagpondo ug mga kahinguhaan sa tawo makaapekto sa komposisyon sa kusog sa pamuo sa mga tigdukiduki, dili kanunay giila nga, pinaagi sa epekto niini sa pagpondo, ang pagtimbang-timbang sa panukiduki naghulma sa mga insentibo alang sa mga institusyon ug mga tigdukiduki sa pagpadayon sa usa ka piho nga trajectory sa panukiduki, pagtrabaho. sa usa ka natad o pag-apil sa pipila ka mga network sa uban. Niining paagiha, ang ebalwasyon sa panukiduki nag-umol sa pag-uswag sa siyensiya mismo, ug kini ilabinang tinuod nga may kalabotan sa dili katimbang nga epekto niini sa mga palaaboton ug gipaabot sa mga ECR.

Bisan kung ang siyensya usa ka global nga negosyo, ang pipila ka mga eskolar nag-atubang sa mas taas nga mga babag sa pagsulod ug pag-apil sa komunidad sa panukiduki tungod sa kung diin sila natawo, ilang pagkatawo o socio-economic background. Kini usa ka isyu sa organisasyon sa industriya sa siyensya ug dili sa pagtimbangtimbang sa panukiduki matag usa, apan daghang mga ECR ang mibati nga ang mga pamatasan sa pagtimbang-timbang dili kinahanglan nga buta sa kini nga kamatuoran sa kasinatian sa mga tigdukiduki, ug dili kinahanglan nga ipahamtang ang managsama ug estandard nga pamatasan sa lainlaing mga sitwasyon.

Ang panukiduki nga gihimo sa Scientific Excellence Working Group sa GYA (sa umaabot nga taho) nagpakita nga ang pagtuki sa panukiduki mahimong mas madasig sa palisiya sa panukiduki sa usa ka nasud kaysa sa kultural o siyentipikong mga debate. Ang pag-focus sa mga pamatasan sa promosyon sa hingpit nga pagkapropesor (o katumbas) sa akademya, gipakita sa taho nga ang mga nasudnon nga mga palisiya ug institusyon adunay mga piho nga dokumento nga nagtakda sa ilang mga pamatasan alang sa pagsusi sa panukiduki. Imbis nga maglangkob sa usa ka dako ug lainlain nga hugpong sa mga pamatasan nga magamit aron maporma ang usa ka komprehensibo nga pagtan-aw sa usa ka tigdukiduki, kini nga mga dokumento lagmit nga magpunting sa usa ka dimensyon o prayoridad. Pananglitan, ang ubang mga dokumento nagpunting sa pagtimbang-timbang sa mga kalihokan sa serbisyo sa tigdukiduki (sama sa pagtudlo ug pagtudlo) o sa uban sa natigom nga output sa tigdukiduki (pananglitan, sa gidaghanon sa mga artikulo sa journal) – apan panagsa ra ang duha.

Adunay duha ka nag-unang implikasyon niini nga pagpangita. Una, kana nga pagsusi sa panukiduki kay hierarchical ug top-down. Naghimo kini og usa ka risgo, tungod kay ang mga metric ug qualitative nga mga pamaagi kanunay nga wala magtagad sa pagkalain-lain sa mga tigdukiduki: sa ilang background ug career path, ug - parehas ka importante - pagkalain-lain sa ilang mga pamaagi ug ideya. Sa kasukwahi, ang mga ECR nga girepresentahan sa GYA mibati nga importante ang pag-ila sa pagkadaiya sa mga kalihokan nga gikinahanglan alang sa negosyo sa panukiduki, ug sa pagmugna og mga laraw sa pagtimbang-timbang sa panukiduki nga nagpasiugda sa pagkalain-lain ug pluralismo kay sa pagmando sa pagpahiuyon ug homologation.

Ikaduha, ang mga kalainan tali sa mga disiplina dili kaayo hinungdanon kaysa mga kalainan sumala sa kahimtang sa ekonomiya sa mga nasud diin nagtrabaho ang usa ka tigdukiduki. Ang mga nasud nga mas ubos ang kita daw nagsalig sa quantitative metrics ug reward 'productivity', samtang ang mas taas nga kita nga mga nasud mas bukas sa qualitative assessment sa epekto. Kung kini nga pagkalainlain nga molambo pa, mahimo’g kini usa ka dugang nga babag sa internasyonal nga paglihok sa mga iskolar - nga labi ka hinungdanon alang sa mga ECR.

Sa konklusyon, ang taho sa GYA nagpasiugda nga walay pilak nga bala: ang ebalwasyon sa panukiduki kinahanglan nga gitumong ngadto sa mga tumong sa ebalwasyon, ug sa katapusan ang mga tumong sa usa ka institusyon o palisiya sa panukiduki sa nasud. Ang ebalwasyon kinahanglang magtugot sa pagkalain-lain sa mga profile ug mga karera sa tigdukiduki, ug mosagop ug lahi nga pokus depende sa katuyoan sa ebalwasyon. Ang siyensya kay usa ka pangkalibutanon ug kritikal sa kaugalingon nga panag-istoryahanay, ang usa ka eksternal nga ebalwasyon mahimong dili kanunay kinahanglanon. Sa pagkatinuod, ang paggamit ug tinuod nga bili sa dili maayo nga mga ranggo (sa mga tawo, mga institusyon, mga outlet o bisan sa tibuok nga mga nasud) kanunay nga gidebatehan.

Ang mga paagi diin ang panukiduki gi-komisyon, gipondohan, gihimo ug gipahibalo nag-uswag sa tulin ug nanginahanglan sa pagpadali sa reporma sa pagsusi sa panukiduki. Sila naglakip sa mosunod:

(1) Ang transisyon sa bukas nga siyensya

Ang bukas nga kalihokan sa siyensya nanginahanglan dungan nga reporma sa mga sistema sa pagtimbang-timbang sa panukiduki aron mapauswag ang pagkabukas ug transparency. Daghan sa mga metrics ug indicators nga gigamit sa pagsukod sa performance sa pagpanukiduki kay opaque ug kanunay nga kalkulado luyo sa sirado nga commercial door. Kini nga kakulang sa transparency nagkompromiso sa awtonomiya sa komunidad sa panukiduki - gipugngan niini ang mga kapilian sa pagtimbang-timbang, pagsulay, pag-verify ug pagpaayo sa mga indikasyon sa panukiduki (Wilsdon et al., 2015 [23]). Ang responsable nga pagtasa sa panukiduki nahimong usa ka kinauyokan nga aspeto sa pangkalibutanon nga mga paglihok padulong sa bukas nga siyensya, sama sa nasaksihan, pananglitan, sa Rekomendasyon sa United Nations Educational, Scientific and Cultural Organization (UNESCO) sa Open Science (UNESCO, 2021 [24]) - nga naglakip sa pagpalambo sa usa ka Open Science Toolkit alang sa mga miyembro niini aron sa pagtabang kanila sa pagrepaso ug pag-reporma sa ilang research career assessments ug evaluation criteria [25].

(2) Mga kalamboan sa peer review

Ang pag-uswag sa bukas nga pagrepaso sa kaubanan - bisan ang pagmantala sa mga taho sa pagrepaso sa kaubanan ug / o pag-ila sa publiko sa mga tigrepaso - usa ka importante nga kalamboan alang sa pagsusi sa panukiduki (Barroga, 2020 [lima]; Woods et al., 2022 [27]). Ang pag-uswag sa imprastraktura sa datos nakapahimo sa mga magmamantala sa paghimo og Digital Object Identifiers (DOIs) alang sa peer review reports, pag-link sa peer review reports ngadto sa indibidwal nga Open Researcher ug Contributor IDs (ORCIDs) ug pagmantala sa mga papel isip preprints. Ang gidaghanon sa mga preprints miuswag pag-ayo sa panahon sa global nga COVID pandemic ug gibutyag ang mga hagit sa pag-assess sa panukiduki sa paspas nga paagi sa pagtubag. Bisan pa, ang bukas nga mga pamaagi sa pagrepaso sa kaubanan - bisan sa wala pa o pagkahuman sa publikasyon - mahimo’g makatabang sa pagsamok sa pagkontrol sa mga komersyal nga magmamantala nga adunay mga proseso sa pagpanukiduki sa komunikasyon ug paghimo sa kahibalo, pagkunhod sa gahum sa journal sa siyensya ug kauban nga mga sukatan sama sa mga JIF. Ang bukas nga mga rekord sa mga kalihokan sa pagrepaso sa kaubanan mahimo usab nga maghatag imprastraktura sa pagdokumento - ug sa paglabay sa panahon makamugna og mas dako nga bili sa - mga kalihokan sa pagrepaso sa mga kauban, nga usa ka importante nga serbisyo sa propesyonal nga kasagaran dili makita ug dili kaayo mapasalamatan sulod sa mga pagtasa sa akademiko (Kaltenbrunner et al., 2022 [28]).

(3) Ang paggamit sa artificial intelligence ug machine learning

Ang mga pag-uswag sa teknolohiya sa artificial intelligence (AI) ug pagkat-on sa makina lagmit adunay lawom nga mga sangputanan alang sa pagtimbangtimbang sa panukiduki, lakip ang mga proseso sa pagrepaso sa kauban nga nagsuporta niini (pananglitan Holm et al., 2022 [lima]; Proctor et al., 2020 [30]). Ang AI gigamit na sa pagpahapsay ug pagpalig-on sa peer review (Kinaiyahan, 2015 [31]; Kinaiyahan, 2022 [32]), sulayi ang kalidad sa peer review (Severin et al., 2022 [33]), sulayi ang kalidad sa mga citation (Gadd, 2020 [34]), nakamatikod sa plagiarism (Foltýnek et al., 2020 [35]), pagdakop sa mga tigdukiduki nga nagdoktor sa datos (Kusog, 2022 [36]) ug pangitaa ang mga tigrepaso sa mga kauban, nga nagkagamay tungod kay kini nga trabaho wala makakuha sa kredito nga angay niini sa pagsusi sa tigdukiduki. Ang 'Conversational AI', sama sa ChatGPT (Chat Generative Pre-Trained Transformer), adunay kapasidad sa pagdesinyo sa mga eksperimento, pagsulat ug pagkompleto sa mga manuskrito, pagpahigayon og peer review ug pagsuporta sa mga desisyon sa editoryal sa pagdawat o pagsalikway sa mga manuskrito (Kinaiyahan, 2023 [37]). Adunay usab potensyal alang sa AI aron mapauswag ang kahusayan sa pagrepaso sa kaubanan pinaagi sa paggamit sa mga algorithm aron mapagaan ang palas-anon sa mga tig-review sa kaubanan ingon mga referee sa output sa panukiduki (Kinaiyahan, 2022 ). Ang paggamit sa AI gisugdan na sa China aron makapangita og mga referee (Kinaiyahan, 2019 [39]).

Ang tanan nga kini nga mga aplikasyon sa AI makapakunhod sa kini nga palas-anon ug gitugotan ang mga eksperyensiyado nga eksperto nga ipunting ang ilang paghukom sa kalidad sa panukiduki ug labi ka komplikado nga mga pagtasa (Thelwall, 2022 [40]). Apan nameligro usab nila ang pagpakaylap sa mga bias tungod kay kini mga predictive nga teknolohiya nga nagpalig-on sa kasamtangan nga datos nga mahimong mapihigon (pananglitan sa gender, nasyonalidad, etnisidad o edad): sa pagkatinuod, ang paggamit sa AI mismo mahimong makabenepisyo gikan sa mas lawom nga pagsabot sa kung unsa ang naglangkob sa 'kalidad. ' research (Chomsky et al., 2023 [lima]; ISI, 2022 [42]).

Sa tinuud, bisan pa, ang tanan nga mga porma sa AI ug pagkat-on sa makina bukas sa pag-abuso (Blauth et al., 2022 [43]; Bengio, 2019 [44]). Ang mga komunidad sa akademya ug panukiduki kinahanglan nga magtukod og kaandam ug kalig-on niini, pagtrabaho kauban ang gobyerno, industriya ug sibil nga katilingban nga pagpangulo nga nagdumala niini nga wanang.

(4) Ang pagsaka sa social media

Ang conventional quantitative measures sa research impact napakyas sa pag-asoy sa pagsaka sa social media engagement ug socially networked researchers/academics (Jordan, 2022 [45]). Daghang mga akademiko ang naggamit sa mga platform sa social media aron makiglambigit sa mga komunidad, mga magbabalaud ug publiko sa tibuok kinabuhi sa ilang proyekto sa panukiduki; sa positibong pakiglambigit, pagsulay ug pagpahibalo sa ilang panukiduki, ug pagdala ug lain-laing mga ideya ug mga input, imbes nga imantala lang ang kataposang output isip fait accompli para sa tigdawat nga tigpaminaw. Kini nga pakiglambigit wala makuha sa naandan nga mga porma sa pagtasa sa panukiduki apan mahimong mosangput sa mas lapad nga pag-impluwensya ug mga oportunidad sa outreach. Ang mga sukatan sa social media ('altmetrics') gipalambo isip usa ka kontribusyon sa responsable nga mga sukatan (Wouters et al., 2019 [4]) ug ilakip ang mga paghisgot sa Twitter o Facebook ug ang gidaghanon sa mga sumusunod sa ResearchGate, pananglitan. Sa usa ka bahin, kini nga mga altmetrics makatabang sa pag-abli, paghimo og luna ug pagpalapad sa ebalwasyon (Rafols ug Stirling, 2021 [47]) apan sa laing bahin - sama sa ubang mga indicators - mahimo usab nga gamiton nga iresponsable ug / o makita nga magpahamtang og laing layer sa metrics sa mga sistema sa ebalwasyon.

Ang mga hagit sa reporma sa ebalwasyon sa panukiduki daghang pilo. Ang pipila sa labing hinungdanon gihulagway dinhi.

Ang bisan unsang reporma nga naglakip sa mas daghang kwalitatibo nga mga lakang kinahanglan - sa samang higayon - manalipod sa kalidad sa sukaranan ug gigamit nga panukiduki. Adunay anecdotal nga ebidensiya nga ang pipila ka mga siyentista mismo mosupak sa reporma, tingali ilabi na sa mga advanced career researchers nga milambo sa kasamtangan nga sistema, tungod kay nahadlok sila nga kini mameligro nga makapausbaw sa kasarangang panukiduki, o nga ang mas kwalitatibo nga mga porma sa ebalwasyon mahimong mopabor sa paggamit sa batakang panukiduki. Ang pagbag-o sa mga sukdanan sa pagtimbang-timbang sa panukiduki lagmit nga gikuwadro sa palibot sa mga paglihok padulong sa oriented sa misyon, adunay epekto sa katilingban nga panukiduki nga naghangyo sa suporta sa publiko ug politika sa paagi nga dili kaayo mahikap nga sukaranan o asul nga kalangitan nga panukiduki. Ang uban nangatarungan nga ang usa ka mas nuanced nga interpretasyon sa 'bili' sa panukiduki gikinahanglan aron masuportahan ang kabag-ohan, tungod kay ang umaabot nanginahanglan padayon nga pagpamuhunan sa sukaranan, panukiduki nga gipatuyok sa pagkamausisaon ug usa ka labi nga pagpabili sa hinungdanon nga papel nga gidula niini sa kapasidad sa pagtubag sa mga hagit sa kalibutan (GYA, 2022 [48]).

Ang kakulang sa pagkamakanunayon sa kahulogan ug paggamit sa terminolohiya sa panukiduki, sa kasagaran, usa ka babag sa pagbag-o. Ang konsepto nga gambalay alang sa pagtimbang-timbang sa panukiduki wala kaayo mausab sa paglabay sa panahon, ni ang pinulongan nga nagsuporta niini: ang sistema sa panukiduki nagpabilin gihapon sa mga daan nga dichotomies sama sa 'basic' ug 'applied' science, ug mga termino sama sa 'epekto', 'kalidad' (dili makatabang nga gipakasama sa pagka-produktibo) ug ang 'kamaayo' dili tin-aw nga gihubit sa paagi nga makalikay sa heyograpiya, pagdisiplina, yugto sa karera ug pagpihig sa gender (Jong et al., 2021 [49]): kini mahimo nga labi ka mahait sa mga panel sa paghimog desisyon nga kulang sa pagkalainlain (Hatch ug Curry, 2020 )[50].

Sama sa metrics-driven evaluation, mas daghang kwalitatibo nga mga porma sa evaluation dili usab perpekto. Ang paghimo sa argumento nga ang mga proseso sa pagrepaso sa kaubanan ug paghukom sa eksperto labing menos sama ka importante sa bibliometrics dili prangka. Mahimo silang mapihigon tungod sa kakulang sa katin-awan ug transparency sa proseso sa pagrepaso sa kaubanan. Ang mga komite sa pagrepaso sa kaubanan, pananglitan, gisaway isip mga mekanismo nga nagpreserbar sa natukod nga mga porma sa gahum ug pribilehiyo pinaagi sa pagpaarang sa mga network sa 'mga tigulang nga lalaki' ug homophily (mga evaluator nga nangita sa mga sama sa ilang kaugalingon) nga magpadayon, samtang mahuyang usab sa mga dinamikong panghunahuna sa grupo. Ang quantitative metrics, bisan pa dili hingpit, makita sa pipila ka bahin sa kalibutan isip depensa batok sa nepotismo ug pagpihig. Ang susamang mga argumento mahimong magamit sa pagrepaso sa kaubanan sa mga papeles sa panukiduki, uban ang paggamit sa mas daghang kwalitatibo nga pagtasa nga posibleng magbukas sa pultahan sa ubang mga porma sa pagpihigpihig nga kinaiya.

Ang kakulang sa propesyonal nga pag-ila, ug pagbansay alang sa, peer review sa bisan unsang porma nagmugna og mga disinsentibo nga magsilbi nga peer reviewer, sa ingon nagpamenos sa kapasidad. Dugang pa, tungod kay ang panginahanglan milapas sa suplay, kini makamugna og mga insentibo sa pagputol sa mga kanto ug pagpakunhod sa kahigpit. Ang pagdugang sa transparency sa pagrepaso sa kaubanan (bisan bug-os nga bukas, wala mailhi o hybrid) ug pagbansay, pagpauswag ug pagganti sa maayong pamatasan sa pagrepaso sa kaubanan ang tanan gikinahanglan; sama sa dugang nga panukiduki sa mga modelo alang sa ebolusyon niini samtang ang mga output sa panukiduki nagkadaiya (IAP, 2022 [51]) ug AI nga mga teknolohiya nag-uswag.

Ang mga debate sa reporma sa ebalwasyon sa panukiduki komplikado ug dili binary. Ang qualitative ug quantitative nga impormasyon kanunay nga gihiusa sa mga konteksto sa pagrepaso sa kaubanan: mga pahayag sama sa Leiden Manifesto for Research Metrics (Hicks et al., 2015 [52]) nanawagan alang sa 'gipahibalo nga pagrepaso sa kaubanan' diin ang hukom sa eksperto gisuportahan - apan dili gipangulohan sa - tukma nga gipili ug gihubad nga mga timailhan sa quantitative ug pinaagi sa kwalitatibo nga impormasyon. Ang debate sa ebalwasyon sa panukiduki dili usa ka binary 'qualitative versus quantitative' nga pagpili sa mga himan sa pagtimbang, apan kung giunsa pagsiguro ang labing kaayo nga kombinasyon sa daghang mga porma sa kasayuran.

Sa katapusan, ang bisan unsang reporma kinahanglan usab nga kombenyente ug mahimo. Ang sistema sa panukiduki nagpakita na sa mga timailhan sa pagkahugno sa ilawom sa iyang kaugalingon, tungod kay ang gidaghanon sa mga publikasyon nga nagtaas ug ang palas-anon sa pagrepaso dili parehas nga nahulog sa tibuuk nga negosyo sa panukiduki (eg Publons, 2018 [lima]; Kovanis et al., 2016 [lima]; Kinaiyahan, 2023 [55]). Journal-based metrics ug ang h-index, uban sa qualitative notions sa publisher prestige ug institutional reputation, makahatag ug sayon nga mga shortcut para sa busy nga mga evaluators ug presente nga mga babag sa pagbag-o nga nahimong lalom sa academic evaluation (Hatch ug Curry, 2020 [56]). Ang quantitative metrics gidayeg sa pipila ka mga nasud nga naghatag ug medyo klaro ug dili klaro nga mga ruta alang sa appointment ug promosyon. Sa 'Global South', ang kasagaran nga mga hinungdan sa epekto kanunay nga gigamit sa paglista sa mga aplikante, ug ang bisan unsang alternatibo kinahanglan parehas nga mapatuman ug makahimo sa pagkuha sa dugang nga mga kahinguhaan nga dili malikayan nga gikinahanglan aron mapalapad ang sakup sa ebalwasyon. Ang kasayon sa paggamit sa yano nga quantitative metrics sa pagtimbang-timbang sa panukiduki lagmit nga usa ka dakong babag sa pagbag-o, ug ang pagpaila sa bag-ong mga sistema sa ebalwasyon mahimo pa gani nga makamugna og dugang nga global nga dili makiangayon tungod sa kakulang sa kapasidad o katakus sa pipila ka mga nasud.

Sa mga global nga inisyatibo nga gihisgutan sa ibabaw, ang 2013 San Francisco 'Deklarasyon sa Pagsusi sa Pagpanukiduki' [64] (DORA) tingali ang labing aktibo nga inisyatibo sa kalibutan. Gitala niini ang mga problema nga gipahinabo sa paggamit sa mga indikasyon nga nakabase sa journal aron sa pagtimbang-timbang sa nahimo sa mga indibidwal nga tigdukiduki ug naghatag 18 nga mga rekomendasyon aron mapauswag ang ingon nga pagtimbang-timbang. Gidili sa DORA ang paggamit sa mga sukdanan nga gibase sa journal aron masusi ang kontribusyon sa usa ka tigdukiduki o kung gusto nga mo-hire, mag-promote o magpundo. Sukad sa tungatunga sa Abril 2023, ang deklarasyon gipirmahan sa 23,059 nga mga nagpirma (mga institusyon ug indibidwal) sa 160 ka mga nasud, nga nagpasalig sa reporma. Uban ang pagtutok sa pag-navigate sa intrinsic nga mga hagit ug kinaiyanhon nga pagpihig sa qualitative assessment, ang DORA nagpalambo Tools to Advance Research Assessment (TARA) [65] aron makatabang sa pagpraktis sa deklarasyon: kini nga mga himan naglakip sa usa ka dashboard sa pag-indeks ug pagklasipikar sa mga bag-ong polisiya ug mga gawi sa career assessment ug usa ka toolkit sa mga kahinguhaan aron sa pagtabang sa de-bias nga komposisyon sa komite ug sa pag-ila sa lain-laing, kwalitatibo nga mga porma sa epekto sa panukiduki.

Dugang pa, gipondohan sa DORA ang napulo ka proyekto - sa Argentina, Australia, Brazil, Colombia (2), India, Japan, Netherlands, Uganda ug Venezuela - aron sulayan ang lainlaing mga paagi sa pagpasiugda sa reporma sa pagsusi sa panukiduki sa ilang lokal nga konteksto, ingon man paghugpong sa mga ehemplo sa maayong praktis: pananglitan, pagpataas sa kahibalo, pagpalambo sa bag-ong polisiya o praktis, pagbansay ug praktikal nga giya alang sa mga aplikante sa trabaho (Dora [66]). Ang panginahanglan alang sa mga grants nga ingon niini nga matang taas - labaw sa 55 ka mga aplikante gikan sa 29 ka mga nasud - nga nagpakita sa usa ka nagtubo nga pag-ila sa panginahanglan alang sa reporma.

Ang mga propesyonal nga asosasyon sa pagdumala sa panukiduki sama sa International Network of Research Management Societies (INORMS) aktibo usab nga nagpalambo sa mga kapanguhaan aron mogiya sa pagbag-o sa organisasyon, lakip ang SCOPE Framework Research Evaluation Group | INORMS - Ang INORMS SCOPE nga gambalay alang sa pagsusi sa panukiduki [67] nga nagsugod pinaagi sa pagtino kung unsa ang gipabilhan, kinsa ang gi-evaluate ug ngano (usa ka mapuslanon nga poster sa pagpatin-aw dinhi [68]).

Ang internasyonal nga sektor sa pag-uswag nagtanyag bag-ong mga panan-aw sa pagsusi sa panukiduki, usa ka panguna nga pananglitan Dugang nga Kalidad sa Pagpanukiduki | IDRC - International Development Research Center [69], nga nagsukod kung unsa ang hinungdanon sa mga tawo sa pagdawat nga katapusan sa panukiduki. Ang Research Quality Plus (RQ+) nga himan nag-ila nga ang siyentipikanhong merito gikinahanglan apan dili igo, nga nag-ila sa mahinungdanong papel sa komunidad sa tiggamit sa pagtino kon ang panukiduki may kalabotan ug lehitimo. Giila usab niini nga ang pag-update ug impluwensya sa panukiduki nagsugod sa panahon sa proseso sa panukiduki. Ang mga aplikasyon sa panukiduki kasagarang gi-assess sa mga interdisciplinary panel, nga naglangkob usab sa mga eksperto sa pag-uswag gikan sa gawas sa akademya (pananglitan usa ka departamento sa gobyerno o non-government organization (NGO)), mga practitioner ug mga representante sa nasud: kini nagpalig-on sa importansya sa komunidad sa tiggamit/mga eksperto nga dili sakop. kinahanglan nga masabtan ang panukiduki ug kung giunsa kini magamit sa praktis. Ang panukiduki sa komplikado, mubu nga kita o huyang nga mga setting mahimong inubanan sa usa ka toolkit sa pamatasan o balangkas, nga gidisenyo aron ipahibalo ug suportahan ang mga pagpili sa pamatasan sa siklo sa kinabuhi sa panukiduki, gikan sa pagsugod hangtod sa pagsabwag ug epekto, pananglitan. Reid et al., 2019 [70]. Ang 'Teorya sa Pagbag-o' nga mga pamaagi kaylap nga gigamit sa internasyonal nga panukiduki sa kalamboan sa mga donor, NGO ug multilateral nga ahensya, diin ang mga aplikante kinahanglan nga magpahayag sa mga agianan sa epekto, suportado sa pagmonitor, ebalwasyon ug mga balangkas sa pagkat-on, pananglitan Valters, 2014 [71]. Ang komunidad sa panukiduki sa akademiko mahimo’g makat-on gikan sa komunidad sa pag-uswag.

Ang pag-ila sa papel sa mga nagpundo sa paghulma sa mga estratehiya sa HEIs, ang Ang Global Research Council (GRC) Responsible Research Assessment (RRA) nga inisyatiba [72] nag-insentibo sa mga nag-unang tigpundo sa panukiduki sa tibuok kalibutan sa pagtrabaho ngadto sa mga ambisyon sa RRA sa ilang kaugalingong rehiyonal ug nasyonal nga konteksto ug sa pagpalambo sa epektibo nga mga gambalay sa ebalwasyon aron masusi ang epekto (explanatory video dinhi [73]). Pag-commissioning og working paper sa RRA (Curry et al., 2020 [74]), nanawagan ang GRC sa mga miyembro niini sa pag-embed sa mga prinsipyo sa RRA ug paghimog konkretong aksyon aron matuman kini, ug magkat-on gikan sa usag usa pinaagi sa pagtinabangay ug pagpaambit sa maayong praktis. An internasyonal nga grupo sa pagtrabaho [75] naghatag giya ug suporta sa mga miyembro sa GRC, nagtabang kanila sa pagbalhin gikan sa paglihok ngadto sa aksyon.

Sa dakong bahin pinaagi sa mga paningkamot sa GYA, ang mga ECR nagsugod usab sa pagpalihok sa ilang mga kaugalingon sa palibot niini nga agenda. Ang Working Group sa Scientific Excellence [76] nagtrabaho aron mahibal-an ang mga palibot sa panukiduki nga makatabang sa 'pagpagawas sa pagkamausisaon ug pagkamamugnaon sa siyensya ug aron mapalambo ang pag-uswag sa potensyal sa tawo pinaagi sa pagkalainlain ug paglakip'. Ang ilang trabaho nanawagan alang sa komunidad sa ECR nga hagiton ang mga kahulugan sa 'excellence' nga gigamit sa ilang mga organisasyon, aron maapil sa mga inisyatibo aron mabag-o ang ebalwasyon sa panukiduki ug moapil sa kalihokan sa Young Academies. Nanawagan usab kini sa pagpondo ug pag-hire og mga lawas nga iapil ang mga ECR sa mga debate sa pagtimbang-timbang sa panukiduki ug pag-ila sa usa ka mas lapad nga pagkalainlain sa mga kontribusyon sa, ug mga karera sa, panukiduki.

Bisan tuod ang pipila ka mga unibersidad ug uban pang HEIs mga signatories sa DORA ug/o pag-apil sa European nga kalihukan (gihulagway sa ubos), sila dili makita nga nag-organisar sa ilang mga kaugalingon nga kolektibo sa palibot sa research evaluation sa paagi nga ang uban nga importante nga mga konstituente.

ang EU Coalition on Reforming Research Assessment [80], o CoARA, nga gi-aprobahan kaniadtong Hulyo 2022, mao ang pinakadako nga inisyatibo sa reporma sa pagsusi sa panukiduki sa kalibutan. Upat ka tuig sa paghimo ug gipalambo sa 350 nga mga organisasyon sa 40 (kadaghanan sa Europe) nga mga nasud, ang European University Association ug Science Europe (usa ka network sa mga tigpondo ug akademya sa siyensya sa kontinente), kauban ang European Commission, nakamugna og usa ka kasabutan o set sa mga prinsipyo (apanaw sa reporma'), alang sa mas inklusibo ug responsable nga pagsusi sa panukiduki (CoARA, 2022 [81]). Ang kasabutan nagpunting sa tulo ka lebel sa pagtasa: mga institusyon, indibidwal nga tigdukiduki ug ang panukiduki mismo. Samtang gidumala sa European partners, ang koalisyon adunay mga ambisyon nga mahimong global ug ang DORA ug ang GYA mga signatories na. Ang mga nagpirma mopasalig sa pagtugyan sa mga kapanguhaan aron mapauswag ang pagtimbangtimbang sa panukiduki, paghimo og bag-ong pamatasan ug mga himan alang sa pagtimbang-timbang, ug pagpataas sa kahibalo ug paghatag pagbansay sa pagtimbangtimbang sa panukiduki (pananglitan sa mga tigrepaso sa kaubanan). Kini nga kalamboan gihulagway nga 'ang labing malaumon nga timaan sa tinuod nga pagbag-o' (Kinaiyahan, 2022 [82]).

Ang EU nagpundo usab sa pipila ka kulbahinam nga bag-ong mga inisyatibo nga gilaraw aron suportahan ang reporma sa pagsusi sa panukiduki: labi na, Open ug Universal Science (Opus [83]) - aron makahimo usa ka 'komprehensibo nga suite' sa mga indikasyon sa daghang mga proseso sa panukiduki ug mga output, ug sa ingon madasig ang mga tigdukiduki sa Europa nga magpraktis sa bukas nga siyensya - ug ang bukas nga datos sa pagtasa sa siyensya GraspOS [84] – sa pagtukod og usa ka bukas nga dataspace sa pagsuporta sa palisiya reporma alang sa research assessment.

Ang European Research Council (ERC), nga nagsuporta sa panukiduki sa utlanan sa tanan nga natad (nga adunay badyet nga € 16 bilyon alang sa 2021–2027) mipirma sa CoARA ug giusab ang mga porma ug proseso sa pagtimbang-timbang niini aron matukod ang daghang mga paghubit sa asoy, lakip ang pag-asoy sa gamay. naandan nga mga agianan sa karera ug 'talagsaon nga kontribusyon' sa komunidad sa panukiduki. Ang mga sugyot pagahukman nga labaw pa sa ilang merito kaysa sa nangaging mga nahimo sa aplikante ug magpadayon nga susihon sa mga peer review panel nga gilangkuban sa mga nanguna nga mga iskolar nga naggamit sa bugtong sukdanan sa kahusayan sa siyensya (ERC, 2022 [85]).

Ang pipila ka mga akademya sa Europa nakigbahin usab. Ang Lupon sa ALLEA [86], ang European Federation of Academies of Sciences and Humanities, nga nagrepresentar sa siyam sa 50-plus nga nasudnong akademya sa 40 ka nasod sa Uropa, nag-endorso sa kalihukan sa CoARA. Ang ALLEA mihimo sa pagtukod og usa ka dedikado nga task force aron sa pagkolekta, pagbayloay ug pagpalambo sa maayong praktis alang sa pagdawat sa bag-ong Academy Fellows ug sa pagtampo sa 'makahuluganon nga kultural nga pagbayloay' sa research assessment, base sa mga prinsipyo sa kalidad, integridad, pagkalain-lain ug pagkabukas. Sa iyang Oktubre 2022 nga pahayag , ang ALLEA nanawagan sa mga miyembrong akademya sa pagbuhat sa mosunod:

1. Pag-ila sa pagkadaiya sa mga kontribusyon sa, ug mga karera sa, panukiduki sumala sa mga panginahanglan ug kinaiya sa panukiduki; sa kaso sa mga kauban sa Academy, ang mga pamaagi sa pagpili kinahanglan (1) konsiderahon ang balanse sa gender ug ang talagsaon nga mga hagit sa mga tigdukiduki sa sayo nga karera, (2) pagsuporta sa pagkalain-lain sa mga kultura ug disiplina, (3) pagpabili sa lainlaing mga bahin sa kahanas ug talento, ug (4) pagpalambo sa interdisciplinarity ug multilinggwalismo.

2. Base sa research assessment nag-una sa qualitative evaluation diin ang peer review mao ang sentro, gisuportahan sa responsable nga paggamit sa quantitative indicators; Ang pagtimbang-timbang sa kahusayan ug epekto bahin sa trabaho sa mga kauban sa kandidato kinahanglan nga ibase sa kwalitatibo nga pagrepaso sa kaubanan nga nagtagbo sa sukaranang mga prinsipyo sa kahigpit ug transparency ug gikonsiderar ang piho nga kinaiya sa disiplina sa siyensya.

3. Isalikway ang dili angay nga paggamit sa journal- ug publikasyon-based metrics sa research assessment; sa partikular, kini nagpasabot sa pagpalayo gikan sa paggamit sa metrics sama sa Journal Impact Factor (JIF), Article Influence Score (AIS) ug h-index isip dominanteng proxy alang sa kalidad ug epekto.

Pahayag ni Allea Bahin sa Pagbag-o sa Pagsusi sa Pagpanukiduki Sulod sa European Academies

Sa ilang hiniusang tubag [87] sa EU Agreement ug CoARA Coalition, ang ECR nga komunidad sa GYA midawat usab niini nga pasalig ug nagtanyag og mga paagi sa pagpatuman sa mga prinsipyo niini. Naglakip kini sa mga praktis nga inklusibo ug nagpakita sa pagkalain-lain sa nasudnong mga espesipiko ug mga kinaiya sa disiplina, nga ang mga tigdukiduki sa tanan nga mga yugto sa karera nakadawat og pagbansay, mga insentibo ug mga ganti, nga adunay mandatory nga pagbansay sa bukas nga siyensya alang sa mga tigdukiduki, kawani ug mga miyembro sa komite nga hinungdanon.

Ang research-intensive nga mga unibersidad sa Europe nagpaluyo usab sa reporma sa research evaluation isip usa ka agianan alang sa 'multidimensional' nga mga karera sa panukiduki (Overlaet, B., 2022 [88]). Naghimo sila og usa ka komon nga gambalay aron sa pagdasig ug pagsuporta sa mga unibersidad sa pag-ila sa lain-laing mga kontribusyon sa panukiduki, edukasyon ug serbisyo sa katilingban.

Sa nasyonal nga lebel, daghang mga nasud karon ang nag-pilot sa lainlaing mga modelo sa pagtasa: pananglitan, mga ahensya sa nasudnon nga pondo sa Belgium, ang Netherlands, Switzerland ug UK tanan naggamit 'narrative CVs'. Ang narrative CVs tan-awon nga mas holistically sa academic achievement: kontribusyon sa henerasyon sa kahibalo, sa pagpalambo sa mga indibidwal, sa mas lapad nga research community ug sa mas lapad nga katilingban (Royal Society [89]). Samtang adunay nagkalapad nga suporta alang sa kini nga mga klase sa CV, adunay pipila usab nga kabalaka nga gipugos nila ang mga akademiko nga mahimong maayo sa tanan, ug sa ingon peligro nga makompromiso ang lawom nga kahanas sa pagpangita sa tanan nga kahimtang (Grove, J., 2021 [90]).

Upat ka mga pananglitan sa nasudnong sistema sa panukiduki nga nag-coordinate sa tibuok nasud nga mga reporma sa career-oriented academic assessments gilakip sa mosunod nga mga text box.

Nasyonal nga pananglitan: Ang UK

Ang UK Research Evaluation Framework (REF) nagsukod sa epekto sa panukiduki pinaagi sa duha ka dimensyon: 'kahinungdanon' (ang makita nga kalainan nga gihimo sa usa ka proyekto) ug 'pagkab-ot' (ang masukod nga gidak-on sa pagbuhat niini) (UKRI). Ang epekto dinhi gihubit nga 'usa ka epekto sa, pagbag-o o kaayohan sa ekonomiya, katilingban, kultura, palisiya sa publiko o serbisyo, kahimsog, kalikopan o kalidad sa kinabuhi, lapas sa akademya' apan labaw pa niini kini bukas kaayo, disiplina- variable ug makalalis nga dili klaro, nga napakyas sa pag-asoy sa igo alang sa public engagement, pananglitan.

Ang REF sa UK gisusi sa 2022–2023 ubos sa Umaabot nga Research Assessment Program aron masusi ang posible nga bag-ong mga pamaagi sa pagtimbang-timbang sa pasundayag sa panukiduki sa taas nga edukasyon sa UK, ug naglakip sa pagsabut sa pamatasan sa pagtasa sa panukiduki sa internasyonal. Ang sunod nga pagbalik-balik sa REF posibling mag-asoy sa mas lain-laing set sa mga output ug tingali makapakunhod pa sa importansya nga gilakip niini. Ang kasamtangan nga modelo nagbutang sa 60% nga importansya sa mga output, 25% sa epekto sa panukiduki ug 15% sa kultura sa panukiduki / palibot. Kung kini mas parehas nga gibug-aton, nan ang REF lahi kaayo tan-awon, nga adunay mas importansya nga gilakip sa kultura sa panukiduki, integridad sa panukiduki ug pagtrabaho sa grupo (Grove, 2020).

Nasyonal nga pananglitan: Finland

Kaniadtong 2020, ang Federation of Learned Societies sa Finland nag-coordinate sa usa ka taskforce sa mga tigpondo sa panukiduki, unibersidad ug unyon nga nagpatik sa pahayag. Maayong Pagpraktis sa Pagsusi sa Pagpanukiduki. Nagtakda kini og giya alang sa pagsunod sa usa ka responsableng proseso alang sa pagtasa sa indibidwal nga mga akademiko, lakip ang lima ka kinatibuk-ang prinsipyo sa pagtimbang-timbang: transparency, integridad, kaangayan, katakus ug pagkalain-lain. Ang Good Practice sa Research Assessment nanawagan sa integridad sa panukiduki, edukasyon ug pagtudlo, ug serbisyong siyentipikanhon (eg peer review) nga mas mailhan sa pag-assess sa mga kontribusyon sa akademiko sa mga indibidwal. Ang pahayag nagtan-aw sa mga pagtasa nga dili lamang mahitungod sa paghimo og mga summative nga mga paghukom: kini usab nag-awhag sa mga evaluator sa pagpaambit og feedback sa mga indibidwal nga gi-evaluate aron mapadali ang feedback ug pagkat-on.

Ang mga research-performing nga mga organisasyon ug research funding organizations ang tanan mipasalig sa pagpatuman sa Maayong Practice sa Research Assessment ug paghimo sa ilang kaugalingong lokal nga mga variation sa giya, ug usa ka national researcher portfolio CV model ang gihimo. Ang Maayong Pagpraktis sa Pagsusi sa Pagpanukiduki nagpasalig sa mga regular nga pagrepaso ug pagpino.

Nasyonal nga pananglitan: Ang Netherlands

Sa Netherlands, ang nasudnong programa sa Recognition ug Rewards nagsugod sa 2019, uban ang pagmantala sa pahayag sa posisyon Kwarto para sa Talento sa Tanan. Kining tibuok nasod nga kolaborasyon tali sa Royal Netherlands Academy of Arts and Sciences (KNAW – usa ka IAP ug ISC member), research funders, unibersidad ug medical centers nag-ingon nga ang sistema-wide modernization sa research assessment cultures kinahanglang mahitabo. Sa pagbuhat sa ingon, kini naglatid sa lima ka mga ambisyon alang sa pagbag-o sa mga pamaagi sa pagtimbang-timbang: mas dako nga career path diversity, pag-ila sa indibidwal ug team performance, pag-una sa kalidad sa trabaho kay sa quantitative indicators, open science ug academic leadership.

Sukad sa 2019, ang mga unibersidad sa Dutch mibalhin sa paghimo sa ilang kaugalingon nga lokal nga paghubad sa pahayag sa nasudnon nga panan-awon. Dungan niini, ang mga ahensya sa pagpondo nagpasiugda ug daghang 'narrative CV' nga mga pormat ug mihunong sa paghangyo sa bibliometric nga impormasyon, nga nagkutlo sa San Francisco DORA isip inspirasyon. Ang Dutch Research Council bag-o lang mibalhin sa usa ka CV nga 'base sa ebidensya' diin ang pipila ka kantidad nga impormasyon mahimong magamit. Ang KNAW nagpalambo usab sa iyang kaugalingon tulo ka tuig nga plano sa pagpatuman sa Recognition and Rewards agenda sa sulod. Usa ka full-time nga program manager ug team ang gitudlo aron mapadali ang Recognition and Rewards reform program, ug usa ka 'Recognition and Rewards Festival' ang gihimo kada tuig taliwala sa mga dagkong stakeholders sa reporma aron suportahan ang pagkat-on sa tibuok komunidad.

Sa katapusan, gipundohan sa usa ka DORA Community Engagement grant, ang Young Scientist in Transition initiative para sa mga estudyante sa PhD, nga nakabase sa Utrecht, nakahimo og bag-ong giya sa pagtimbang-timbang alang sa mga PhD, sa paningkamot nga mabag-o ang kultura sa panukiduki.

Nasyonal nga pananglitan: Norway

Niadtong 2021, gipatik ang Norway, Unibersidad sa Norway ug ang Norwegian Research Council NOR-CAM - Usa ka toolbox alang sa pag-ila ug mga ganti sa mga pagtasa sa akademiko. Ang NOR-CAM naghatag ug matrix framework alang sa pagpausbaw sa transparency ug pagpalapad sa ebalwasyon sa mga research ug researchers gikan sa pig-ot nga bibliometric-informed indicators. Ang NOR-CAM nagbarog alang sa Norwegian Career Assessment Matrix, ug gipahiangay gikan sa usa ka 2017 report sa European Commission nga nagpresentar sa Open Science Career Assessment Matrix. Sama sa gisundan niini sa Europe, ang NOR-CAM nagbutang usab og mga paagi alang sa mas maayo nga paghiusa sa bukas nga mga gawi sa syensya sa mga pagtasa. Ang matrix nagtumong sa paggiya sa mga evaluator ug mga kandidato alang sa mga posisyon sa akademiko, mga aplikasyon sa pagpondo sa panukiduki ug mga nasudnong evaluator nga nagtimbang-timbang sa panukiduki ug edukasyon sa Norwegian. Gituyo usab kini nga molihok isip usa ka kinatibuk-ang giya alang sa indibidwal nga pag-uswag sa karera.

Ang matrix naglakip sa unom ka nag-unang bahin sa katakus: mga resulta sa panukiduki, proseso sa panukiduki, mga kahanas sa pedagogical, epekto ug kabag-ohan, pagpangulo ug uban pang mga kahanas. Naghatag dayon ang matrix og mga sugyot aron mahimo ang pagplano sa karera ug pag-ila sa pagtasa sa palibot sa matag usa sa mga pamatasan - mga pananglitan sa mga resulta ug kahanas, paagi sa dokumentasyon ug mga pag-aghat alang sa pagpamalandong bahin sa matag sukdanan. Ang mga kandidato dili gilauman nga managsama ang pagbuhat sa tanan nga mga pamatasan.

Ang NOR-CAM gimugna sa usa ka working group sa research performing and funding organization stakeholders, nga gi-coordinate sa Universities Norway, nagpasabot nga sa prinsipyo kini adunay buy-in gikan sa mga miyembro sa tanang Norwegian nga unibersidad. Ang mga workshop nga naglambigit sa mga unibersidad sa Norway gihimo pagkahuman aron mag-co-develop og mga paagi sa pag-integrate sa NOR-CAM ngadto sa appointment ug promotion assessment procedures, ug usa ka 'awtomatikong' CV system ang gihimo aron makuha ang datos gikan sa daghang nasyonal ug internasyonal nga mga tinubdan anaa sa pag-uswag aron makunhuran ang administratibo. palas-anon. Ang mga koordinetor gikan sa nahisgotan nga tulo ka mga iskema sa reporma sa nasyonal nga lebel kanunay nga nagkita aron magbinayloay sa ilang mga kasinatian ug gipaambit nga pagkat-on.

Ang Latin America ug ang Caribbean (LAC) lahi sa daghang paagi sa ubang mga bahin sa kalibutan. Dinhi, ang siyensya giisip nga usa ka global nga kaayohan sa publiko ug ang panukiduki ug mga sistema sa pagpatik sa akademiko ug imprastraktura gipanag-iya sa publiko (gipondohan) ug dili komersyal: apan kini nga mga kalig-on ug tradisyon sa rehiyon wala pa makita sa mga sistema sa pagtimbang-timbang. Ang mga importanteng stakeholders nga maka-epekto sa pagbag-o mao ang national research councils, ministries of science ug main research universities – ang papel sa HEIs importante, tungod kay labaw pa sa 60% sa mga researcher anaa sa mga unibersidad (RiCyT, 2020 [91]). Adunay potensyal nga ipahiangay ang mga sistema sa ebalwasyon nga mas duol sa SDGs ug sa bukas nga siyensya ug mga kalihokan sa siyensya sa lungsuranon, nga adunay usa ka mauswagon nga tradisyon sa rehiyon.

Sa pagkakaron, adunay taas nga pagkabahinbahin sa mga sistema sa pagsusi sa panukiduki sa nasud, lokal ug institusyon, nga nagbutang sa panukiduki sa kompetisyon sa ubang mga gimbuhaton, sama sa pagtudlo, extension ug coproduction. Ang ebalwasyon sa panukiduki ug mga sistema sa award sa tigdukiduki sa LAC sa kasagaran mipabor sa usa ka ideya sa kahusayan nga nakaangkla sa mga pamaagi sa 'Global North', nga gibase lamang sa epekto nga hinungdan sa mga journal ug mga ranggo sa unibersidad (CLACSO, 2020 [92]). Ang pag-ila sa lain-laing porma sa produksyon sa kahibalo ug komunikasyon, ug ang kadaghanon sa mga karera sa akademiko (eg pagtudlo, pagbansay ug pagtudlo, siyensiya sa lungsoranon ug komunikasyon sa publiko sa siyensiya) kadaghanan wala diha sa mga pamaagi sa pagtimbang-timbang sa panukiduki. Labi na kini nga problema alang sa mga tigdukiduki sa sosyal nga siyensya ug humanidad, diin ang mga monograpo ug lokal nga mga pinulongan kaylap nga gigamit (CLACSO, 2021 [93]). Ang mga rehiyonal nga journal ug mga indicators gipaubos o wala giila sa maong mga proseso sa pagtimbang-timbang. Kining tanan gipasamot tungod sa huyang nga sistema sa impormasyon ug huyang nga interoperability sa (labi na sa gipanag-iya sa komunidad) nga mga imprastraktura, kulang sa pundo tungod kay nihit nga pundo ang gitumong ngadto sa pagbayad sa APC alang sa open access journals.

Bisan pa, ang pipila nga mga unibersidad sa rehiyon nagsugod sa pagpatuman sa mga gawi sa pagtimbang-timbang nga nagbutang usa ka kombinasyon sa mga pamaagi sa kwalitatibo ug quantitative, labi na sa pagsusi sa mga tigdukiduki ug panukiduki nga nakatuon sa misyon (Gras, 2022 [94]). Ang transisyon ngadto sa mas komprehensibo nga research evaluation schemes magkinahanglan sa co-design sa mas qualitative criteria; ang responsable nga paggamit sa quantitative data ug pagpalig-on sa mga proseso sa pagrepaso sa kaubanan; incremental nga mga pagbag-o nga nagharmonya ug nag-coordinate sa mga polisiya ug metodolohiya ngadto sa gipaambit nga mga prinsipyo sa responsable nga pagsusi sa panukiduki ug bukas nga siyensya; bag-ong mga metodolohiya ug datos para sa mas maayong pag-assess sa inter/transdisciplinary science, environmental ug lokal nga mga isyu; shared, interoperable, sustainable, federated infrastructures nga nagsuporta sa bibliodiversity ug multilingualism; ug participatory, bottom-up nga mga disenyo nga nagpalapad sa partisipasyon sa mga lungsuranon ug sosyal nga mga kalihukan ug ang paglakip sa mga grupo sa panukiduki nga wala kaayo girepresentahan.

Aron matubag kini nga mga hagit, ang rehiyon nagsagop sa usa ka hugpong sa mga prinsipyo ug mga sumbanan alang sa pagsusi sa panukiduki. Ang CLACSO-FOLEC Deklarasyon sa mga Prinsipyo alang sa Pagsusi sa Pagpanukiduki [95], nga gi-aprobahan sa Hunyo 2022, nagtakda sa paggarantiya ug pagpanalipod sa kalidad ug sosyal nga may kalabutan nga siyensya, ug gisagop ang mga prinsipyo sa DORA ug bukas nga siyensya, ang pagkalainlain sa mga resulta sa panukiduki ug mga karera sa panukiduki, ang kantidad sa mga journal sa rehiyon ug mga serbisyo sa pag-indeks, ug sa interdisciplinarity, lokal nga pinulongan ug lumadnong kahibalo. Sa pagkakaron, kini adunay kapin sa 220 ka mga sumusunod ug aduna nay positibong mga uso sa responsableng pagsusi sa panukiduki ug mga pananglitan sa reporma. Ang pipila ka nasyonal nga mga pananglitan gihatag sa mosunod nga mga kahon sa teksto.

Nasyonal nga pananglitan: Colombia

Gipondohan sa usa ka DORA Community Engagement Award, ang Colombian Associations of Universities, University Publishers, Research Managers ug usa ka network sa pagdumala sa syensya ug teknolohiya, ug uban pa, nagtinabangay sa mga oportunidad ug mga hagit sa responsableng sukatan sa Colombia. Pinaagi sa sunodsunod nga mga workshop ug mga konsultasyon, lakip na ang mga internasyonal nga organisasyon isip mga benchmark, nakahimo sila og rubric aron matabangan ang mga institusyon sa Colombian sa pagdesinyo sa ilang kaugalingong mga REF. Kini nga rubric naningkamot sa pag-asoy sa mga hagit nga nahibal-an sa lokal nga lebel, nga - alang sa HEIs - naglakip sa kakulang sa kahibalo sa mga alternatibo sa pagsusi sa panukiduki, ang kinaiya sa nasudnong ekosistema sa pagsusi sa panukiduki ug pagbatok sa pagbag-o. A gipahinungod nga website naugmad, kauban ang mga infographics aron matabangan ang mga tigdukiduki, ug ang pagsabwag ug pagkat-on nagpadayon nga gipaambit sa tibuuk nasud.

Dugang kasayuran: Ang Colombian responsable metrics nga proyekto: padulong sa usa ka Colombian nga institusyonal, metodolohikal nga instrumento alang sa pagsusi sa panukiduki | DORA (sfdora.org)

Nasyonal nga pananglitan: Argentina

Usa ka makapaikag nga pagsulay sa reporma sa National Council for Scientific and Technical Research (Consejo Nacional de Investigaciones Científicas y Técnicas – CONICET) mao ang paghimo sa usa ka espesyal nga resolusyon alang sa sosyal ug tawhanong siyensya nga nagbutang sa mga journal nga na-index sa mainstream nga sirkito sa parehas nga lebel sa mga journal nga gi-index sa mga base sa rehiyon sama sa SciELO, redalyc or Latindex-Catálogo. Ang regulasyon sa pagkakaron gisusi, aron maklaro ang pipila ka mga ambiguity sa pagpatuman niini ug mapalapad ang mga criteria niini. Sa baylo, sa 2022, ang CONICET's Directors Board misunod sa San Francisco DORA, sa publiko nga giila ang pasalig niini sa pagpalambo sa panukiduki pinaagi sa pagpalig-on sa ebalwasyon ug padayon nga pag-uswag sa mga proseso niini.

ang Nasyonal nga Ahensya alang sa Pagpasiugda sa Pagpanukiduki, Pagpauswag sa Teknolohikal ug Kabag-ohan (Agencia Nacional de Promoción de la Investigación, el Desarrollo Tecnológico y la Innovavión – AGENCIA I+D+i), ubos sa Ministry of Science, Technology ug Innovation, mao ang nag-unang tigpundo sa panukiduki sa nasud tungod sa pagkalainlain ug kasangkaran sa labi ka kompetisyon nga mga tawag niini. Sa pagkakaron, ang AGENCIA nagpatuman sa usa ka programa aron mapalig-on ang mga proseso sa pagsusi sa panukiduki sa ilang nag-unang pondo sa panalapi. Ang mga pag-uswag karon naglakip sa suhol sa mga tigrepaso sa mga kauban aron mapukaw ang ilang pasalig sa kini nga mga proseso, insentibo sa pag-abli sa pag-access tungod kay ang mga sangputanan sa proyekto kinahanglan nga ipunting sa publiko nga domain pinaagi sa mga publikasyon o mga dokumento sa bukas nga sirkulasyon (sumala sa mga obligasyon sa 'Open Access Institutional Digital Repositories' Nasyonal nga Balaod 26.899) ug ang pag-apil sa equity ug inclusivity nga mga dimensyon pinaagi sa gender, underrepresented nga generational nga mga grupo ug/o institutional nga pagpalig-on sa equalizer nga mga mekanismo sa research assessment process. Bisan pa, sa lainlaing mga komite sa pagdisiplina, ang curricular background sa mga nanguna nga tigdukiduki nga responsable sa mga sugyot gisusi gihapon sa ilang mga kaedad gamit ang mga timailhan sa epekto sa citation.

Sa katapusan, gipondohan sa usa ka DORA Community Engagement Grant, ang Faculty of Psychology sa Universidad Nacional de la Plata nag-host sa usa ka virtual nga hitabo sa Septiyembre 2022 sa assessment sa psychology ug social sciences nga nakadani sa 640 (kadaghanan mga undergraduates) gikan sa 12 ka mga nasud, nga nagpakita sa interes sa mga batan-on sa kontinente. Ang kalihokan nakatabang sa paghulma sa upat ka tuig nga plano sa pagdumala sa magtutudlo ug magpahibalo sa usa ka libro sa reporma sa akademikong ebalwasyon sa konteksto nga nagsultig Espanyol.

Nasyonal nga pananglitan: Brazil

Ang ebalwasyon sa panukiduki init nga gidebatehan sa Brazil taliwala sa mga institusyon sa panukiduki ug mga tigdukiduki, kung dili mga gobyerno sa estado ug federal. Bisan pa, bisan pa sa labing kataas nga ihap sa mga nagpirma sa institusyon alang sa DORA sa kalibutan, ang mga pananglitan sa reporma sa pagtimbang-timbang sa panukiduki gamay ra. Pagkahuman sa usa ka survey sa mga nagpirma sa DORA sa nasud, mga konsultasyon sa institusyon ug usa ka publiko nga kalihokan, gipondohan sa usa ka DORA Community Engagement Grant, usa ka sa paggiya giandam na alang sa mga lider sa unibersidad sa pagsusi sa responsableng mga gawi sa pagtimbang-timbang.

Ang giya nagpunting sa tulo ka nag-unang mga aksyon: (1) pagpataas sa kahibalo sa responsable nga pagtimbang-timbang sa tanan nga mga porma niini; (2) pagbansay ug pagpauswag sa kapasidad sa mga evaluator ug kadtong gi-evaluate; ug (3) pagpatuman ug pagtasa. Ang sunod nga mga lakang mao ang paghimo ug network sa mga practitioner - o napulo ka unibersidad nga intelligence offices - aron mabag-o ang mga gawi sa pagtimbang-timbang ug pilot nga sensitibo sa konteksto nga mga modelo, ug sa katapusan maghimo usa ka mapa sa dalan alang sa mga institusyon sa Brazil nga gusto magbag-o.

Projeto Métricas (2022). Institusyonal nga mga hagit ug mga panglantaw alang sa responsable nga ebalwasyon sa Brazilian Higher Education: Projeto Métricas DORA partnership summary sa findings. Unibersidad sa São Paulo, Brazil.

Adunay nagpadayon nga pagbalhin gikan sa puro nga quantitative indicators sa North America, nga gipadali sa open science agenda. Ang bukas nga siyensya ug bukas nga pagrepaso makatabang sa paghimo sa mga gawi sa pagtimbang-timbang nga mas transparent, nga naghatag usa ka higayon alang sa pagpamalandong sa kaugalingon ug pag-atubang sa mga problema, pananglitan sa pagkutlo sa kaugalingon ug cronyism sa pag-hire, promosyon ug mga panel sa pagrepaso sa kaubanan, ingon man ang kinaiyanhon nga gender ug uban pang mga bias. Nagpadayon ang mga debate bahin sa panginahanglan sa pagpalambo sa mas maalamon, intelihente nga mga timailhan ug nagkasagol nga pamaagi sa pagtimbang-timbang, nga adunay potensyal alang sa usa ka hybrid, convergent nga modelo sa ebalwasyon nga nagsilbi sa batakang siyensiya (nag-uswag nga kahibalo) ug gigamit nga siyensiya (societal impact).

Adunay usab usa ka pag-ila nga ang mga unibersidad nanginahanglan ug akademikong luna ug kagawasan sa pagtangtang sa ilang mga kaugalingon gikan sa mga himan nga ilang gigamit karon alang sa pagtimbang-timbang, nga wala’y bisan unsang 'first mover disadvantage', ug nga ang komunidad sa tiggamit kinahanglan nga bahin sa proseso sa pagtimbang-timbang aron makatabang sa pagsukod sa pagkagamit sa kahibalo, paggamit ug epekto niini. Apan adunay usa usab ka contingent nga pagsukol sa pagbag-o (usa ka 'tinuyo nga pagkabuta') gikan sa taas ug ilawom sa ekosistema sa panukiduki - gikan sa mga nakabenepisyo gikan sa status quo ug sa mga bag-o lang nakasulod niini. Diyutay ra nga unibersidad sa US ang mipirma sa DORA ug usa ka bag-ong proyekto sa DORA ang naningkamot nga masabtan kung ngano nga ingon niini ang kahimtang (TARE). Bisan pa niana, sa Canada ug USA adunay pipila ka makapaikag nga mga pananglitan sa nasyonal ug institusyonal nga mga inisyatibo nga gidesinyo aron sa paghimo sa sistematikong pagbag-o (tan-awa ang mosunod nga mga kahon sa teksto).

Nasyonal nga pananglitan: USA

Sa US, ang National Science Foundation usa ka nanguna nga tingog alang sa pagbag-o pinaagi niini Pag-uswag sa Epekto sa Pagpanukiduki sa Sosyedad programa ug kauban mas lapad nga epekto toolkit alang sa mga tigdukiduki ug mga evaluator. Equity, diversity ug inclusion, lakip na ang pag-apil sa mga lumad ug tradisyonal nga marginalized nga mga komunidad, mao ang nag-unang mga drayber. Usa ka miyembro sa IAP ug ISC, ang US National Academies of Sciences nangita usab aron mapukaw ang halapad nga reporma, nga naghatag usa ka plataporma alang sa pagbinayloay sa kasayuran ug pagkat-on sa pagbag-o sa tradisyonal nga tigdukiduki nga CV (NAS Strategic Council, 2022). Natawo gikan sa trabaho sa mga akademya sa US, ang Higher Education Leadership Initiative alang sa Open Scholarship mao ang usa ka grupo sa labaw pa sa 60 ka mga kolehiyo ug unibersidad nga mipasalig sa kolektibong aksyon sa pag-asdang sa bukas nga scholarship, lakip na ang paghunahuna pag-usab sa panukiduki sa ebalwasyon aron gantihan ang pagkabukas ug transparency.

Ang National Institute for Health, pananglitan, nagdesinyo ug bag-o biosketch (SciENcv) para sa mga personahe sa mga aplikasyon sa paghatag aron mamenosan ang sistematikong pagpihig ug kabug-at sa pagtaho, ug sa samang higayon mahimong mas madala sa mga epekto.

Nasyonal nga pananglitan: Canada

Sa Canada, adunay daghang mga panag-istoryahanay bahin sa reporma sa pagsusi sa panukiduki, nga gimaneho sa DORA; ang tanan nga tulo ka federal research council mga signatories. Ang Natural Sciences ug Engineering Council adunay redefined criteria alang sa kalidad sa panukiduki, paghatag og bibliometrics, citations ug ang h-index, subay sa DORA nga mga prinsipyo: ang kalidad nga metrics karon naglakip sa maayo nga research data ug data access management, equity, diversity and inclusion, ug mga responsibilidad sa pagbansay. Ang laing duha ka mga konseho sa panukiduki lagmit nga mosunod.

Ang mga tigdukiduki sa Canada lagmit nga mag-focus sa 'pagpalihok sa kahibalo', usa ka tinuyo nga paningkamot aron mapauswag ang sosyal nga epekto sa panukiduki, pinaagi sa co-production sa mga komunidad sa tiggamit (ISI, 2022). Epekto sa Pagpanukiduki sa Canada usa ka network sa kapin sa 20 ka unibersidad nga nagtumong sa pagtukod sa kapasidad sa institusyon pinaagi sa impact literacy, o ang abilidad sa 'pag-ila sa angay nga mga tumong ug indikasyon sa epekto, kritikal nga pagtimbang-timbang ug pag-optimize sa mga agianan sa epekto, ug pagpamalandong sa mga kahanas nga gikinahanglan aron ipahiangay ang mga pamaagi sa tibuok konteksto' i-maximize ang epekto sa panukiduki alang sa kaayohan sa publiko.

Angay nga matikdan nga gamay ra nga unibersidad sa Canada ang nagpirma sa DORA. Ang nag-unang tigpalihok sa bisan unsang pagbag-o lagmit nga gisagop ang mga lumad nga iskolar: nahimo kini nga usa ka moral nga kinahanglanon sa Canada.

Ang insentibo sa panukiduki ug mga sistema sa ganti sa Africa lagmit nga nagpakita sa 'internasyonal', labi na sa Kasadpan, mga pamatasan ug mga kombensyon. Ang mga institusyon sa Africa naningkamot sa pagsunod niini kung nagpalambo sa ilang pamaagi sa 'kalidad' ug 'kamaayo' sa panukiduki apan dili kini kanunay nga angay alang sa lokal nga kahibalo ug panginahanglan. Ang 'kalidad' sa panukiduki, 'kamaayo' ug 'epekto' dili maayo nga pagkahubit sa kontinente, ug ang ubang mga tigdukiduki wala gigamit sa usa ka kultura sa 'epekto sa panukiduki'.

Ang mga sistema sa ebalwasyon sa Africa lagmit nga dili mag-asoy sa panukiduki alang sa kaayohan sa katilingban, pagtudlo, pagpauswag sa kapasidad, pagdumala sa panukiduki ug pagdumala. Ang mga modelo sa publikasyon dili sensitibo sa konteksto, nga ang mga APC nagmugna og mga babag sa output sa panukiduki sa Africa. Ang pagbag-o sa mga sistema sa pagtimbang-timbang sa panukiduki makatabang sa pagtul-id sa mga asymmetries sa kontribusyon nga mahimo sa panukiduki sa Africa sa mga hagit sa katilingban, ingon man pagpauswag sa pag-access sa mga kapanguhaan aron matabangan ang komunidad sa panukiduki sa Africa nga mahimo kini. Ang pagbungkag sa mga babag sa cross-sectoral ug cross-disciplinary nga kooperasyon gikinahanglan aron ang nagkalain-laing mga panglantaw ug mga sistema sa kahibalo molambo ug makatabang sa paghubad kung unsa ang naglangkob sa kalidad sa panukiduki alang sa Africa. Ang mga mekanismo nga naghiusa sa lokal, lumad ug 'konbensyonal' nga mga panan-aw sa kalibutan bahin sa pagtimbang-timbang sa kalidad sa panukiduki ug kahusayan kinahanglan nga tagdon sa bisan unsang reporma.

Ang lig-on nga panag-uban gitukod sa palibot sa RRA sa kontinente. Gipondohan sa usa ka internasyonal nga consortium sa mga ahensya sa kalamboan, ang Science Granting Councils Initiative (SGCI) [96], nga nag-apil sa 17 ka mga nasud sa Africa, nagpahigayon usa ka pagtuon sa kahusayan sa panukiduki sa Africa, nagtan-aw sa mga ahensya sa pagpondo sa siyensya ug pagsusi sa tigdukiduki gikan sa usa ka panan-aw sa Global South (Tijssen ug Kraemer-Mbula, 2017 [97], [98]). Gisusi niini ang isyu sa excellence sa panukiduki sa sub-Saharan Africa ug ang panginahanglan alang sa usa ka pamaagi nga nagpalapad sa ideya sa excellence lapas sa mga publikasyon (Tijssen ug Kraemer-Mbula, 2018 [99]); paghimo og usa ka guidelines document, nga sa pagkakaron gina-update, sa maayong mga gawi sa pagpatuman sa research competitions (SGCI [100]). Sa World Science Forum kaniadtong 2022, ubos sa pagdumala sa SGCI ug GRC, ang South Africa National Research Foundation (NRF) ug Department of Science and Innovation nagtigum sa internasyonal ug lokal nga mga kauban aron hisgutan ang papel sa mga ahensya sa pagpondo sa pagpauswag sa RRA, ug pagpaambit sa mga kasinatian, pag-uswag sa maayong praktis ug pagtimbang-timbang sa pag-uswag sa pagpauswag sa kapasidad ug kolaborasyon (NRF, 2022 [101]).

ang Network sa Ebidensya sa Africa [102], usa ka pan-African, cross-sectoral nga network sa kapin sa 3,000 ka mga practitioner ang nagpahigayon og pipila ka trabaho sa pagtimbang-timbang sa transdisciplinary nga panukiduki (Network sa Ebidensya sa Africa [103]) apan ang gidak-on diin kini nabutang sa nasyonal ug rehiyonal nga mga sistema sa pagtasa dili pa klaro. Ang Network sa Pagpanukiduki ug Epekto sa Africa [103] nagtrabaho sa usa ka scorecard nga naglangkob sa usa ka koleksyon sa mga indicators aron sa pagtimbang-timbang sa kalidad sa siyensiya, teknolohiya ug kabag-ohan (STI) assessment sa Africa, nga kini naglaum nga mahimong usa ka web-based nga desisyon-making himan sa paggiya sa STI mga desisyon investment. .

Sa nasyonal nga lebel, nagsugod na ang mga incremental nga pagbag-o - pipila ka mga pananglitan gihatag sa mosunod nga mga kahon sa teksto. Ang ubang mga nasud diin ang mga ahensya sa pagpondo sa panukiduki nanguna naglakip sa Tanzania (COSTECH), Mozambique (FNI) ug Burkina Faso (FONRID). Ang inisyatibo sa RRA sa GRC napamatud-an nga usa ka hinungdanon nga plataporma alang sa pagbag-o sa kontinente, sama sa pagkat-on gikan sa internasyonal nga sektor sa kalamboan, labi na, ang IDRC's. Research Quality Plus (RQ+) Assessment Framework [104], uban sa kalainan nga kini gipadapat na, gitun-an ug gipauswag. Ang nakabase sa Africa International Evaluation Academy [105] mahimo usab nga maghatag usa ka makapaikag nga oportunidad.

Nasyonal nga pananglitan: Côte d'Ivoire

Sa sentro sa Côte d'Ivoire Program Appui Stratégique à la Recherche Scientifique (PASRES) (Strategic Support Program for Scientific Research) mao ang pagtuo nga ang excellence sa research kinahanglang molapas sa gidaghanon sa research publications ug maglakip sa 'research uptake' nga dimensyon. Pagpahiangay sa nasudnon nga konteksto, ang proseso sa pagtimbang-timbang sa panukiduki gibase sa mga pamatasan nga may kalabotan sa kalabotan sa siyensya ug sosyal, ang pag-apil sa mga kauban, pagbansay sa estudyante, pagpalihok sa kahibalo ug posibilidad. Ang mga panel sa ebalwasyon naglakip sa mga eksperto sa siyensya (aron hukman ang kalidad sa panukiduki nga gihimo), ang pribadong sektor (aron hukman ang pagpalambo sa ekonomiya) ug uban pang mga institusyon (aron sukdon ang potensyal sa kultura ug sosyal sa panukiduki).

Ang PASRES nakatukod ug duha ka lokal nga mga journal (usa para sa social sciences ug linguistics ug ang usa para sa environment ug biodiversity) ug nakab-ot ang tibuok gasto sa pagpatik niini. Sa katapusan, ang PASRES nagpundo sa mga kalihokan sa pagpauswag sa kapasidad ug mga temang komperensya aron ang mga tigdukiduki makapresentar sa ilang panukiduki ngadto sa pribadong sektor ug sa sibil nga katilingban.

Dugang nga impormasyon: Ouattara, A. ug Sangaré, Y. 2020. Pagsuporta sa panukiduki sa Côte d'Ivoire: mga proseso alang sa pagpili ug pagtimbang-timbang sa mga proyekto. E. Kraemer-Mbula, R. Tijssen, ML Wallace, R. McLean (Eds.), African Minds, pp. 138–146

PASRES || Programa sa Appui Stratégique Recherche Scientifique (csrs.ch)

Nasyonal nga pananglitan: South Africa

Ang ebalwasyon sa panukiduki sa South Africa (SA) kadaghanan nakapunting sa palibot sa bibliometrics. Sukad sa 1986, sa dihang ang Departamento sa Taas nga Edukasyon (DHET) nagpaila sa usa ka palisiya sa pagbayad sa mga subsidyo sa mga unibersidad alang sa mga publikasyon sa panukiduki nga gipatik sa mga journal sa akreditado nga mga indeks, ang output sa publikasyon sa panukiduki sa unibersidad mitubo dungan sa Rand nga kantidad nga gihatag matag publikasyon. Sa paningkamot nga masiguro ang pondo sa panukiduki ug mapauswag ang ilang mga karera, ang mga tigdukiduki sa SA nagpatik sa daghang mga artikulo sa labing madali nga mahimo nila, nga nagmugna sa mga daotan ug wala damha nga mga sangputanan.

Ang Academy of Science of South Africa (ASSAf) nagsugo sa usa ka taho sa eskolar nga pagmantala sa nasud (2005–2014) ug nakit-an ang mga timailhan sa kwestyonable nga mga gawi sa editoryal ug predatory publishing (ASSAf, 2019). Gamit ang usa ka nuanced system of categorization, gibanabana nga 3.4% sa kinatibuk-ang mga artikulo sulod sa milabay nga napulo ka tuig ang gihukman nga manunukob, uban sa mga numero nga mas taas nga pagtaas gikan sa 2011. Ang mga journal nga gihukman nga manunukob gilakip sa DHET 'madawat alang sa pagpondo' listahan ug mga akademiko sa tanang unibersidad sa SA nakit-an nga nalambigit (Mouton ug Valentine, 2017).

Ang taho sa ASSAf naghimo og mga rekomendasyon sa sistematiko, institusyonal ug indibidwal nga lebel ug ang nagsunod nga mga pagsumpo sa DHET, NRF ug pipila ka mga unibersidad daw nakapugong sa mga predatory practices sa SA uban ang insidente sa predatory publishing sa SA academics (sa DHET accredited journals) nga nag-peak sa 2014- 2015 ug pagkahuman nagkunhod. Adunay usab mga kabalaka sa mga tigdukiduki nga ang mga polisiya sa DHET sa SA nagpaluya sa kolaborasyon ug napakyas sa pag-ila sa kontribusyon sa mga indibidwal sulod sa dagkong mga research team, nga nagkinahanglan og rebisyon sa performance appraisal/research evaluation schemes. Ang paggamit sa sistema sa yunit sa publikasyon giila karon nga dili maayo nga proxy alang sa pagtimbang-timbang sa kalidad sa panukiduki ug produktibidad ug alang sa pagpili ug promosyon sa mga akademiko.

Dugang kasayuran:

Academy of Science sa South Africa (ASSAf). 2019. Dose ka tuig: Ikaduhang ASSAf Report sa Research Publishing sa ug gikan sa South Africa. Pretoria, ASSAf.

Mouton, J. ug Valentine, A. 2017. Ang gilapdon sa mga artikulo nga gisulat sa South Africa sa mga predatory journal. South African Journal of Science, Vol. 113, Num. 7/8, pp. 1–9.

Mouton, J. ug uban pa. 2019. Ang Kalidad sa Mga Publikasyon sa Pagpanukiduki sa Habagatang Aprika. Stellenbosch.

2019_assaf_collaborative_research_report.pdf

Nasyonal nga pananglitan: Nigeria

Ang mga unibersidad sa Nigeria nag-evaluate sa mga tigdukiduki sa tulo ka nag-unang mga bahin: pagtudlo, produktibo sa panukiduki ug serbisyo sa komunidad. Niini, ang produktibidad sa panukiduki mas bug-at nga gibug-aton, nga adunay gibug-aton sa gipatik nga peer-reviewed nga mga artikulo sa panukiduki ug gikonsiderar ang gidaghanon ug mga tahas sa mga tagsulat (unang awtor ug/o katugbang nga awtor) niining mga publikasyon. Sa paningkamot nga mahimong mas globally competitive, kadaghanan sa mga unibersidad naghatag ug mas importansya sa mga journal nga gi-index sa International Scientific Indexing o SCOPUS, aron mas mahatagan og gibug-aton ang kalidad ug internasyonal nga kolaborasyon; ug gamita ang porsyento sa mga artikulo niini nga mga journal isip sukdanan sa promosyon.

Usa ka dili maayo nga sangputanan niini mao nga daghang mga tigdukiduki, labi na ang mga naa sa humanities, kulang sa igong pondo ug / o kapasidad sa pagmantala niini nga mga journal. Hinunoa, nagpatik sila og dugang nga pagrepaso kay sa mga artikulo sa panukiduki, o gibati nila nga napugos sa paglakip sa mga impluwensyal, mga senior nga kauban isip mga co-authors, tungod sa ilang pinansyal kay sa intelektwal nga kontribusyon. Ang plagiarism misaka, sama sa manunukob nga pagmantala. Bisan pa, ang kinatibuk-ang global nga ranggo sa mga unibersidad sa Nigeria miuswag, sa ingon nakatagbaw sa gobyerno ug mga ahensya sa pagpondo, ug nakita nga usa ka kalampusan. Ang Nigeria wala mag-inusara niining bahina.

Ang Nigerian Academy of Science nag-establisar pag-usab sa kaugalingon nga peer-reviewed nga journal isip usa ka punoan nga journal diin ang mga akademiko makamantala (karon libre) ug ma-rate nga taas sa ilang mga institusyon.

Ang mga sistema sa pagtasa nga gipasukad sa sukdanan sa kadaghanon nagdominar sa rehiyon, nga ang mga nasud sa Anglophone kasagarang naghulma sa mga balangkas sa pagtasa ug uban pang mga nasud nga nagsunod. Sa Australia, pananglitan, adunay usa ka kompetisyon nga sistema sa pagpondo base sa bibliometrics ug mga ranking sa unibersidad: 'bisan ang mga SDG gihimo nga mga indikasyon sa pasundayag'. Ang susamang mga hagit anaa sa Malaysia ug Thailand, ug ang ubang mga nasud sa ASEAN lagmit mosunod. Usa ka importante nga eksepsiyon mao ang China diin ang gobyerno adunay dakong papel sa paghimo sa dagkong sistematikong kausaban ug nga mahimong adunay dakong implikasyon sa tibuok kalibotan (tan-awa ang text box).

Makapadasig, adunay nagkadako nga kahibalo ug kabalaka taliwala sa komunidad sa panukiduki sa rehiyon bahin sa mga limitasyon sa karon nga mga sistema sa pagsusi sa panukiduki ug ang ilang hulga sa integridad sa panukiduki. Bisan tuod ang mga ECR, lakip ang National Young Academies ug ang ASEAN network of Young Scientists, uban sa mga grass roots movements, nagkadaghan nga nakiglambigit niini nga isyu, sila nanglimbasug nga madungog. Ang gobyerno ug mga komunidad sa pagpondo, lakip ang pagpangulo sa unibersidad, kadaghanan wala sa debate: ilang gihatagan og importansya ang quantitative metrics apan wala maapresyar ang mga implikasyon sa panukiduki. Sa tinuud, ang mga consultees nagtaho nga daghang mga kwalitatibo nga pamatasan ang gidugang, sa gidak-on nga ang mga institusyon ug mga tigdukiduki nagsugod sa pagdula sa sistema, nga nagpadako sa dili maayong pamatasan sa panukiduki.

Apan adunay mahinungdanong mga oportunidad alang sa pagbag-o, sama sa gipakita sa mosunod nga mga kahon sa teksto.

Nasyonal nga pananglitan: China

Karon ang labing produktibo nga panukiduki nga nasud sa kalibutan (Tollefson, 2018; Statista, 2019), ug ang ikaduha sa termino sa pagpamuhunan sa panukiduki (OECD, 2020), kung unsa ang mahitabo sa China adunay potensyal nga makaapekto sa tinuod nga sistematikong pagbag-o. Ang usa ka bag-ong polisiya sa lebel sa estado nagtumong sa pagpasig-uli sa 'siyentipikanhong espiritu, kalidad sa kabag-ohan ug kontribusyon sa serbisyo' sa panukiduki ug sa 'pagpasiugda sa pagbalik sa mga unibersidad sa ilang orihinal nga tumong sa akademiko' (DAGHAN, 2020). Ang mga indikasyon sa Web of Science dili na mahimong panguna nga hinungdan sa mga desisyon sa pagtimbang-timbang o pagpondo, ni ang gidaghanon sa mga publikasyon ug mga JIF. Ang mga publikasyon sa taas nga kalidad nga mga journal sa China madasig ug suportahan ang ilang pag-uswag. 'Representante nga mga publikasyon' - 5–10 ka pinili nga mga papel imbes nga kompleto nga mga listahan - gipangita sa mga panel sa ebalwasyon, uban sa mga criteria nga nagsusi sa kontribusyon nga gihimo sa panukiduki sa pagsulbad sa importante nga siyentipikong mga pangutana, paghatag og bag-ong siyentipikong kahibalo o pagpaila sa mga inobasyon sa, ug tinuod nga mga pag-uswag sa, usa ka partikular nga natad.

Sa pagpalambo sa kalidad sa panukiduki ug sistema sa pagtasa sa kahusayan nga mas nahiuyon sa kaugalingon nga mga panginahanglanon, ang pinakadako nga ahensya sa pagpondo sa China alang sa sukaranan nga panukiduki, ang National Natural Science Foundation of China (NSFC), nagpahigayon mga sistematikong reporma sukad sa 2018 aron mapakita ang mga pagbag-o sa siyensya: pagbag-o sa kalibutan mga talan-awon sa siyensya, ang kamahinungdanon sa transdisciplinarity, ang kombinasyon sa gipadapat ug sukaranan nga panukiduki ug ang interplay tali sa panukiduki ug kabag-ohan (Manfred Horvat, 2018), pagbalhin gikan sa bibliometrics ngadto sa usa ka sistema nga nagpalig-on sa lokal nga kalabutan sa panukiduki sa China (Zhang ug Sivertsen, 2020). Gipauswag niini ang sistema sa pagrepaso sa kaubanan alang sa ebalwasyon sa sugyot aron mas mohaom sa makabalda nga panukiduki nga gipatuyok sa pagkamausisaon, nagdilaab nga mga problema sa mga utlanan sa panukiduki, maayo kaayong siyensiya nga gipadapat sa pang-ekonomiya ug sosyal nga mga panginahanglan, ug transdisciplinary nga panukiduki nga nag-atubang sa dagkong mga hagit. Sa 2021, 85% sa mga sugyot ang gisumite ug gisusi gamit kini nga mga kategorya. Bag-ohay lang, sa Nobyembre 2022, usa ka duha ka tuig nga plano sa reporma sa piloto alang sa ebalwasyon sa talento sa siyensya ug teknolohiya ang gipahibalo, nga nag-apil sa walo ka mga ministeryo, dose ka mga institusyon sa panukiduki, siyam ka unibersidad ug unom ka lokal nga gobyerno. Ang katuyoan niini mao ang pag-usisa sa mga indikasyon sa ebalwasyon ug mga pamaagi alang sa mga talento sa syensya ug teknolohiya nga nalambigit sa lainlaing mga bahin sa sistema sa kabag-ohan.

Pananglitan sa subrehiyon: Australia ug New Zealand

Ang Australia ug New Zealand sa pagkakaron anaa sa importante nga mga punto. Sa Australia, ang nagpadayon nga dungan nga mga pagrepaso sa Australian Research Council, ang Excellence in Research in Australia ug Gold Open Access nga negosasyon nagtingub nga nagpakita sa usa ka bintana sa oportunidad (Ross, 2022).

Pagkahuman sa konsultasyon sa publiko bahin sa kaugmaon sa pagpondo sa siyensya, ang New Zealand nagpalambo usa ka bag-o sistematikong programa alang sa kaugmaon sa nasudnong sistema sa panukiduki ug kabag-ohan niini. Ang Australia ug New Zealand nakatampo sa pagpalambo sa sistema sa sukatan para sa ilang lumad nga mga grupo sa panukiduki (Mga Prinsipyo sa CARE).

Nasyonal nga pananglitan: India

Ang Department of Science and Technology's Center for Policy Research (DST-CPR) nagpahigayon ug bag-ong mga pagtuon bahin sa pagtuki sa panukiduki ug ang reporma niini sa India, nanguna sa mga workshop sa mga nag-unang stakeholders (nasyonal nga mga ahensya sa pagpondo, mga institusyon sa panukiduki ug mga akademya), mga interbyu ug mga survey. Nakaplagan nga, samtang ang mga unibersidad ug daghang mga institusyon nga adunay importansya sa palisiya sa nasud (sama sa agrikultura) nagpunting sa halos eksklusibo sa quantitative metrics, ang pipila nga mga ahensya sa pagpondo ug mga institusyon sama sa Indian Institutes of Technology nagsagop usab sa daghang mga lakang sa kwalitatibo. Kining mas kwalitatibo nga pamaagi sa mga top-tier nga mga institusyon nagsilbi na aron ibalhin ang dugang nga pondo ngadto sa panukiduki sa nasudnong mga prayoridad, bisan pa nga sayo pa kaayo aron isulti kung kini adunay bisan unsang masukod nga epekto sa kalidad ug epekto sa panukiduki.

Ang nag-unang benchmark para sa assessment mao ang peer review base sa expert committee opinion, pero human lang sa inisyal nga screening sa mga aplikasyon base sa hingpit sa quantitative metrics. Ang mga sukaranan nga mga hagit anaa usab sa kini nga mga komite: ang kakulang sa pagkalainlain ug pagsabut sa bukas nga mga gawi sa syensya, gamay nga pagkonsiderar sa mga epekto sa panukiduki sa katilingban, ug dili maayo nga kapasidad ug pagpihig. Kini nga mga problema, ug mga pamaagi sa pagtimbang-timbang sa kadaghanan, dili kaayo masabtan ug adunay kakulang sa mga panudlo ug literatura sa hilisgutan.

Bisan pa, adunay nagkadako nga kahibalo sa panginahanglan sa pagbag-o sa pagsusi sa panukiduki. Gipondohan sa usa ka DORA community engagement grant, ang Indian National Young Academy of Sciences nakigtambayayong sa Indian Institute of Science (IISc) ug DST-CPR aron sa pagsusi sa mga paagi diin ang research assessment mahimong mapauswag - ang ilang mga deliberasyon gipaambit sa mga importanteng stakeholders nga adunay usa ka panglantaw sa pagpukaw sa usa ka nasudnong panag-istoryahanay sa panginahanglan sa pag-reporma ug sa katapusan sa pag-usab sa kultura sa panukiduki sa India aron ang panukiduki niini mas bag-o ug/o may kalabotan sa katilingban. Gipaabut sa DST-CPR ang paghimo og usa ka balangkas alang sa kahusayan sa panukiduki nga mahimong i-integrate sa iyang National Institutional Ranking Framework.

Dugang kasayuran:

Battacharjee, S. 2022. Ang Paagi ba sa India Nagtimbang-timbang sa Pagpanukiduki Niini nga Nagbuhat sa Trabaho Niini? - Ang Wire Science

DORA_IdeasForAction.pdf (dstcpriisc.org).

Suchiradipta, B. ug Koley, M. 2022. Pagsusi sa Pagpanukiduki sa India: Unsa ang Kinahanglan nga Magpabilin, Unsa ang Mahimong Mas Maayo? DST-CPR, IISc.

Nasyonal nga pananglitan: Japan

Ang mga protocol sa ebalwasyon sa panukiduki kay gitugyan pag-ayo sa Japan: samtang adunay 'National Guidelines for Evaluating R&D', nga gi-isyu sa Cabinet Office's Council for Science, Technology and Innovation, Ministry of Education, Culture, Sports, Science and Technology (MEXT) ug uban pa ang mga ministeryo nakahimo usab sa ilang kaugalingon nga mga panudlo. Labaw pa niini, ang mga unibersidad ug mga institute sa panukiduki adunay ilang kaugalingon nga sistema sa pagtimbang-timbang sa panukiduki nga gipahimutang alang sa panukiduki ug mga tigdukiduki, nga - sama sa daghang bahin sa kalibutan - nalambigit sa paghimo sa institusyonal ug alokasyon sa badyet.

Adunay nagkadako nga mga kabalaka bahin sa sobra nga pagsalig sa quantitative evaluation. Agig tubag, nangandam ang Science Council of Japan usa ka rekomendasyon sa kaugmaon sa pagsusi sa panukiduki sa Japan (2022) nga nanawagan alang sa dili kaayo paghatag gibug-aton sa quantitative ug labaw pa sa qualitative nga mga lakang, dugang nga pag-ila sa pagkalain-lain sa panukiduki ug responsibilidad sa pagtimbang-timbang sa panukiduki ug pag-monitor sa internasyonal nga mga uso sa reporma sa mga pamaagi sa pagtimbang-timbang sa panukiduki. Sa katapusan, ang mga interes ug promosyon sa panukiduki kinahanglan nga naa sa kasingkasing sa pagtimbang-timbang sa panukiduki, ug ang matag paningkamot nga gihimo aron mapugngan ang kakapoy, pagkawalay kadasig ug sobra nga presyur sa mga tigdukiduki.

Ang usa ka surbey sa MEXT sa evaluation indicators nakit-an nga ang JIF usa sa daghang mga indicators ug, sa ingon, walay kusog nga epekto sa Japanese research, bisan tuod kini nagdepende sa disiplina: pananglitan, ang paggamit sa JIF mas taas sa medikal nga siyensiya - ug dili kaayo tradisyonal nga mga kalihokan sa panukiduki, sama sa bukas nga datos, dili kaayo masusi.

Dugang nga impormasyon: REKOMENDASYON - Ngadto sa Pagsusi sa Pagpanukiduki alang sa Pag-uswag sa Siyensiya: Mga Hagit ug Mga Prospect alang sa Tinguha nga Pagsusi sa Pagpanukiduki (scj.go.jp)

Sa konklusyon, adunay usa ka nagtubo nga momentum alang sa reporma sa research evaluation sa pipila ka mga rehiyon, mga nasud ug mga institusyon. Ang mga pananglitan nga gihulagway dinhi naglakip sa tibuok nasud nga mga reporma, pagtukod og mga consortia o mga koalisyon sa mga sama og hunahuna nga mga institusyon nga nagtinguha og kausaban, ang pagpuntirya/pagdumala sa mga espisipikong sektor ug mga interbensyon aron masulbad ang hiwi nga mga insentibo ug pamatasan.

Dili pa kini usa ka managsama ug inklusibo nga panag-istoryahanay sa kalibutan, ni ang mga praktis ug mga panabut kinahanglan nga ipaambit sa dayag. Ang ubang mga miyembro sa GYA, IAP ug ISC aktibo na niini nga luna ug ang mga oportunidad mahimong mapuslanon aron matabangan sila sa pagpaambit sa ilang pagkat-on ug maayong praktis sa usag usa ug sa mas lapad nga miyembro. Ang paglunsad sa Global Observatory of Responsible Research Assessment (AGORRA) sa Research on Research Institute (RoRI) sa ulahi sa 2023 maghatag og dugang nga plataporma alang sa pagpaambit sa pagkat-on, alang sa pagtandi sa pagtuki sa nasyonal ug internasyonal nga mga sistema sa reporma ug sa pagpadali sa duha- paagi sa pagbinayloay ug pagsulay sa maayong mga ideya sa kini nga mga sistema.

Kini nga papel naglatid sa mga nag-unang mga drayber, mga oportunidad ug mga hagit alang sa reporma sa pagtimbang-timbang sa panukiduki ug nagtipon sa mga ilustrasyon nga mga pananglitan sa pagbag-o nga nahitabo sa global, rehiyonal, nasyonal ug institusyonal nga lebel. Ang katuyoan niini mao ang pagpalihok sa GYA, IAP ug ISC ug sa ilang tagsa-tagsa ka mga miyembro, isip importanteng konstituente sa global research ecosystem.

Pagtukod sa miaging dekada sa siyentipikong literatura ug buhat sa adbokasiya, adunay lima ka panguna nga mga konklusyon.

1. Ang kinahanglan nga hunahunaon pag-usab ang paagi diin ang mga indibidwal nga panukiduki, institusyon ug mga output gitimbang-timbang klaro ug dinalian. Ang pagpadayon sa integridad ug kalidad sa panukiduki, pag-maximize sa lainlain, inklusibo ug dili diskriminasyon nga siyensya, ug pag-optimize sa siyensya alang sa pangkalibutang kaayohan sa publiko mao ang mga nag-unang mga drayber, nga gibutang sa konteksto sa usa ka paspas nga pagbag-o sa kalibutan.

2. Ang paagi diin ang panukiduki gi-komisyon, gipondohan, gihatud ug gipahibalo nagbag-o sa tulin. Naglihok padulong sa mission-oriented ug transdisciplinary science, open science frameworks, nagbag-o nga mga modelo sa peer review, ang paggamit sa AI ug machine learning ug ang paspas nga pagsaka sa social media nagbag-o sa tradisyonal nga paagi sa pagbuhat ug pagkomunikar sa panukiduki, nga nanginahanglan ug bag-ong panghunahuna sa mga sistema sa pagsusi sa panukiduki ug ang metrics ug peer review nga mga proseso nga nagpaluyo niini. Dugang, ug dinalian, panukiduki ang gikinahanglan aron mapamatud-an sa umaabot kini nga mga sistema.

3. Adunay kinahanglanon alang sa mas balanse nga mga sistema sa pagtimbang-timbang sa panukiduki nga adunay duha ka quantitative ug qualitative indicators nga nagpabili sa daghang porma sa resulta sa panukiduki, mga proseso ug mga kalihokan. Bisan pa, ang pag-ingon nga ang mga proseso sa pagrepaso sa mga kaedad sa kalidad labing menos sama ka hinungdanon sa bibliometrics dili prangka ug labi pa nga komplikado sa lainlaing mga bahin sa kalibutan nga naa sa lainlaing mga yugto sa pagpalambo sa ilang mga sistema sa pagtasa: sa pipila, ang mga debate sa reporma sa pagsusi sa panukiduki medyo abante, sa uban sila nascent o wala.

4. Usa ka hiniusang ug tinuod nga tibuok kalibutan ug inklusibo nga inisyatiba gikinahanglan aron mapalihok ang nag-unang stakeholder nga mga komunidad aron sa pagpalambo ug pagpatuman sa managsama nga mga paagi sa pagsusi ug pagpondo sa panukiduki; pagkat-on gikan sa usag usa ug gikan sa ubang mga sektor (labi na ang mga tigpondo sa panukiduki ug mga ahensya sa kalamboan). Ang kolektibo, inklusibo nga aksyon padulong sa pagbag-o sa pagbag-o kinahanglan nga makaila sa pagkadugtong kaysa sa internasyonalisasyon o universalization, ie mahimong sensitibo sa konteksto, nahibal-an ang lainlaing mga hagit nga giatubang sa lainlaing mga bahin sa kalibutan ug ang adunahan nga heterogeneity sa ekosistema sa panukiduki, samtang sa samang higayon nagsiguro nga igo. homogeneity aron mahimo ang mga compatible nga research ug funding systems ug researcher mobility, aron mamenosan ang divergence ug fragmentation. Ang usa ka partial, eksklusibo nga panag-istoryahanay adunay peligro sa dugang nga pagpihig ug pagdaot sa mga wala iapil sa kasaysayan.

5. Kinahanglan ang pagbag-o sa tanan nga lebel - global, rehiyonal, nasyonal ug institusyonal - tungod kay ang mga sukatan nagdagan sa tibuuk nga ekosistema sa panukiduki ug kining tanan nga lebel managsama. Ang tanan nga mga stakeholder kinahanglan nga magdula sa ilang bahin isip mga kasosyo dili mga kontra - lakip ang mga tigpundo, unibersidad, unibersidad ug mga asosasyon sa institute sa panukiduki, intergovernmental nga organisasyon (IGOs), mga gobyerno ug network sa gobyerno, mga akademya, naghimo sa palisiya sa siyensya, mga tagdumala sa panukiduki ug kabag-ohan ug indibidwal nga mga tigdukiduki. Ang GYA, IAP ug ISC membership, sa tingub, naglangkob sa dakong bahin niining dato nga talan-awon (Figure 1, Appendix C).

Figure 1: Mapa sa stakeholder kalabot sa membership sa GYA, IAP ug ISC (Pag-klik aron makita)

Ang nagtigom nga gahum sa mga organisasyon sama sa GYA, IAP ug ang ISC makatabang sa paghiusa sa nagkalain-laing mga panglantaw ug mga kasinatian sa kadaghanan sa research ecosystem: pag-eksperimento, pagkat-on gikan, ug pagtukod sa, kasamtangan ug bag-ong mga inisyatibo. Sa kritikal nga paagi, mahimo silang makonektar sa mga nag-unang stakeholder sa pag-aghat sa pagbag-o - mga gobyerno, tigpondo sa panukiduki ug unibersidad, ug hinungdanon nga mga kalihokan sa kalibutan sama sa DORA - aron matabangan ang pagpalihok sa usa ka arkitektura sa mga aktor. Sa kinatibuk-an, mahimo silang magsilbing:

● advocates – pagpataas sa kahibalo sa research assessment debates, developments ug reforms isip pag-ila nga ang ilang mga miyembro nagsilbing (i) mentor ug supervisor sa junior nga mga kauban, (ii) mga lider sa HEIs, (iii) board members sa funding and publishing governance bodies ug ( iv) mga magtatambag sa mga magbabalaod;

● mga innovator – pagsuhid sa lain-laing mga pamaagi sa paghatag og bili sa batakan ug gigamit nga panukiduki sa inklusibo ug bag-ong mga paagi;

● exemplars – pag-usab sa ilang kaugalingong institusyonal nga kultura – pag-refresh sa ilang membership, award, pagmantala ug conferencing practices, ug paggiya pinaagi sa ehemplo;

● mga evaluator – nagpahimulos sa tahas sa mga miyembro sa institusyonal ug indibidwal nga lebel kansang negosyo mao ang pagtimbang-timbang sa mga tigdukiduki, panukiduki ug institusyon, ug kadtong adunay mga tahas sa pagmantala, editoryal ug peer review;

● mga tigpundo – nagkuha sa mga ahensya sa pagpondo nga girepresentahan sa ISC, ilabina, ug mga miyembro nga nagdumala ug nagsabwag sa dagkong nasyonal ug internasyonal nga mga grant;

● mga kolaborator – pagsuporta sa natukod na nga mga kampanya alang sa reporma, eg DORA, ang CoARA sa EU ug ang pasalig sa open science sa UNESCO.

Ang mga tagsulat niini nga papel nag-awhag sa GYA, IAP ug sa ISC, ug mga organisasyon nga sama nila, sa paghimo sa mosunod nga mga paagi:

BUHATON 1: Ipaambit ang pagkat-on ug maayong praktis

Gipasiugda niini nga papel ang mga pananglitan sa mga interbensyon ug mga inobasyon gikan sa tibuok kalibutan. Ang luna alang sa pagpaambit sa mga kasinatian ug pagtukod sa usa ka lig-on ug inklusibo nga 'koalisyon sa mga andam' hinungdanon.

1.1: Paghatag og plataporma alang sa mga miyembro nga aktibo na niini nga luna sa pagpaambit sa ilang pagkat-on ug pagtukod og mga estratehikong koneksyon, ilabi na sa nasudnong lebel. Gamita kini nga mga pananglitan aron matabangan ang populasyon dashboard ni DORA [106] sa pagkat-on ug maayong praktis.

1.2: Pagsurbi ug pagmapa sa mga kalamboan nga gipangunahan sa mga miyembro sa reporma sa ebalwasyon sa panukiduki aron mailhan ang mga pamaagi sa institusyonal, nasyonal ug rehiyonal, ug aron makit-an ug mapaambit ang maayong pamatasan. Pagtapok sa mga nanguna na / nakigbahin sa mga dagkong nasyonal ug internasyonal nga mga inisyatibo aron matukod ang adbokasiya ug pagkat-on sa tibuuk nga miyembro.

BUHAT 2: Panguna pinaagig ehemplo

Ang pagkamiyembro sa GYA, IAP ug ISC naglangkob sa daghang bahin sa ekosistema sa panukiduki, ug ang matag usa mahimong adunay hinungdanon nga papel sa paghulma kung unsa ang hitsura sa usa ka siyentista.

2.1: Transisyon ngadto sa mas progresibong mga pamaagi sa pagtimbang-timbang sa panukiduki sa tibuok lapad nga membership. Pangunahan pinaagi sa panig-ingnan ug tabangi ang pagbag-o sa kultura sa pagsusi sa panukiduki pinaagi sa ilang kaugalingon nga mga pilosopiya ug mga gawi sa pagkamiyembro, samtang nagkuha sa pagkat-on gikan sa DORA ug sa GRC. Ang mga akademya, isip tradisyonal nga elite nga mga organisasyon, adunay partikular nga tahas nga himuon dinhi – kinahanglang dasigon sila sa pagpalapad sa ilang kaugalingong criteria alang sa pagpili ug pagpili aron mapakita ang mas lapad ug mas plural nga pagsabot sa kalidad ug epekto sa panukiduki, aron mapakita kini nga pluralismo (ug uban sa kini labaw nga paglakip ug pagkalainlain) sa ilang pagkamiyembro.

2.2: Pagdasig sa kooperasyon ug pagpangulo sa rehiyon. Awhaga ang rehiyonal nga network sa mga miyembro sa GYA ug National Young Academies, IAP's regional academy networks ug ang Regional Focal Points sa ISC nga ikonsiderar ang pagsunod sa ALLEA Board's inisyatibo, gipahaom sa ilang kaugalingong konteksto.

AKSIYON 3: Pagtukod ug estratehikong pakigtambayayong sa nag-unang mga konstituwente.

Ang tulo ka nag-unang aktor nga responsable sa pagduso sa reporma sa pagsusi sa panukiduki mao ang mga gobyerno, tigpondo sa panukiduki ug unibersidad. Ang GYA, IAP ug ISC matag usa makatabang sa pagdala sa komunidad sa panukiduki ngadto sa ilang mga paningkamot sa pagreporma ug pagsumpay sa mga pagkaputol nga anaa karon.

3.1: Pakig-apil sa pamunuan sa GRC aron tukion ang mga paagi sa pagtinabangay - sa panguna aron mapukaw ang mga miyembro ug ang ilang tagsa-tagsa nga mga representante sa GRC sa pagsusi kung giunsa ang ilang mga komunidad sa panukiduki mahimong maapil.

3.2: Pakig-apil sa mga global ug rehiyonal nga network sa mga unibersidad, sama sa International Association of Universities (IAU), aron makahimo og bag-ong mga himan sa pagbansay alang sa komunidad sa panukiduki; gamiton ang HEI leadership sulod sa collective membership sa GYA, IAP ug ISC isip mga tigpasiugda.

3.3: Ikonektar ang mga membro nga institusyon sa DORA grant nga mga nasud (Argentina, Australia, Brazil, Colombia, India, Japan, Netherlands, Uganda ug Venezuela) uban sa DORA grant-leads aron sa pagpaambit og mga ideya ug posibleng pagpadako niining mga lokal nga inisyatiba.

3.4: Pagtukod og mga relasyon uban sa mga nag-unang internasyonal nga mga ahensya sa kalamboan nga nagdeploy na sa mga bag-o ug epektibo nga mga estratehiya alang sa pagtimbang-timbang sa panukiduki sa ubos ug tunga-tunga nga kita nga mga nasud ug labing gamay nga mga nasud.

3.5: Pagtrabaho uban sa UNESCO aron makatabang sa paghulma sa nasudnong mga pasalig sa pagtimbang-timbang sa panukiduki ubos niini Rekomendasyon sa Open Science.

AKSIYON 4: Paghatag ug intelektwal nga pagpangulo sa kaugmaon sa pagsusi sa panukiduki.

Ang pag-focus sa piho ug dinalian nga mga hagit alang sa reporma sa pagtimbang-timbang sa panukiduki kinahanglanon. Ang GYA, IAP ug ISC, ug mga internasyonal nga network nga sama nila, makagamit sa ilang tagsa-tagsa ka mga gahum sa pagtigum, ang intelektwal nga gibug-aton ug impluwensya sa ilang mga miyembro ug mga koneksyon sa mga importanteng konstituwente.

4.1 ]), research funders (lakip ang GRC national representatives), international development agencies ug nag-unang mga magmamantala, ug uban pa. Ipataas ang bag-o o i-deploy ang kasamtangan nga mga kapanguhaan aron pondohan kini nga trabaho (tan-awa ang Apendise D para sa pipila ka pasiuna nga mga ideya).

4.2: Paghimo og usa ka nobela nga pagtuon sa usa ka importante nga aspeto sa umaabot nga kalamboan sa research evaluation sama sa (1) ang epekto sa teknolohikal nga pag-uswag sa research evaluation ug peer review (lakip ang paggamit ug pag-abuso), ug sa unsang paagi kini mahimong molambo sa umaabot ug ( 2) pag-reporma sa sistema sa peer review nga mas lapad (sa termino sa transparency, openness, kapasidad, pag-ila ug pagbansay niini). Ang duha nga mga isyu hinungdanon sa kasaligan sa kahibalo ug kasaligan sa siyensya.

Sa kasingkasing sa tanan niini nga mga paningkamot kinahanglan nga adunay tulo ka sukaranan nga mga butang:

• Pagpalapad sa evaluation criteria alang sa siyentipikong panukiduki ug mga tigdukiduki lapas sa tradisyonal nga academic metrics aron maapil ang daghang porma sa research output ug function, lakip ang quantitative criteria nga makasukod sa social impact sa research.

• Pag-awhag sa mga lider sa HEIs ug research funders sa pagsagop ug pagpalambo niining bag-ong evaluation criteria isip sukdanan sa kalidad ug bili sa panukiduki.

• Pagtrabaho uban niini nga mga lider sa bag-ong mga porma sa awareness-raising ug pagbansay-bansay alang sa umaabot nga mga henerasyon sa mga tigdukiduki sa pagsangkap kanila uban sa gikinahanglan nga mga kahanas sa pagpakigsulti ug pag-apil sa epektibong paagi uban sa policymakers, publiko ug uban pang importante nga mga konstituente; ug aron mapalambo ang pagkalainlain ug paglakip sa negosyo sa panukiduki.

Ang mga tagsulat niini nga papel naghinapos nga ang mga network sama sa GYA, IAP ug ISC, kauban ug nagsuporta sa uban pang mga importanteng konstituente, makatabang sa pagtukod sa usa ka managsama, partisipasyon, global nga inisyatiba aron mapalihok ang mga komunidad sa panukiduki, unibersidad ug uban pang mga HEI sa palibot niini nga agenda, ug ikonsiderar unsaon pagpalihok sa bag-ong mga paagi sa pag-assess ug pagpondo sa panukiduki aron mahimo kining mas episyente, patas, inklusibo ug maka-epekto.

1. UNESCO. 2021. UNESCO Science Report: The Race Against Time for Smarter Development (Kapitulo 1). UNESCO. https://unesdoc.unesco.org/ark:/48223/pf0000377250

2. Ang Royal Society. (2012). Agham isip usa ka Open Enterprise. Ang Royal Society Science Policy Center. https://royalsociety.org/~/media/policy/projects/sape/2012-06-20-saoe.pdf

3. Haustein, S. ug Larivière, V. 2014. Ang paggamit sa bibliometrics alang sa pagsusi sa panukiduki: mga posibilidad, limitasyon ug dili maayo nga mga epekto. I. Welpe, J. Wollersheim, S. Ringelhan, M. Osterloh (eds.), Incentives and Performance, Cham, Springer, pp. 121–139.

4. Macleod, M., Michie, S., Roberts, I., Dirnagi, U., Chalmers, I., Ioadnnidis, J., Al-Shahi Salman, R., Chan., AW ug Glasziou, P. 2014 Biomedical nga panukiduki: pagdugang sa bili, pagkunhod sa basura. Ang Lancet, Vol. 383, Num. 9912, pp. 101–104.

5. Bol, T., de Vaan, M. ug van de Rijt, A. 2018. Ang epekto sa Mateo sa pagpondo sa syensya. Mga Pamaagi sa National Academy of Sciences sa United States of America, Vol. 115, Num. 19, pp. 4887–4890.

6. International Science Council. 2021. Pag-abli sa Rekord sa Siyensiya: Paghimo sa Scholarly Publishing Work for Science sa Digital Era. Paris, France, ISC. https://doi.org/10.24948/2021.01

7. Müller, R. ug de Ricke, S. 2017. Naghunahuna uban sa mga timailhan. Pagsuhid sa epistemic nga mga epekto sa academic performance indicators sa life sciences. Pagsusi sa Panukiduki, Vol. 26, Num. 3, pp. 157–168.

8. Ansede, M. 2023. Usa sa labing gisitar nga mga siyentipiko sa kalibutan, si Rafael Luque, gisuspenso nga walay bayad sulod sa 13 ka tuig. El Paίs. https://english.elpais.com/science-tech/2023-04-02/one-of-the-worlds-most-cited-scientists-rafael-luque-suspended-without-pay-for-13-years. html

9. IAP. 2022. Pagbatok sa Predatory Academic Journals ug Conferences. Trieste, Italy, IAP. https://www.interacademies.org/publication/predatory-practices-report-English

10. Elliott, T., Fazeen, B., Asrat, A., Cetto, AM., Eriksson, S., Looi, LM ug Negra, D. 2022. Mga panglantaw sa pagkaylap ug epekto sa predatory academic journals ug conferences: usa ka global nga survey sa mga tigdukiduki. Nakat-onan sa Pagmantala, Vol. 3, Num. 4, pp. 516–528.

11. Collyer, TA 2019. Ang 'Salami slicing' makatabang sa mga karera apan makadaot sa siyensya. Kinaiyahan sa Tawo nga Kinaiya, Vol. 3, pp. 1005–1006.

12. Abad-García, MF 2019. Plagiarism ug predatory journal: usa ka hulga sa siyentipikanhong integridad. Anales De Pediatría (Iningles nga Edisyon), Tomo. 90, Num. 1, pp. 57.e1–57.e8.

13. Omobowale, AO, Akanle, O., Adeniran, AI ug Adegboyega, K. 2013. Peripheral nga scholarship ug ang konteksto sa langyaw nga bayad nga pagmantala sa Nigeria. Kasamtangang Sosyolohiya, Vol. 62, No. 5, pp. 666–684.

14. Ordway, D.-M. 2021. Akademikong mga journal, ang mga tigbalita nagpadayon sa sayop nga impormasyon sa pagdumala sa mga pagbawi sa panukiduki. Ang Resource sa Journalist. https://journalistresource.org/home/retraction-research-fake-peer-review/

15. Curry, S., de Rijcke, S., Hatch, A., Pillay, D., van der Weijden, I. ug Wilsdon, J. 2020. Ang Pagbag-o nga Papel sa mga Nagpondo sa Responsable nga Pagsusi sa Pagpanukiduki: Pag-uswag, Mga Balabag ug ang Dalan sa unahan. London, UK, Research on Research Institute.

16. Ang Global North sa kasagaran nagtumong sa industriyalisado o naugmad nga mga ekonomiya, sumala sa gihubit sa United Nations (2021), samtang ang Global South, nagtumong sa mga ekonomiya nga bag-ong industriyalisado o nga anaa sa proseso sa industriyalisasyon o sa pag-uswag, ug nga kanunay nga kasamtangan o kanhing mga sakop sa kolonyalismo.

17. InterAcademy Partnership. Sesyon 12: Pagdaog gikan sa Dakong Paglakip: Relasyon Tali sa Diversity ug Academic Culture. IAP. https://www.interacademies.org/page/session-12-winning-greater-inclusion-relation-between-diversity-and-academic-culture

18. Global Young Academy. Scientific Excellence Working Group. Berlin, Germany, GYA. https://globalyoungacademy.net/activities/scientific-excellence/

19. ISC. 2021. Pagpagawas sa Siyensya: Paghatud sa mga Misyon alang sa Pagpadayon. Paris, France, ISC. doi: 10.24948/2021.04

20. ISC. 2022. Usa ka kinuha gikan sa pakigpulong ni Peter Gluckman ngadto sa Endless Frontier Symposium. Paris, Pransiya. ISC. https://council.science/current/blog/an-extract-from-peter-gluckmans-speech-to-the-endless-frontier-symposium/

21. Belcher, B., Clau, R., Davel, R., Jones, S. ug Pinto, D. 2021. Usa ka himan alang sa transdisciplinary research pagplano ug ebalwasyon. Integration ug Implementation Insights. https://i2insights.org/2021/09/02/transdisciplinary-research-evaluation/

22. Belcher, BM, Rasmussen, KE, Kemshaw, MR ug Zornes, DA 2016. Paghubit ug pag-assess sa kalidad sa panukiduki sa konteksto sa transdisiplinary. Pagsusi sa Panukiduki, Vol. 25, Num. 1, pp. 1–17.

23. Wilsdon, J. et al. 2015. Ang Metric Tide: Report sa Independent Review sa Papel sa mga Sukatan sa Pagsusi ug Pagdumala sa Pagpanukiduki. HEFCE.

24. UNESCO. Rekomendasyon sa UNESCO sa Open Science. Paris, France, UNESCO. https://unesdoc.unesco.org/ark:/48223/pf0000379949

25. Usa ka tinubdan sa UNESCO nagpadayag nga kini nga buhat kay gipugngan karon tungod kay ang debate gidominar sa pipila lamang ug dili kinahanglan nga mosantop sa kadaghanan: ang halapad nga dayalogo kinahanglang mag-una sa pagpalambo sa mga rekomendasyon.

26. Barroga, E. 2020. Innovative nga mga estratehiya para sa peer review. Journal sa Korean Medical Science, Vol. 35, Num. 20, pp. e138.

27. Woods, HB, ug uban pa. 2022. Mga inobasyon sa peer review sa scholarly publishing: usa ka meta-summary. SocArXiv, doi: 10.31235/osf.io/qaksd

28. Kaltenbrunner, W., Pinfield, S., Waltman, L., Woods, HB ug Brumberg, J. 2022. Innovating peer review, reconfiguring scholarly communication: Usa ka analytical overview sa nagpadayon nga peer review innovation nga mga kalihokan. SocArXiv, doi: 10.31235/osf.io/8hdxu

29. Holm, J., Waltman, L., Newman-Griffis, D. ug Wilsdon, J. 2022. Maayong Practice sa Paggamit sa Machine Learning & AI sa Research Funding Organizations: Insights from a Workshop Series. London, UK, Research on Research Institute. https://doi.org/10.6084/m9.figshare.21710015.v1

30. Procter, R., Glover, B. ug Jones, E. 2020. Research 4.0 Research sa Edad sa Automation. London, UK, DEMOS.

31. Baker, M. 2015. Ang Smart software nagpunting sa statistical errors sa psychology nga mga papel. Kinaiyahan, https://doi.org/10.1038/nature.2015.18657

32. Van Noorden, R. 2022. Ang mga tigdukiduki nga naggamit sa AI sa pag-analisar sa peer review. Kinaiyahan 609, 455.

33. Severin, An., Strinzel, M., Egger, M., Barros, T., Sokolov, A., Mouatt, J. ug Muller, S. 2022. Arxiv,

34. Gadd, E. 2022. AI-based citation evaluation tools: maayo, dili maayo o ngil-ad? Ang Bibliomagcian. https://thebibliomagician.wordpress.com/2020/07/23/ai-based-citation-evaluation-tools-good-bad-or-ugly/

35. Foltýnek, T., Meuschke, N. ug Gipp, B. 2020. Academic plagiarism detection: usa ka sistematikong pagrepaso sa literatura. ACM Computing Surveys, Vol. 52, Num. 6, pp. 1–42.

36. Quach, K. 2022. Gigamit sa mga magmamantala ang AI aron madakop ang dili maayo nga mga siyentipiko nga nagdoktor sa datos. Ang Register. https://www.therregister.com/2022/09/12/academic_publishers_are_using_ai/

37. Van Dis, E., Bollen, J., Zuidema., van Rooji, R ug Bockting, C. 2023. ChatGPT: lima ka prayoridad alang sa panukiduki. Kinaiyahan, Vol. 614, pp. 224–226.

38. Chawla, D. 2022. Kinahanglan ba nga adunay papel ang AI sa pagtimbang-timbang sa kalidad sa panukiduki? Kinaiyahan, https://doi.org/10.1038/d41586-022-03294-3

39. Cyranoski, D. 2019. Ang artipisyal nga paniktik nagpili sa mga tigrepaso sa grant sa China. Kinaiyahan, Vol. 569, pp. 316–317.

40. Mike, T. 2022. Mahimo bang masusi ang kalidad sa gipatik nga mga artikulo sa akademikong journal gamit ang pagkat-on sa makina? Quantitative Science Studies, Vol. 3, Num. 1, pp. 208–226.

41. Chomsky, N., Roberts, I. ug Watumull, J. 2023. Ang bakak nga saad sa ChatGPT. Ang New York Times. https://www.nytimes.com/2023/03/08/opinion/noam-chomsky-chatgpt-ai.html

42. Klarivate. 2022. Pagsusi sa Pagpanukiduki: Mga Sinugdanan, Ebolusyon, Mga Resulta. Clarivate. https://clarivate.com/lp/research-assessment-origins-evolutions-outcomes/

43. Blauth, TF, Gstrein, OJ ug Zwitter, A. 2022. Artificial intelligence crime: usa ka overview sa malisyoso nga paggamit ug pag-abuso sa AI. IEEE Access, Vol. 10, pp. 77110–77122.

44. Castelvecchi, D. 2019. AI pioneer: 'Ang mga kapeligrohan sa pag-abuso tinuod kaayo'. Kinaiyahan, doi: https://doi.org/10.1038/d41586-019-00505-2

45. Jordan, K. 2022. Mga panglantaw sa akademya sa epekto sa panukiduki ug pakiglambigit pinaagi sa mga interaksyon sa mga plataporma sa social media. Pagkat-on, Media ug Teknolohiya, doi: 10.1080/17439884.2022.2065298

46. Wouters, P., Zahedi, Z. ug Costas, R. 2019. Social media metrics alang sa bag-ong research evaluation. Glänzel, W., Moed, HF, Schmoch U., Thelwall, M. (eds.), Springer Handbook sa Science and Technology Indicators. SpringerLink.

47. Rafols, I. ug Stirling, A. 2020. Pagdesinyo sa mga timailhan alang sa pagbukas sa ebalwasyon. Mga panabut gikan sa pagsusi sa panukiduki. ResearchGate, doi: 10.31235/osf.io/h2fxp

48. Rich, A., Xuereb, A., Wrobel, B., Kerr, J., Tietjen, K., Mendisu, B., Farjalla, V., Xu, J., Dominik, M., Wuite, G ., Hod, O. ug Baul, J. 2022. Back to Basics. Halle, Germany, Global Young Academy.

49. Jong, L., Franssen, T. ug Pinfield, S. 2021. Excellence in the Research Ecosystem: A Literature Review. London, UK, Research on Research Institute.

50. Hatch, A. ug Curry, S. 2020. Kultura sa Pagpanukiduki: Ang pagbag-o kung giunsa nato pagtimbang-timbang ang panukiduki lisud, apan dili imposible. eLife, Vol. 9, p. e58654.

51. IAP. 2022. Pagbatok sa Predatory Academic Journals ug Conferences. Trieste, Italy, IAP.

52. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. ug Rafols, I. 2015. Bibliometrics: Ang Leiden Manifesto alang sa research metrics. Kinaiyahan, Vol. 520, pp. 429–431.

53. Mga Publon. 2018. Tibuok Kalibutan nga Estado sa Pagrepaso sa Kaedad. London, UK, Clarivate. https://doi.org/10.14322

54. Kovanis, M., Porcher, R., Revaud, P. ug Trinquart, L. 2016. Ang global nga palas-anon sa journal peer review sa biomedical nga literatura: lig-on nga imbalance sa kolektibong negosyo. PLoS ONE, Vol. 11, Num. 11, p. e0166387.

55. Forrester, B. 2023. Gikapoy ug nasunog: 'hilom nga pag-undang' miigo sa akademya. Kinaiyahan, Vol. 615, pp. 751–753.

56. Hatch, A. ug Curry, S. 2020. Kultura sa panukiduki: lisud ang pagbag-o kung giunsa naton pagtimbang-timbang ang panukiduki, apan dili imposible. eLife, Vol. 9, p. e58654.

57. Moher, D., Bouter, L., Kleinert, S., Glasziou, P., Har Sham, M., Barbour, V., Coriat, AM, Foeger, N. ug Dirnagi, U. 2020. The Hong Mga Prinsipyo sa Kong alang sa pagsusi sa mga tigdukiduki: pagpauswag sa integridad sa panukiduki. PLoS Biology, Vol. 18, Num. 7, p. e3000737.

58. Wilsdon, J., Allen, L., Belfiore, E., Campbell, P., Curry, S., Hill, S., Jones, R., Kain, R. ug Kerridge, S. 2015. The Metric Tide: Report sa Independent Review sa Papel sa mga Sukatan sa Pagsusi ug Pagdumala sa Pagpanukiduki. doi:10.13140/RG.2.1.4929.1363

59. Curry, S., Gadd, E. ug Wilsdon, J. 2022. Paggamit sa Sukatan nga Tide: Mga Indicator, Imprastraktura & Priyoridad alang sa UK Responsible Research Assessment. London, UK, Research on Research Institute.

60. Editoryal sa Kinaiyahan. 2022. Suportahi ang maisugon nga panan-awon sa Europe alang sa responsable nga pagsusi sa panukiduki. Kinaiyahan, Vol. 607, p. 636.

61. Deklarasyon sa Pagsusi sa Panukiduki (DORA). https://sfdora.org/about-dora/

62. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. ug Rafols, I. 2015. Bibliometrics: Ang Leiden Manifesto alang sa research metrics. Kinaiyahan, Vol. 520, pp. 429–431.

63. Curry, S., Gadd, E. ug Wilsdon, J. 2022. Paggamit sa Sukatan nga Tide: Mga Indicator, Imprastraktura & Priyoridad alang sa UK Responsible Research Assessment. London, UK, Research on Research Institute. https://rori.figshare.com/articles/report/Harnessing_the_Metric_Tide/21701624

64. DORA. Deklarasyon sa San Francisco sa Pagsusi sa Pagpanukiduki. https://sfdora.org/read/

65. DORA. Mga Himan sa Pag-uswag sa Pagsusi sa Panukiduki. DORA. https://sfdora.org/project-tara/

66. DORA. DORA Community Engagement Grants: Pagsuporta sa Academic Assessment Reform https://sfdora.org/dora-community-engagement-grants-supporting-academic-assessment-reform/

67. Inorms. SCOPE Framework alang sa Pagsusi sa Panukiduki. https://inorms.net/scope-framework-for-research-evaluation/

68. Inorms. Ang SCOPE Framework. https://inorms.net/scope-framework-for-research-evaluation/

69. Torfin, S. 2018. Kalidad sa Pagpanukiduki Plus. Internasyonal nga Development Research Center. https://www.idrc.ca/en/rqplus

70. Reid, C., Calia, C., Guerra, C. ug Grant, L. 2019. Ethical Action sa Global Research: Usa ka Toolkit. Edinburgh, Scotland, Unibersidad sa Edinburgh. https://www.ethical-global-research.ed.ac.uk/

71. Valters, C. 2014. Mga Teorya sa Pagbag-o sa Internasyonal nga Kauswagan: Komunikasyon, Pagkat-on, o Tulubagon? Ang Asia Foundation. https://www.alnap.org/system/files/content/resource/files/main/jsrp17-valters.pdf

72. Fraser, C., Nienaltowski, MH, Goff, KP, Firth, C., Sharman, B., Bright, M. ug Dias, SM 2021. Responsible Research Assessment. Global Research Council. https://globalresearchcouncil.org/news/responsible-research-assessment/

73. Ang Global Research Council. GRC Responsible Research Assessment. YouTube. https://www.youtube.com/watch?v=CnsqDYHGdDo

74. Curry, S., de Rijcke, S., Hatch, A., Dorsamy, P., van der Weijden, I. ug Wilsdon, J. 2020. Ang Pagbag-o nga Papel sa mga Nagpondo sa Responsable nga Pagsusi sa Pagpanukiduki. London, UK, Research on Research Institute. https://doi.org/10.6084/m9.figshare.13227914.v1

75. Global Research Council. Responsable nga Research Assessment Working Group. GRC. https://globalresearchcouncil.org/about/responsible-research-assessment-working-group/

76. Global Young Academy. Siyentipikanhong Kahinungdanon. GYA. https://globalyoungacademy.net/activities/scientific-excellence/

77. Adams, J., Beardsley, R., Bornmann, L., Grant, J., Szomszor, M. ug Williams, K. 2022. Research Assessment: Origins, Evolution, Resulta. Institute alang sa Scientific Information. https://clarivate.com/ISI-Research-Assessment-Report-v5b-Spreads.pdf

78. DORA. Resource Library. https://sfdora.org/resource-library

79. Saenen, B., Hatch, A., Curry, S., Proudman, V. ug Lakoduk, A. 2021. Reimagining Academic Career Assessment: Mga Istorya sa Kabag-ohan ug Pagbag-o. DORA. https://eua.eu/downloads/publications/eua-dora-sparc_case%20study%20report.pdf

80. Coalition for Advancing Research Assessment (CoARA). https://coara.eu/

81. CoARA. 2022. Agreement on Reforming Research Assessment. https://coara.eu/app/uploads/2022/09/2022_07_19_rra_agreement_final.pdf

82. Editoryal sa Kinaiyahan. 2022. Suportahi ang maisugon nga panan-awon sa Europe alang sa responsable nga pagsusi sa panukiduki. Kinaiyahan, Vol. 607, p. 636.

83. Open ug Universal Science. OPUS Home – Open and Universal Science (OPUS) Project. https://opusproject.eu/

84. Vergoulis, T. 2023. GraspOS Pag-uswag ngadto sa Mas Responsable nga Pagsusi sa Pagpanukiduki. OpenAIRE. https://www.openaire.eu/graspos-moving-forward-to-a-more-responsible-research-assessment

85. European Research Council. 2022. Ang ERC Scientific Council Nagdesisyon sa mga Pagbag-o sa Mga Porma ug Proseso sa Pagtimbang-timbang alang sa 2024 nga mga Tawag. ERC. https://erc.europa.eu/news-events/news/erc-scientific-council-decids-changes-evaluation-forms-and-processes-2024-calls

86. Tanan nga European Academy. 2022. ALLEA Statement sa Reforming Research Assessment sulod sa European Academies. ALLEA. https://allea.org/wp-content/uploads/2022/10/ALLEA-Statement-RRA-in-the-Academies.pdf

87. Eurodoc, MCAA, YAE, ICoRSA ug GYA. 2022. Joint Statement on the EU Council conclusions on Research Assessment and the Implementation of Open Science. Zenodo, doi: 10.5282/zenodo.7066807.

88. Overlaet, B. 2022. Usa ka Pathway padulong sa Multidimensional Academic Careers – Usa ka LERU Framework alang sa Pagsusi sa mga Tigdukiduki. LERU, Leuven, Belgium. https://www.leru.org/files/Publications/LERU_PositionPaper_Framework-for-the-Assessment-of-Researchers.pdf

89. Royal Society. Resume alang sa mga tigdukiduki. https://royalsociety.org/topics-policy/projects/research-culture/tools-for-support/resume-for-researchers/

90. Grove, J. 2021. Gisulti ba sa mga narrative CV ang husto nga istorya? Times Higher Education (THE). https://www.timeshighereducation.com/depth/do-narrative-cvs-tell-right-story

91. RICYT. Mga tigdukiduki pinaagi sa sektor sa panarbaho (FTE) 2011-2020. app.ricyt.org/ui/v3/comparative.html?indicator=INVESTEJCSEPER&start_year=2011&end_year=2020

92. CLACSO. 2020. Pag-evaluate sa Scientific Research Assessment. Ngadto sa usa ka Pagbag-o sa Scientific Research Assessment sa Latin America ug sa Caribbean Series gikan sa The Latin American Forum for Research Assessment (FOLEC). CLACSO, Buenos Aires, Argentina. https://www.clacso.org/wp-content/uploads/2020/05/FOLEC-DIAGNOSTICO-INGLES.pdf

93. CLACSO. 2021. Ngadto sa Pagbag-o sa mga Sistema sa Ebalwasyon sa Latin America ug Caribbean, Mga Himan sa Pagpasiugda sa Bag-ong mga Patakaran sa Ebalwasyon. Serye gikan sa The Latin American Forum for Research Assessment (FOLEC). CLACSO, Buenos Aires, Argentina. https://www.clacso.org/wp-content/uploads/2022/02/Documento-HERRAMIENTA-2-ENG.pdf

94. Gras, N. 2022. Mga Porma Sa Pagsusi sa Pagpanukiduki Gipunting Sa Mga Problema sa Pag-uswag. Mga Praktis Ug Panglantaw Gikan sa National Science And Technology Organizations Ug Higher Education Institutions Sa Latin America Ug Caribbean. FOLEC. CLACSO, Buenos Aires, Argentina. 2022-07-27_Report Forms-of-research-assessment.pdf ENG.pdf (dspacedirect.org)

95. Ang CLACSO mao ang Konseho alang sa Social Sciences sa rehiyon ug usa ka nag-unang kampeon alang sa sosyal nga may kalabotan ug responsable nga siyensya. Ang Latin American Forum on Research Assessment (FOLEC) usa ka rehiyonal nga luna alang sa debate ug pagpaambit sa maayong praktis, ug nagpalambo sa rehiyonal nga mga giya alang sa pagsusi sa panukiduki aron pagsuporta niini nga mga prinsipyo. Ang duha naghatag og lig-on nga regional leadership.

96. SGCI. Science Granting Councils Initiative (SGCI) sa Sub-Saharan Africa. https://sgciafrica.org/

97. SGCI. Tijssen, R. ug Kraemer-Mbula, E. 2017. Mubo nga polisiya: Mga panglantaw sa excellence sa panukiduki sa Global South - assessment, monitoring ug evaluation sa mga nag-uswag nga konteksto sa nasud. SGCI. https://sgciafrica.org/wp-content/uploads/2022/03/Policy-Brief-Perspectives-on-research-excellence-in-the-Global-South_-Assessment-monitoring-and-evaluation-in-developing- nasud-konteksto.pdf

98. Tijssen, R. ug Kraemer-Mbula, E. 2018. Research excellence sa Africa: Mga polisiya, panglantaw, ug pasundayag. SGCI. https://sgciafrica.org/research-excellence-in-africa-policies-perceptions-and-performance/

99. Tijssen, R. ug Kraemer-Mbula, E. 2018. Research excellence sa Africa: Mga polisiya, panglantaw, ug pasundayag. Science ug Public Policy, Vol. 45 Num. 3, pp. 392–403. https://doi.org/10.1093/scipol/scx074

100. SGCI. Good Practice Guideline sa Kalidad sa mga Kompetisyon sa Pagpanukiduki. https://sgciafrica.org/eng-good-practice-guideline-on-the-quality-of-research-competitions/

101. NRF. Ang NRF Nag-host sa mga Estratehikong Meeting aron I-advance ang Research Partnerships sa Africa - National Research Foundation

102. Belcher, BM, Rasmussen, KE, Kemshaw, MR ug Zornes, DA 2016. Paghubit ug pag-assess sa kalidad sa panukiduki sa usa ka transdisciplinary nga konteksto, Research Evaluation, Vol. 25, pp: 1–17, https://doi.org/10.1093/reseval/rvv025

103. ARIN. 2020. Science Technology and Innovation (STI) Metrics – Africa Research & Impact Network (arin-africa.org)

104. McLean R., Ofir Z., Etherington A., Acevedo M. ug Feinstein O. 2022. Kalidad sa Pagpanukiduki (RQ+) – Pagtimbang-timbang sa Pagtuon sa Lahi. Ottawa, International Development Research Center. https://idl-bnc-idrc.dspacedirect.org/bitstream/handle/10625/60945/IDL-60945.pdf?sequence=2&isAllowed=y

105. International Academy for Monitoring and Evaluation

106. DORA. TARA Dashboard. https://sfdora.org/tara-landing-page/

107. IARU, International Association of Research-Intensive Universities; LERU, Liga sa European Research Unibersidad; AAU, African Association of Universities

Image sa Guillaume de Germain on Unsplash

Basaha ang papel online o sa imong gusto nga pinulongan

Share