Nyumbani / Machapisho / Mustakabali wa tathmini ya utafiti:...

Mustakabali wa tathmini ya utafiti: Mchanganyiko wa mijadala na maendeleo ya sasa

Ripoti hii ya usanisi imechapishwa na taasisi ya ISC, Center for Science Futures, pamoja na washirika, Global Young Academy na InterAcademy Partnership.

Swali linalojadiliwa sana na washikadau duniani kote ni kama mifumo ya sasa ya tathmini ya utafiti ina ufanisi katika kutambua utafiti wa ubora wa juu na kusaidia maendeleo ya sayansi. Katika miaka ya hivi majuzi, wasiwasi umeongezeka kuhusu vizuizi na upendeleo unaowezekana wa vipimo vya kitamaduni vya tathmini ambavyo mara nyingi hushindwa kupata anuwai kamili ya athari na ubora wa utafiti. Kwa hivyo kumekuwa na ongezeko la mahitaji ya washikadau ya kurekebisha mifumo ya sasa ya tathmini ya utafiti.

Mijadala inayohusu mageuzi ya tathmini ya utafiti inazingatia vipengele mbalimbali vya tathmini ikiwa ni pamoja na hitaji la vigezo tofauti vya tathmini na shirikishi, jukumu la uhakiki wa rika na matumizi ya sayansi huria. Wengine wameelezea hitaji la kuhama kutoka kwa kuzingatia metrics za jarida hadi tathmini ya kina na ya ubora wa athari za utafiti ikiwa ni pamoja na ushirikiano, kushiriki data, ushiriki wa jamii ...

Mustakabali wa Tathmini ya Utafiti unatoa mapitio ya hali ya sasa ya mifumo ya tathmini ya utafiti na kujadili hatua za hivi karibuni zaidi, majibu na mipango iliyochukuliwa na washikadau tofauti kupitia mifano kadhaa ya kesi kutoka duniani kote. Lengo la karatasi hii ya majadiliano ni kuchangia mijadala inayoendelea na maswali wazi juu ya mustakabali wa tathmini ya utafiti.

Pakua ripoti hiyo

Muhtasari wa masuala yaliyotambuliwa, hatua zilizochukuliwa na maswali yaliyosalia wazi kulingana na ripoti yanaweza kupatikana katika infographic:

Bofya ili kupanua picha au pakua toleo la PDF ya infographic.

Tumia programu-jalizi yetu ya kutafsiri kusoma karatasi mtandaoni au katika lugha unayopendelea.

Mfumo wa utafiti unaobadilika na unaojumuisha ni muhimu sana kwa sayansi na jamii ili kuendeleza maarifa na uelewa wa kimsingi na kushughulikia changamoto zinazozidi kuwa za dharura za kimataifa. Lakini mfumo wa utafiti uko chini ya shinikizo kutokana na kuongezeka kwa matarajio kutoka kwa watendaji wengi (ikiwa ni pamoja na wafadhili, serikali na tasnia ya uchapishaji), mivutano kati ya mienendo ya ushindani na ushirikiano, mfumo wa mawasiliano wa kitaalamu unaoendelea, tasnia ya uchapishaji na uchanganuzi wa data wakati fulani. na rasilimali chache. Biashara ya utafiti lazima idhibiti mahitaji na mivutano hii huku ikidumisha ubora wa utafiti, kudumisha uadilifu wa utafiti, kuwa mjumuisho na wa aina mbalimbali na kulinda utafiti wa kimsingi na unaotumika.

Katika muongo mmoja uliopita, shinikizo hizi, na hitaji la mwitikio wa, mfumo wa sayansi umeambatana na tafakari muhimu zaidi juu ya mifumo ya tathmini ya utafiti na kipimo cha utendaji. Ingawa inafaa, mbinu nyeti za muktadha za kutathmini ubora na athari za utafiti ni muhimu, mijadala imeongezeka kuhusu athari pana, changamano na zisizoeleweka za vigezo vya sasa vya tathmini na vipimo kuhusu ubora na utamaduni wa utafiti, ubora wa ushahidi unaoarifu uundaji wa sera, vipaumbele katika utafiti na ufadhili wa utafiti, trajectories ya mtu binafsi ya kazi na ustawi wa watafiti. Katika baadhi ya sehemu za dunia, kuna ongezeko la utambuzi kwamba seti finyu na sahili ya vipimo na viashirio vya tathmini haichukui kwa kuridhisha ubora, matumizi, uadilifu na anuwai ya utafiti. Vipimo vinavyotumiwa mara kwa mara - mara nyingi vinavyotegemea majarida - hushindwa kurekodi vipimo muhimu vya ziada vya utafiti wa ubora wa juu kama vile vinavyopatikana katika ushauri, kushiriki data, kujihusisha na umma, kukuza kizazi kijacho cha wasomi na kutambua na kutoa fursa kwa vikundi visivyo na uwakilishi. Mbali na kuwa na wigo finyu, suala la matumizi mabaya ya vipimo na viashirio pia linaonekana kupotosha motisha kwa ajili ya mafanikio, kupoteza baadhi ya taaluma (ikiwa ni pamoja na utafiti muhimu wa taaluma mbalimbali na wa kimataifa) na kuchochea unyanyasaji na mazoea yasiyo ya kimaadili ya uchapishaji.

Kampeni za kuzuia matumizi mabaya ya vipimo, kupanua vigezo vya ubora na kubadilisha utamaduni wa utafiti kwa utaratibu zaidi kupitia manifesto na kauli, kanuni na marekebisho zimeweka msingi wa mjadala wa kimataifa kuhusu haja ya kurekebisha tathmini ya utafiti. Sauti hizi sasa zinataka kuhama kutoka kwa manifesto hadi kwa vitendo. Hii inafanyika dhidi ya usuli wa mabadiliko ya mabadiliko katika njia ambazo utafiti unafanywa na kuwasilishwa. Kuongezeka kwa mifumo ya utafiti wazi na ya mitandao ya kijamii, mabadiliko ya sayansi yenye mwelekeo wa utume na nidhamu, ukuaji wa mapitio ya wazi ya rika na uwezekano wa mabadiliko ya akili ya bandia (AI) na kujifunza kwa mashine inahitaji mawazo mapya juu ya jinsi utafiti na watafiti wanatathminiwa. .

Kinyume na hali hii ya nyuma, Global Young Academy (GYA), Ushirikiano wa InterAcademy (IAP) na Baraza la Sayansi la Kimataifa (ISC) iliungana kuchukua tathmini ya mijadala na maendeleo katika tathmini ya utafiti duniani kote, kwa kutumia kikundi cha wanasayansi na mfululizo wa mashauriano ya kikanda. Mbinu mpya zinatayarishwa na kufanyiwa majaribio na taasisi za elimu ya juu na wafadhili wa utafiti katika baadhi ya sehemu za dunia, na kadhaa zimejumuishwa katika karatasi hii. Katika sehemu nyingine za dunia, mijadala na matendo haya ni changa au hata hayapo. Pamoja na mifumo ya utafiti kubadilika kwa viwango tofauti, kuna hatari ya kutofautiana na kugawanyika. Tofauti kama hizo zinaweza kuathiri usawa unaohitajika ili kuwezesha ushirikiano wa utafiti na kuwezesha uhamaji wa watafiti katika jiografia, sekta na taaluma tofauti. Hata hivyo, ukubwa mmoja hauwezi kutoshea zote na kuna haja ya juhudi zinazozingatia muktadha ili kurekebisha tathmini, kwa kutambua changamoto za ndani.

Kwa kuzingatia utafiti wa sekta ya umma na tathmini ya utafiti na watafiti, mada hii ya majadiliano ni ya kimataifa katika mtazamo wake, inayoshughulikia ajenda ambayo kwa kawaida hutawaliwa na maendeleo ya Ulaya na Amerika Kaskazini: mitazamo ya kikanda na mifano ya maendeleo ya kitaifa na mageuzi ya taasisi ni. imeangaziwa. Uanachama wa kimataifa na wa pamoja wa GYA, IAP na ISC inawakilisha sehemu pana ya mfumo ikolojia wa utafiti ambao majukumu yake mbalimbali yanaweza kuwezesha mabadiliko ya kweli ya kimfumo. Karatasi hii inajitahidi kutumika kama kichocheo kwa GYA, IAP na ISC - kama majukwaa ya kujifunza kwa pande zote, majaribio na uvumbuzi - kufanya kazi na wanachama wao, taasisi zingine za sayansi na maeneo bunge muhimu ulimwenguni, kuanzisha na kuendeleza mazungumzo, na kuhamasisha umoja zaidi. na hatua ya pamoja.

Mapendekezo kwa ajili ya GYA, IAP na ISC na wanachama wao (angalia sehemu ya 5) yameundwa kulingana na majukumu yao kama watetezi, vielelezo, wabunifu, wafadhili, wachapishaji, wakadiriaji na washiriki, pamoja na muda elekezi wa kuchukua hatua. Mara nyingi, hatua hizi ni pamoja na kuunda nafasi ya kushiriki masomo na matokeo kutoka kwa mipango inayofaa hadi sasa (kujenga jumuiya ya mazoezi); katika muda wa kati, kushirikisha mijadala ya wadau mbalimbali na maeneobunge muhimu ili kubuni upya na kutekeleza tathmini ya utafiti kwa njia zinazotekelezeka, zinazozingatia muktadha na jumuishi; na, kwa muda mrefu, kuibua tafiti za riwaya zinazochangia kufikiri siku zijazo, nyeti kwa maendeleo ya kasi ya teknolojia ya AI, mbinu za mapitio ya rika na mageuzi, na vyombo vya habari vya mawasiliano.

Vipimo vya kiasi vinaweza kuunda sehemu muhimu ya tathmini ya utafiti, katika mpito wa mfumo wa utafiti ulio wazi zaidi, unaowajibika na unaoangalia umma (Jumuiya ya Kifalme, 2012) [2]. Lakini pia wanawajibika kwa kiasi fulani katika kuchochea utamaduni wa utafiti wa 'kuchapisha au kuangamia' uliopo ulimwenguni kote, na athari mbaya kwa ubora wa matokeo ya utafiti, uadilifu na uaminifu wa mifumo ya utafiti na anuwai ya jumuiya za utafiti (km. Haustein na Larivière, 2014) [3]. Hii ni kwa sababu vipimo hutumiwa kama wakala wa ubora wa utafiti na taasisi, watunga sera na wafadhili wa utafiti sawa, lakini ni kipimo cha matokeo na si cha ubora wa utafiti au athari kwa kila sekunde. Kwa hivyo, waigizaji hawa hufanya mengi kuweka muktadha wa kijamii na kitamaduni ambamo utafiti hufanyika, na mifumo ya malipo na ukuzaji wa wasomi hutengeneza chaguo la wanasayansi katika hatua zote za taaluma yao (Macleod et al., 2014[4].

"Matumizi ya fahirisi za bibliometriki… kama vipimo vya wakala kwa utendakazi wa watafiti ni faharasa inayofaa ya tathmini lakini ina dosari kubwa. Wengi huzingatia sana mafanikio ya mtu binafsi, kupunguza usaidizi wa utafiti kupitia nia ya chuo kikuu katika vipimo vya matokeo ya juu, kushinikiza wote 'kuweka tiki kwenye visanduku' na kuafiki, ilhali wanachukua jukumu muhimu katika kupotosha soko la uchapishaji wa majarida. Kuna haja ya haraka ya mageuzi."

Kufungua Rekodi ya Sayansi (2021), Baraza la Sayansi ya Kimataifa

Jumuiya nyingine ya washikadau iliyo na uwezo mkubwa na ushawishi juu ya mawasiliano ya utafiti na uzalishaji wa maarifa ni sekta ya uchapishaji. Vipimo vinavyotokana na majarida vimekuwa kichocheo kikuu cha kuchapisha katika majarida ya kibiashara na vinaweza kuhamasisha tabia ambayo inaweza kuwa na athari mbaya. Badala ya kuhukumu matokeo ya utafiti kuhusu manufaa yake ya kisayansi, ni ubora unaotambulika wa jarida ambalo linachapishwa ambao unakubalika mara kwa mara kama ushahidi wa ubora wa kisayansi, unaoendesha soko la uchapishaji la kibiashara zaidi kulingana na sifa badala ya sayansi. Gharama za ufikiaji huria hutolewa kwa kiasi kikubwa kupitia gharama za uchakataji wa waandishi (APCs): hizi zinaweza kuwa juu sana, hasa katika baadhi ya sehemu za dunia, na hivyo kutengeneza vikwazo kwa uchapishaji wa utafiti kwa watafiti maskini wa rasilimali na uwezekano wa kuhatarisha kuvunjika kwa jumuiya ya kimataifa ya sayansi. Hatari za kuwa tegemezi zaidi na zaidi kwa watoa huduma za kibiashara na masharti yao ya matumizi katika hatua zote za mchakato wa utafiti huleta hali dhabiti kwa njia mbadala zisizo za faida. Zaidi ya hayo, kwa vile viashirio vya bibliometriki vimetoa chanzo kikuu cha motisha katika vyuo vikuu, vimepunguza thamani ya elimu na aina nyingine za kazi za kisayansi (kama vile ufundishaji na ushauri wa sera). Huku mifumo ya tathmini ya utafiti ikielekea kupendelea wale wanaopata ruzuku kubwa na kuchapisha katika majarida yenye athari kubwa, kuna ushahidi kupendekeza kwamba watafiti ambao tayari wamefaulu wana uwezekano mkubwa wa kufaulu tena ('Matthew effect', Bol na wenzake, 2018[5].

Wakati uchapishaji wa kitaalamu unakuwa njia ya tathmini badala ya mawasiliano, hii huwakosesha wale wanaochagua kuwasilisha utafiti wao kwa njia zingine zenye maana (Ripoti ya ISC ya 2021) [6]. Hii ni pamoja na matokeo ya kawaida (na bila shaka fedha kuu) ya Global Young Academy (GYA), Ubia wa InterAcademy (IAP) na Baraza la Kimataifa la Sayansi (ISC): ripoti, karatasi za kazi, taarifa za pamoja, tahariri za maoni, habari na makala za wavuti. . Baadhi ya taaluma pia ni duni: kwa mfano, watafiti katika uhandisi na sayansi ya kompyuta ambapo (kawaida haraka) mawasiliano kwa njia ya mikutano na kesi zao ni muhimu; na wale walio katika ubinadamu na sayansi ya jamii ambao kwa kawaida hutumia monographs, vitabu na majarida ya kitaaluma.

Wengine huchagua kuchapisha katika majarida mahususi ya utafiti au ya ndani, au hawawezi kumudu kuchapisha utafiti wao (hata hivyo wa ubora wa juu) katika majarida ya ufikivu wazi yenye vipengele vya juu vya athari (na APC za juu zinazoambatana); mwisho inawanyima fursa wale walio katika nchi za kipato cha chini, hasa watafiti wa mapema wa taaluma (ECRs). Watafiti hawa hawa wako chini ya shinikizo kubwa kwa nafasi za kitaaluma zilizokamilishwa na tabia zao zimechangiwa sana na vigezo vya kiasi vinavyotumiwa na mashirika ya ufadhili wa utafiti na bodi za kitaasisi za kukodisha na kukuza. Jaribio la kufikiria na viashiria (Muller na de Rijcke, 2017) [7], na hata 'mchezo' mfumo, ni ukweli kwa watafiti wote kila mahali ulimwenguni (km Ansede, 2023[8].

Maonyesho ya mchezo huu ni pamoja na watafiti (kwa kujua au kwa bahati mbaya) kutumia majarida na makongamano ya unyanyasaji ili kuongeza idadi ya machapisho yao. (IAP, 2022 [9]; Elliott et al., 2022 [10]), kujiingiza katika kujinukuu na kughushi hakiki za wenzao, wizi, mfumuko wa bei na 'salami-slicing' (kugawanya utafiti mkubwa ambao ungeweza kuripotiwa katika makala moja ya utafiti katika makala ndogo zilizochapishwa) (Colyer, 2019) [11]. Chini ya shinikizo, watafiti wanaweza kujaribiwa kukimbilia huduma za uwindaji kwa madhumuni ya pekee ya kupata PhD zao, kuajiriwa au kupandishwa vyeo, au kufadhili miradi yao ya utafiti (km. Abad-García, 2018 [12]; Omobowale et al., 2014) [13]. Mifumo ya elimu inayoendeshwa na metriki na uchapishaji wa kitaaluma huleta motisha za hila: ambapo mtafiti anachapisha ni muhimu zaidi kuliko kile anachochapisha.

Athari kwa ubora na uadilifu wa utafiti inahusu sana. Idadi ya makala ya kitaalamu yaliyobatilishwa imeongezeka kwa kiasi kikubwa katika miaka ya hivi karibuni, kutokana na utafiti na uchapishaji usio na nidhamu na mkusanyiko duni wa data au ulaghai. Majarida yanaweza kuchukua miezi hadi miaka kubatilisha utafiti usioaminika, wakati ambapo inaweza kuwa tayari imetajwa mara nyingi na kuwa katika uwanja wa umma (Ordway, 2021[14].

Ukuaji wa tathmini ya utafiti unaoendeshwa na metriki hauna shaka na kuna mwelekeo tofauti ulimwenguni linapokuja suala la mageuzi ya tathmini, ambayo yanahatarisha kuwaacha nyuma sehemu za jumuiya ya watafiti. Katika uchambuzi wake wa mazingira ya kimataifa ya tathmini ya utafiti (Curry et al., 2020 [15]; iliyowasilishwa), inaonekana kwamba taasisi nyingi za utafiti na ufadhili katika nchi/maeneo yenye kipato cha juu zinaanza kujumuisha seti pana ya viashirio, kama vile hatua za ubora wa 'athari', huku bibliometriki zikisalia kutawala katika taasisi za 'Global South' [16] ], katika taaluma zote. Bila hatua shirikishi zaidi, kuna hatari ya kuwa na mseto wa mifumo ya tathmini ya kitaifa, uwezekano wa kuanzisha upendeleo zaidi wa kimfumo na uwezekano wa kutopatana katika utafiti, tathmini, ufadhili na mifumo ya uchapishaji. Hii, kwa upande wake, inaweza kuzuia ushirikiano wa kimataifa wa utafiti na uhamaji wa watafiti. Katika kuunda vizuizi kwa ushirikiano wa kaskazini-kusini, inaweza pia kuzuia uimarishaji sambamba wa mifumo ikolojia ya utafiti katika Global South - tathmini dhabiti ya utafiti inaimarisha mifumo ikolojia ya utafiti na kuiamini, inapunguza uwezekano wa kukimbia kwa ubongo na kusaidia kuanzisha mtaji dhabiti wa watu kwa uendelevu. maendeleo. Hata hivyo, matoleo ya ukubwa mmoja ya kile kinachojumuisha utendaji mzuri huzalisha aina za tabia ambazo hazifai kwa ubora, usawa, uwazi na ushirikishwaji. Kupima mafanikio ya wasomi ambao wamestawi katika mazingira ya kuunga mkono, yenye rasilimali nzuri ambapo fursa ziko nyingi, kwa njia sawa na wale ambao wamepigana na changamoto na kushinda vikwazo katika mazingira ya uhasama na yasiyo ya msaada inatia shaka hata kidogo (GYA, 2022) [17]. Wasomi wengi wanahisi kutengwa kwa kihistoria na kijiografia kutoka kwa jumuiya ya watafiti, ikichochewa kwa sehemu kubwa na jinsi wanavyotathminiwa katika taaluma zao zote. Kwa kuwatenga baadhi ya aina za utafiti na kushindwa kutumia mawazo anuwai ulimwenguni, kuna hatari kwamba mazoea ya sasa ya tathmini ya utafiti yanakuza utamaduni mkuu/wafuasi wa wanamitindo maarufu wa Magharibi.

Watafiti katika nchi za kipato cha chini na katika hatua za awali katika taaluma zao wanahitaji sauti ili waweze kusaidia kuunda miundo mipya ya tathmini kwa njia zinazozingatia muktadha ambazo zinafaa kwa madhumuni na kuhesabu changamoto wanazokabiliana nazo siku hadi- msingi wa siku. GYA na idadi inayoongezeka ya Akademia za Vijana za Kitaifa zinawapa ECRs sauti hii, na Kikundi Kazi cha GYA kuhusu Ubora wa Kisayansi [18] inatoa maoni yake kuhusu marekebisho ya tathmini ya utafiti (tazama maandishi hapa chini).

Maoni kutoka kwa jumuiya ya watafiti wa taaluma ya awali

Watafiti wa mapema wa taaluma (ECRs) wanajali sana mazoea ya tathmini ya utafiti kwa sababu matarajio yao ya kazi na kufuata ajenda yao ya utafiti hutegemea sana jinsi wanavyotathminiwa. Hii inafahamisha mbinu za ufadhili, uajiri na upandishaji vyeo kwa njia ambazo si mara zote huchukuliwa kuwa za haki na usawa.

Ingawa ni dhahiri kwamba maamuzi ya ufadhili na rasilimali watu huathiri muundo wa nguvu kazi ya watafiti, si mara zote inatambulika kuwa, kupitia athari zake katika ufadhili, tathmini ya utafiti huunda motisha kwa taasisi na watafiti kufuata mwelekeo fulani wa utafiti, kazi. katika uwanja fulani au jiunge na baadhi ya mitandao juu ya mingine. Kwa njia hii, tathmini ya utafiti inaunda maendeleo ya sayansi yenyewe, na hii ni kweli hasa kuhusiana na athari zake zisizo na uwiano kwa matarajio na matarajio ya ECRs.

Ingawa sayansi ni biashara ya kimataifa, baadhi ya wasomi wanakabiliwa na vikwazo vya juu zaidi vya kuingia na kushirikiana na jumuiya ya watafiti kwa sababu ya mahali walipozaliwa, utambulisho wao au historia ya kijamii na kiuchumi. Hili ni suala la mpangilio wa tasnia ya sayansi na si la tathmini ya utafiti kwa kila sekunde, lakini ECRs nyingi zinahisi kuwa vigezo vya tathmini havipaswi kufumbiwa macho kwa ukweli huu wa uzoefu wa watafiti, na haipaswi kuweka vigezo sawa na sanifu kwa hali tofauti.

Utafiti uliofanywa na Kikundi Kazi cha Ubora wa Kisayansi cha GYA (ripoti ijayo) unaonyesha kuwa tathmini ya utafiti inaweza kuendeshwa zaidi na sera ya utafiti ya nchi kuliko mijadala ya kitamaduni au kisayansi. Ikizingatia vigezo vya kupandishwa vyeo hadi uprofesa kamili (au sawa) katika taaluma, ripoti inaonyesha kuwa sera na taasisi za kitaifa huwa na hati mahususi zinazoweka vigezo vyao vya tathmini ya utafiti. Badala ya kujumuisha seti kubwa na tofauti ya vigezo ambavyo vinaweza kutumika kutengeneza mtazamo wa kina wa mtafiti, hati hizi huwa zinalenga mwelekeo mmoja au kipaumbele. Kwa mfano, baadhi ya hati huzingatia tathmini ya shughuli za huduma za mtafiti (kama vile ufundishaji na ushauri) au nyingine kuhusu matokeo yaliyokusanywa ya mtafiti (kwa mfano, kulingana na idadi ya makala za jarida) - lakini mara chache sana.

Kuna athari mbili kuu za ugunduzi huu. Kwanza, tathmini hiyo ya utafiti ni ya daraja na juu-chini. Hii inaleta hatari, kadiri vipimo na mbinu za ubora mara nyingi hupuuza utofauti wa watafiti: katika usuli wao na njia zao za kazi, na - muhimu vile vile - tofauti katika mbinu na mawazo yao. Kinyume chake, ECR zinazowakilishwa katika GYA zinahisi kuwa itakuwa muhimu kutambua aina mbalimbali za shughuli ambazo ni muhimu kwa biashara ya utafiti, na kubuni mifumo ya tathmini ya utafiti ambayo inakuza utofauti na wingi badala ya kuamuru upatanifu na ulinganifu.

Pili, tofauti kati ya taaluma ni ndogo kuliko tofauti kulingana na hali ya kiuchumi ya nchi ambazo mtafiti anafanya kazi. Nchi za kipato cha chini zinaonekana kutegemea vipimo vya wingi na zawadi 'tija', wakati nchi za mapato ya juu zinazidi kuwa wazi kwa tathmini ya ubora wa athari. Ikiwa tofauti hii itakua zaidi, inaweza kuwa kikwazo zaidi kwa uhamaji wa kimataifa wa wasomi - ambayo ni muhimu sana kwa ECRs.

Kwa kumalizia, ripoti ya GYA inasisitiza kuwa hakuna risasi ya fedha: tathmini ya utafiti inapaswa kulenga malengo ya tathmini, na hatimaye malengo ya taasisi au sera ya utafiti ya nchi. Tathmini inapaswa kuruhusu utofauti wa wasifu na taaluma za watafiti, na kupitisha mwelekeo tofauti kulingana na madhumuni ya tathmini. Sayansi ikiwa ni mazungumzo ya kimataifa na ya kujikosoa, tathmini ya nje inaweza kuwa sio lazima kila wakati. Kwa hakika, matumizi na thamani halisi ya viwango vya hatari (ya watu, taasisi, maduka au hata nchi nzima) mara nyingi hujadiliwa.

Njia ambazo utafiti unaagizwa, kufadhiliwa, kufanywa na kuwasilishwa zinaendelea kwa kasi na zinahitaji uharakishaji wa mageuzi ya tathmini ya utafiti. Wao ni pamoja na yafuatayo:

(1) Mpito wa kufungua sayansi

Harakati za sayansi huria zinahitaji marekebisho ya wakati mmoja ya mifumo ya tathmini ya utafiti ili kuboresha uwazi na uwazi. Vipimo na viashirio vingi vinavyotumiwa kupima utendakazi wa utafiti vyenyewe havina wazi na vinakokotolewa mara kwa mara nyuma ya milango iliyofungwa ya kibiashara. Ukosefu huu wa uwazi unahatarisha uhuru wa jumuiya ya watafiti - unazuia chaguzi za kutathmini, kupima, kuthibitisha na kuboresha viashiria vya utafiti (Wilsdon et al., 2015 [23]). Tathmini ya uwajibikaji ya utafiti inakuwa kipengele cha msingi cha hatua za kimataifa kuelekea sayansi huria, kama inavyoshuhudiwa, kwa mfano, katika Pendekezo la Shirika la Umoja wa Mataifa la Elimu, Sayansi na Utamaduni (UNESCO) kuhusu Sayansi Huria (UNESCO, 2021 [24]) - ambayo inajumuisha uundaji wa Zana ya Sayansi Huria kwa wanachama wake ili kuwasaidia kukagua na kurekebisha tathmini zao za taaluma ya utafiti na vigezo vya tathmini [25].

(2) Maendeleo katika mapitio ya rika

Ukuaji wa uhakiki wa wazi wa rika - iwe ni kuchapisha ripoti za ukaguzi wa rika na/au utambulisho wa umma wa wakaguzi - ni maendeleo muhimu kwa tathmini ya utafiti (Barroga, 2020 [26]; Woods et al., 2022 [27]). Ukuaji wa miundombinu ya data umewawezesha wachapishaji kutengeneza Vitambulisho vya Kipengele Dijitali (DOI) kwa ripoti za ukaguzi wa programu zingine, kuunganisha ripoti za ukaguzi wa programu zingine kwenye Vitambulisho vya Mtu Huria vya Mtafiti na Mchangiaji (ORCIDs) na kuchapisha karatasi kama machapisho ya awali. Idadi ya machapisho ya awali iliongezeka sana wakati wa janga la kimataifa la COVID na kufichua changamoto zilizoletwa katika kutathmini utafiti katika hali ya majibu ya haraka. Hata hivyo, mbinu huria za kukagua marika - iwe kabla au baada ya uchapishaji - zinaweza kusaidia kutatiza udhibiti wa wachapishaji wa kibiashara juu ya michakato ya mawasiliano ya utafiti na uzalishaji wa maarifa, kupunguza uwezo wa jarida la kisayansi na metriki zinazohusiana kama vile JIF. Rekodi wazi za shughuli za ukaguzi wa rika zinaweza pia kutoa miundombinu ya kuweka kumbukumbu - na baada ya muda kutoa thamani kubwa katika - shughuli za ukaguzi wa rika, ambazo ni huduma muhimu ya kitaalamu mara nyingi kwa kiasi kikubwa isiyoonekana na isiyothaminiwa ndani ya tathmini za kitaaluma (Kaltenbrunner et al., 2022 [28]).

(3) Utumiaji wa akili bandia na ujifunzaji wa mashine

Maendeleo ya kiteknolojia katika akili bandia (AI) na ujifunzaji wa mashine yanaweza kuwa na madhara makubwa kwa tathmini ya utafiti, ikiwa ni pamoja na michakato ya ukaguzi wa rika inayoiunga mkono (km. Holm et al., 2022 [29]; Proctor et al., 2020 [30]). AI tayari inatumika kurahisisha na kuimarisha uhakiki wa rika (Hali, 2015 [31]; Asili, 2022 [32]), jaribu ubora wa mapitio ya rika (Severin na wenzake, 2022 [33]), jaribu ubora wa manukuu (Gadd, 2020 [34]), tambua wizi (Foltýnek et al., 2020 [35]), pata data ya udaktari wa watafiti (Quach, 2022 [36]) na kupata wakaguzi rika, ambao wanazidi kupungukiwa kwa sababu kazi hii haipati sifa inayostahili katika tathmini ya mtafiti. 'AI ya Maongezi', kama vile ChatGPT (Chat Generative Pre-Trained Transformer), ina uwezo wa kubuni majaribio, kuandika na kukamilisha miswada, kufanya mapitio ya rika na kuunga mkono maamuzi ya uhariri ili kukubali au kukataa miswada (Asili, 2023 [37]). Kuna uwezekano pia kwa AI kuboresha ufanisi wa uhakiki wa rika kwa kutumia algoriti ili kupunguza mzigo wa wakaguzi rika kama waamuzi wa matokeo ya utafiti (Asili, 2022 ) Matumizi ya AI tayari yanajaribiwa nchini China kutafuta waamuzi (Asili, 2019 [39]).

Maombi haya yote ya AI yanaweza kupunguza mzigo huu na kuruhusu wataalam wenye uzoefu kuzingatia uamuzi wao juu ya ubora wa utafiti na tathmini ngumu zaidi (Thelwall, 2022 [40]). Lakini pia wanahatarisha kueneza upendeleo kwa sababu ni teknolojia za ubashiri zinazoimarisha data iliyopo ambayo inaweza kuwa ya upendeleo (kwa mfano kwa jinsia, utaifa, kabila au umri): kwa kweli, matumizi ya AI yenyewe yanaweza kufaidika kutokana na uelewa wa kina wa kile kinachojumuisha 'ubora. ' utafiti (Chomsky na wenzake, 2023 [41]; ISI, 2022 [42]).

Kwa kweli, hata hivyo, aina zote za AI na kujifunza kwa mashine ziko wazi kwa matumizi mabaya (Blauth et al., 2022 [43]; Bengio, 2019 [44]). Jumuiya za wasomi na utafiti zitahitaji kujenga utayari na uthabiti kwa hili, kwa kufanya kazi na serikali, tasnia na uongozi wa asasi za kiraia zinazosimamia nafasi hii.

(4) Kuongezeka kwa mitandao ya kijamii

Hatua za kawaida za upimaji wa athari za utafiti zinashindwa kuwajibika kwa kuongezeka kwa ushiriki wa media ya kijamii na watafiti / wasomi wa mitandao ya kijamii (Jordan, 2022 [45]). Wasomi wengi hutumia majukwaa ya mitandao ya kijamii kushirikisha jamii, watunga sera na umma katika maisha yote ya mradi wao wa utafiti; kushirikiana vyema na, kupima na kufahamisha utafiti wao, na kuleta mawazo na michango mbalimbali, badala ya kuchapisha tu matokeo ya mwisho kama kiambatanisho cha hadhira ya mpokeaji. Ushirikiano huu hauchukuliwi na aina za kawaida za tathmini ya utafiti bado unaweza kusababisha ushawishi mpana na fursa za kufikia. Vipimo vya mitandao ya kijamii ('altmetrics') vinatengenezwa kama mchango kwa vipimo vinavyowajibika (Wouters et al., 2019 [4]) na kujumuisha kutajwa kwa Twitter au Facebook na idadi ya wafuasi kwenye ResearchGate, kwa mfano. Kwa upande mmoja, altmetrics hizi zinaweza kusaidia kufungua, kuunda nafasi na kupanua tathmini (Rafols na Stirling, 2021 [47]) lakini kwa upande mwingine - kama viashirio vingine - pia vinaweza kutumika bila kuwajibika na/au kuonekana kulazimisha safu nyingine ya vipimo katika mifumo ya tathmini.

Changamoto za marekebisho ya tathmini ya utafiti ni nyingi. Baadhi ya muhimu zaidi yanaonyeshwa hapa.

Marekebisho yoyote yanayojumuisha hatua za ubora zaidi lazima - wakati huo huo - yalinde ubora wa utafiti wa kimsingi na unaotumika. Kuna ushahidi wa kimaadili kwamba baadhi ya wanasayansi wanaweza kupinga mageuzi, labda hasa watafiti wa hali ya juu wa taaluma ambao wamefanikiwa katika mfumo wa sasa, kwa sababu wanahofia inaweza kuchochea utafiti wa wastani, au kwamba aina bora zaidi za tathmini zinaweza kutumika dhidi ya utafiti wa kimsingi. Marekebisho ya vigezo vya tathmini ya utafiti yanaelekea kuandaliwa katika mwelekeo wa dhamira, utafiti wenye athari kwa jamii ambao unavutia uungwaji mkono wa umma na kisiasa kwa njia ambayo utafiti wa kimsingi usioonekana au wa anga-buluu hauwezi. Baadhi wanahoji kwamba tafsiri ya kina zaidi ya 'thamani' ya utafiti inahitajika ili kuendeleza uvumbuzi, kwa kuwa siku zijazo zinahitaji uwekezaji endelevu katika utafiti wa kimsingi, unaoendeshwa na udadisi na kuthamini kwa upana zaidi jukumu muhimu linalocheza katika uwezo wa kukabiliana na changamoto za kimataifa (GYA, 2022 [48]).

Ukosefu wa uthabiti katika maana na matumizi ya istilahi za utafiti, kwa ujumla zaidi, ni kikwazo cha mabadiliko. Mfumo wa dhana wa tathmini ya utafiti haujabadilika kwa kiasi kikubwa baada ya muda, wala lugha haijauunga mkono: mfumo wa utafiti bado umekwama katika mitazamo ya zamani kama vile sayansi ya 'msingi' na 'inayotumika', na maneno kama 'athari', 'ubora' (imelinganishwa bila msaada na tija) na 'ubora' hazifafanuliwa wazi kwa njia inayoepuka upendeleo wa kijiografia, nidhamu, taaluma na upendeleo wa kijinsia. (Jong et al., 2021 [49]): hii inaweza kuwa mbaya sana katika paneli za kufanya maamuzi ambazo hazina utofauti (Hatch na Curry, 2020 ) [50].

Kama tathmini inayoendeshwa na metriki, aina zaidi za ubora wa tathmini pia si kamilifu. Kutoa hoja kwamba michakato ya ukaguzi wa rika na uamuzi wa kitaalamu ni muhimu kama vile bibliometriki si moja kwa moja. Wanaweza kuwa na upendeleo kwa sababu ya ukosefu wa uwazi na uwazi katika mchakato wa mapitio ya rika. Kamati za mapitio ya rika, kwa mfano, zimekosolewa kama njia zinazohifadhi aina imara za mamlaka na upendeleo kwa kuwezesha mitandao ya 'wavulana wakubwa' na homophily (watathmini wanaotafuta wale kama wao) kuendelea, huku pia wakiwa hatarini kwa mienendo ya kufikiri ya kikundi. Vipimo vya kiasi, hata hivyo si kamilifu, vinaonekana katika baadhi ya sehemu za dunia kama ulinzi dhidi ya upendeleo na upendeleo. Hoja zinazofanana zinaweza kutumika kwa mapitio ya rika ya karatasi za utafiti, kwa matumizi ya tathmini ya ubora zaidi uwezekano wa kufungua mlango kwa aina nyingine za tabia ya kibaguzi.

Ukosefu wa utambuzi wa kitaalamu wa, na mafunzo ya, mapitio ya rika kwa namna yoyote huzua vizuizi vya kutumika kama mkaguzi rika, na hivyo kupunguza uwezo. Zaidi ya hayo, mahitaji yanapozidi ugavi, inaweza kuunda motisha ili kupunguza makali na kupunguza ukali. Kuongeza uwazi wa ukaguzi wa rika (iwe wazi kabisa, bila jina au mseto) na mafunzo, kukuza na kuthawabisha mazoezi mazuri ya kukagua rika yote yanahitajika; kama vile utafiti zaidi juu ya mifano ya mageuzi yake kama matokeo ya utafiti yanatofautiana (IAP, 2022 [51]) na teknolojia ya AI inasonga mbele.

Mijadala juu ya mageuzi ya tathmini ya utafiti ni ngumu na sio ya pande mbili. Maelezo ya ubora na kiasi mara nyingi yameunganishwa katika miktadha ya ukaguzi wa rika: kauli kama vile Manifesto ya Leiden ya Vipimo vya Utafiti (Hicks na wenzake, 2015 [52]) wito wa 'mapitio ya rika yenye taarifa' ambapo uamuzi wa kitaalamu unaungwa mkono - lakini hauongozwi na - viashiria vya kiasi vilivyochaguliwa na kufasiriwa ipasavyo na kwa maelezo ya ubora. Mjadala juu ya tathmini ya utafiti sio chaguo la 'ubora dhidi ya kiasi' cha zana za tathmini, lakini jinsi ya kuhakikisha mchanganyiko bora wa aina nyingi za habari.

Hatimaye, mageuzi yoyote lazima pia kuwa rahisi na kutekelezeka. Mfumo wa utafiti tayari unaonyesha dalili za kuanguka chini yake, kwani idadi ya machapisho huongezeka kwa kasi na mzigo wa ukaguzi unashuka kwa njia isiyo sawa katika biashara ya utafiti (km. Publons, 2018 [53]; Kovanis et al., 2016 [54]; Asili, 2023 [55]). Vipimo vinavyotokana na majarida na faharasa ya h, pamoja na dhana za ubora wa ufahari wa mchapishaji na sifa ya taasisi, vinaweza kutoa njia za mkato zinazofaa kwa watathmini wenye shughuli nyingi na kuwasilisha vikwazo vya mabadiliko ambavyo vimekita mizizi katika tathmini ya kitaaluma (Hatch na Curry, 2020 [56]). Vipimo vya kiasi vinasifiwa katika baadhi ya nchi kuwa vinatoa njia zilizo wazi na zisizo na utata za kuteuliwa na kukuza. Katika 'Ulimwengu wa Kusini', vipengele vya wastani vya athari hutumiwa mara kwa mara kuorodhesha waombaji, na mbadala wowote lazima utekelezwe kwa usawa na uweze kutumia rasilimali za ziada zinazohitajika ili kupanua wigo wa tathmini. Urahisi wa kutumia vipimo rahisi vya upimaji katika tathmini ya utafiti huenda ukawa kikwazo kikubwa kwa mabadiliko, na kuanzishwa kwa mifumo mipya ya tathmini kunaweza kusababisha ukosefu wa usawa zaidi duniani kutokana na ukosefu wa uwezo au umahiri katika baadhi ya nchi.

Kati ya mipango ya kimataifa iliyotajwa hapo juu, San Francisco ya 2013 'Tamko la Tathmini ya Utafiti' [64] (DORA) labda ni mpango amilifu zaidi wa kimataifa. Imeorodhesha matatizo yanayosababishwa na kutumia viashirio vya majarida kutathmini utendakazi wa watafiti binafsi na kutoa mapendekezo 18 ili kuboresha tathmini hiyo. DORA inakataza kabisa matumizi ya vipimo vinavyotokana na jarida kutathmini mchango wa mtafiti au inapotafuta kuajiri, kukuza au kufadhili. Kufikia katikati ya Aprili 2023, tamko hilo limetiwa saini na watia saini 23,059 (taasisi na watu binafsi) katika nchi 160, wakijitolea kufanya mageuzi. Kwa kuzingatia kuabiri changamoto za asili na upendeleo wa asili wa tathmini ya ubora, DORA inakuza. Zana za Kuendeleza Tathmini ya Utafiti (TARA) [65] kusaidia kuweka tamko hili kwa vitendo: zana hizi ni pamoja na dashibodi ya kuorodhesha na kuainisha sera na mazoea ya ubunifu katika tathmini ya taaluma na zana ya nyenzo ili kusaidia uundaji wa kamati ya kuondoa upendeleo na kutambua aina tofauti, za ubora wa matokeo ya utafiti.

Zaidi ya hayo, DORA inafadhili miradi kumi - nchini Argentina, Australia, Brazili, Kolombia (2), India, Japan, Uholanzi, Uganda na Venezuela - ili kujaribu njia tofauti za kukuza mageuzi katika tathmini ya utafiti katika mazingira yao ya ndani, na vile vile kuandaa mifano ya utendaji mzuri: kwa mfano, kuongeza ufahamu, kuandaa sera mpya au mazoezi, mafunzo na mwongozo wa vitendo kwa waombaji kazi (Dora [66]). Mahitaji ya ruzuku ya aina hii yamekuwa ya juu - zaidi ya waombaji 55 kutoka nchi 29 - ikionyesha utambuzi unaokua wa hitaji la mageuzi.

Vyama vya usimamizi wa utafiti wa kitaalamu kama Mtandao wa Kimataifa wa Vyama vya Usimamizi wa Utafiti (INORMS) pia vimekuwa vikitengeneza rasilimali ili kuongoza mabadiliko ya shirika, ikijumuisha Kikundi cha Tathmini ya Utafiti wa Mfumo wa UPEO | INORMS - Mfumo wa UPEO WA INORMS kwa tathmini ya utafiti [67] ambayo huanza kwa kufafanua kile kinachothaminiwa, nani anatathminiwa na kwa nini (bango muhimu la maelezo. hapa [68]).

Sekta ya maendeleo ya kimataifa imetoa mitazamo mipya juu ya tathmini ya utafiti, mfano mkuu ukiwa Ubora wa Utafiti Plus | IDRC - Kituo cha Utafiti wa Maendeleo ya Kimataifa [69], ambayo hupima kile ambacho ni muhimu kwa watu mwishoni mwa utafiti. Zana ya Ubora wa Utafiti Plus (RQ+) inatambua kwamba ubora wa kisayansi ni muhimu lakini hautoshi, ikitambua jukumu muhimu la jumuiya ya watumiaji katika kubainisha kama utafiti ni muhimu na halali. Pia inatambua kuwa sasisho na ushawishi wa utafiti huanza wakati wa mchakato wa utafiti. Maombi ya utafiti mara nyingi hutathminiwa na paneli za taaluma nyingi, pia zina wataalam wa maendeleo kutoka nje ya taaluma (km idara ya serikali au shirika lisilo la kiserikali (NGO)), watendaji na wawakilishi wa ndani ya nchi: hii inasisitiza umuhimu wa jamii ya watumiaji/wataalam wasio wa masomo. wanaohitaji kuelewa utafiti na jinsi unavyoweza kutumika katika vitendo. Utafiti katika mazingira magumu, ya kipato cha chini au tete yanaweza kuambatanishwa na zana au mfumo wa maadili, ulioundwa ili kufahamisha na kuunga mkono uchaguzi wa kimaadili katika mzunguko wa maisha ya utafiti, kuanzia mwanzo hadi usambazaji na athari, kwa mfano. Reid et al., 2019 [70]. Mbinu za 'Nadharia ya Mabadiliko' hutumika sana katika utafiti wa maendeleo ya kimataifa na wafadhili, NGOs na mashirika ya kimataifa, ambapo waombaji lazima waeleze njia za athari, zikisaidiwa na ufuatiliaji, tathmini na mifumo ya kujifunza, kwa mfano. Valters, 2014 [71]. Jumuiya ya watafiti wa kitaaluma inaweza kujifunza kutoka kwa jumuiya ya maendeleo.

Kwa kutambua nafasi ya wafadhili katika kuunda mikakati ya HEIs, the Tathmini ya Kujibika ya Baraza la Utafiti la Kimataifa (GRC). Mpango wa (RRA) [72] umekuwa ukiwahimiza wafadhili wakuu wa utafiti kote ulimwenguni kufanyia kazi matarajio ya RRA katika miktadha yao ya kikanda na kitaifa na kuunda mifumo madhubuti ya tathmini ya kutathmini athari (video ya maelezo. hapa [73]). Kuagiza karatasi ya kazi juu ya RRA (Curry et al., 2020 [74]), GRC ilitoa wito kwa wanachama wake kupachika kanuni za RRA na kuchukua hatua madhubuti ili kuzitimiza, na kujifunza kutoka kwa kila mmoja wao kwa kushirikiana na kushiriki utendaji mzuri. An kikundi cha kazi cha kimataifa [75] inatoa mwongozo na usaidizi kwa wanachama wa GRC, kuwasaidia kuhama kutoka harakati hadi hatua.

Kwa sehemu kubwa kupitia juhudi za GYA, ECRs pia wanaanza kujihamasisha wenyewe kuhusu ajenda hii. Yake Kikundi Kazi cha Ubora wa Kisayansi [76] inafanya kazi ili kutambua mazingira ya utafiti yanayofaa 'kufungua udadisi na ubunifu katika sayansi na kukuza maendeleo ya uwezo wa binadamu kupitia utofauti na ujumuishaji'. Kazi yao inahitaji jumuiya ya ECR kupinga ufafanuzi wa 'ubora' unaotumiwa na mashirika yao, kushiriki katika mipango ya kurekebisha tathmini ya utafiti na kujiunga na harakati ya Young Academies. Pia inatoa wito kwa mashirika ya ufadhili na kuajiri kuhusisha ECRs katika mijadala ya tathmini ya utafiti na kutambua anuwai kubwa ya michango, na taaluma katika, utafiti.

Ingawa baadhi ya vyuo vikuu na vyuo vingine vya HEI vimetia saini DORA na/au kujiunga na vuguvugu la Uropa (ilivyoelezwa hapa chini), havionekani vikijipanga kwa pamoja kuzunguka tathmini ya utafiti kwa jinsi maeneo bunge mengine muhimu yalivyo.

The Muungano wa Umoja wa Ulaya wa Kurekebisha Tathmini ya Utafiti [80], au CoARA, iliyoidhinishwa Julai 2022, ni mpango mkubwa zaidi wa mageuzi ya tathmini ya utafiti ulimwenguni. Miaka minne ya kuunda na kuendelezwa na mashirika 350 katika nchi 40 (zaidi ya Ulaya), Jumuiya ya Chuo Kikuu cha Ulaya na Sayansi ya Ulaya (mtandao wa wafadhili wa sayansi na taaluma za bara hilo), kwa kushirikiana na Tume ya Ulaya, wameanzisha makubaliano au kuweka. kanuni (a)safari ya mageuzi'), kwa tathmini jumuishi zaidi na inayowajibika ya utafiti (CoARA, 2022 [81]). Makubaliano hayo yanazingatia viwango vitatu vya tathmini: taasisi, watafiti binafsi na utafiti wenyewe. Ingawa unatawaliwa na washirika wa Uropa, muungano huo una matarajio ya kuwa wa kimataifa na DORA na GYA tayari zimetia saini. Watia saini hujitolea kutoa nyenzo ili kuboresha tathmini ya utafiti, kuunda vigezo na zana mpya za kutathmini, na kuongeza ufahamu na kutoa mafunzo juu ya tathmini ya utafiti (km kwa wahakiki rika). Maendeleo haya yameelezwa kuwa 'ishara yenye matumaini zaidi ya mabadiliko ya kweli' (Asili, 2022 [82]).

EU pia inafadhili mipango mipya ya kusisimua iliyoundwa kusaidia mageuzi ya tathmini ya utafiti: haswa, Sayansi ya Open na Universal (OPUS [83]) - kuunda 'suti kamili' ya viashiria katika michakato na matokeo mengi ya utafiti, na hivyo kuwatia moyo watafiti wa Ulaya kufanya mazoezi ya sayansi huria - na hifadhidata ya tathmini ya sayansi wazi. GraspOS [84] - kujenga hifadhidata wazi ili kusaidia marekebisho ya sera kwa tathmini ya utafiti.

Baraza la Utafiti la Ulaya (ERC), ambalo linaunga mkono utafiti wa mipaka katika nyanja zote (pamoja na bajeti ya €16 bilioni kwa 2021-2027) limetia saini CoARA na limerekebisha fomu zake za tathmini na michakato ili kuunda maelezo zaidi ya simulizi, ikijumuisha uhasibu kwa chini. njia za kazi za kawaida na 'michango ya kipekee' kwa jumuiya ya utafiti. Mapendekezo yatahukumiwa zaidi juu ya sifa zao kuliko mafanikio ya zamani ya mwombaji na itaendelea kutathminiwa na paneli za mapitio ya rika zinazojumuisha wasomi wakuu kwa kutumia kigezo pekee cha ubora wa kisayansi (ERC, 2022 [85]).

Baadhi ya vyuo vya Ulaya pia vinahusika. Bodi ya ALLEA [86], Shirikisho la Ulaya la Akademia za Sayansi na Kibinadamu, linalowakilisha akademia tisa kati ya 50-pamoja ya kitaifa katika nchi 40 za Ulaya, limeidhinisha vuguvugu la CoARA. ALLEA imejitolea kuanzisha kikosi maalum cha kukusanya, kubadilishana na kukuza mazoezi mazuri ya kudahili Chuo kipya. Fellows na kuchangia 'mabadilishano ya maana ya kitamaduni' ya tathmini ya utafiti, kwa kuzingatia kanuni za ubora, uadilifu, utofauti na uwazi. Katika yake Taarifa ya Oktoba 2022 , ALLEA inatoa wito kwa vyuo wanachama kufanya yafuatayo:

1. Kutambua utofauti wa michango, na taaluma katika, utafiti kulingana na mahitaji na asili ya utafiti; kwa upande wa wanafunzi wa Chuo, taratibu za uteuzi zinapaswa (1) kuzingatia usawa wa kijinsia na changamoto za kipekee za watafiti wa mapema wa taaluma, (2) kusaidia anuwai ya tamaduni na taaluma, (3) kuthamini maeneo na talanta anuwai, na (4) kukuza utofauti wa nidhamu na lugha nyingi.

2. Tathmini ya msingi ya utafiti hasa juu ya tathmini ya ubora ambayo mapitio ya rika ni muhimu, yakisaidiwa na matumizi ya kuwajibika ya viashirio vya kiasi; tathmini ya ubora na athari kuhusu kazi za watahiniwa inapaswa kutegemea uhakiki wa ubora wa rika ambao unakidhi kanuni za kimsingi za ukali na uwazi na kuzingatia asili maalum ya taaluma ya kisayansi.

3. Achana na matumizi yasiyofaa ya vipimo vya majarida na uchapishaji katika tathmini ya utafiti; hasa, hii inamaanisha kuacha kutumia vipimo kama vile Journal Impact Factor (JIF), Alama ya Ushawishi wa Makala (AIS) na faharasa ya h kama proksi kuu za ubora na athari.

Taarifa ya Allea Kuhusu Kurekebisha Tathmini ya Utafiti Ndani ya Vyuo vya Uropa

Katika wao majibu ya pamoja [87] kwa Makubaliano ya EU na Muungano wa CoARA, jumuiya ya ECR katika GYA pia imekaribisha ahadi hii na kutoa njia za kutekeleza kanuni zake. Hizi ni pamoja na mazoea ambayo yanajumuisha na yanaakisi utofauti wa sifa maalum za kitaifa na taaluma, huku watafiti wa hatua zote za taaluma wakipokea mafunzo, motisha na zawadi, huku mafunzo ya lazima kuhusu sayansi huria kwa watafiti, wafanyakazi na wanakamati yakiwa muhimu.

Vyuo vikuu vinavyohitaji utafiti barani Ulaya pia vimekuwa nyuma ya mageuzi ya tathmini ya utafiti kama njia ya taaluma za utafiti wa 'multidimensional' (Overlaet, B., 2022 [88]). Wametengeneza mfumo wa pamoja wa kuhamasisha na kusaidia vyuo vikuu kutambua michango mbalimbali katika utafiti, elimu na huduma kwa jamii.

Katika ngazi ya kitaifa, nchi kadhaa sasa zinajaribu mifano tofauti ya tathmini: kwa mfano, mashirika ya kitaifa ya ufadhili katika Ubelgiji, Uholanzi, Switzerland na UK wote wanatumia 'narrative CVs'. CV za simulizi huangalia kwa ukamilifu mafanikio ya kitaaluma: mchango katika uzalishaji wa maarifa, maendeleo ya watu binafsi, jumuiya ya watafiti kwa upana na kwa jamii pana (Royal Society [89]). Ingawa kuna uungaji mkono unaoongezeka kwa aina hizi za CV, pia kuna wasiwasi kwamba wanalazimisha wasomi kuwa wazuri katika kila kitu, na kwa hivyo hatari ya kuhatarisha utaalam wa kina katika kutafuta hadhi ya pande zote (Grove, J., 2021 [90]).

Mifano minne ya mifumo ya kitaifa ya utafiti ambayo inaratibu mageuzi ya nchi nzima katika tathmini za kitaaluma zinazolenga taaluma imejumuishwa katika visanduku vifuatavyo vya maandishi.

Mfano wa kitaifa: Uingereza

Mfumo wa Tathmini ya Utafiti wa Uingereza (REF) hupima athari za utafiti kupitia vipimo viwili: 'umuhimu' (tofauti inayoonekana ambayo mradi hufanya) na 'kufikia' (kiwango kinachoweza kukadiriwa ambacho hufanya hivyo) (UKRI) Athari hapa inafafanuliwa kuwa 'athari kwa, mabadiliko au manufaa kwa uchumi, jamii, tamaduni, sera au huduma za umma, afya, mazingira au ubora wa maisha, zaidi ya taaluma' lakini zaidi ya hayo ni wazi sana, nidhamu- kutofautiana na kutatanisha, kushindwa kuwajibika ipasavyo kwa ushiriki wa umma, kwa mfano.

REF ya Uingereza inatathminiwa mnamo 2022-2023 chini ya Programu ya Tathmini ya Utafiti wa Baadaye kuchunguza mbinu mpya zinazowezekana za tathmini ya utendaji wa utafiti wa elimu ya juu nchini Uingereza, na inajumuisha kuelewa mazoezi ya kimataifa ya tathmini ya utafiti. Marudio yanayofuata ya REF itawezekana kutoa matokeo tofauti zaidi na labda hata kupunguza umuhimu unaohusishwa nayo. Muundo wa sasa unahusisha umuhimu wa 60% kwa matokeo, 25% kwa matokeo ya utafiti na 15% kwa utamaduni/mazingira ya utafiti. Ikiwa hizi zingekuwa na uzani sawa, basi REF ingeonekana tofauti sana, na umuhimu zaidi unaohusishwa na utamaduni wa utafiti, uadilifu wa utafiti na kufanya kazi kwa timu (Grove, 2020).

Mfano wa kitaifa: Finland

Mnamo 2020, Shirikisho la Vyama vya Walimu nchini Ufini liliratibu jopokazi la wafadhili wa utafiti, vyuo vikuu na vyama vya wafanyakazi vilivyochapisha taarifa hiyo. Mazoezi Bora katika Tathmini ya Utafiti. Hii inaweka mwongozo wa kufuata mchakato wa kuwajibika kwa tathmini ya wasomi binafsi, ikiwa ni pamoja na kanuni tano za jumla za tathmini: uwazi, uadilifu, usawa, uwezo na utofauti. Utendaji Bora katika Tathmini ya Utafiti unatoa wito kwa uadilifu wa utafiti, elimu na ushauri, na huduma ya kisayansi (km uhakiki wa rika) kutambuliwa vyema katika kutathmini michango ya kitaaluma ya watu binafsi. Taarifa hiyo inaona tathmini sio tu kuhusu kutoa maamuzi ya muhtasari: pia inahimiza watathmini kushiriki maoni na watu binafsi wanaotathminiwa ili kuwezesha maoni na kujifunza.

Mashirika yanayofanya utafiti na mashirika ya kufadhili utafiti yote yamejitolea kutekeleza Mazoezi Bora katika Tathmini ya Utafiti na kuzalisha tofauti zao za ndani kuhusu mwongozo, na muundo wa CV wa mtafiti wa kitaifa unatayarishwa. Mazoezi Bora katika Tathmini ya Utafiti hujitolea kufanya hakiki za mara kwa mara na uboreshaji.

Mfano wa kitaifa: Uholanzi

Huko Uholanzi, mpango wa kitaifa wa Utambuzi na Zawadi ulianza mnamo 2019, na kuchapishwa kwa taarifa ya msimamo. Chumba kwa Vipaji vya Kila Mtu. Ushirikiano huu wa kitaifa kati ya Chuo cha Sanaa na Sayansi cha Royal Netherlands (KNAW - mwanachama wa IAP na ISC), wafadhili wa utafiti, vyuo vikuu na vituo vya matibabu vinasema kwamba uboreshaji wa mifumo mzima wa tamaduni za tathmini ya utafiti unahitaji kutokea. Kwa kufanya hivyo, inaweka matarajio matano ya mabadiliko katika taratibu za tathmini: tofauti kubwa zaidi ya njia ya kazi, kutambua utendaji wa mtu binafsi na wa timu, kutanguliza ubora wa kazi kuliko viashiria vya kiasi, sayansi wazi na uongozi wa kitaaluma.

Tangu 2019, vyuo vikuu vya Uholanzi vimehamia kutunga tafsiri zao za ndani za taarifa ya maono ya kitaifa. Wakati huo huo, mashirika ya ufadhili yameanzisha miundo zaidi ya 'simulizi CV' na kuacha kuomba maelezo ya bibliometriki, ikitaja San Francisco DORA kama msukumo. Baraza la Utafiti la Uholanzi hivi karibuni limehamia kwenye CV inayotokana na ushahidi ambayo baadhi ya taarifa za kiasi zinaweza kutumika. KNAW pia ilitengeneza yake mpango wa miaka mitatu kutekeleza ajenda ya Utambuzi na Zawadi ndani. Msimamizi wa programu wa wakati wote na timu wameteuliwa ili kuwezesha mpango wa marekebisho ya Utambuzi na Zawadi, na 'Tamasha la Utambuzi na Zawadi' hufanyika kila mwaka miongoni mwa wadau wakuu wa mageuzi ili kusaidia kujifunza kwa jamii nzima.

Hatimaye, ilifadhiliwa na ruzuku ya Ushirikiano wa Jamii ya DORA, the Mwanasayansi mchanga katika mpango wa Mpito kwa wanafunzi wa PhD, iliyoko Utrecht, imetengeneza mwongozo mpya wa tathmini kwa PhDs, katika jitihada za kubadilisha utamaduni wa utafiti.

Mfano wa kitaifa: Norway

Mnamo 2021, Norway, Vyuo Vikuu vya Norway na Baraza la Utafiti la Norway vilichapishwa NOR-CAM - Sanduku la zana la utambuzi na zawadi katika tathmini za kitaaluma. NOR-CAM hutoa mfumo wa matrix kwa ajili ya kuboresha uwazi na kupanua tathmini ya utafiti na watafiti mbali na viashiria finyu vya bibliometriki. NOR-CAM inawakilisha Norway Career Assessment Matrix, na ilichukuliwa kutoka 2017. kuripoti na Tume ya Ulaya ambayo iliwasilisha Matrix ya Tathmini ya Kazi ya Sayansi ya Wazi. Kama mtangulizi wake wa Uropa, NOR-CAM pia huweka njia za kuunganisha vyema mbinu za sayansi huria katika tathmini. Matrix inalenga kuwaongoza watathmini na watahiniwa wa nafasi za kitaaluma, maombi ya ufadhili wa utafiti na watathmini wa kitaifa wanaotathmini utafiti na elimu ya Norway. Inakusudiwa pia kufanya kama mwongozo wa jumla kwa maendeleo ya kazi ya mtu binafsi.

Matrix inajumuisha maeneo sita kuu ya umahiri: matokeo ya utafiti, mchakato wa utafiti, uwezo wa ufundishaji, athari na uvumbuzi, uongozi na uwezo mwingine. Matrix kisha hutoa mapendekezo ya kuwezesha upangaji wa kazi na utambuzi wa tathmini karibu na kila moja ya vigezo - mifano ya matokeo na ujuzi, njia za uhifadhi na vidokezo vya kutafakari kuhusu kila kigezo. Wagombea hawatarajiwi kufanya sawa kwa vigezo vyote.

NOR-CAM iliundwa na kikundi kazi cha washikadau wa shirika linalofanya utafiti na kufadhili, kinachoratibiwa na Vyuo Vikuu vya Norwe, kumaanisha kwamba kimsingi kimenunuliwa kutoka kwa wanachama wa vyuo vikuu vyote vya Norway. Warsha zinazohusisha vyuo vikuu vya Norway zimefanyika baadaye ili kuandaa njia za kuunganisha NOR-CAM katika taratibu za tathmini ya uteuzi na upandishaji vyeo, na mfumo wa 'otomatiki' wa CV unatengenezwa ili kurejesha data kutoka kwa vyanzo vingi vya kitaifa na kimataifa uko katika maendeleo ili kupunguza utawala. mzigo. Waratibu kutoka kwa miradi mitatu iliyotajwa hapo juu ya mageuzi ya ngazi ya kitaifa wamekutana mara kwa mara ili kubadilishana uzoefu wao na kujifunza pamoja.

Amerika ya Kusini na Karibiani (LAC) hutofautiana kwa njia nyingi na sehemu zingine za ulimwengu. Hapa, sayansi inachukuliwa kuwa ya manufaa ya umma duniani kote na mifumo na miundombinu yake ya utafiti na uchapishaji wa kitaaluma inamilikiwa na umma (inafadhiliwa) na isiyo ya kibiashara: lakini nguvu na desturi hizi za kikanda bado hazijaonyeshwa katika mifumo ya tathmini. Wadau wakuu ambao wanaweza kuleta mabadiliko ni mabaraza ya kitaifa ya utafiti, wizara za sayansi na vyuo vikuu vikuu vya utafiti - jukumu la HEI ni muhimu, ikizingatiwa kuwa zaidi ya 60% ya watafiti wanapatikana katika vyuo vikuu.RiCyT, 2020 [91]). Kuna uwezekano wa kuoanisha mifumo ya tathmini kwa karibu zaidi na SDGs na kwa sayansi wazi na harakati za sayansi za raia, ambazo zina utamaduni unaostawi katika kanda.

Hivi sasa, kuna mgawanyiko mkubwa wa mifumo ya tathmini ya utafiti kitaifa, ndani na kitaasisi, na kuweka utafiti katika ushindani na majukumu mengine, kama vile ufundishaji, ugani na uzalishaji. Tathmini ya utafiti na mifumo ya tuzo za watafiti katika LAC kwa ujumla inapendelea wazo la ubora lililowekwa katika mbinu za 'Global North', kwa kuzingatia tu athari ya majarida na viwango vya vyuo vikuu (CLACSO, 2020 [92]). Utambuzi wa aina mbalimbali za uzalishaji na mawasiliano ya maarifa, na wingi wa taaluma za kitaaluma (km kufundisha, mafunzo na ushauri, sayansi ya raia na mawasiliano ya umma ya sayansi) hazipo katika mazoea ya tathmini ya utafiti. Hili ni tatizo hasa kwa watafiti katika sayansi ya jamii na ubinadamu, ambapo monographs na lugha za kienyeji hutumiwa sana (CLACSO, 2021 [93]). Majarida ya kikanda na viashirio vinashushwa thamani au havitambuliwi katika michakato hiyo ya tathmini. Haya yote yanachochewa na mifumo dhaifu ya taarifa na ushirikiano hafifu wa miundombinu (hasa inayomilikiwa na jamii), inayofadhiliwa kidogo kwa sababu fedha chache huelekezwa kwa malipo ya APC kwa majarida ya ufikiaji huria.

Hata hivyo, baadhi ya vyuo vikuu katika eneo hilo vinaanza kutekeleza mazoea ya tathmini ambayo yanatumia mchanganyiko wa mbinu za ubora na kiasi, hasa katika tathmini ya watafiti na utafiti unaozingatia misheni (Gras, 2022 [94]). Mpito wa mifumo ya tathmini ya kina zaidi ya utafiti utahitaji muundo mwenza wa vigezo vya ubora zaidi; matumizi ya kuwajibika ya data ya kiasi na kuimarisha michakato ya mapitio ya rika; mabadiliko ya nyongeza ambayo yanapatanisha na kuratibu sera na mbinu kuelekea kanuni za pamoja za tathmini ya utafiti inayowajibika na sayansi huria; mbinu mpya na data kwa ajili ya kutathmini bora kati/ sayansi transdisciplinary, mazingira na masuala ya ndani; miundomsingi inayoshirikiwa, inayoingiliana, endelevu, iliyoshirikishwa ambayo inasaidia uanuwai wa biblia na lugha nyingi; na miundo shirikishi, ya chini-juu inayopanua ushiriki wa wananchi na mienendo ya kijamii na ushirikishwaji wa makundi ya utafiti ambayo hayawakilishwi sana.

Ili kukabiliana na changamoto hizi, kanda imepitisha kanuni na miongozo ya tathmini ya utafiti. The Tamko la CLACSO-FOLEC la Kanuni za Tathmini ya Utafiti [95], iliyoidhinishwa Juni 2022, inakusudia kuhakikisha na kulinda ubora na sayansi inayofaa kijamii, na kukumbatia kanuni za DORA na sayansi huria, utofauti wa matokeo ya utafiti na taaluma za utafiti, thamani ya majarida ya kikanda na huduma za kuorodhesha, na wa taaluma mbalimbali, lugha ya wenyeji na maarifa asilia. Hadi sasa, ina wafuasi zaidi ya 220 na tayari kuna mwelekeo chanya katika tathmini ya utafiti inayowajibika na mifano ya mageuzi. Baadhi ya mifano ya kitaifa imetolewa katika visanduku vya maandishi vifuatavyo.

Mfano wa kitaifa: Colombia

Imefadhiliwa na Tuzo ya Ushirikiano wa Jamii ya DORA, Vyama vya Vyuo Vikuu vya Kolombia, Wachapishaji wa Vyuo Vikuu, Wasimamizi wa Utafiti na mtandao wa usimamizi wa sayansi na teknolojia, miongoni mwa mengine, wamekuwa wakifanya kazi pamoja kuhusu fursa na changamoto za vipimo vinavyowajibika nchini Kolombia. Kupitia mfululizo wa warsha na mashauriano, ikiwa ni pamoja na mashirika ya kimataifa kama vigezo, wameunda rubriki kusaidia taasisi za Colombia kubuni REF zao wenyewe. Rubriki hii inajaribu kujibu changamoto zilizoainishwa katika ngazi ya mtaa, ambazo - kwa HEIs - ni pamoja na ukosefu wa maarifa juu ya njia mbadala za tathmini ya utafiti, asili ya mfumo wa kitaifa wa tathmini ya utafiti na upinzani dhidi ya mabadiliko. A Tovuti yenye kujitolea imetengenezwa, pamoja na infographics kusaidia watafiti, na usambazaji na kujifunza kunaendelea kushirikiwa kote nchini.

Taarifa zaidi: Mradi wa vipimo unaowajibika wa Kolombia: kuelekea chombo cha kitaasisi cha Kolombia, mbinu ya tathmini ya utafiti | DORA (sfdora.org)

Mfano wa kitaifa: Argentina

Jaribio la kuvutia la mageuzi katika Baraza la Kitaifa la Utafiti wa Sayansi na Ufundi (Consejo Nacional de Investigaciones Científicas y Técnicas - CONICET) imekuwa uundaji wa azimio maalum la sayansi ya kijamii na kibinadamu ambalo linaweka majarida yaliyoorodheshwa katika mzunguko wa kawaida katika kiwango sawa na majarida yaliyowekwa katika misingi ya kikanda kama vile SciELO, redalyc or Latindex-Catálogo. Kwa sasa kanuni hiyo inakaguliwa, ili kufafanua baadhi ya utata katika utekelezaji wake na kupanua vigezo vyake. Kwa upande wake, mnamo 2022, Bodi ya Wakurugenzi ya CONICET ilizingatia DORA ya San Francisco, ikikiri hadharani kujitolea kwake kuboresha utafiti kwa kuimarisha tathmini na uboreshaji unaoendelea wa michakato yake.

The Wakala wa Kitaifa wa Ukuzaji wa Utafiti, Maendeleo ya Teknolojia na Ubunifu (Agencia Nacional de Promoción de la Investigación, el Desarrollo Tecnológico y la Innovavión – AGENCIA I+D+i), chini ya Wizara ya Sayansi, Teknolojia na uvumbuzi, ndiye mfadhili mkuu wa utafiti nchini kutokana na utofauti na upeo wa simu zake zenye ushindani mkubwa. Kwa sasa, AGENCA inatekeleza a mpango kuimarisha michakato ya tathmini ya utafiti katika mifuko yao kuu ya kifedha. Maboresho ya sasa ni pamoja na malipo ya wakaguzi rika ili kuchochea kujitolea kwao na michakato hii, motisha ya kufungua ufikiaji kwani matokeo ya mradi yanapaswa kuelekezwa kwa umma kupitia machapisho au hati za mzunguko wa wazi (kulingana na majukumu ya 'Fungua Hifadhi za Kitaasisi za Fikia Dijitali' Sheria ya Kitaifa 26.899) na ujumuishaji wa vipimo vya usawa na ujumuishi kupitia jinsia, vikundi vya vizazi visivyo na uwakilishi mdogo na/au mifumo ya kusawazisha ya kitaasisi katika michakato ya tathmini ya utafiti. Hata hivyo, katika kamati mbalimbali za nidhamu, usuli wa mtaala wa watafiti wakuu wanaohusika na mapendekezo bado unatathminiwa na wenzao kwa kutumia viashirio vya athari za manukuu.

Hatimaye, iliyofadhiliwa na Ruzuku ya Ushirikiano wa Jamii ya DORA, Kitivo cha Saikolojia katika Universidad Nacional de la Plata ilishiriki tukio la kawaida mnamo Septemba 2022 juu ya tathmini ya saikolojia na sayansi ya kijamii ambayo ilivutia zaidi ya 640 (kwa kiasi kikubwa wanafunzi wa shahada ya kwanza) kutoka nchi 12, kuonyesha maslahi ya vijana katika bara. Tukio hili limesaidia kuunda mpango wa usimamizi wa miaka minne wa kitivo na kitaarifu kitabu kuhusu marekebisho ya tathmini ya kitaaluma katika muktadha wa watu wanaozungumza Kihispania.

Mfano wa kitaifa: Brazil

Tathmini ya utafiti inajadiliwa vikali nchini Brazili miongoni mwa taasisi za utafiti na watafiti, ikiwa si serikali za majimbo na shirikisho. Hata hivyo, licha ya idadi kubwa zaidi ya watia saini wa kitaasisi kwa DORA duniani, mifano ya mageuzi ya tathmini ya utafiti ni michache ya kushangaza. Kufuatia uchunguzi wa watia saini wa DORA ndani ya nchi, mashauriano ya kitaasisi na hafla ya umma, iliyofadhiliwa na Ruzuku ya Ushirikiano wa Jamii ya DORA, a kuongoza imetayarishwa kwa viongozi wa vyuo vikuu kuchunguza mazoea ya tathmini yenye uwajibikaji.

Mwongozo unazingatia hatua kuu tatu: (1) kuongeza ufahamu wa tathmini inayowajibika katika aina zake zote; (2) mafunzo na kujenga uwezo wa watathmini na wale wanaofanyiwa tathmini; na (3) utekelezaji na tathmini. Hatua zinazofuata ni kujenga mtandao wa watendaji - au ofisi kumi za kijasusi za vyuo vikuu - ili kuleta mabadiliko katika mazoea ya tathmini na mifano ya majaribio inayozingatia muktadha, na hatimaye kuunda ramani ya njia kwa taasisi za Brazili zinazotaka kuleta mabadiliko.

Projeto Métricas (2022). Changamoto za kitaasisi na mitazamo ya tathmini inayowajibika katika Elimu ya Juu ya Brazili: Muhtasari wa matokeo ya ushirikiano wa Projeto Métricas DORA. Chuo Kikuu cha São Paulo, Brazil.

Kuna mabadiliko yanayoendelea kutoka kwa viashirio vya kiasi katika Amerika Kaskazini, yakiharakishwa na ajenda ya sayansi huria. Sayansi ya wazi na uhakiki wa wazi husaidia kufanya mazoea ya tathmini kuwa wazi zaidi, kutoa fursa ya kujitafakari na kuibua matatizo, kwa mfano kujinukuu na kuwa na uhusiano wa karibu katika kuajiri, kupandisha vyeo na paneli za mapitio ya rika, pamoja na jinsia ya asili na upendeleo mwingine. Mijadala inaendelea kuhusu hitaji la kuunda viashirio nadhifu, vya akili na mbinu mchanganyiko za tathmini, zenye uwezekano wa kuwa na muundo mseto, unaounganika wa tathmini unaotoa huduma za sayansi ya msingi (maarifa ya maendeleo) na sayansi inayotumika (athari za jamii).

Pia kuna utambuzi kwamba vyuo vikuu vinahitaji nafasi ya kitaaluma na uhuru ili kujiondoa kwenye zana wanazotumia kwa sasa kutathminiwa, bila 'hasara ya kwanza ya uanzishaji', na kwamba jumuiya ya watumiaji inapaswa kuwa sehemu ya mchakato wa tathmini ili kusaidia kupima utumiaji wa maarifa, matumizi yake na athari. Lakini pia kuna ukinzani wa kubadilika ('upofu wa kukusudia') kutoka juu na chini ya mfumo ikolojia wa utafiti - kutoka kwa wale wanaonufaika na hali ilivyo sasa na wale ambao wameingia hivi majuzi. Vyuo vikuu vichache sana vya Marekani vimetia saini DORA na mradi mpya wa DORA unajaribu kuelewa ni kwa nini hali iko hivi (UTUNZAJI) Hata hivyo, katika Kanada na Marekani kuna mifano ya kuvutia ya mipango ya kitaifa na kitaasisi iliyobuniwa kuleta mabadiliko ya kimfumo (tazama visanduku vifuatavyo vya maandishi).

Mfano wa kitaifa: USA

Nchini Marekani, Wakfu wa Kitaifa wa Sayansi ni sauti inayoongoza kwa mabadiliko kupitia wake Kuendeleza Athari za Utafiti katika Jamii programu na kuandamana zana pana za zana kwa watafiti na watathmini. Usawa, utofauti na ujumuishi, ikijumuisha kushirikisha jamii za kiasili na zilizotengwa kimila, ni vichocheo muhimu. Mwanachama wa IAP na ISC, Chuo cha Kitaifa cha Sayansi cha Merika pia kinatazamia kuchochea mageuzi mapana, kutoa jukwaa la kubadilishana habari na kujifunza juu ya kurekebisha CV ya mtafiti wa jadi (Baraza la Mikakati la NAS, 2022) Kutokana na kazi ya akademia za Marekani, the Mpango wa Uongozi wa Elimu ya Juu kwa Masomo Huria ni kundi la zaidi ya vyuo na vyuo vikuu 60 waliojitolea kuchukua hatua za pamoja ili kuendeleza ufadhili wa masomo, ikiwa ni pamoja na kufikiria upya tathmini ya utafiti ili kutuza uwazi na uwazi.

Taasisi ya Kitaifa ya Afya, kwa mfano, ilibuni mpya mchoro wa kibayolojia (SciENcv) kwa wafanyikazi katika maombi ya ruzuku ili kupunguza upendeleo wa kimfumo na mzigo wa kuripoti, na wakati huo huo kuwa na athari zaidi.

Mfano wa kitaifa: Kanada

Nchini Kanada, kuna mazungumzo mengi kuhusu mageuzi ya tathmini ya utafiti, inayoendeshwa na DORA; mabaraza yote matatu ya utafiti ya shirikisho yametia saini. Baraza la Sayansi Asilia na Uhandisi lina vigezo vilivyoainishwa upya vya ubora wa utafiti, kutumia bibliometriki, manukuu na faharasa ya h, kulingana na kanuni za DORA: vipimo vya ubora sasa vinajumuisha data bora ya utafiti na usimamizi wa ufikiaji wa data, usawa, uanuwai na ujumuishaji, na majukumu ya mafunzo. Mabaraza mengine mawili ya utafiti huenda yakafuata mfano huo.

Watafiti wa Kanada huwa wanazingatia 'uhamasishaji wa ujuzi', jitihada za makusudi za kuendeleza athari za kijamii za utafiti, kupitia uzalishaji wa ushirikiano na jumuiya za watumiaji (ISI, 2022). Athari ya Utafiti Kanada ni mtandao wa zaidi ya vyuo vikuu 20 ambao unalenga kujenga uwezo wa kitaasisi kupitia ujuzi wa kusoma na kuandika, au uwezo wa 'kutambua malengo na viashiria vya athari vinavyofaa, kutathmini kwa kina na kuboresha njia za athari, na kutafakari ujuzi unaohitajika ili kurekebisha mbinu katika miktadha mbalimbali' ili kuongeza athari za utafiti kwa manufaa ya umma.

Inafaa kukumbuka kuwa vyuo vikuu vichache sana vya Canada vimetia saini DORA. Kichochezi kikuu cha mabadiliko yoyote huenda ni kukumbatia usomi wa kiasili: hili limekuwa ni sharti la kimaadili nchini Kanada.

Mifumo ya motisha ya utafiti na zawadi barani Afrika ina mwelekeo wa kuakisi 'kimataifa', kimsingi Magharibi, kanuni na mikataba. Taasisi za Kiafrika hujitahidi kufuata haya wakati wa kuendeleza mtazamo wao wa 'ubora' na 'ubora' katika utafiti lakini si mara zote zinafaa kwa maarifa na mahitaji ya wenyeji. Utafiti 'ubora', 'ubora' na 'athari' hazijafafanuliwa vyema katika bara, na watafiti wengine hawajazoea utamaduni wa 'athari za utafiti'.

Mifumo ya tathmini barani Afrika huwa haitoi hesabu ya utafiti kwa manufaa ya jamii, mafundisho, kujenga uwezo, usimamizi wa utafiti na usimamizi. Miundo ya uchapishaji haizingatii muktadha, huku APC zikiunda vizuizi kwa matokeo ya utafiti wa Kiafrika. Marekebisho ya mifumo ya tathmini ya utafiti yanaweza kusaidia kusahihisha ulinganifu katika mchango ambao utafiti wa Kiafrika unaweza kutoa kwa changamoto za jamii, na pia kuboresha ufikiaji wa rasilimali ili kusaidia jumuiya ya watafiti ya Kiafrika kufanya hili. Kuondoa vizuizi kwa ushirikiano wa sekta mtambuka na wa kinidhamu ni muhimu ili kuwezesha maoni na mifumo mbalimbali ya maarifa kustawi na kusaidia kutafsiri kile kinachojumuisha ubora wa utafiti kwa Afrika. Taratibu zinazounganisha mitazamo ya ndani, ya kiasili na 'ya kawaida' ya ulimwengu kuhusu tathmini ya ubora na ubora wa utafiti zinahitaji kuzingatiwa katika mageuzi yoyote.

Ushirikiano thabiti unajengwa karibu na RRA katika bara. Inafadhiliwa na muungano wa kimataifa wa mashirika ya maendeleo, the Mpango wa Mabaraza ya Utoaji wa Sayansi (SGCI) [96], kwa kushirikisha nchi 17 za Kiafrika, ilifanya utafiti juu ya ubora wa utafiti katika Afrika, kuangalia mashirika ya ufadhili wa sayansi na tathmini ya watafiti kutoka kwa mtazamo wa Kimataifa wa Kusini (Tijssen na Kraemer-Mbula, 2017 [97], [98]). Ilichunguza suala la ubora wa utafiti katika Afrika Kusini mwa Jangwa la Sahara na hitaji la mbinu ambayo inapanua dhana ya ubora zaidi ya machapisho (Tijssen na Kraemer-Mbula, 2018 [99]); kutoa hati ya miongozo, ambayo inasasishwa hivi sasa, juu ya mazoea mazuri katika kutekeleza mashindano ya utafiti (SGCI [100]). Katika Kongamano la Sayansi Ulimwenguni mnamo 2022, chini ya ufadhili wa SGCI na GRC, Afrika Kusini. Kituo cha Kitaifa cha Utafiti (NRF) na Idara ya Sayansi na Ubunifu ilikusanya washirika wa kimataifa na wa ndani ili kujadili dhima ya mashirika ya ufadhili katika kuendeleza RRA, na kubadilishana uzoefu, kuendeleza utendaji mzuri na kutathmini maendeleo katika kujenga uwezo na ushirikiano (NRF, 2022 [101]).

The Mtandao wa Ushahidi wa Kiafrika [102], mtandao wa Kiafrika, wa kisekta mtambuka wa zaidi ya watendaji 3,000 umefanya kazi fulani katika tathmini ya utafiti usio na nidhamu (Mtandao wa Ushahidi wa Kiafrika [103]) lakini kiwango ambacho hii imepachikwa katika mifumo ya tathmini ya kitaifa na kikanda bado haijawa wazi. The Mtandao wa Utafiti na Athari wa Afrika [103] imekuwa ikifanya kazi kwenye kadi ya alama inayojumuisha mkusanyo wa viashirio vya kutathmini ubora wa tathmini ya sayansi, teknolojia na uvumbuzi (STI) barani Afrika, ambayo inatarajia kukuza na kuwa zana ya kufanya maamuzi kwenye wavuti ili kuongoza maamuzi ya uwekezaji wa STI. .

Katika ngazi ya kitaifa, mabadiliko ya ongezeko yameanza - baadhi ya mifano imetolewa katika masanduku ya maandishi yafuatayo. Nchi nyingine ambazo mashirika ya ufadhili wa utafiti yanaongoza ni pamoja na Tanzania (COSTECH), Msumbiji (FNI) na Burkina Faso (FONRID). Mpango wa RRA wa GRC unaonekana kuwa jukwaa muhimu la mabadiliko katika bara, kama inavyojifunza kutoka kwa sekta ya maendeleo ya kimataifa, hasa, IDRC. Mfumo wa Tathmini wa Ubora wa Utafiti (RQ+). [104], kwa tofauti kwamba tayari imetumika, kuchunguzwa na kuboreshwa. Msingi wa Afrika Chuo cha Kimataifa cha Tathmini [105] pia inaweza kutoa fursa ya kuvutia.

Mfano wa kitaifa: Côte d'Ivoire

Katikati ya Côte d'Ivoire's Programu ya Appui Stratégique à la Recherche Scientifique (PASRES) (Mpango wa Mkakati wa Usaidizi wa Utafiti wa Kisayansi) ni imani kwamba ubora katika utafiti lazima upite idadi ya machapisho ya utafiti na ujumuishe mwelekeo wa 'utumiaji wa utafiti'. Kulingana na muktadha wa kitaifa, mchakato wa tathmini ya utafiti unategemea vigezo vinavyohusiana na umuhimu wa kisayansi na kijamii, ushirikishwaji wa washirika, mafunzo ya wanafunzi, uhamasishaji wa maarifa na uwezekano. Paneli za tathmini zinahusisha wataalam wa kisayansi (kutathmini ubora wa utafiti uliofanywa), sekta ya kibinafsi (kutathmini uboreshaji wa kiuchumi) na taasisi zingine (kupima uwezo wa kitamaduni na kijamii wa utafiti).

PASRES imeanzisha majarida mawili ya ndani (moja ya sayansi ya jamii na isimu na lingine la mazingira na bioanuwai) na inakidhi gharama nzima ya uchapishaji katika haya. Hatimaye, PASRES inafadhili shughuli za kujenga uwezo na makongamano ya mada ili kuwawezesha watafiti kuwasilisha utafiti wao kwa sekta binafsi na kwa mashirika ya kiraia.

Maelezo zaidi: Ouattara, A. na Sangaré, Y. 2020. Kusaidia utafiti nchini Côte d'Ivoire: michakato ya kuchagua na kutathmini miradi. E. Kraemer-Mbula, R. Tijssen, ML Wallace, R. McLean (Wahariri), African Minds, uk. 138–146

PASRES | Programu ya d'Appui Stratégique Recherche Scientifique (csrs.ch)

Mfano wa kitaifa: Afrika Kusini

Tathmini ya utafiti nchini Afrika Kusini (SA) inalenga zaidi bibliometriki. Tangu 1986, wakati Idara ya Elimu ya Juu (DHET) ilipoanzisha sera ya kulipa ruzuku kwa vyuo vikuu kwa ajili ya machapisho ya utafiti yaliyochapishwa katika majarida ya faharasa zilizoidhinishwa, matokeo ya uchapishaji wa utafiti wa chuo kikuu yalikua sanjari na thamani ya Randi iliyotolewa kwa kila chapisho. Katika jitihada za kupata ufadhili wa utafiti na kuendeleza taaluma zao, watafiti wa SA walichapisha makala nyingi haraka iwezekanavyo, na kusababisha matokeo potovu na yasiyotarajiwa.

Chuo cha Sayansi cha Afrika Kusini (ASSAf) kiliagiza ripoti kuhusu uchapishaji wa kitaalamu nchini (2005–2014) na kupata dalili za mazoea ya uhariri yenye kutiliwa shaka na uchapishaji hatari (ASSAf, 2019). Kwa kutumia mfumo mbovu wa uainishaji, makadirio ya 3.4% ya jumla ya makala katika kipindi cha miaka kumi iliyopita yalihukumiwa kuwa ya unyanyasaji, huku takwimu zikipanda kwa kasi zaidi kutoka 2011. Majarida yaliyohukumiwa kuwa ya unyanyasaji yalijumuishwa kwenye DHET 'inayokubalika kwa ufadhili' orodha na wasomi katika vyuo vikuu vyote vya SA walipatikana kuhusika (Mouton na Valentine, 2017).

Ripoti ya ASSAf ilitoa mapendekezo katika ngazi za kimfumo, kitaasisi na kibinafsi na hatua za kukabiliana na DHET, NRF na baadhi ya vyuo vikuu zinaonekana kudhibiti vitendo vya unyanyasaji nchini SA huku matukio ya uchapishaji wa kihuni na wanataaluma wa SA (katika majarida yaliyoidhinishwa na DHET) yakishika kasi mwaka wa 2014– 2015 na baadaye kupungua. Pia kulikuwa na wasiwasi miongoni mwa watafiti kwamba sera za DHET nchini SA zilikatisha tamaa ushirikiano na kushindwa kutambua mchango wa watu binafsi ndani ya timu kubwa za utafiti, na kuhitaji marekebisho ya tathmini ya utendaji/mifumo ya tathmini ya utafiti. Matumizi ya mfumo wa kitengo cha uchapishaji sasa yanatambuliwa kama wakala duni wa kutathmini ubora na tija ya utafiti na kwa uteuzi na ukuzaji wa wasomi.

Taarifa zaidi:

Chuo cha Sayansi cha Afrika Kusini (ASSAf). 2019. Miaka kumi na miwili: Ripoti ya Pili ya ASSAf kuhusu Uchapishaji wa Utafiti ndani na kutoka Afrika Kusini. Pretoria, ASSAf.

Mouton, J. na Valentine, A. 2017. Ukubwa wa makala zilizoandikwa Afrika Kusini katika majarida ya unyama. Jarida la Sayansi la Afrika Kusini, Vol. 113, No. 7/8, ukurasa wa 1–9.

Mouton, J. na wenzake. 2019. Ubora wa Machapisho ya Utafiti ya Afrika Kusini. Stellenbosch.

2019_assaf_research_collaborative_report.pdf

Mfano wa kitaifa: Nigeria

Vyuo vikuu nchini Nigeria hutathmini watafiti katika maeneo makuu matatu: ufundishaji, tija ya utafiti na huduma za jamii. Kati ya hizi, tija ya utafiti ina uzito zaidi, na msisitizo katika makala za utafiti zilizopitiwa na marika zilizochapishwa na kuzingatia idadi na majukumu ya waandishi (uandishi wa kwanza na/au uandishi unaolingana) katika machapisho haya. Katika jitihada za kuwa na ushindani zaidi duniani, vyuo vikuu vingi vinapeana umuhimu zaidi kwa majarida yaliyoorodheshwa na International Scientific Indexing au SCOPUS, ili kutilia mkazo zaidi ubora na ushirikiano wa kimataifa; na kutumia asilimia ya makala katika majarida haya kama vigezo vya kukuza.

Matokeo ya kusikitisha ya hili ni kwamba watafiti wengi, hasa wale wa ubinadamu, wanakosa ufadhili wa kutosha na/au uwezo wa kuchapisha katika majarida haya. Badala yake, wao huchapisha mapitio zaidi badala ya makala za utafiti, au wanahisi kulazimishwa kujumuisha wafanyakazi wenzao wenye ushawishi, wakuu kama waandishi wenza, kwa mujibu wa mchango wao wa kifedha badala ya kiakili. Wizi huongezeka, kama vile uchapishaji wa unyanyasaji. Hata hivyo, kiwango cha jumla cha kimataifa cha vyuo vikuu vya Nigeria kimeongezeka, na hivyo kuridhisha serikali na mashirika ya ufadhili, na kuonekana kama mafanikio. Nigeria haiko peke yake katika suala hili.

Chuo cha Sayansi cha Naijeria kimeanzisha upya jarida lake lililopitiwa na rika kama jarida kuu ambalo wasomi wanaweza kuchapisha (kwa sasa bila malipo) na kukadiriwa kwa kiwango cha juu na taasisi zao.

Mifumo ya tathmini yenye ushindani wa hali ya juu, inayoendeshwa na vipimo inatawala eneo hili, huku nchi zinazozungumza Kiingereza kwa kawaida zikiunda mifumo ya tathmini na nchi nyingine zinazofuata mkondo huo. Nchini Australia, kwa mfano, kuna mfumo shindani wa ufadhili kulingana na bibliometriki na viwango vya vyuo vikuu: 'hata SDGs zinageuzwa kuwa viashirio vya utendakazi'. Changamoto kama hizo zipo nchini Malaysia na Thailand, na nchi nyingine za ASEAN huenda zikafuata. Isipokuwa muhimu ni Uchina ambapo serikali ina jukumu kubwa katika kuunda mabadiliko makubwa ya kimfumo na ambayo yanaweza kuwa na athari kubwa ulimwenguni (tazama kisanduku cha maandishi).

La kutia moyo, kuna uelewa na wasiwasi unaoongezeka miongoni mwa jumuiya ya watafiti katika eneo kuhusu mipaka ya mifumo ya sasa ya tathmini ya utafiti na tishio lao kwa uadilifu wa utafiti. Ingawa ECRs, ikiwa ni pamoja na National Young Academy na mtandao wa ASEAN wa Vijana Wanasayansi, pamoja na vuguvugu la chinichini, wanazidi kujihusisha na suala hili, wanajitahidi kusikilizwa. Serikali na jumuiya zinazofadhili, ikiwa ni pamoja na uongozi wa chuo kikuu, kwa kiasi kikubwa hawapo kwenye mjadala: wanatilia maanani vipimo vya upimaji lakini hawathamini athari za utafiti. Kwa hakika, walioshauriwa wanaripoti kuwa vigezo zaidi vya kiasi vinaongezwa, kiasi kwamba taasisi na watafiti wanaanza kucheza mfumo huo, na hivyo kuchochea utovu wa nidhamu wa utafiti.

Lakini kuna fursa muhimu za mabadiliko, kama inavyoonyeshwa katika visanduku vya maandishi vifuatavyo.

Mfano wa kitaifa: China

Sasa nchi inayozalisha zaidi utafiti duniani (Tollefson, 2018; Statista, 2019), na ya pili katika suala la uwekezaji wa utafiti (OECD, 2020), kinachotokea China kina uwezo wa kuleta mabadiliko ya kweli ya kimfumo. Sera mpya ya ngazi ya serikali inalenga kurejesha 'moyo wa kisayansi, ubora wa uvumbuzi na mchango wa huduma' wa utafiti na 'kukuza urejeshaji wa vyuo vikuu katika malengo yao ya awali ya kitaaluma' (ZAIDI, 2020) Viashirio vya Wavuti wa Sayansi havitakuwa tena sababu kuu katika maamuzi ya tathmini au ufadhili, wala idadi ya machapisho na JIF. Machapisho katika majarida ya ubora wa juu ya Kichina yatahimizwa na maendeleo yao kuungwa mkono. 'Machapisho wakilishi' - karatasi 5-10 za chaguo badala ya orodha kamili - zinatafutwa katika paneli za tathmini, pamoja na vigezo vinavyotathmini mchango ambao utafiti umefanya katika kutatua maswali muhimu ya kisayansi, kutoa maarifa mapya ya kisayansi au kuanzisha ubunifu kwa, na maendeleo ya kweli. ya, uwanja fulani.

Katika kuendeleza mfumo wa tathmini ya ubora na ubora wa utafiti unaoendana zaidi na mahitaji yake, wakala mkubwa zaidi wa Uchina wa kufadhili utafiti wa kimsingi, Wakfu wa Kitaifa wa Sayansi ya Asili wa China (NSFC), umefanya mageuzi ya kimfumo tangu 2018 ili kuakisi mabadiliko katika sayansi: kubadilisha ulimwengu. mandhari ya sayansi, umuhimu wa utofauti wa nidhamu, mchanganyiko wa utafiti unaotumika na wa kimsingi na mwingiliano kati ya utafiti na uvumbuzi (Manfred Horvat, 2018), kuondoka kutoka kwa bibliometriki hadi kwenye mfumo unaoimarisha umuhimu wa ndani wa utafiti nchini China (Zhang na Sivertsen, 2020) Imeboresha mfumo wake wa mapitio ya rika kwa ajili ya tathmini ya pendekezo ili kufaa zaidi utafiti wa usumbufu unaoendeshwa na udadisi, matatizo ya moto katika mipaka ya utafiti, sayansi bora inayotumika kwa mahitaji ya kiuchumi na kijamii, na utafiti usio na nidhamu unaoshughulikia changamoto kuu. Mnamo 2021, 85% ya mapendekezo yaliwasilishwa na kukaguliwa kwa kutumia kategoria hizi. Hivi majuzi, mnamo Novemba 2022, mpango wa majaribio wa miaka miwili wa tathmini ya vipaji vya sayansi na teknolojia ulitangazwa, ukishirikisha wizara nane, taasisi kumi na mbili za utafiti, vyuo vikuu tisa na serikali sita za mitaa. Lengo lake litakuwa kuchunguza viashirio vya tathmini na mbinu za vipaji vya sayansi na teknolojia vinavyohusika katika sehemu mbalimbali za mfumo wa uvumbuzi.

Mfano wa kikanda: Australia na New Zealand

Australia na New Zealand kwa sasa ziko katika hatua muhimu. Nchini Australia, hakiki zinazoendelea kwa wakati mmoja za Baraza la Utafiti la Australia, Ubora katika Utafiti nchini Australia na mazungumzo ya Upataji wa Dhahabu kwa Uwazi yanawasilisha fursa kwa pamoja (Ross, 2022).

Kufuatia mashauriano ya umma juu ya mustakabali wa ufadhili wa sayansi, New Zealand inaunda mpya programu ya kimfumo kwa mustakabali wa mfumo wake wa kitaifa wa utafiti na uvumbuzi. Australia na New Zealand zimechangia katika ukuzaji wa mfumo wa vipimo kwa vikundi vyao vya asili vya utafiti (Kanuni za CARE).

Mfano wa kitaifa: India

Kituo cha Utafiti wa Sera cha Idara ya Sayansi na Teknolojia (DST-CPR) kimefanya tafiti za hivi karibuni kuhusu tathmini ya utafiti na marekebisho yake nchini India, kikiongoza warsha na wadau wakuu (mashirika ya kitaifa ya ufadhili, taasisi za utafiti na vyuo), mahojiano na tafiti. Imegundua kwamba, wakati vyuo vikuu na taasisi nyingi za umuhimu wa sera ya kitaifa (kama vile kilimo) zinalenga kwa karibu metrics za kiasi, baadhi ya mashirika ya ufadhili na taasisi kama vile Taasisi za Teknolojia za India zimekuwa zikichukua hatua za ubora zaidi pia. Mbinu hii ya ubora zaidi katika taasisi za daraja la juu tayari inatumika kuelekeza ufadhili zaidi kuelekea utafiti kuhusu vipaumbele vya kitaifa, ingawa ni mapema mno kusema ikiwa ina athari yoyote inayoweza kubainika kwenye ubora na matokeo ya utafiti.

Kigezo cha msingi cha tathmini ni ukaguzi wa marika kulingana na maoni ya kamati ya wataalamu, lakini tu baada ya ukaguzi wa awali wa programu kulingana na vipimo vya wingi. Changamoto za kimsingi pia zipo na kamati hizi: ukosefu wa anuwai na uelewa wa mazoea ya sayansi wazi, uzingatiaji mdogo wa athari za kijamii za utafiti, na uwezo duni na upendeleo. Matatizo haya, na mbinu za tathmini kwa ujumla zaidi, hazieleweki vizuri na kuna uhaba wa miongozo na fasihi juu ya somo.

Hata hivyo, kuna mwamko unaoongezeka wa haja ya kurekebisha tathmini ya utafiti. Ikifadhiliwa na ruzuku ya ushiriki wa jamii ya DORA, Chuo cha Kitaifa cha Kijana cha Sayansi cha India kilishirikiana na Taasisi ya Sayansi ya India (IISc) na DST-CPR kuchunguza njia ambazo tathmini ya utafiti inaweza kuboreshwa - mijadala yao imeshirikiwa na wadau wakuu na mtazamo wa kuchochea mazungumzo ya kitaifa juu ya haja ya kufanya mageuzi na hatimaye kubadilisha utamaduni wa utafiti wa India ili utafiti wake uwe wa ubunifu zaidi na/au unaofaa kijamii. DST-CPR inatarajia kuunda mfumo wa ubora wa utafiti ambao unaweza kuunganishwa katika Mfumo wake wa Kitaifa wa Cheo cha Kitaasisi.

Taarifa zaidi:

Battacharjee, S. 2022. Je, Njia ya India Inatathmini Utafiti Wake Unafanya Kazi Yake? - Sayansi ya Waya

DORA_IdeasForAction.pdf (dstcpriisc.org).

Suchiradipta, B. na Koley, M. 2022. Tathmini ya Utafiti nchini India: Nini Kinapaswa Kukaa, Nini Kinaweza Kuwa Bora? DST-CPR, IISc.

Mfano wa kitaifa: Japan

Itifaki za tathmini ya utafiti zimegatuliwa sana nchini Japani: wakati kuna 'Miongozo ya Kitaifa ya Kutathmini R&D', iliyotolewa na Baraza la Ofisi ya Baraza la Mawaziri la Sayansi, Teknolojia na Ubunifu, Wizara ya Elimu, Utamaduni, Michezo, Sayansi na Teknolojia (MEXT) na zingine. wizara pia zimetengeneza miongozo yao. Zaidi ya hayo, vyuo vikuu na taasisi za utafiti zina mifumo yao ya tathmini ya utafiti kwa ajili ya utafiti na watafiti, ambayo - kama katika sehemu nyingi za dunia - imehusishwa na utendaji wa taasisi na mgao wa bajeti.

Kumekuwa na wasiwasi unaokua juu ya kuegemea kupita kiasi kwenye tathmini ya kiasi. Kwa kujibu, Baraza la Sayansi la Japani limetayarisha pendekezo juu ya mustakabali wa tathmini ya utafiti nchini Japani (2022) ikitoa msisitizo mdogo wa idadi na zaidi juu ya hatua za ubora, utambuzi zaidi wa anuwai ya utafiti na uwajibikaji katika tathmini ya utafiti na ufuatiliaji wa mwelekeo wa kimataifa katika mageuzi ya mazoea ya tathmini ya utafiti. Hatimaye, maslahi ya utafiti na uendelezaji unapaswa kuwa kiini cha tathmini ya utafiti, na kila jitihada zinazofanywa ili kuzuia uchovu, upunguzaji wa watu na shinikizo nyingi kwa watafiti.

Utafiti wa MEXT kuhusu viashirio vya tathmini uligundua kuwa JIF ni mojawapo ya viashirio vingi na, kwa hivyo, haijawa na athari kubwa katika utafiti wa Kijapani, ingawa hii inategemea nidhamu: kwa mfano, matumizi ya JIF ni ya juu zaidi katika sayansi ya matibabu - na shughuli za utafiti zisizo za kitamaduni, kama vile data wazi, zina uwezekano mdogo wa kutathminiwa.

Taarifa zaidi: MAPENDEKEZO - Kuelekea Tathmini ya Utafiti kwa Maendeleo ya Sayansi: Changamoto na Matarajio ya Tathmini Yanayofaa ya Utafiti (scj.go.jp)

Kwa kumalizia, kuna kasi inayoongezeka ya mageuzi ya tathmini ya utafiti katika baadhi ya mikoa, nchi na taasisi. Mifano inayoonyeshwa hapa ni pamoja na mageuzi ya nchi nzima, muungano wa ujenzi au miungano ya taasisi zenye nia moja zinazotafuta mabadiliko, ulengaji/uendeshaji wa sekta mahususi na uingiliaji kati wa kukabiliana na motisha na mienendo potovu.

Haya bado si mazungumzo madhubuti na jumuishi ya kimataifa, wala mazoea na maarifa si lazima yashirikiwe kwa uwazi. Baadhi ya wanachama wa GYA, IAP na ISC tayari wako makini katika nafasi hii na fursa zinaweza kupatikana ili kuwasaidia kushiriki mafunzo yao na utendaji mzuri wao kwa wao na kwa wanachama wengi zaidi. Kuzinduliwa kwa Uchunguzi wa Kimataifa wa Tathmini ya Uwajibikaji ya Utafiti (AGORRA) na Taasisi ya Utafiti juu ya Utafiti (RoRI) baadaye mwaka wa 2023 kutatoa jukwaa zaidi la kushirikiana kujifunza, kwa uchambuzi wa kulinganisha wa mifumo ya mageuzi ya kitaifa na kimataifa na kuharakisha mbili- kubadilishana na kupima mawazo mazuri katika mifumo hii.

Waraka huu umeweka vichocheo kuu, fursa na changamoto za mageuzi ya tathmini ya utafiti na kujumuisha mifano elelezo ya mabadiliko yanayotokea katika ngazi za kimataifa, kikanda, kitaifa na kitaasisi. Madhumuni ya hili ni kuhamasisha GYA, IAP na ISC na wanachama wao husika, kama maeneo bunge muhimu ya mfumo ikolojia wa utafiti wa kimataifa.

Kwa kuzingatia muongo uliopita wa kazi ya fasihi ya kisayansi na utetezi, kuna hitimisho kuu tano.

1. Sharti la kufikiria upya jinsi watu binafsi, taasisi na matokeo ya utafiti yanatathminiwa ni wazi na ya dharura. Kudumisha uadilifu na ubora wa utafiti, kuongeza sayansi anuwai, jumuishi na isiyobagua, na kuboresha sayansi kwa manufaa ya umma duniani kote ni vichocheo kuu, vilivyowekwa katika muktadha wa ulimwengu unaobadilika haraka.

2. Njia ambayo utafiti unafanywa, kufadhiliwa, kuwasilishwa na kuwasilishwa inabadilika kwa kasi. Kusonga kuelekea sayansi yenye mwelekeo wa dhamira na nidhamu, mifumo ya sayansi wazi, mifano inayobadilika ya ukaguzi wa rika, matumizi ya AI na ujifunzaji wa mashine na kuongezeka kwa kasi kwa media ya kijamii kunabadilisha njia za jadi za kufanya na kuwasiliana na utafiti, kuhitaji fikra mpya juu ya mifumo ya tathmini ya utafiti. na metriki na michakato ya ukaguzi wa rika inayoisimamia. Utafiti zaidi, na wa haraka unahitajika ili kudhibitisha mifumo hii siku zijazo.

3. Kuna sharti kwa mifumo ya tathmini iliyosawazishwa zaidi yenye viashirio vya upimaji na ubora ambavyo vinathamini aina nyingi za matokeo ya utafiti, michakato na shughuli. Hata hivyo, kusema kwamba michakato ya ubora wa ukaguzi wa rika ni muhimu kama vile bibliometriki si moja kwa moja na inachanganyikiwa zaidi na sehemu mbalimbali za dunia kuwa katika hatua tofauti za kuunda mifumo yao ya tathmini: katika baadhi, mijadala juu ya mageuzi ya tathmini ya utafiti ni ya juu kabisa, kwa wengine wanachanga au hawapo.

4. Mpango wa pamoja na wa kweli wa kimataifa na jumuishi unahitajika ili kuhamasisha jumuiya za washikadau wakuu ili kuendeleza na kutekeleza njia madhubuti za kutathmini na kufadhili utafiti; kujifunza kutoka kwa kila mmoja na kutoka kwa sekta zingine (haswa wafadhili wa utafiti na mashirika ya maendeleo). Kitendo cha pamoja, cha kujumuisha kuelekea mabadiliko ya kuleta mabadiliko kitahitaji kutambua muunganiko badala ya utandawazi au ushirikishwaji wa ulimwengu wote, yaani, ziwe zinazozingatia muktadha, zinazozingatia changamoto mbalimbali zinazokabili sehemu mbalimbali za dunia na utofauti mkubwa wa mfumo ikolojia wa utafiti, na wakati huo huo kuhakikisha inatosha. homogeneity kuwezesha utafiti na mifumo inayolingana ya ufadhili na uhamaji wa watafiti, ili kupunguza tofauti na kugawanyika. Mazungumzo ya sehemu, ya kipekee yanahatarisha upendeleo zaidi na kuwadhoofisha wale ambao wametengwa kihistoria.

5. Mabadiliko yanahitajika katika viwango vyote - kimataifa, kikanda, kitaifa na kitaasisi - kwa sababu metriki hupitia mfumo mzima wa utafiti na viwango hivi vyote vimeunganishwa. Wadau wote wanapaswa kutekeleza wajibu wao kama washirika si wapinzani - wakiwemo wafadhili, vyuo vikuu, vyama vya vyuo vikuu na taasisi za utafiti, mashirika baina ya serikali (IGO), serikali na mitandao ya serikali, vyuo, watunga sera za sayansi, wasimamizi wa utafiti na uvumbuzi na watafiti binafsi. Uanachama wa GYA, IAP na ISC, kwa pamoja, unashughulikia sehemu kubwa ya mandhari hii tajiri (Mchoro 1, Kiambatisho C).

Kielelezo cha 1: Ramani ya wadau kuhusiana na uanachama wa GYA, IAP na ISC (Bonyeza kuona)

Uwezo wa kukusanyika wa mashirika kama vile GYA, IAP na ISC unaweza kusaidia kuleta pamoja anuwai ya maoni na uzoefu katika sehemu kubwa ya mfumo ikolojia wa utafiti: kufanya majaribio, kujifunza kutoka, na kuendeleza, mipango iliyopo na mpya. Kimsingi, wanaweza kuungana na washikadau wakuu katika kuchochea mabadiliko - serikali, wafadhili wa utafiti na vyuo vikuu, na harakati muhimu za kimataifa kama vile DORA - kusaidia kuhamasisha usanifu wa watendaji. Kwa pamoja, wanaweza kutumika kama:

● mawakili - kuongeza uelewa wa mijadala ya tathmini ya utafiti, maendeleo na mageuzi kwa kutambua kwamba wanachama wao wanatumika kama (i) washauri na wasimamizi wa wafanyakazi wenzao wa chini, (ii) viongozi wa HEI, (iii) wajumbe wa bodi za mashirika ya usimamizi wa ufadhili na uchapishaji na ( iv) washauri kwa watunga sera;

● wavumbuzi - kuchunguza mbinu tofauti za kuthamini utafiti wa kimsingi na unaotumika katika njia jumuishi na za kiubunifu;

● vielelezo - kubadilisha utamaduni wao wa kitaasisi - kuonyesha upya uanachama wao, tuzo, uchapishaji na desturi za mikutano, na kuongoza kwa mifano;

● watathmini – wakitumia vyema wajibu wa wanachama katika ngazi za taasisi na binafsi ambao biashara yao ni kutathmini watafiti, utafiti na taasisi, na wale walio na majukumu ya uchapishaji, uhariri na mapitio ya rika;

● wafadhili - kwa kutumia mashirika ya ufadhili yanayowakilishwa katika ISC, hasa, na wanachama wanaosimamia na kutawanya ruzuku kubwa za kitaifa na kimataifa;

● washiriki – wanaounga mkono kampeni ambazo tayari zimeanzishwa za mageuzi, kwa mfano DORA, CoARA ya EU na ahadi ya UNESCO ya sayansi huria.

Waandishi wa karatasi hii wanahimiza GYA, IAP na ISC, na mashirika kama wao, kujihusisha kwa njia zifuatazo:

UTENDAJI WA 1: Shiriki kujifunza na mazoezi mazuri

Karatasi hii inaangazia mifano ya uingiliaji kati na uvumbuzi kutoka kote ulimwenguni. Nafasi ya kubadilishana uzoefu na kujenga 'muungano wa walio tayari' imara na jumuishi ni muhimu.

1.1: Toa jukwaa kwa wanachama ambao tayari wako makini katika nafasi hii kushiriki mafunzo yao na kujenga miunganisho ya kimkakati, hasa katika ngazi ya kitaifa. Tumia mifano hii kusaidia kujaza Dashibodi ya DORA [106] ya kujifunza na mazoezi mazuri.

1.2: Utafiti na ramani ya maendeleo yanayoongozwa na wanachama katika mageuzi ya tathmini ya utafiti ili kutambua mbinu za kitaasisi, kitaifa na kikanda, na kutafuta na kushiriki utendaji mzuri. Waite wale ambao tayari wameongoza/kujishughulisha na mipango mikuu ya kitaifa na kimataifa ili kujenga utetezi na kujifunza kote kwa wanachama.

UTENDAJI WA 2: Ongoza kwa mfano

Uanachama wa GYA, IAP na ISC unashughulikia sehemu nyingi za mfumo ikolojia wa utafiti, na kila moja inaweza kuchukua jukumu muhimu katika kuunda mafanikio kama mwanasayansi anavyoonekana.

2.1: Mpito kwa mbinu za kutathmini utafiti unaoendelea zaidi katika wanachama wote. Ongoza kwa mfano na usaidie kubadilisha utamaduni wa tathmini ya utafiti kupitia falsafa na mazoea ya uanachama wao, huku wakijifunza kutoka kwa DORA na GRC. Vyuo, kama mashirika ya kitamaduni ya wasomi, yana jukumu maalum la kutekeleza hapa - wanapaswa kuhimizwa kupanua vigezo vyao wenyewe kwa uchaguzi na uteuzi ili kuonyesha uelewa mpana na zaidi wa ubora wa utafiti na athari, ili kuakisi wingi huu (na kwa ni ushirikishwaji zaidi na utofauti) katika uanachama wao.

2.2: Kuchochea ushirikiano wa kikanda na uongozi. Himiza mitandao ya kikanda ya wanachama wa GYA na Taasisi za Kitaifa za Vijana, mitandao ya akademia ya kikanda ya IAP na Malengo ya Kikanda ya ISC kuzingatia kuiga Bodi ya ALLEA. mpango, iliyoundwa kwa miktadha yao wenyewe.

HATUA YA 3: Jenga ubia wa kimkakati na maeneo bunge muhimu.

Wahusika watatu wakuu wanaohusika na mageuzi ya tathmini ya utafiti ni serikali, wafadhili wa utafiti na vyuo vikuu. GYA, IAP na ISC kila moja inaweza kusaidia kuleta jumuiya ya watafiti katika juhudi zao za kurekebisha na kuunganisha miunganisho ambayo ipo kwa sasa.

3.1: Shirikiana na uongozi wa GRC ili kuchunguza njia za kufanya kazi pamoja - kimsingi ili kuwachochea wanachama na wawakilishi wao wa kitaifa wa GRC kuchunguza jinsi jumuiya zao za utafiti zinaweza kuhusika.

3.2: Kushirikiana na mitandao ya kimataifa na kikanda ya vyuo vikuu, kama vile Chama cha Kimataifa cha Vyuo Vikuu (IAU), ili kuunda zana mpya za mafunzo kwa jumuiya ya utafiti; tumia uongozi wa HEI ndani ya uanachama wa pamoja wa GYA, IAP na ISC kama mawakili.

3.3: Unganisha taasisi wanachama katika nchi zinazotoa ruzuku za DORA (Argentina, Australia, Brazili, Colombia, India, Japan, Uholanzi, Uganda na Venezuela) na ruzuku za DORA ili kubadilishana mawazo na uwezekano wa kuongeza mipango hii ya ndani.

3.4: Jenga uhusiano na mashirika ya maendeleo ya kimataifa ambayo tayari yanatuma mikakati bunifu na yenye matokeo kwa ajili ya tathmini ya utafiti katika nchi zenye kipato cha chini na cha kati na nchi zilizoendelea.

3.5: Kufanya kazi na UNESCO kusaidia kuunda ahadi za kitaifa za tathmini ya utafiti chini yake Mapendekezo juu ya Sayansi Huria.

UTENDAJI WA 4: Toa uongozi wa kiakili kuhusu mustakabali wa tathmini ya utafiti.

Kuzingatia changamoto mahususi na za dharura kwa mageuzi ya tathmini ya utafiti ni muhimu. GYA, IAP na ISC, na mitandao ya kimataifa kama wao, inaweza kutumia nguvu zao za kuitisha, uzito wa kiakili na ushawishi wa wanachama wao na uhusiano na maeneo bunge muhimu.

4.1: Kukutana na maeneo bunge muhimu mfululizo wa mijadala ya wadau wengi au 'Maabara ya Mabadiliko' ili kufikiria upya na kutekeleza mageuzi ya tathmini ya utafiti - kushirikisha viongozi wa HEI na mitandao yao ya kimataifa (km IAU na IARU) na mitandao ya kikanda (km LERU na AAU [107] ]), wafadhili wa utafiti (ikiwa ni pamoja na wawakilishi wa kitaifa wa GRC), mashirika ya maendeleo ya kimataifa na wachapishaji wakuu, miongoni mwa wengine. Kuongeza rasilimali mpya au kupeleka rasilimali zilizopo ili kufadhili kazi hii (angalia Kiambatisho D kwa mawazo ya awali).

4.2: Anzisha utafiti wa riwaya kuhusu kipengele muhimu cha maendeleo ya baadaye ya tathmini ya utafiti kama vile (1) athari za maendeleo ya kiteknolojia katika tathmini ya utafiti na uhakiki wa rika (pamoja na matumizi na matumizi mabaya), na jinsi haya yanaweza kubadilika katika siku zijazo na ( 2) kurekebisha mfumo wa mapitio ya rika kwa upana zaidi (katika suala la uwazi, uwazi, uwezo, utambuzi na mafunzo). Masuala yote mawili ni muhimu kwa uaminifu wa maarifa na uaminifu wa sayansi.

Katika moyo wa juhudi hizi zote lazima mambo matatu ya msingi:

• Kupanua vigezo vya tathmini vya utafiti wa kisayansi na watafiti zaidi ya vipimo vya kitaalamu vya kitaalamu ili kujumuisha aina nyingi za matokeo ya utafiti na utendaji, ikiwa ni pamoja na vigezo vya kiasi vinavyoweza kupima athari za kijamii za utafiti.

• Kuhimiza viongozi wa HEI na wafadhili wa utafiti kupitisha na kuendeleza vigezo hivi vipya vya tathmini kama hatua za ubora na thamani ya utafiti.

• Kufanya kazi na viongozi hawa kuhusu aina mpya za kuongeza ufahamu na mafunzo kwa vizazi vijavyo vya watafiti ili kuwapa ujuzi unaohitajika kuwasiliana na kushirikiana vyema na watunga sera, umma na maeneo bunge mengine muhimu; na kukuza utofauti na ushirikishwaji katika biashara ya utafiti.

Waandishi wa karatasi hii walihitimisha kuwa mitandao kama vile GYA, IAP na ISC, pamoja na kusaidia maeneo bunge mengine muhimu, inaweza kusaidia kujenga mpango thabiti, shirikishi, wa kimataifa wa kuhamasisha jumuiya za utafiti, vyuo vikuu na HEI nyinginezo kwenye ajenda hii, na kuzingatia. jinsi ya kutumia njia mpya za kutathmini na kufadhili utafiti ili kuufanya kuwa wa ufanisi zaidi, wa haki, shirikishi na wenye athari.

1. UNESCO. 2021. Ripoti ya Sayansi ya UNESCO: Mbio Dhidi ya Muda kwa Maendeleo Mahiri (Sura ya 1). UNESCO. https://unesdoc.unesco.org/ark:/48223/pf0000377250

2. Jumuiya ya Kifalme. (2012). Sayansi kama Biashara Huria. Kituo cha Sera ya Sayansi ya Royal Society. https://royalsociety.org/~/media/policy/projects/sape/2012-06-20-saoe.pdf

3. Haustein, S. na Larivière, V. 2014. Matumizi ya bibliometriki kwa ajili ya kutathmini utafiti: uwezekano, vikwazo na athari mbaya. I. Welpe, J. Wollersheim, S. Ringelhan, M. Osterloh (wahariri), Motisha na Utendaji, Cham, Springer, ukurasa wa 121–139.

4. Macleod, M., Michie, S., Roberts, I., Dirnagi, U., Chalmers, I., Ioadnnidis, J., Al-Shahi Salman, R., Chan., AW na Glasziou, P. 2014 Utafiti wa Biomedical: kuongeza thamani, kupunguza taka. The Lancet, Vol. 383, No. 9912, ukurasa wa 101-104.

5. Bol, T., de Vaan, M. na van de Rijt, A. 2018. Athari ya Matthew katika ufadhili wa sayansi. Mijadala ya Chuo cha Kitaifa cha Sayansi cha Marekani, Vol. 115, No. 19, ukurasa wa 4887-4890.

6. Baraza la Sayansi ya Kimataifa. 2021. Kufungua Rekodi ya Sayansi: Kufanya Kazi ya Uchapishaji wa Kitaalam kwa Sayansi katika Enzi ya Dijitali. Paris, Ufaransa, ISC. https://doi.org/10.24948/2021.01

7. Müller, R. na de Ricke, S. 2017. Kufikiri kwa viashiria. Kuchunguza athari muhimu za viashirio vya utendaji wa kitaaluma katika sayansi ya maisha. Tathmini ya Utafiti, Vol. 26, Nambari 3, ukurasa wa 157-168.

8. Ansede, M. 2023. Mmoja wa wanasayansi waliotajwa sana duniani, Rafael Luque, alisimamishwa kazi bila malipo kwa miaka 13. El Paίs. https://english.elpais.com/science-tech/2023-04-02/one-of-the-worlds-most-cited-scientists-rafael-luque-suspended-without-pay-for-13-years. html

9. IAP. 2022. Kupambana na Majarida na Mikutano ya Kitaaluma ya Uharibifu. Trieste, Italia, IAP. https://www.interacademies.org/publication/predatory-practices-report-English

10. Elliott, T., Fazeen, B., Asrat, A., Cetto, AM., Eriksson, S., Looi, LM na Negra, D. 2022. Maoni kuhusu kuenea na athari za majarida na makongamano ya kielimu walaghai: uchunguzi wa kimataifa wa watafiti. Learned Publishing, Vol. 3, Nambari 4, ukurasa wa 516-528.

11. Collyer, TA 2019. 'Kukatwa kwa Salami' husaidia taaluma lakini kunadhuru sayansi. Asili Tabia ya Binadamu, Vol. 3, ukurasa wa 1005-1006.

12. Abad-García, MF 2019. Wizi na majarida ya unyama: tishio kwa uadilifu wa kisayansi. Anales De Pediatria (Toleo la Kiingereza), Vol. 90, Nambari 1, ukurasa wa 57.e1-57.e8.

13. Omobowale, AO, Akanle, O., Adeniran, AI na Adegboyega, K. 2013. Usomi wa pembeni na muktadha wa uchapishaji unaolipwa wa kigeni nchini Nigeria. Sosholojia ya Sasa, Vol. 62, Nambari 5, ukurasa wa 666-684.

14. Ordway, D.-M. 2021. Majarida ya kitaaluma, wanahabari wanaendeleza habari potofu katika kushughulikia uondoaji wa utafiti. Rasilimali ya Mwanahabari. https://journalistsresource.org/home/retraction-research-fake-peer-review/

15. Curry, S., de Rijcke, S., Hatch, A., Pillay, D., van der Weijden, I. na Wilsdon, J. 2020. Wajibu Kubadilisha wa Wafadhili katika Tathmini ya Uwajibikaji ya Utafiti: Maendeleo, Vikwazo na Njia ya Mbele. London, Uingereza, Utafiti wa Taasisi ya Utafiti.

16. Global North kwa ujumla inarejelea uchumi wa viwanda au ulioendelea, kama inavyofafanuliwa na Umoja wa Mataifa (2021), wakati Global South, inarejelea uchumi mpya wa kiviwanda au ambao uko katika mchakato wa kukuza kiviwanda au katika maendeleo, na ambayo mara nyingi ni ya sasa. au watu waliokuwa chini ya ukoloni.

17. Ushirikiano wa InterAcademy. Kikao cha 12: Kushinda Kutokana na Ujumuisho Kubwa: Uhusiano Kati ya Anuwai na Utamaduni wa Kiakademia. IAP. https://www.interacademies.org/page/session-12-winning-greater-inclusion-relation-between-diversity-and-academic-culture

18. Global Young Academy. Kikundi Kazi cha Ubora wa Kisayansi. Berlin, Ujerumani, GYA. https://globalyoungacademy.net/activities/scientific-excellence/

19. ISC. 2021. Sayansi Inayoachilia: Kutoa Misheni kwa Uendelevu. Paris, Ufaransa, ISC. doi: 10.24948/2021.04

20. ISC. 2022. Dondoo kutoka Peter Hotuba ya Gluckman kwa Kongamano la Endless Frontier. Paris, Ufaransa. ISC. https://council.science/current/blog/an-extract-from-peter-gluckmans-speech-to-the-endless-frontier-symposium/

21. Belcher, B., Clau, R., Davel, R., Jones, S. na Pinto, D. 2021. Chombo cha kupanga na kutathmini utafiti usio na nidhamu. Maarifa ya Ujumuishaji na Utekelezaji. https://i2insights.org/2021/09/02/transdisciplinary-research-evaluation/

22. Belcher, BM, Rasmussen, KE, Kemshaw, MR na Zornes, DA 2016. Kufafanua na kutathmini ubora wa utafiti katika muktadha wa kimataifa. Tathmini ya Utafiti, Vol. 25, Nambari 1, ukurasa wa 1-17.

23. Wilsdon, J. et al. 2015. Mawimbi ya Metric: Ripoti ya Mapitio Huru ya Dhima ya Metriki katika Tathmini na Usimamizi wa Utafiti. HEFCE.

24. UNESCO. Pendekezo la UNESCO kuhusu Sayansi Huria. Paris, Ufaransa, UNESCO. https://unesdoc.unesco.org/ark:/48223/pf0000379949

25. Chanzo cha UNESCO kilifichua kwamba kazi hii imesitishwa kwa sasa kwa sababu mjadala unatawaliwa na wachache tu na si lazima uhusishwe na wengi: mazungumzo ya kina lazima yatangulie kuandaliwa kwa mapendekezo.

26. Barroga, E. 2020. Mikakati bunifu ya ukaguzi wa marika. Jarida la Sayansi ya Matibabu ya Kikorea, Vol. 35, No. 20, ukurasa wa e138.

27. Woods, HB, et al. 2022. Ubunifu katika ukaguzi wa rika katika uchapishaji wa kitaalamu: muhtasari wa meta. SocArXiv, doi: 10.31235/osf.io/qaksd

28. Kaltenbrunner, W., Pinfield, S., Waltman, L., Woods, HB na Brumberg, J. 2022. Kubuni mapitio ya rika, kusanidi upya mawasiliano ya kitaalamu: Muhtasari wa uchanganuzi wa shughuli za uvumbuzi zinazoendelea za ukaguzi wa rika. SocArXiv, doi: 10.31235/osf.io/8hdxu

29. Holm, J., Waltman, L., Newman-Griffis, D. na Wilsdon, J. 2022. Mazoezi Mazuri katika Matumizi ya Kujifunza kwa Mashine & AI na Mashirika ya Ufadhili wa Utafiti: Maarifa kutoka kwa Msururu wa Warsha. London, Uingereza, Utafiti wa Taasisi ya Utafiti. https://doi.org/10.6084/m9.figshare.21710015.v1

30. Procter, R., Glover, B. na Jones, E. 2020. Utafiti 4.0 Utafiti katika Enzi ya Uendeshaji. London, Uingereza, DEMOS.

31. Baker, M. 2015. Programu ya Smart inaona makosa ya takwimu katika karatasi za saikolojia. Asili, https://doi.org/10.1038/nature.2015.18657

32. Van Noorden, R. 2022. Watafiti wanaotumia AI kuchanganua mapitio ya rika. Asili 609, 455.

33. Severin, An., Strinzel, M., Egger, M., Barros, T., Sokolov, A., Mouatt, J. na Muller, S. 2022. Arxiv,

34. Gadd, E. 2022. Zana za kutathmini manukuu kulingana na AI: nzuri, mbaya au mbaya? Bibliomagician. https://thebibliomagician.wordpress.com/2020/07/23/ai-based-citation-evaluation-tools-good-bad-or-ugly/

35. Foltýnek, T., Meuschke, N. na Gipp, B. 2020. Utambuzi wa wizi wa kitaaluma: uhakiki wa fasihi kwa utaratibu. Tafiti za Kompyuta za ACM, Vol. 52, Nambari 6, ukurasa wa 1-42.

36. Quach, K. 2022. Wachapishaji hutumia AI kupata data ya udaktari wa wanasayansi mbaya. Daftari. https://www.theregister.com/2022/09/12/academic_publishers_are_using_ai/

37. Van Dis, E., Bollen, J., Zuidema., van Rooji, R na Bockting, C. 2023. ChatGPT: vipaumbele vitano vya utafiti. Asili, Vol. 614, ukurasa wa 224-226.

38. Chawla, D. 2022. Je, AI inapaswa kuwa na jukumu katika kutathmini ubora wa utafiti? Asili, https://doi.org/10.1038/d41586-022-03294-3

39. Cyranoski, D. 2019. Akili Bandia inachagua wakaguzi wa ruzuku nchini Uchina. Asili, Vol. 569, ukurasa wa 316-317.

40. Mike, T. 2022. Je, ubora wa makala zilizochapishwa za jarida la kitaaluma unaweza kutathminiwa kwa kujifunza kwa mashine? Mafunzo ya Sayansi ya Kiasi, Vol. 3, Nambari 1, ukurasa wa 208-226.

41. Chomsky, N., Roberts, I. na Watumull, J. 2023. Ahadi ya uongo ya ChatGPT. New York Times. https://www.nytimes.com/2023/03/08/opinion/noam-chomsky-chatgpt-ai.html

42. Fafanua. 2022. Tathmini ya Utafiti: Chimbuko, Mageuzi, Matokeo. Fafanua. https://clarivate.com/lp/research-assessment-origins-evolutions-outcomes/

43. Blauth, TF, Gstrein, OJ na Zwitter, A. 2022. Uhalifu wa akili bandia: muhtasari wa matumizi mabaya na matumizi mabaya ya AI. Ufikiaji wa IEEE, Vol. 10, ukurasa wa 77110-77122.

44. Castelvecchi, D. 2019. Mwanzilishi wa AI: 'Hatari ya matumizi mabaya ni halisi'. Asili, doi: https://doi.org/10.1038/d41586-019-00505-2

45. Jordan, K. 2022. Maoni ya wanataaluma kuhusu athari za utafiti na ushirikiano kupitia maingiliano kwenye majukwaa ya mitandao ya kijamii. Kujifunza, Vyombo vya Habari na Teknolojia, doi: 10.1080/17439884.2022.2065298

46. Wouters, P., Zahedi, Z. na Costas, R. 2019. Vipimo vya mitandao ya kijamii kwa ajili ya tathmini mpya ya utafiti. Glänzel, W., Moed, HF, Schmoch U., Thelwall, M. (wahariri.), Kitabu cha Springer Handbook of Science and Technology Indicators. SpringerLink.

47. Rafols, I. na Stirling, A. 2020. Kubuni viashirio vya kufungua tathmini. Maarifa kutoka kwa tathmini ya utafiti. ResearchGate, doi: 10.31235/osf.io/h2fxp

48. Rich, A., Xuereb, A., Wrobel, B., Kerr, J., Tietjen, K., Mendisu, B., Farjalla, V., Xu, J., Dominik, M., Wuite, G ., Hod, O. na Baul, J. 2022. Rudi kwenye Misingi. Halle, Ujerumani, Global Young Academy.

49. Jong, L., Franssen, T. na Pinfield, S. 2021. Ubora katika Mfumo wa Ikolojia wa Utafiti: Uhakiki wa Fasihi. London, Uingereza, Utafiti wa Taasisi ya Utafiti.

50. Hatch, A. na Curry, S. 2020. Utamaduni wa Utafiti: Kubadilisha jinsi tunavyotathmini utafiti ni vigumu, lakini haiwezekani. eLife, Vol. 9, uk. e58654.

51. IAP. 2022. Kupambana na Majarida na Mikutano ya Kitaaluma ya Uharibifu. Trieste, Italia, IAP.

52. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. na Rafols, I. 2015. Bibliometrics: Manifesto ya Leiden ya vipimo vya utafiti. Asili, Vol. 520, ukurasa wa 429-431.

53. Publons. 2018. Hali ya Kimataifa ya Ukaguzi wa Rika. London, Uingereza, Clarivate. https://doi.org/10.14322

54. Kovanis, M., Porcher, R., Revaud, P. na Trinquart, L. 2016. Mzigo wa kimataifa wa mapitio ya rika ya jarida katika fasihi ya biomedical: usawa mkubwa katika biashara ya pamoja. PLoS ONE, Vol. 11, No. 11, p. e0166387.

55. Forrester, B. 2023. Imechoshwa na kuchomwa sana: 'kuacha kimya kimya' kunawavutia wasomi. Asili, Vol. 615, ukurasa wa 751-753.

56. Hatch, A. na Curry, S. 2020. Utamaduni wa utafiti: kubadilisha jinsi tunavyotathmini utafiti ni vigumu, lakini si jambo lisilowezekana. eLife, Vol. 9, uk. e58654.

57. Moher, D., Bouter, L., Kleinert, S., Glasziou, P., Har Sham, M., Barbour, V., Corat, AM, Foeger, N. na Dirnagi, U. 2020. The Hong Kanuni za Kong za kutathmini watafiti: kukuza uadilifu wa utafiti. Biolojia ya PLoS, Vol. 18, No. 7, p. e3000737.

58. Wilsdon, J., Allen, L., Belfiore, E., Campbell, P., Curry, S., Hill, S., Jones, R., Kain, R. na Kerridge, S. 2015. The Metric Mawimbi: Ripoti ya Mapitio Huru ya Majukumu ya Metriki katika Tathmini na Usimamizi wa Utafiti. doi:10.13140/RG.2.1.4929.1363

59. Curry, S., Gadd, E. na Wilsdon, J. 2022. Kutumia Mawimbi ya Metric: Viashirio, Miundombinu na Vipaumbele vya Tathmini ya Utafiti Unaojibika wa Uingereza. London, Uingereza, Utafiti wa Taasisi ya Utafiti.

60. Tahariri ya Asili. 2022. Kusaidia maono dhabiti ya Ulaya kwa tathmini ya kuwajibika ya utafiti. Asili, Vol. 607, uk. 636.

61. Tamko la Tathmini ya Utafiti (DORA). https://sfdora.org/about-dora/

62. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. na Rafols, I. 2015. Bibliometrics: Manifesto ya Leiden ya vipimo vya utafiti. Asili, Vol. 520, ukurasa wa 429-431.

63. Curry, S., Gadd, E. na Wilsdon, J. 2022. Kutumia Mawimbi ya Metric: Viashirio, Miundombinu na Vipaumbele vya Tathmini ya Utafiti Unaojibika wa Uingereza. London, Uingereza, Utafiti wa Taasisi ya Utafiti. https://rori.figshare.com/articles/report/Harnessing_the_Metric_Tide/21701624

64. DORA. Azimio la San Francisco juu ya Tathmini ya Utafiti. https://sfdora.org/read/

65. DORA. Zana za Kuendeleza Tathmini ya Utafiti. DORA. https://sfdora.org/project-tara/

66. DORA. Ruzuku za Ushirikishwaji wa Jamii za DORA: Kusaidia Mageuzi ya Tathmini ya Kielimu https://sfdora.org/dora-community-engagement-grants-supporting-academic-assessment-reform/

67. Inorms. Mfumo wa UPEO wa Tathmini ya Utafiti. https://inorms.net/scope-framework-for-research-evaluation/

68. Inorms. Mfumo wa UPEO. https://inorms.net/scope-framework-for-research-evaluation/

69. Torfin, S. 2018. Ubora wa Utafiti Plus. Kituo cha Utafiti wa Maendeleo ya Kimataifa. https://www.idrc.ca/en/rqplus

70. Reid, C., Calia, C., Guerra, C. na Grant, L. 2019. Kitendo cha Maadili katika Utafiti wa Kimataifa: Zana. Edinburgh, Scotland, Chuo Kikuu cha Edinburgh. https://www.ethical-global-research.ed.ac.uk/

71. Valters, C. 2014. Nadharia za Mabadiliko katika Maendeleo ya Kimataifa: Mawasiliano, Kujifunza, au Uwajibikaji? Msingi wa Asia. https://www.alnap.org/system/files/content/resource/files/main/jsrp17-valters.pdf

72. Fraser, C., Nienaltowski, MH, Goff, KP, Firth, C., Sharman, B., Bright, M. na Dias, SM 2021. Tathmini ya Utafiti inayowajibika. Baraza la Utafiti la Kimataifa. https://globalresearchcouncil.org/news/responsible-research-assessment/

73. Baraza la Utafiti wa Kimataifa. Tathmini ya Utafiti wa Kujibika kwa GRC. YouTube. https://www.youtube.com/watch?v=CnsqDYHGdDo

74. Curry, S., de Rijcke, S., Hatch, A., Dorsamy, P., van der Weijden, I. na Wilsdon, J. 2020. Kubadilisha Wajibu wa Wafadhili katika Tathmini ya Uwajibikaji ya Utafiti. London, Uingereza, Utafiti wa Taasisi ya Utafiti. https://doi.org/10.6084/m9.figshare.13227914.v1

75. Baraza la Utafiti wa Kimataifa. Kikundi Kazi cha Tathmini ya Utafiti inayowajibika. GRC. https://globalresearchcouncil.org/about/responsible-research-assessment-working-group/

76. Global Young Academy. Ubora wa Kisayansi. GYA. https://globalyoungacademy.net/activities/scientific-excellence/

77. Adams, J., Beardsley, R., Bornmann, L., Grant, J., Szomszor, M. na Williams, K. 2022. Tathmini ya Utafiti: Chimbuko, Mageuzi, Matokeo. Taasisi ya Habari za Kisayansi. https://clarivate.com/ISI-Research-Assessment-Report-v5b-Spreads.pdf

78. DORA. Maktaba ya Rasilimali. https://sfdora.org/resource-library

79. Saenen, B., Hatch, A., Curry, S., Proudman, V. na Lakoduk, A. 2021. Kufikiria Upya Tathmini ya Kazi ya Kiakademia: Hadithi za Ubunifu na Mabadiliko. DORA. https://eua.eu/downloads/publications/eua-dora-sparc_case%20study%20report.pdf

80. Muungano wa Kuendeleza Tathmini ya Utafiti (CoARA). https://coara.eu/

81. CoARA. 2022. Makubaliano ya Kurekebisha Tathmini ya Utafiti. https://coara.eu/app/uploads/2022/09/2022_07_19_rra_agreement_final.pdf

82. Tahariri ya Asili. 2022. Kusaidia maono dhabiti ya Ulaya kwa tathmini ya kuwajibika ya utafiti. Asili, Vol. 607, uk. 636.

83. Sayansi ya Wazi na ya Ulimwengu. OPUS Home - Mradi wa Sayansi ya Open na Universal (OPUS). https://opusproject.eu/

84. Vergoulis, T. 2023. GraspOS Ikisonga Mbele kwa Tathmini ya Utafiti yenye Uwajibikaji Zaidi. OpenAIRE. https://www.openaire.eu/graspos-moving-forward-to-a-more-responsible-research-assessment

85. Baraza la Utafiti la Ulaya. 2022. Baraza la Kisayansi la ERC Huamua Mabadiliko ya Fomu za Tathmini na Michakato ya Simu za 2024. ERC. https://erc.europa.eu/news-events/news/erc-scientific-council-decides-changes-evaluation-forms-and-processes-2024-calls

86. Vyuo vyote vya Ulaya. 2022. Taarifa ya ALLEA kuhusu Kurekebisha Tathmini ya Utafiti ndani ya Chuo cha Uropa. ALLEA. https://allea.org/wp-content/uploads/2022/10/ALLEA-Statement-RRA-in-the-Academies.pdf

87. Eurodoc, MCAA, YAE, ICORSA na GYA. 2022. Taarifa ya Pamoja kuhusu hitimisho la Baraza la Umoja wa Ulaya kuhusu Tathmini ya Utafiti na Utekelezaji wa Sayansi Huria. Zenodo, doi: 10.5282/zenodo.7066807.

88. Overlaet, B. 2022. Njia ya kuelekea Ajira za Masomo ya Ajira-Mfumo wa LERU wa Tathmini ya Watafiti. LERU, Leuven, Ubelgiji. https://www.leru.org/files/Publications/LERU_PositionPaper_Framework-for-the-Assessment-of-Researchers.pdf

89. Jumuiya ya Kifalme. Wasifu kwa Watafiti. https://royalsociety.org/topics-policy/projects/research-culture/tools-for-support/resume-for-researchers/

90. Grove, J. 2021. Je, CV za simulizi zinasimulia hadithi sahihi? Elimu ya Juu ya Times (THE). https://www.timeshighereducation.com/depth/do-narrative-cvs-tell-right-story

91. RICYT. Watafiti wa sekta ya ajira (FTE) 2011-2020. app.ricyt.org/ui/v3/comparative.html?indicator=INVESTEJCSEPER&start_year=2011&end_year=2020

92. CLACSO. 2020. Kutathmini Tathmini ya Utafiti wa Kisayansi. Kuelekea Mabadiliko ya Tathmini ya Utafiti wa Kisayansi katika Amerika ya Kusini na Msururu wa Karibea kutoka Jukwaa la Amerika Kusini la Tathmini ya Utafiti (FOLEC). CLACSO, Buenos Aires, Ajentina. https://www.clacso.org/wp-content/uploads/2020/05/FOLEC-DIAGNOSTICO-INGLES.pdf

93. CLACSO. 2021. Kuelekea Mabadiliko ya Mifumo ya Tathmini katika Amerika ya Kusini na Karibea, Zana za Kukuza Sera Mpya za Tathmini. Mfululizo kutoka Jukwaa la Amerika Kusini la Tathmini ya Utafiti (FOLEC). CLACSO, Buenos Aires, Ajentina. https://www.clacso.org/wp-content/uploads/2022/02/Documento-HERRAMIENTA-2-ENG.pdf

94. Gras, N. 2022. Aina za Tathmini ya Utafiti Iliyoelekezwa Katika Matatizo ya Maendeleo. Matendo na Mitazamo Kutoka Mashirika ya Kitaifa ya Sayansi na Teknolojia na Taasisi za Elimu ya Juu Katika Amerika ya Kusini na Karibiani. FOLEC. CLACSO, Buenos Aires, Ajentina. 2022-07-27_Ripoti Fomu-za-utafiti-tathmini.pdf ENG.pdf (dspacedirect.org)

95. CLACSO ni Baraza la Sayansi ya Jamii katika eneo hili na bingwa anayeongoza kwa sayansi inayofaa kijamii na inayowajibika. Jukwaa la Amerika Kusini la Tathmini ya Utafiti (FOLEC) ni nafasi ya kieneo ya mjadala na ushiriki wa utendaji mzuri, na inatayarisha miongozo ya kikanda ya tathmini ya utafiti ili kuunga mkono kanuni hizi. Vyote viwili vinatoa uongozi thabiti wa kikanda.

96. SGCI. Mpango wa Mabaraza ya Utoaji wa Sayansi (SGCI) katika Afrika Kusini mwa Jangwa la Sahara. https://sgciafrica.org/

97. SGCI. Tijssen, R. na Kraemer-Mbula, E. 2017. Muhtasari wa sera: Mitazamo kuhusu ubora wa utafiti katika Global South - tathmini, ufuatiliaji na tathmini katika miktadha ya nchi zinazoendelea. SGCI. https://sgciafrica.org/wp-content/uploads/2022/03/Policy-Brief-Perspectives-on-research-excellence-in-the-Global-South_-Assessment-monitoring-and-evaluation-in-developing- muktadha wa nchi.pdf

98. Tijssen, R. na Kraemer-Mbula, E. 2018. Ubora wa utafiti barani Afrika: Sera, mitazamo na utendakazi. SGCI. https://sgciafrica.org/research-excellence-in-africa-policies-perceptions-and-performance/

99. Tijssen, R. na Kraemer-Mbula, E. 2018. Ubora wa utafiti barani Afrika: Sera, mitazamo na utendakazi. Sayansi na Sera ya Umma, Vol. 45 Nambari 3, ukurasa wa 392-403. https://doi.org/10.1093/scipol/scx074

100. SGCI. Mwongozo wa Utendaji Bora juu ya Ubora wa Mashindano ya Utafiti. https://sgciafrica.org/eng-good-practice-guideline-on-the-quality-of-research-competitions/

101. NRF. NRF Huandaa Mikutano ya Kimkakati ya Kuendeleza Ubia wa Utafiti barani Afrika - Wakfu wa Kitaifa wa Utafiti

102. Belcher, BM, Rasmussen, KE, Kemshaw, MR na Zornes, DA 2016. Kufafanua na kutathmini ubora wa utafiti katika muktadha usio na nidhamu, Tathmini ya Utafiti, Vol. 25, ukurasa wa 1-17, https://doi.org/10.1093/reseval/rvv025

103. ARIN. 2020. Vipimo vya Teknolojia ya Sayansi na Ubunifu (STI) - Mtandao wa Utafiti na Athari wa Afrika (arin-africa.org)

104. McLean R., Ofir Z., Etherington A., Acevedo M. na Feinstein O. 2022. Ubora wa Utafiti Plus (RQ+) - Kutathmini Utafiti Tofauti. Ottawa, Kituo cha Utafiti wa Maendeleo ya Kimataifa. https://idl-bnc-idrc.dspacedirect.org/bitstream/handle/10625/60945/IDL-60945.pdf?sequence=2&isAllowed=y

105. Chuo cha Kimataifa cha Ufuatiliaji na Tathmini

106. DORA. Dashibodi ya TARA. https://sfdora.org/tara-landing-page/

107. IARU, Chama cha Kimataifa cha Vyuo Vikuu Vinavyohitaji Utafiti; LERU, Ligi ya Vyuo Vikuu vya Utafiti vya Ulaya; AAU, Jumuiya ya Vyuo Vikuu Afrika

Image na Guillaume de Germain on Unsplash

Tarehe ya kuchapisha: Huenda 11, 2023

waandishi: Karina Batthyány

Machapisho

ripoti kamili

Kazi inayohusiana

Tazama zote

Machapisho yanayohusiana

Tazama zote

Mustakabali wa tathmini ya utafiti: Mchanganyiko wa mijadala na maendeleo ya sasa

Machapisho

Kazi inayohusiana

Machapisho yanayohusiana

Taarifa ya mwaka 2024

Kutumia "digital" kwa sayansi katika mipangilio ya rasilimali ya chini

Usasishaji wa wasifu wa maelezo ya hatari ya UNDR-ISC

Mustakabali wa tathmini ya utafiti: Mchanganyiko wa mijadala na maendeleo ya sasa

Machapisho

Shiriki chapisho hili

Kazi inayohusiana

Kutathmini sayansi kama manufaa ya umma duniani kote

Kituo cha Sayansi ya Hatima

Mustakabali wa uchapishaji wa kisayansi

Jukwaa la ISC la Uchapishaji na Tathmini ya Utafiti

Machapisho yanayohusiana

Taarifa ya mwaka 2024

Kutumia "digital" kwa sayansi katika mipangilio ya rasilimali ya chini

Usasishaji wa wasifu wa maelezo ya hatari ya UNDR-ISC