संशोधन मूल्यमापनाचे भविष्य: वर्तमान वादविवाद आणि घडामोडींचे संश्लेषण

मूलभूत ज्ञान आणि समज वाढवण्यासाठी आणि वाढत्या तातडीच्या जागतिक आव्हानांना तोंड देण्यासाठी विज्ञान आणि समाज या दोघांसाठी डायनॅमिक आणि सर्वसमावेशक संशोधन प्रणाली अत्यंत महत्त्वाची आहे. परंतु अनेक अभिनेत्यांकडून (फंडर्स, सरकार आणि प्रकाशन उद्योगासह) वाढत्या अपेक्षा, स्पर्धा आणि सहकार्य यांच्यातील तणाव, विकसित होत असलेली विद्वत्तापूर्ण संप्रेषण प्रणाली, आक्रमक – काही वेळा – प्रकाशन आणि डेटा विश्लेषण उद्योग यामुळे संशोधन प्रणाली दबावाखाली आहे. आणि मर्यादित संसाधने. संशोधन एंटरप्राइझने संशोधनाची गुणवत्ता राखून, संशोधनाची अखंडता राखून, सर्वसमावेशक आणि वैविध्यपूर्ण राहून आणि मूलभूत आणि उपयोजित संशोधनाचे संरक्षण करताना या मागण्या आणि तणावांचे व्यवस्थापन केले पाहिजे.

गेल्या दशकात, विज्ञान प्रणालीवरील या दबाव आणि प्रतिसादाची गरज, संशोधन मूल्यमापन आणि कार्यप्रदर्शन मोजमाप प्रणालींवर अधिक गंभीर प्रतिबिंबांसह आहे. संशोधनाच्या गुणवत्तेचे आणि प्रभावाचे मूल्यांकन करण्यासाठी योग्य, संदर्भ-संवेदनशील पद्धती महत्त्वाच्या असल्या तरी, सध्याच्या मूल्यमापन निकषांच्या विस्तृत, जटिल आणि संदिग्ध प्रभावांबद्दल वादविवाद तीव्र झाले आहेत आणि संशोधनाची गुणवत्ता आणि संस्कृती, पुराव्याची गुणवत्ता, धोरणात्मक माहिती देणारे प्रमाण, संशोधन आणि संशोधन निधी, वैयक्तिक करिअर मार्ग आणि संशोधकांचे कल्याण यातील प्राधान्यक्रम. जगाच्या काही भागांमध्ये, अशी मान्यता वाढत आहे की मूल्यांकनात्मक मेट्रिक्स आणि निर्देशकांचा एक संकुचित आणि सोपा संच संशोधनाची गुणवत्ता, उपयुक्तता, अखंडता आणि विविधता समाधानकारकपणे कॅप्चर करत नाही. नियमितपणे वापरलेले – अनेकदा जर्नल-आधारित – मेट्रिक्स उच्च-गुणवत्तेच्या संशोधनाचे महत्त्वाचे अतिरिक्त परिमाण जसे की मार्गदर्शन, डेटा-सामायिकरण, लोकांशी संलग्नता, विद्वानांच्या पुढील पिढीचे पालनपोषण आणि कमी प्रतिनिधित्व केलेल्या गटांना ओळखणे आणि संधी देणे यासारख्या महत्त्वाच्या अतिरिक्त परिमाणे कॅप्चर करण्यात अयशस्वी ठरतात. व्याप्ती खूप संकुचित असण्याव्यतिरिक्त, मेट्रिक्स आणि निर्देशकांच्या गैरवापराचा मुद्दा देखील साध्य करण्यासाठी प्रोत्साहनांचा विपर्यास, काही शिस्त (महत्त्वाच्या अंतःविषय आणि ट्रान्सडिसिप्लिनरी संशोधनासह) गैरसोय आणि भक्षक आणि अनैतिक प्रकाशन पद्धतींना चालना देण्यासाठी देखील दिसून येतो.

मॅट्रिक्सचा गैरवापर रोखण्यासाठी, गुणवत्ता निकष विस्तृत करण्यासाठी आणि जाहीरनामा आणि विधाने, तत्त्वे आणि सुधारणांद्वारे संशोधन संस्कृती अधिक पद्धतशीरपणे बदलण्यासाठी मोहिमांनी संशोधन मूल्यांकन सुधारण्याच्या गरजेवर जागतिक चर्चेसाठी मंच तयार केला आहे. हे आवाज आता जाहीरनाम्यांकडून कृतीकडे जाण्याचे आवाहन करत आहेत. संशोधन ज्या प्रकारे केले जात आहे आणि संप्रेषण केले जात आहे त्यामध्ये परिवर्तनशील बदलांच्या पार्श्वभूमीवर हे घडत आहे. ओपन रिसर्च फ्रेमवर्क आणि सोशल मीडियाचा उदय, मिशन-ओरिएंटेड आणि ट्रान्सडिसिप्लिनरी सायन्सकडे शिफ्ट, ओपन पीअर रिव्ह्यूमध्ये वाढ आणि कृत्रिम बुद्धिमत्ता (AI) आणि मशीन लर्निंगच्या परिवर्तनीय संभाव्यतेसाठी संशोधन आणि संशोधकांचे मूल्यांकन कसे केले जाते यावर नवीन विचार करणे आवश्यक आहे. .

या पार्श्वभूमीवर, द ग्लोबल यंग अकादमी (GYA), इंटरॲकॅडमी भागीदारी (IAP) आणि ते आंतरराष्ट्रीय विज्ञान परिषद (ISC) जगभरातील संशोधन मूल्यमापनातील वादविवाद आणि घडामोडींचा आढावा घेण्यासाठी, शास्त्रज्ञांच्या स्कोपिंग गटावर आणि प्रादेशिक सल्लामसलतांची मालिका तयार करण्यासाठी सैन्यात सामील झाले. जगाच्या काही भागांमध्ये उच्च शिक्षण संस्था आणि संशोधन निधीद्वारे नवीन दृष्टिकोन विकसित आणि प्रायोगिक केले जात आहेत आणि या पेपरमध्ये अनेकांचा समावेश आहे. जगाच्या इतर भागांमध्ये, या वादविवाद आणि कृती नवजात किंवा अनुपस्थित आहेत. संशोधन प्रणाली वेगवेगळ्या दराने विकसित होत असल्याने, विचलन आणि विखंडन होण्याचा धोका आहे. असे विचलन संशोधन सहयोग सक्षम करण्यासाठी आणि विविध भौगोलिक क्षेत्रे, क्षेत्रे आणि विषयांमध्ये संशोधकांची गतिशीलता सुलभ करण्यासाठी आवश्यक असलेल्या एकरूपतेशी तडजोड करू शकते. तथापि, एक आकार सर्वांमध्ये बसू शकत नाही आणि स्थानिक आव्हाने ओळखून मूल्यमापन सुधारण्यासाठी संदर्भ-संवेदनशील प्रयत्नांची आवश्यकता आहे.

सार्वजनिक क्षेत्रातील संशोधन आणि संशोधन आणि संशोधकांचे मूल्यमापन यावर लक्ष केंद्रित करून, हा चर्चा पत्र त्याच्या दृष्टीकोनातून जागतिक आहे, ज्यामध्ये विशेषत: युरोप आणि उत्तर अमेरिकेतील घडामोडींवर प्रभुत्व असलेल्या अजेंडाचा समावेश आहे: प्रादेशिक दृष्टीकोन आणि राष्ट्रीय विकास आणि संस्थात्मक सुधारणांची उदाहरणे आहेत. हायलाइट केले. GYA, IAP आणि ISC चे जागतिक आणि सामूहिक सदस्यत्व संशोधन इकोसिस्टमच्या विस्तृत क्रॉस-सेक्शनचे प्रतिनिधित्व करते ज्याचे विविध आदेश वास्तविक प्रणालीगत बदल सुलभ करू शकतात. हा पेपर GYA, IAP आणि ISC साठी उत्तेजक म्हणून काम करण्याचा प्रयत्न करतो - परस्पर शिक्षण, प्रयोग आणि नवकल्पना यासाठी - त्यांच्या सदस्यांसह, इतर विज्ञान संस्था आणि जगभरातील प्रमुख घटकांसह कार्य करण्यासाठी, संभाषणे सुरू करण्यासाठी आणि प्रगती करण्यासाठी आणि अधिक समावेशक एकत्रित करण्यासाठी आणि संयुक्त कृती.

GYA, IAP आणि ISC आणि त्यांच्या सदस्यांसाठी (विभाग 5 पहा) शिफारशी कृतीसाठी सूचक कालमर्यादासह, वकील, उदाहरणे, नवोन्मेषक, निधी देणारे, प्रकाशक, मूल्यमापनकर्ते आणि सहयोगी म्हणून त्यांच्या भूमिकेभोवती संरचित आहेत. सर्वात तात्काळ, या क्रियांमध्ये आजच्या संबंधित उपक्रमांमधून धडे आणि परिणाम सामायिक करण्यासाठी जागा तयार करणे समाविष्ट आहे (सरावाचा समुदाय तयार करण्यासाठी); मध्यम कालावधीत, व्यवहार्य, संदर्भ-संवेदनशील आणि सर्वसमावेशक मार्गांनी संशोधन मूल्यमापनाची पुनर्रचना आणि अंमलबजावणी करण्यासाठी प्रमुख घटकांसह बहु-हितधारक मंचाचे सह-आमंत्रण; आणि, दीर्घकालीन, फ्युचर्स थिंकिंगमध्ये योगदान देणारे, एआय तंत्रज्ञान, समवयस्क पुनरावलोकन पद्धती आणि सुधारणा, आणि संप्रेषण माध्यमांमध्ये जलद गतीने होणाऱ्या घडामोडींना संवेदनशील अशा नवीन अभ्यासांना उत्तेजन देणारे.

The ग्लोबल यंग अकादमी (GYA), इंटरॲकॅडमी भागीदारी (IAP) आणि ते आंतरराष्ट्रीय विज्ञान परिषद (ISC) 2021 मध्ये विविध संशोधन संस्कृती आणि प्रणालींमध्ये जगभरातील संशोधन मूल्यमापन/मूल्यांकनातील आव्हाने, वादविवाद आणि घडामोडींचा आढावा घेण्यासाठी आणि संशोधन मूल्यमापन/मूल्यांकनाच्या पुनर्कल्पनावर ते सहभागी होऊ शकतील आणि त्यावर प्रभाव टाकतील अशा मार्गांचा शोध घेण्यासाठी एकत्र आले. 21 वे शतक, खुल्या आणि सर्वसमावेशक मार्गाने.

एक आंतरराष्ट्रीय स्कोपिंग गट (परिशिष्ट ए) या क्षेत्राचे सर्वेक्षण करण्यासाठी आणि तीन संस्थांना संशोधन मूल्यमापन सुधारण्यासाठी विद्यमान प्रयत्नांना ते कसे बळकट करू शकतात याबद्दल सल्ला देण्यासाठी बोलावण्यात आले होते. या कामाचा केंद्रबिंदू हा होता की (1) एकत्रित, संशोधकाच्या नेतृत्वाखालील पुढाकाराने जागतिक संशोधन समुदायाला संशोधन मूल्यमापनाच्या भविष्याला आकार देण्यासाठी एक मजबूत आवाज मिळेल आणि (2) 'मूल्यांकनासह मूल्यमापन' करण्याचे फायदे आहेत; अशा प्रकारे, मूल्यमापन संस्कृती आणि पद्धतींमध्ये शाश्वत, पद्धतशीर बदलाचा मार्ग तयार करण्यात मदत करते.

डेस्क संशोधनाला पूरक, स्कोपिंग गट आणि भागीदारांद्वारे ओळखल्या गेलेल्या तज्ञांशी प्रादेशिक सल्लामसलतांची मालिका 2021 च्या उत्तरार्धात आयोजित केली गेली. चर्चा पेपर हे या कामाचे प्राथमिक उत्पादन आहे. हे बहुविध भागधारकांसोबत अन्वेषणात्मक संभाषणांसाठी एक प्रॉस्पेक्टस म्हणून काम करण्याचा हेतू आहे, किमान जागतिक संशोधन समुदायाशी नाही.

संशोधन मूल्यमापन पद्धती अनेक उद्दिष्टे पूर्ण करतात आणि अनेक भागधारकांद्वारे आयोजित केली जातात. त्यांचा उपयोग निधीच्या निर्णयासाठी संशोधन प्रस्ताव, प्रकाशनासाठी शोधनिबंध, भरती किंवा पदोन्नतीसाठी संशोधक आणि संशोधन संस्था आणि विद्यापीठांच्या कामगिरीचे मूल्यांकन करण्यासाठी केला जातो. हा पेपर प्रामुख्याने संशोधक आणि संशोधनाच्या मूल्यमापनावर केंद्रित आहे आणि संस्थात्मक मूल्यमापन किंवा रँकिंग समाविष्ट करत नाही, जरी मूल्यांकनाची ही सर्व क्षेत्रे एकमेकांशी निगडीत आहेत. वर्तमान पद्धती परिमाणात्मक आणि मोठ्या प्रमाणावर जर्नल-आधारित मेट्रिक्सवर अवलंबून असतात, जसे की जर्नल इम्पॅक्ट फॅक्टर (JIF), प्रकाशनांची संख्या, उद्धरणांची संख्या, एच-इंडेक्स आणि आर्टिकल इन्फ्लुएन्स स्कोर (AIS). इतर मेट्रिक्समध्ये अनुदान उत्पन्नाचे लक्ष्य, इनपुटचे उपाय (जसे की संशोधन निधी किंवा संशोधन संघाचा आकार), नोंदणीकृत पेटंटची संख्या आणि अलीकडे, सोशल मीडिया मेट्रिक्स (पूर्वीचे 'अल्टमेट्रिक्स') जसे की सोशल मीडिया शेअर्स किंवा डाउनलोड यांचा समावेश होतो. एकत्रितपणे, हे मेट्रिक्स संस्थात्मक, संशोधन गट आणि वैयक्तिक प्रतिष्ठा, वैयक्तिक आणि सहयोगी संशोधन अजेंडा, करिअर मार्ग आणि संसाधन वाटपांवर खोलवर प्रभाव टाकतात.

गेल्या दोन दशकांमध्ये, संशोधन आणि विकास (R&D) मधील जागतिक गुंतवणूक तिप्पट झाली आहे - वर्षाला सुमारे USD 2 ट्रिलियन. केवळ मागील वर्षांनी 1980 च्या दशकाच्या मध्यापासून R&D खर्चात सर्वात वेगवान वाढ केली आहे, सुमारे 19% (UNESCO, 2021) [1]. संशोधनातील ही अतिरिक्त गुंतवणूक उत्तरदायित्वाची संस्कृती आणते जी संशोधन संस्था आणि व्यक्तींवर दबाव आणते आणि प्रतिसादात विकृती किंवा विकृत प्रोत्साहन निर्माण करू शकते. यामुळे मोठ्या आकांक्षा देखील वाढल्या आहेत: गुणवत्ता राखणे आणि संशोधन कचरा, त्रुटी आणि अकार्यक्षमता कमी करणे; जास्तीत जास्त समावेश आणि विविधता; जागतिक सार्वजनिक चांगले म्हणून संशोधन ऑप्टिमाइझ करा; आणि अधिक खुल्या आणि व्यस्त शिष्यवृत्तीला प्रोत्साहन द्या. सुधारणांशिवाय, संशोधन गुणवत्ता, अखंडता, विविधता आणि उपयुक्तता धोक्यात आहे.

परिमाणवाचक मेट्रिक्स संशोधन मूल्यमापनाचा एक महत्त्वाचा भाग बनू शकतात, अधिक खुल्या, उत्तरदायी आणि सार्वजनिक-फेसिंग संशोधन प्रणालीच्या संक्रमणामध्ये (रॉयल सोसायटी, 2012) [२]. परंतु जगभरात अस्तित्त्वात असलेल्या 'प्रकाशित करा किंवा नष्ट करा' संशोधन संस्कृतीला चालना देण्यासाठी ते अंशतः जबाबदार आहेत, ज्यात संशोधन परिणामांच्या गुणवत्तेवर, संशोधन प्रणालीची अखंडता आणि विश्वासार्हता आणि संशोधन समुदायांच्या विविधतेवर घातक परिणाम होतात (उदा. हॉस्टेन आणि लारिव्हियर, 2014) [३]. याचे कारण असे की मेट्रिक्सचा उपयोग संस्था, धोरणकर्ते आणि संशोधन निधी कर्त्यांद्वारे संशोधन गुणवत्तेसाठी प्रॉक्सी म्हणून केला जातो, परंतु ते आउटपुटचे मोजमाप असतात आणि संशोधनाच्या गुणवत्तेचे किंवा प्रति-से प्रभावाचे नाही. अशा प्रकारे, हे कलाकार सामाजिक आणि सांस्कृतिक संदर्भ सेट करण्यासाठी बरेच काही करतात ज्यामध्ये संशोधन होते आणि शैक्षणिक पुरस्कार आणि प्रोत्साहन प्रणाली त्यांच्या कारकिर्दीच्या सर्व टप्प्यांवर शास्त्रज्ञांच्या निवडींना आकार देतात (मॅक्लिओड एट अल., 2014) [२].

"संशोधकांच्या कार्यप्रदर्शनासाठी प्रॉक्सी मेट्रिक्स म्हणून बिब्लियोमेट्रिक निर्देशांकांचा वापर... मूल्यांकनाचा एक सोयीस्कर निर्देशांक आहे परंतु गंभीरपणे सदोष आहे. बहुतेक वैयक्तिक कामगिरीवर अथक लक्ष केंद्रित करतात, उच्च प्रभाव मेट्रिक्समध्ये विद्यापीठाच्या स्वारस्याद्वारे संशोधन समर्थन कमी करतात, सर्वांवर 'टिक बॉक्स' करण्यासाठी दबाव आणतात आणि अनुरूप बनतात, जरी ते जर्नल प्रकाशन बाजार विकृत करण्यात महत्त्वपूर्ण भूमिका बजावतात. सुधारणेची तातडीची गरज आहे.”

इंटरनॅशनल सायन्स कौन्सिल (२०२१) ऑफ सायन्सचे रेकॉर्ड उघडत आहे

संशोधन संप्रेषण आणि ज्ञान निर्मितीवर प्रचंड शक्ती आणि प्रभाव असलेला इतर भागधारक समुदाय म्हणजे प्रकाशन क्षेत्र. जर्नल-आधारित मेट्रिक्स व्यावसायिक जर्नल्समध्ये प्रकाशित करण्यासाठी एक शक्तिशाली प्रोत्साहन बनले आहेत आणि गंभीर दुष्परिणाम होऊ शकतील अशा वर्तनास प्रोत्साहन देऊ शकतात. संशोधनाच्या परिणामांचा त्याच्या वैज्ञानिक गुणवत्तेवर न्याय करण्याऐवजी, ती ज्या जर्नलमध्ये प्रकाशित केली जाते त्या जर्नलची समजली जाणारी गुणवत्ता आहे जी नियमितपणे वैज्ञानिक गुणवत्तेचा पुरावा म्हणून स्वीकारली जाते, विज्ञानापेक्षा प्रतिष्ठेवर आधारित उच्च व्यावसायिक प्रकाशन बाजार चालवते. ओपन ऍक्सेस खर्च मोठ्या प्रमाणात लेखक प्रक्रिया शुल्क (APCs) द्वारे खर्च केला जातो: हे प्रतिबंधात्मक उच्च असू शकतात, विशेषतः जगाच्या काही भागांमध्ये, संसाधन-गरीब संशोधकांसाठी संशोधन प्रकाशनात अडथळे निर्माण करतात आणि आंतरराष्ट्रीय विज्ञान समुदायाच्या अस्थिभंगास धोका निर्माण करतात. संशोधन प्रक्रियेच्या सर्व टप्प्यांमध्ये व्यावसायिक प्रदात्यांवर अधिकाधिक अवलंबून राहण्याचे धोके आणि त्यांच्या वापराच्या अटींमुळे नफा नसलेल्या पर्यायांसाठी एक मजबूत केस तयार होते. पुढे, बिब्लियोमेट्रिक निर्देशकांनी विद्यापीठांमध्ये प्रोत्साहनांचे प्रमुख स्त्रोत प्रदान केल्यामुळे, त्यांनी शैक्षणिक आणि इतर प्रकारच्या वैज्ञानिक कार्याचे मूल्य (जसे की अध्यापन आणि धोरण सल्ला) कमी केले आहे. संशोधन मूल्यमापन प्रणाली मोठ्या प्रमाणात अनुदान मिळवून देणाऱ्या आणि उच्च प्रभाव घटकांसह जर्नल्समध्ये प्रकाशित करणाऱ्यांच्या बाजूने झुकत असल्याने, आधीच यशस्वी झालेल्या संशोधकांना पुन्हा यश मिळण्याची शक्यता जास्त आहे असे सूचित करणारे पुरावे आहेत ('मॅथ्यू इफेक्ट', बोल आणि इतर., 2018) [२].

जेव्हा विद्वत्तापूर्ण प्रकाशन हे संप्रेषणाऐवजी मूल्यांकनाचे साधन बनते, तेव्हा जे त्यांचे संशोधन इतर अर्थपूर्ण मार्गांनी संप्रेषण करण्याचे निवडतात त्यांचे नुकसान होते (ISC चा 2021 अहवाल) [६]. यामध्ये ग्लोबल यंग अकॅडमी (GYA), इंटरॲकॅडमी पार्टनरशिप (IAP) आणि इंटरनॅशनल सायन्स कौन्सिल (ISC) चे सामान्य आउटपुट (आणि वादातीत मुख्य चलन) समाविष्ट आहेत: अहवाल, कार्यरत पेपर, संयुक्त विधाने, मत संपादकीय, बातम्या आयटम आणि वेबिनार . काही विषयांचाही तोटा आहे: उदाहरणार्थ, अभियांत्रिकी आणि संगणक शास्त्रातील संशोधक जेथे परिषदांद्वारे (सामान्यतः जलद) संवाद आणि त्यांच्या कार्यवाही महत्त्वपूर्ण असतात; आणि मानविकी आणि सामाजिक विज्ञानातील जे सामान्यत: मोनोग्राफ, पुस्तके आणि व्यावसायिक मासिके वापरतात.

इतर संशोधन-विशिष्ट किंवा स्थानिक नियतकालिकांमध्ये प्रकाशित करणे निवडतात, किंवा उच्च प्रभाव घटकांसह (आणि सहवर्ती उच्च APCs) मुक्त प्रवेश जर्नल्समध्ये त्यांचे संशोधन (तथापि उच्च दर्जाचे) प्रकाशित करण्यास असमर्थ असतात; नंतरचे नुकसान कमी उत्पन्न असलेल्या देशांमध्ये, विशेषतः करिअरच्या सुरुवातीच्या संशोधकांना (ECRs). हेच संशोधक कार्यकाळाच्या शैक्षणिक पदांसाठी तीव्र दबावाखाली आहेत आणि त्यांचे वर्तन संशोधन निधी एजन्सी आणि संस्थात्मक नियुक्ती आणि पदोन्नती मंडळांद्वारे वापरल्या जाणाऱ्या परिमाणात्मक निकषांद्वारे कठोरपणे कंडिशन केलेले आहे. सूचकांसह विचार करण्याचा मोह (मुलर आणि डी रिजके, 2017) [७], आणि अगदी 'गेम' प्रणाली ही जगातील सर्व संशोधकांसाठी एक वास्तविकता आहे (उदा. अनसेडे, २०२३) [२].

या गेमिंगच्या अभिव्यक्तींमध्ये संशोधक (जाणून किंवा अनवधानाने) त्यांची प्रकाशन संख्या वाढवण्यासाठी शिकारी जर्नल्स आणि कॉन्फरन्स वापरतात. (IAP, 2022 [९]; इलियट इट अल., एक्सएमएक्स [१०]), स्व-उद्धरणात गुंतणे आणि समवयस्क पुनरावलोकने खोटे करणे, साहित्यिक चोरी, प्रभाव घटक महागाई आणि 'सलामी-स्लाइसिंग' (एका मोठ्या अभ्यासाचे विभाजन करणे जे एका संशोधन लेखात छोट्या प्रकाशित लेखांमध्ये नोंदवले जाऊ शकते) (कॉलियर, 2019) [११]. दबावाखाली, संशोधकांना त्यांचे पीएचडी मिळवणे, नियुक्त करणे किंवा पदोन्नती देणे किंवा त्यांच्या संशोधन प्रकल्पांना वित्तपुरवठा करणे या एकमेव उद्देशाने भक्षक सेवांचा अवलंब करण्याचा मोह होऊ शकतो (उदा. आबाद-गार्सिया, 2018 [९]; ओमोबोवाले इ., 2014) [१३]. मेट्रिक्स-चालित शैक्षणिक आणि शैक्षणिक प्रकाशन प्रणाली कपटी प्रोत्साहन देतात: जिथे संशोधक प्रकाशित करतो त्यापेक्षा ते काय प्रकाशित करतात हे अधिक महत्त्वाचे आहे.

संशोधनाच्या गुणवत्तेवर आणि अखंडतेवर होणारा परिणाम अत्यंत चिंताजनक आहे. संशोधन आणि प्रकाशन गैरव्यवहार आणि खराब किंवा फसव्या डेटासेटमुळे मागे घेतलेल्या अभ्यासपूर्ण लेखांची संख्या अलिकडच्या वर्षांत नाटकीयरित्या वाढली आहे. जर्नल्सला अविश्वसनीय संशोधन मागे घेण्यासाठी काही महिने ते वर्षे लागू शकतात, त्यावेळेपर्यंत ते आधीच अनेक वेळा उद्धृत केले गेले असेल आणि सार्वजनिक डोमेनमध्ये असेल (ऑर्डवे, २०२१) [२].

मेट्रिक्स-चालित संशोधन मूल्यमापनाचे प्राबल्य स्पष्ट आहे आणि मूल्यांकन सुधारणांच्या बाबतीत जागतिक स्तरावर भिन्न ट्रेंड आहेत, ज्यामुळे संशोधन समुदायाचा काही भाग मागे जाण्याचा धोका आहे. संशोधन मूल्यांकनाच्या जागतिक लँडस्केपच्या विश्लेषणात (करी एट अल., २०२० [१५]; सादर केलेले), असे दिसून येते की उच्च-उत्पन्न देश/प्रदेशातील अनेक संशोधन आणि निधी संस्थांनी निर्देशकांचा एक व्यापक संच समाविष्ट करण्यास सुरुवात केली आहे, जसे की गुणात्मक 'प्रभाव' उपाय, तर 'ग्लोबल साउथ' [१६] मधील संस्थांमध्ये ग्रंथोत्तेजक शास्त्र प्रबळ आहेत. ], सर्व विषयांमध्ये. अधिक सर्वसमावेशक कृती न करता, राष्ट्रीय मूल्यमापन प्रणालींमध्ये भिन्नता येण्याचा धोका आहे, संभाव्यत: अद्याप पुढील प्रणालीगत पूर्वाग्रह आणि संशोधन, मूल्यमापन, निधी आणि प्रकाशन प्रणालींमध्ये संभाव्य विसंगतता. यामुळे, आंतरराष्ट्रीय संशोधन सहयोग आणि संशोधकांची गतिशीलता रोखू शकते. उत्तर-दक्षिण सहकार्यामध्ये अडथळे निर्माण करताना, ते ग्लोबल साउथमध्ये संशोधन परिसंस्थेच्या बळकटीकरणास देखील प्रतिबंधित करू शकते - मजबूत संशोधन मूल्यमापन संशोधन परिसंस्था आणि त्यांच्यावरील विश्वास मजबूत करते, मेंदूचा निचरा होण्याची शक्यता कमी करते आणि टिकाऊपणासाठी मजबूत मानवी भांडवल स्थापित करण्यात मदत करते. विकास असे असले तरी, चांगल्या कार्यप्रदर्शनाच्या सर्व आवृत्त्या एक-आकार-फिट-सर्व आवृत्त्या उत्कृष्टता, निष्पक्षता, पारदर्शकता आणि समावेशासाठी अनुकूल नसतात असे वर्तनाचे प्रकार निर्माण करतात. ज्या विद्वानांनी सहाय्यक, सुसंस्कारित वातावरणात भरभराट केली आहे जेथे संधी विपुल आहेत, ज्यांनी आव्हानांचा सामना केला आहे आणि प्रतिकूल आणि असमर्थित वातावरणात अडथळ्यांवर मात केली आहे अशा विद्वानांच्या कामगिरीचे मोजमाप करणे अत्यंत संशयास्पद आहे (GYA, 2022) [१७]. अनेक विद्वानांना संशोधन समुदायातून ऐतिहासिक आणि भौगोलिक बहिष्कार वाटतो, त्यांच्या संपूर्ण कारकिर्दीत त्यांचे मूल्यमापन ज्या प्रकारे केले जाते त्याद्वारे मोठ्या प्रमाणात उत्तेजन दिले जाते. संशोधनाचे काही प्रकार वगळून आणि जागतिक स्तरावर कल्पनांच्या विविधतेचा उपयोग करण्यात अयशस्वी झाल्यामुळे, सध्याच्या संशोधन मूल्यमापन पद्धती प्रबळ पाश्चात्य-कल्पित मॉडेल्सच्या मुख्य प्रवाहात/अनुयायी संस्कृतीला प्रोत्साहन देतात.

कमी उत्पन्न असलेल्या देशांतील संशोधकांना आणि त्यांच्या कारकिर्दीच्या सुरुवातीच्या टप्प्यावर आवाजाची गरज आहे जेणेकरून ते नवीन मूल्यमापन मॉडेल्स संदर्भ-संवेदनशील मार्गांनी आकार देण्यास मदत करू शकतील जे हेतूसाठी योग्य असतील आणि त्यांना दररोज येणाऱ्या आव्हानांचा सामना करावा लागेल. दिवसाचा आधार. GYA आणि नॅशनल यंग अकादमींची वाढती संख्या ECR ला हा आवाज देते, आणि वैज्ञानिक उत्कृष्टतेवर GYA चा कार्य गट [१८] संशोधन मूल्यमापनाच्या सुधारणेवर आपली मते मांडतात (खालील मजकूर पहा).

करिअरच्या सुरुवातीच्या संशोधक समुदायातील दृश्ये

प्रारंभिक करिअर संशोधक (ECRs) विशेषतः संशोधन मूल्यमापनाच्या पद्धतींबद्दल चिंतित असतात कारण त्यांच्या करिअरच्या शक्यता आणि त्यांच्या संशोधन कार्यक्रमाचा पाठपुरावा हे त्यांचे मूल्यांकन कसे केले जाते यावर अवलंबून असते. हे नेहमी न्याय्य आणि न्याय्य मानल्या जाणाऱ्या मार्गांनी निधी, नियुक्ती आणि पदोन्नती पद्धतींची माहिती देते.

निधी आणि मानवी संसाधनांचे निर्णय हे संशोधकांच्या श्रमशक्तीच्या रचनेवर परिणाम करतात हे स्पष्ट असले तरी, हे नेहमी ओळखले जात नाही की, निधीवरील त्याच्या प्रभावामुळे, संशोधन मूल्यमापन संस्था आणि संशोधकांना विशिष्ट संशोधन मार्ग, कामाचा पाठपुरावा करण्यासाठी प्रोत्साहन देते. विशिष्ट क्षेत्रात किंवा इतरांपेक्षा काही नेटवर्कमध्ये सामील व्हा. अशाप्रकारे, संशोधन मूल्यमापन हे विज्ञानाच्याच विकासाला आकार देते आणि हे विशेषतः ECR च्या संभावना आणि अपेक्षांवर असमान प्रभावाच्या संदर्भात सत्य आहे.

जरी विज्ञान हा एक जागतिक उपक्रम आहे, तरीही काही विद्वानांना त्यांचा जन्म कुठे झाला, त्यांची ओळख किंवा सामाजिक-आर्थिक पार्श्वभूमी यामुळे संशोधन समुदायामध्ये प्रवेश करण्यासाठी आणि त्यात सहभागी होण्यासाठी उच्च अडथळ्यांना तोंड द्यावे लागते. हा विज्ञान उद्योगाच्या संघटनेचा मुद्दा आहे आणि संशोधन मूल्यमापनाचा नाही, परंतु अनेक ECR ला वाटते की मूल्यमापन निकष संशोधकांच्या अनुभवाच्या या वास्तविकतेकडे आंधळे नसावेत आणि भिन्न परिस्थितींमध्ये एकसमान आणि प्रमाणित निकष लागू करू नयेत.

GYA (आगामी अहवाल) च्या सायंटिफिक एक्सलन्स वर्किंग ग्रुपने केलेल्या संशोधनातून असे दिसून आले आहे की संशोधनाचे मूल्यमापन सांस्कृतिक किंवा वैज्ञानिक वादविवादापेक्षा देशाच्या संशोधन धोरणाद्वारे अधिक चालते. अकादमीमध्ये पूर्ण प्राध्यापक (किंवा समतुल्य) पदोन्नतीच्या निकषांवर लक्ष केंद्रित करून, अहवालात असे दिसून आले आहे की राष्ट्रीय धोरणे आणि संस्थांकडे संशोधन मूल्यमापनासाठी त्यांचे निकष निश्चित करणारे विशिष्ट दस्तऐवज असतात. संशोधकाचा सर्वसमावेशक दृष्टिकोन तयार करण्यासाठी वापरल्या जाणाऱ्या मोठ्या आणि विविध निकषांचा समावेश करण्याऐवजी, हे दस्तऐवज एकाच परिमाण किंवा प्राधान्यावर लक्ष केंद्रित करतात. उदाहरणार्थ, काही दस्तऐवज संशोधकाच्या सेवा क्रियाकलापांच्या मूल्यांकनावर (जसे की शिकवणे आणि मार्गदर्शन) किंवा काही संशोधकाच्या संचित आउटपुटवर (उदाहरणार्थ, जर्नल लेखांच्या संख्येनुसार) - परंतु क्वचितच दोन्ही.

या निष्कर्षाचे दोन मुख्य परिणाम आहेत. प्रथम, ते संशोधन मूल्यांकन श्रेणीबद्ध आणि वर-खाली आहे. यामुळे जोखीम निर्माण होते, कारण दोन्ही मेट्रिक्स आणि गुणात्मक पद्धती अनेकदा संशोधकांच्या विविधतेकडे दुर्लक्ष करतात: त्यांच्या पार्श्वभूमी आणि करिअरच्या मार्गांमध्ये आणि - तितकेच महत्त्वाचे - त्यांच्या पद्धती आणि कल्पनांमधील विविधता. याउलट, GYA मध्ये प्रतिनिधित्व केलेल्या ECR ला वाटते की संशोधन एंटरप्राइझसाठी आवश्यक असलेल्या क्रियाकलापांची विविधता ओळखणे आणि एकरूपता आणि समरूपता अनिवार्य करण्याऐवजी विविधता आणि बहुलवाद वाढविणाऱ्या संशोधन मूल्यमापन योजना तयार करणे महत्वाचे आहे.

दुसरे, ज्या देशांत संशोधक काम करतो त्या देशांच्या आर्थिक स्थितीनुसार शिस्तांमधील फरक कमी महत्त्वाचा असतो. कमी-उत्पन्न असलेले देश परिमाणात्मक मेट्रिक्स आणि बक्षीस 'उत्पादकतेवर' अवलंबून आहेत असे दिसते, तर उच्च-उत्पन्न असलेले देश प्रभावाचे गुणात्मक मूल्यांकन करण्यासाठी अधिक खुले आहेत. हे विचलन आणखी विकसित झाल्यास, ते विद्वानांच्या आंतरराष्ट्रीय गतिशीलतेमध्ये आणखी एक अडथळा निर्माण करू शकते - जे विशेषतः ECR साठी महत्वाचे आहे.

शेवटी, GYA अहवालावर जोर देण्यात आला आहे की कोणतीही चांदीची गोळी नाही: संशोधन मूल्यमापन हे मूल्यमापनाच्या उद्दिष्टांच्या दिशेने आणि शेवटी एखाद्या संस्थेच्या किंवा देशाच्या संशोधन धोरणाच्या उद्दिष्टांकडे लक्ष दिले पाहिजे. मूल्यमापनाने संशोधक प्रोफाइल आणि करिअरच्या विविधतेला अनुमती दिली पाहिजे आणि मूल्यमापनाच्या उद्देशानुसार वेगळे लक्ष केंद्रित केले पाहिजे. विज्ञान हे जागतिक आणि स्वयं-गंभीर संभाषण असल्याने, बाह्य मूल्यमापन नेहमीच आवश्यक नसते. खरंच, आक्षेपार्ह रँकिंगचा वापर आणि वास्तविक मूल्य (लोक, संस्था, आउटलेट किंवा अगदी संपूर्ण देश) यावर अनेकदा वाद होतात.

आजची जागतिक आव्हाने, ज्यापैकी अनेक युनायटेड नेशन्स (UN) शाश्वत विकास उद्दिष्टे (SDGs) मध्ये स्पष्ट केली आहेत, त्यांना परिवर्तनात्मक, क्रॉस-डिसिप्लिनरी आणि ट्रान्सडिसिप्लिनरी संशोधन आवश्यक आहे, ज्यासाठी संशोधन वितरण आणि सहकार्याच्या नवीन पद्धती आवश्यक आहेत (ISC, 2021) [१९]. सर्वसमावेशक, सहभागात्मक, परिवर्तनात्मक, ट्रान्सडिसिप्लिनरी संशोधनाची निकड संशोधनाला समर्थन, मूल्यमापन आणि निधी कसा दिला जातो याच्याशी जुळत नाही – संशोधन समाजाला दिलेले वचन पूर्ण करण्यासाठी, त्याला अधिक मुक्त, समावेशक, संदर्भ-संवेदनशील मूल्यांकन प्रणालीची आवश्यकता आहे (ग्लकमन, २०२२) [२०]. शैक्षणिक, निधी देणारे आणि प्रकाशकांचे अंतःस्थापित वर्तन बदलणे कठीण करू शकते, जेणेकरून गुंतवणूक संभाव्यत: सर्वात जास्त गरज असलेल्या क्षेत्रांपासून दूर नेली जाऊ शकते.

आंतरविद्याशाखीय आणि ट्रान्सडिसिप्लिनरी संशोधन आणि सहभागी किंवा नागरिक विज्ञानातील वाढ ही जागतिक आव्हाने हाताळण्यासाठी महत्त्वाच्या आणि महत्त्वाच्या घडामोडी आहेत. संशोधन अनुशासनात्मक आणि संस्थात्मक सीमा ओलांडते आणि समाजासाठी तातडीच्या संशोधन प्रश्नांची सह-डिझाइन करण्यासाठी वापरकर्ता समुदायासह - भागधारकांच्या विस्तृत संचाला गुंतवते म्हणून - पारंपारिक शैक्षणिक संशोधन मूल्यमापन निकष अपुरे आहेत आणि ट्रान्सडिसिप्लिनरी संशोधन विकास आणि वापरास देखील प्रतिबंधित करू शकतात (बेल्चर एट अल., एक्सएमएक्स) [२१]. ट्रान्सडिसिप्लिनरी संशोधन सराव आणि मूल्यमापनाचे मार्गदर्शन करण्यासाठी अधिक योग्य तत्त्वे आणि निकष आवश्यक आहेत: गुणवत्ता मूल्यांकन फ्रेमवर्कचे प्रारंभिक उदाहरण प्रासंगिकता, विश्वासार्हता, वैधता आणि उपयुक्तता (बेल्चर एट अल., एक्सएमएक्स) [२].

संशोधन कार्यान्वित, निधी, आयोजित आणि संप्रेषण करण्याचे मार्ग वेगाने विकसित होत आहेत आणि संशोधन मूल्यमापन सुधारणेला गती देणे आवश्यक आहे. त्यामध्ये पुढील गोष्टींचा समावेश आहे:

(1) मुक्त विज्ञानातील संक्रमण

खुल्या विज्ञान चळवळीला मोकळेपणा आणि पारदर्शकता सुधारण्यासाठी संशोधन मूल्यमापन प्रणालींमध्ये एकाचवेळी सुधारणा करणे आवश्यक आहे. संशोधन कार्यक्षमतेचे मोजमाप करण्यासाठी वापरलेले बरेच मेट्रिक्स आणि निर्देशक हे स्वतःच अपारदर्शक असतात आणि बंद व्यावसायिक दरवाजांच्या मागे वारंवार मोजले जातात. पारदर्शकतेचा हा अभाव संशोधन समुदायाच्या स्वायत्ततेशी तडजोड करतो - ते संशोधन निर्देशकांचे मूल्यांकन, चाचणी, पडताळणी आणि सुधारणेसाठी पर्याय प्रतिबंधित करते (विल्सडन एट अल., 2015 [२३]). खुल्या विज्ञानाकडे जाणाऱ्या जागतिक हालचालींचे जबाबदार संशोधन मूल्यमापन हे मुख्य पैलू बनत आहे, उदाहरणार्थ, युनायटेड नेशन्स एज्युकेशनल, सायंटिफिक अँड कल्चरल ऑर्गनायझेशन (UNESCO) च्या ओपन सायन्सवरील शिफारसी (युनेस्को, २०२१ [२४]) – ज्यामध्ये त्यांच्या सदस्यांना त्यांच्या संशोधन करिअर मूल्यांकन आणि मूल्यमापन निकषांचे पुनरावलोकन आणि सुधारणा करण्यात मदत करण्यासाठी ओपन सायन्स टूलकिट विकसित करणे समाविष्ट आहे [२५].

(२) समवयस्कांच्या समीक्षेतील घडामोडी

ओपन पीअर रिव्ह्यूची वाढ - पीअर रिव्ह्यू रिपोर्ट प्रकाशित करणे आणि/किंवा समीक्षकांची सार्वजनिक ओळख - संशोधन मूल्यमापनासाठी एक महत्त्वाचा विकास आहे (बरोगा, २०२० [९]; वुड्स et al., 2022 [२७]). डेटा इन्फ्रास्ट्रक्चरच्या वाढीमुळे प्रकाशकांना समवयस्क पुनरावलोकन अहवालांसाठी डिजिटल ऑब्जेक्ट आयडेंटिफायर्स (DOIs) तयार करण्यास, वैयक्तिक मुक्त संशोधक आणि योगदानकर्ता आयडी (ORCIDs) शी पीअर पुनरावलोकन अहवाल जोडणे आणि प्रीप्रिंट म्हणून पेपर प्रकाशित करणे शक्य झाले आहे. जागतिक कोविड महामारीच्या काळात प्रीप्रिंटच्या संख्येत लक्षणीय वाढ झाली आणि जलद प्रतिसाद मोडमध्ये संशोधनाचे मुल्यांकन करण्यात येणाऱ्या आव्हानांचा पर्दाफाश झाला. तरीही, ओपन पीअर रिव्ह्यू प्रथा – मग ते प्रकाशनपूर्व असो किंवा पोस्ट-प्रकाशकांचे संशोधन संप्रेषण आणि ज्ञान उत्पादन प्रक्रियांवर असलेले नियंत्रण व्यत्यय आणण्यास, वैज्ञानिक जर्नल आणि JIFs सारख्या संबंधित मेट्रिक्सची शक्ती कमी करण्यास मदत करू शकतात. पीअर रिव्ह्यू ॲक्टिव्हिटीजच्या खुल्या रेकॉर्डमुळे दस्तऐवजासाठी पायाभूत सुविधाही मिळू शकतात - आणि वेळोवेळी पीअर रिव्ह्यू ॲक्टिव्हिटीजमध्ये अधिक मूल्य निर्माण होते, जी एक महत्त्वाची व्यावसायिक सेवा आहे जी अनेकदा मोठ्या प्रमाणावर अदृश्य आणि शैक्षणिक मूल्यांकनांमध्ये कमी-प्रशंसित आहे (कॅल्टेनब्रुनर एट अल., २०२२ [२८]).

(३) कृत्रिम बुद्धिमत्ता आणि मशीन लर्निंगचा वापर

आर्टिफिशियल इंटेलिजन्स (AI) आणि मशीन लर्निंगमधील तांत्रिक प्रगतीमुळे संशोधन मूल्यमापनावर गंभीर परिणाम होण्याची शक्यता आहे, ज्यात समवयस्क पुनरावलोकन प्रक्रियांचा समावेश आहे (उदा. Holm et al., 2022 [९]; प्रॉक्टर एट अल., 2020 [३०]). पीअर रिव्ह्यू स्ट्रीमलाइन आणि मजबूत करण्यासाठी AI आधीच वापरला जात आहे (निसर्ग, 2015 [31]; निसर्ग, 2022 [३२]), समवयस्क पुनरावलोकनाच्या गुणवत्तेची चाचणी घ्या (सेवेरिन एट अल., २०२२ [३३]), उद्धरणांच्या गुणवत्तेची चाचणी घ्या (गड्ड, २०२० [३४]), साहित्यिक चोरी शोधणे (Foltýnek et al., 2020 [३५]), संशोधक डॉक्टरिंग डेटा पकडा (क्वाच, २०२२ [३६]) आणि समवयस्क समीक्षक शोधा, ज्यांची कमी पुरवठ्यात वाढ होत आहे कारण या कामाला संशोधक मूल्यमापनात पात्रतेचे श्रेय मिळत नाही. 'संवादात्मक एआय', जसे की ChatGPT (चॅट जनरेटिव्ह प्री-ट्रेन्ड ट्रान्सफॉर्मर), प्रयोग डिझाइन करण्याची, हस्तलिखिते लिहिण्याची आणि पूर्ण करण्याची, समवयस्क पुनरावलोकने आयोजित करण्याची आणि हस्तलिखित स्वीकारण्यासाठी किंवा नाकारण्यासाठी संपादकीय निर्णयांना समर्थन देण्याची क्षमता आहे (निसर्ग, 2023 [३७]). संशोधन आउटपुटचे रेफरी म्हणून पीअर समीक्षकांचे ओझे कमी करण्यासाठी अल्गोरिदम वापरून पीअर रिव्ह्यूची कार्यक्षमता सुधारण्यासाठी एआयमध्ये क्षमता देखील आहे (निसर्ग, 2022 ). रेफरी शोधण्यासाठी चीनमध्ये AI चा वापर आधीच केला जात आहे (निसर्ग, 2019 [एक्सएनयूएमएक्स]).

हे सर्व एआय ऍप्लिकेशन्स हे ओझे कमी करू शकतात आणि अनुभवी तज्ञांना त्यांचे निर्णय संशोधन गुणवत्ता आणि अधिक जटिल मूल्यांकनांवर केंद्रित करू शकतात (थेलवॉल, २०२२ [४०]). परंतु ते पूर्वाग्रह पसरवण्याचा धोका देखील पत्करतात कारण ते भविष्यसूचक तंत्रज्ञान आहेत जे विद्यमान डेटाला बळकटी देतात जे पूर्वाग्रही असू शकतात (उदाहरणार्थ लिंग, राष्ट्रीयता, वांशिकता किंवा वयानुसार): खरंच, AI चा वापर 'गुणवत्ता' काय आहे हे सखोल समजून घेण्याचा फायदा होऊ शकतो. संशोधन (चॉम्स्की एट अल., २०२३ [९]; ISI, 2022 [एक्सएनयूएमएक्स]).

तथापि, AI आणि मशीन लर्निंगचे सर्व प्रकार दुरुपयोगासाठी खुले आहेत (ब्लाउथ एट अल., २०२२ [४३]; बेंजिओ, २०१९ [४४]). शैक्षणिक आणि संशोधन समुदायांना यासाठी सज्जता आणि लवचिकता निर्माण करणे आवश्यक आहे, या जागेवर शासन करणाऱ्या सरकार, उद्योग आणि नागरी समाज नेतृत्वासोबत काम करणे आवश्यक आहे.

(4) सोशल मीडियाचा उदय

संशोधन प्रभावाचे पारंपारिक परिमाणात्मक उपाय सोशल मीडिया प्रतिबद्धता आणि सामाजिक नेटवर्क केलेले संशोधक/शैक्षणिक यांच्या वाढीसाठी अयशस्वी ठरतात (जॉर्डन, 2022 [४५]). अनेक शैक्षणिक त्यांच्या संशोधन प्रकल्पाच्या संपूर्ण आयुष्यात समुदाय, धोरणकर्ते आणि जनतेला गुंतवून ठेवण्यासाठी सोशल मीडिया प्लॅटफॉर्म वापरतात; केवळ प्राप्तकर्त्या प्रेक्षकांसाठी योग्य पूर्तता म्हणून अंतिम आउटपुट प्रकाशित करण्याऐवजी त्यांच्या संशोधनाशी सकारात्मकपणे व्यस्त राहणे, चाचणी करणे आणि माहिती देणे आणि कल्पना आणि इनपुटमध्ये विविधता आणणे. ही प्रतिबद्धता संशोधन मूल्यांकनाच्या पारंपारिक प्रकारांद्वारे उचलली जात नाही तरीही व्यापक प्रभाव आणि पोहोचण्याच्या संधी निर्माण होऊ शकतात. सोशल मीडिया मेट्रिक्स ('अल्टमेट्रिक्स') जबाबदार मेट्रिक्समध्ये योगदान म्हणून विकसित केले जात आहेत (Wouters et al., 2019 [४]) आणि Twitter किंवा Facebook उल्लेख आणि ResearchGate वर फॉलोअर्सची संख्या समाविष्ट करा, उदाहरणार्थ. एकीकडे, हे ऑल्टमेट्रिक्स उघडण्यात, जागा तयार करण्यात आणि मूल्यमापन विस्तृत करण्यात मदत करू शकतात (राफोल्स आणि स्टर्लिंग, 2021 [४७]) परंतु दुसरीकडे - इतर निर्देशकांप्रमाणे - हे देखील बेजबाबदारपणे वापरले जाऊ शकते आणि/किंवा मूल्यांकन प्रणालीमध्ये मेट्रिक्सचा दुसरा स्तर लादण्यासाठी पाहिले जाऊ शकते.

संशोधन मूल्यमापनाच्या सुधारणांसमोरील आव्हाने अनेक पटीने आहेत. काही सर्वात लक्षणीय गोष्टी येथे स्पष्ट केल्या आहेत.

कोणत्याही सुधारणा ज्यामध्ये अधिक गुणात्मक उपायांचा समावेश आहे - त्याच वेळी - मूलभूत आणि उपयोजित संशोधनाच्या गुणवत्तेचे रक्षण करणे आवश्यक आहे. काही शास्त्रज्ञ स्वतःच सुधारणेला विरोध करू शकतात, कदाचित सध्याच्या व्यवस्थेत भरभराट झालेले प्रगत करिअर संशोधक, कारण त्यांना भीती आहे की यामुळे मध्यम संशोधनाला चालना मिळण्याचा धोका आहे किंवा मूलभूत संशोधनावर मूल्यमापनाचे अधिक गुणात्मक प्रकार लागू केले जातील. संशोधन मूल्यमापन निकषांमध्ये सुधारणा मिशन-देणारं, सामाजिकदृष्ट्या प्रभावशाली संशोधनाच्या दिशेने केलेल्या हालचालींभोवती बनवल्या जातात जे सार्वजनिक आणि राजकीय समर्थनाला अशा प्रकारे आकर्षित करतात जे कमी मूर्त मूलभूत किंवा निळ्या-आकाश संशोधनात असू शकत नाहीत. काहींनी असा युक्तिवाद केला की संशोधन 'मूल्य' चा अधिक सूक्ष्म अर्थ लावणे आवश्यक आहे नावीन्यपूर्णतेसाठी, कारण भविष्यात मूलभूत, कुतूहल-चालित संशोधनामध्ये सतत गुंतवणूक करणे आणि जागतिक आव्हानांना प्रतिसाद देण्याच्या क्षमतेमध्ये महत्त्वपूर्ण भूमिकेचे व्यापक कौतुक करणे आवश्यक आहे (GYA, 2022 [एक्सएनयूएमएक्स]).

संशोधन शब्दावलीचा अर्थ आणि वापरामध्ये सातत्य नसणे, अधिक सामान्यपणे, बदल होण्यास अडथळा आहे. संशोधन मूल्यमापनाची वैचारिक चौकट कालांतराने फारशी बदललेली नाही किंवा त्याला आधार देणारी भाषाही बदललेली नाही: संशोधन प्रणाली अजूनही 'मूलभूत' आणि 'उपयोजित' विज्ञान आणि 'प्रभाव', 'गुणवत्ता' यासारख्या जुन्या द्वंद्वांमध्ये अडकलेली आहे. (उत्पादकतेशी असह्यपणे समतुल्य) आणि 'उत्कृष्टता' अशा प्रकारे स्पष्टपणे परिभाषित केलेले नाही जे भौगोलिक, अनुशासनात्मक, करिअर स्टेज आणि लिंग पूर्वाग्रह टाळतात. (जोंग एट अल., २०२१ [४९]): वैविध्य नसलेल्या निर्णयक्षम पॅनेलमध्ये हे विशेषतः तीव्र असू शकते (हॅच आणि करी, 2020 ) [५०].

मेट्रिक्स-चालित मूल्यांकनाप्रमाणे, मूल्यमापनाचे अधिक गुणात्मक प्रकार देखील अपूर्ण आहेत. समवयस्क पुनरावलोकन प्रक्रिया आणि तज्ञांचे निर्णय हे किमान ग्रंथोत्तेजक शास्त्राइतके महत्त्वाचे आहेत असा युक्तिवाद करणे सरळ नाही. समवयस्क पुनरावलोकन प्रक्रियेत स्पष्टता आणि पारदर्शकता नसल्यामुळे ते पक्षपाती असू शकतात. उदाहरणार्थ, समवयस्क पुनरावलोकन समित्यांवर 'ओल्ड बॉइज' नेटवर्क्स आणि समलैंगिकता (स्वत:च्या सारख्यांना शोधणारे मूल्यमापनकर्ते) सक्षम करून शक्ती आणि विशेषाधिकारांचे प्रस्थापित प्रकार टिकवून ठेवणारी यंत्रणा म्हणून टीका केली गेली आहे, तसेच समूह थिंक डायनॅमिक्सला देखील असुरक्षित आहे. परिमाणवाचक मेट्रिक्स, जरी अपूर्ण असले तरी, जगाच्या काही भागांमध्ये घराणेशाही आणि पूर्वाग्रहाविरूद्ध संरक्षण म्हणून पाहिले जाते. असेच युक्तिवाद संशोधन पेपर्सच्या समवयस्क पुनरावलोकनावर लागू केले जाऊ शकतात, अधिक गुणात्मक मूल्यांकनाचा वापर करून संभाव्यत: भेदभावपूर्ण वर्तनाच्या इतर प्रकारांसाठी दार उघडले जाऊ शकते.

कोणत्याही स्वरूपातील समीक्षकांच्या समीक्षेची व्यावसायिक ओळख आणि प्रशिक्षणाचा अभाव, समीक्षक म्हणून काम करण्यास प्रोत्साहन देते, ज्यामुळे क्षमता कमी होते. पुढे, मागणी पुरवठ्यापेक्षा जास्त असल्याने, ते कोपरे कापण्यासाठी आणि कडकपणा कमी करण्यासाठी प्रोत्साहन देऊ शकतात. समवयस्क पुनरावलोकनाची पारदर्शकता वाढवणे (पूर्णपणे उघडलेले, निनावी किंवा संकरित असले तरी) आणि प्रशिक्षण, चांगले समवयस्क पुनरावलोकन सराव वाढवणे आणि पुरस्कृत करणे हे सर्व आवश्यक आहे; जसे की त्याच्या उत्क्रांतीसाठी मॉडेल्सवर पुढील संशोधन चालू आहे कारण संशोधन आउटपुटमध्ये विविधता येते (IAP, 2022 [५१]) आणि एआय तंत्रज्ञान प्रगती करत आहेत.

संशोधन मूल्यमापन सुधारणांवरील वादविवाद जटिल आहेत आणि बायनरी नाहीत. गुणात्मक आणि परिमाणात्मक माहिती सहसा समवयस्क पुनरावलोकन संदर्भांमध्ये एकत्र केली गेली आहे: संशोधन मेट्रिक्ससाठी लीडेन मॅनिफेस्टो (हिक्स एट अल., २०२४ [५२]) 'इन्फॉर्म्ड पीअर रिव्ह्यू' साठी कॉल करा ज्यामध्ये तज्ञांच्या निर्णयाला समर्थन दिले जाते - परंतु योग्यरित्या निवडलेल्या आणि परिमाणवाचक निर्देशक आणि गुणात्मक माहितीद्वारे व्याख्या केलेले नाही. संशोधन मूल्यमापनावरील वादविवाद ही मूल्यमापन साधनांची बायनरी 'गुणात्मक विरुद्ध परिमाणवाचक' निवड नाही, परंतु माहितीच्या अनेक प्रकारांचे सर्वोत्तम संयोजन कसे सुनिश्चित करावे.

शेवटी, कोणतीही सुधारणा सोयीस्कर आणि व्यवहार्य असणे आवश्यक आहे. संशोधन यंत्रणा आधीच कोलमडून पडण्याची चिन्हे दाखवत आहेत, कारण प्रकाशनांचे प्रमाण झपाट्याने वाढते आणि पुनरावलोकनाचा भार संपूर्ण संशोधन उपक्रमावर असमानपणे पडतो (उदा. पब्लॉन्स, 2018 [९]; कोव्हानिस एट अल., २०१६ [९]; निसर्ग, 2023 [५५]). जर्नल-आधारित मेट्रिक्स आणि एच-इंडेक्स, प्रकाशक प्रतिष्ठा आणि संस्थात्मक प्रतिष्ठेच्या गुणात्मक कल्पनांसह, व्यस्त मूल्यांकनकर्त्यांसाठी सोयीस्कर शॉर्टकट प्रदान करू शकतात आणि शैक्षणिक मूल्यमापनात खोलवर रुजलेल्या बदलांसाठी अडथळे आणू शकतात (हॅच आणि करी, 2020 [५६]). नियुक्ती आणि पदोन्नतीसाठी तुलनेने स्पष्ट आणि अस्पष्ट मार्ग प्रदान करणारे परिमाणात्मक मेट्रिक्स काही देशांमध्ये मानले जातात. 'ग्लोबल साउथ' मध्ये, अर्जदारांना शॉर्टलिस्ट करण्यासाठी सरासरी प्रभाव घटकांचा नियमितपणे वापर केला जातो आणि कोणताही पर्याय तितकाच अंमलात आणण्यायोग्य आणि मूल्यमापनाची व्याप्ती विस्तृत करण्यासाठी अपरिहार्यपणे आवश्यक असलेल्या अतिरिक्त संसाधनांचा वापर करण्यास सक्षम असणे आवश्यक आहे. संशोधन मूल्यमापनात साधे परिमाणवाचक मेट्रिक्स वापरण्याची सोय ही बदलासाठी एक मोठा अडथळा ठरण्याची शक्यता आहे आणि काही देशांमध्ये क्षमता किंवा सक्षमतेच्या अभावामुळे नवीन मूल्यमापन प्रणालींचा परिचय आणखी जागतिक असमानता निर्माण करू शकतो.

गेल्या दशकात, या आव्हानांना तोंड देण्यासाठी संशोधन मूल्यमापनावर उच्च-प्रोफाइल घोषणापत्रे आणि तत्त्वे आहेत, ज्यात लीडेन मॅनिफेस्टो (आंतरराष्ट्रीय तज्ञांच्या गटाने विकसित केलेले), हाँगकाँग तत्त्वे (मोहर वगैरे., एक्सएनयूएमएक्स [५७]) (२०१९ मधील संशोधन अखंडतेवरील सहाव्या जागतिक परिषदेत विकसित) आणि मेट्रिक टाइड [58] आणि मेट्रिक टाईडचा वापर करणे [५९] अहवाल (यूकेच्या संशोधन आणि मूल्यमापन फ्रेमवर्क, REF च्या पुनरावलोकनाच्या संदर्भात विकसित). मुख्य भागधारकांना- मग ते धोरणकर्ते असोत, निधी देणारे असोत किंवा उच्च शिक्षण संस्थांचे प्रमुख (HEI) असोत - वर्तमान मूल्यांकन प्रणालीची संभाव्य हानी कमी करण्यासाठी किमान 59 वेगळे प्रयत्न आहेत. हे सर्व उपक्रम मोठ्या प्रमाणात प्रेक्षकांपर्यंत पोहोचले आहेत आणि संशोधन संस्कृती सुधारण्यासाठी आणि समानता, विविधता, समावेश आणि संशोधन समुदायामध्ये सामील होण्यासाठी एक पूर्व शर्त म्हणून जबाबदार मेट्रिक्सवर त्यांचे लक्ष केंद्रित करण्यात प्रगतीशील आहेत. परंतु या उपक्रमांच्या काही वास्तुविशारदांकडून अशी चिंता वाढत आहे की, उपयोगी असताना, ते मूर्त व्यावहारिक कृतीपासून दूर राहतात: स्वाक्षरी करण्याची कृती केवळ व्यावहारिक अंमलबजावणीसह पाठपुरावा केल्यासच प्रभावी आहे (निसर्ग, 2022 [एक्सएनयूएमएक्स]).

'जबाबदार संशोधन मूल्यांकन किंवा मूल्यांकन' आणि 'जबाबदार मेट्रिक्स' (डोरा, २०१२ [९]; हिक्स वगैरे. एक्सएनयूएमएक्स [९]; विल्सडन एट अल., 2015) जे संशोधकांना त्यांच्या संशोधनाच्या आर्थिक, सामाजिक, सांस्कृतिक, पर्यावरणीय आणि धोरणात्मक प्रभावाचे वर्णन करण्यास सक्षम करण्यासाठी पूर्णपणे परिमाणवाचक मेट्रिक्सपासून विविध प्रकारच्या उपाययोजनांकडे जातात; संशोधन सामुदायिक मूल्यांच्या मुद्द्यांचा लेखाजोखा करण्यासाठी: 'डेटा फॉर गुड' किंवा 'व्हॅल्यू-लेड इंडिकेटर' जे व्यापक गुणधर्मांना संबोधित करतात (करी एट अल., २०२० [६३]). अलिकडच्या वर्षांत, जगभरातील प्रदेश आणि देशांमध्ये काही HEI आणि संशोधन निधी देणाऱ्यांद्वारे जबाबदार संशोधन मूल्यांकनासाठी नाविन्यपूर्ण आणि प्रगतीशील दृष्टिकोन विकसित आणि प्रायोगिक केले गेले आहेत. काही येथे हायलाइट केल्या आहेत.

वर नमूद केलेल्या जागतिक उपक्रमांपैकी, 2013 सॅन फ्रान्सिस्को 'संशोधन मूल्यांकन वर घोषणा' [६४] (DORA) हा कदाचित सर्वात सक्रिय जागतिक उपक्रम आहे. वैयक्तिक संशोधकांच्या कार्यक्षमतेचे मूल्यमापन करण्यासाठी जर्नल-आधारित संकेतकांचा वापर केल्यामुळे उद्भवलेल्या समस्यांचे कॅटलॉग केले आहे आणि असे मूल्यमापन सुधारण्यासाठी 64 शिफारसी प्रदान केल्या आहेत. DORA स्पष्टपणे जर्नल-आधारित मेट्रिक्सचा वापर संशोधकाच्या योगदानाचे मूल्यांकन करण्यासाठी किंवा नियुक्ती, प्रोत्साहन किंवा निधी शोधण्यासाठी परावृत्त करते. एप्रिल 18 च्या मध्यापर्यंत, 2023 देशांमधील 23,059 स्वाक्षरीकर्त्यांनी (संस्था आणि व्यक्तींनी) या घोषणेवर स्वाक्षरी केली आहे, सुधारणा करण्यासाठी वचनबद्ध आहे. आंतरिक आव्हाने आणि गुणात्मक मूल्यांकनाच्या जन्मजात पूर्वाग्रहांवर लक्ष केंद्रित करून, DORA विकसित होत आहे. ॲडव्हान्स रिसर्च असेसमेंटसाठी टूल्स (TARA) [६५] घोषणा प्रत्यक्षात आणण्यास मदत करण्यासाठी: या साधनांमध्ये करिअर मूल्यांकनातील नाविन्यपूर्ण धोरणे आणि पद्धतींचे अनुक्रमणिका आणि वर्गीकरण करण्यासाठी डॅशबोर्ड समाविष्ट आहे आणि समितीच्या पूर्वाग्रह सोडवण्यासाठी आणि संशोधन प्रभावाचे भिन्न, गुणात्मक स्वरूप ओळखण्यासाठी संसाधनांची टूलकिट समाविष्ट आहे.

याव्यतिरिक्त, DORA अर्जेंटिना, ऑस्ट्रेलिया, ब्राझील, कोलंबिया (2), भारत, जपान, नेदरलँड्स, युगांडा आणि व्हेनेझुएला येथे - त्यांच्या स्थानिक संदर्भांमध्ये संशोधन मूल्यमापनातील सुधारणांना प्रोत्साहन देण्याच्या विविध मार्गांची चाचणी घेण्यासाठी - दहा प्रकल्पांना निधी देत ​​आहे. चांगल्या सरावाची उदाहरणे संकलित करणे: उदाहरणार्थ, जागरुकता वाढवणे, नवीन धोरण किंवा सराव विकसित करणे, नोकरी अर्जदारांसाठी प्रशिक्षण आणि व्यावहारिक मार्गदर्शन (डोरा [६६]). या प्रकारच्या अनुदानाची मागणी जास्त आहे - 66 देशांमधील 55 पेक्षा जास्त अर्जदार - सुधारणांच्या गरजेची वाढती ओळख दर्शविते.

इंटरनॅशनल नेटवर्क ऑफ रिसर्च मॅनेजमेंट सोसायटीज (INORMS) सारख्या व्यावसायिक संशोधन व्यवस्थापन संघटना संघटनात्मक बदलांचे मार्गदर्शन करण्यासाठी सक्रियपणे संसाधने विकसित करत आहेत, ज्यात SCOPE फ्रेमवर्क संशोधन मूल्यमापन गट | INORMS - संशोधन मूल्यमापनासाठी INORMS SCOPE फ्रेमवर्क [६७] जे मूल्यवान आहे, कोणाचे मूल्यमापन केले जात आहे आणि का आहे हे परिभाषित करून सुरू होते (एक उपयुक्त स्पष्टीकरणात्मक पोस्टर येथे [एक्सएनयूएमएक्स]).

आंतरराष्ट्रीय विकास क्षेत्राने संशोधन मूल्यमापनावर नवीन दृष्टीकोन देऊ केला आहे, हे एक प्रमुख उदाहरण आहे संशोधन गुणवत्ता प्लस | IDRC - आंतरराष्ट्रीय विकास संशोधन केंद्र [६९], जे संशोधनाच्या शेवटी लोकांसाठी काय महत्त्वाचे आहे हे मोजते. संशोधन गुणवत्ता प्लस (RQ+) साधन हे ओळखते की वैज्ञानिक गुणवत्ता आवश्यक आहे परंतु पुरेशी नाही, संशोधन प्रासंगिक आणि कायदेशीर आहे की नाही हे निर्धारित करण्यात वापरकर्ता समुदायाची महत्त्वपूर्ण भूमिका मान्य करते. हे देखील ओळखते की संशोधन प्रक्रियेदरम्यान संशोधन अद्यतन आणि प्रभाव सुरू होतो. संशोधन अनुप्रयोगांचे मूल्यमापन उच्च आंतरविद्याशाखीय पॅनेलद्वारे केले जाते, ज्यामध्ये बाहेरील शैक्षणिक क्षेत्रातील विकास तज्ञ (उदा. सरकारी विभाग किंवा गैर-सरकारी संस्था (एनजीओ)), अभ्यासक आणि देशांतर्गत प्रतिनिधी असतात: हे वापरकर्ता समुदाय/विषय नसलेल्या तज्ञांचे महत्त्व अधिक बळकट करते. संशोधन समजून घेणे आवश्यक आहे आणि ते व्यवहारात कसे लागू केले जाऊ शकते. जटिल, कमी-उत्पन्न किंवा नाजूक सेटिंग्जमधील संशोधनाला नैतिक टूलकिट किंवा फ्रेमवर्क सोबत असू शकते, जे संशोधन जीवनचक्रामध्ये नैतिक निवडींची माहिती देण्यासाठी आणि समर्थन देण्यासाठी डिझाइन केलेले आहे, सुरुवातीपासून प्रसार आणि प्रभावापर्यंत, उदा. रीड एट अल., एक्सएमएक्स [७०]. देणगीदार, स्वयंसेवी संस्था आणि बहुपक्षीय एजन्सीद्वारे आंतरराष्ट्रीय विकास संशोधनामध्ये 'थिअरी ऑफ चेंज' दृष्टीकोनांचा मोठ्या प्रमाणावर वापर केला जातो, जेथे अर्जदारांनी प्रभावाचे मार्ग स्पष्ट केले पाहिजेत, देखरेख, मूल्यमापन आणि शिक्षण फ्रेमवर्कद्वारे समर्थित, उदा. वाल्टर्स, 2014 [७१]. शैक्षणिक संशोधन समुदाय संभाव्यपणे विकास समुदायाकडून शिकू शकतो.

HEI च्या धोरणांना आकार देण्यासाठी निधी देणाऱ्यांची भूमिका ओळखून, द ग्लोबल रिसर्च कौन्सिलचे (GRC) रिस्पॉन्सिबल रिसर्च असेसमेंट (RRA) पुढाकार [७२] जगभरातील प्रमुख संशोधन निधीधारकांना त्यांच्या स्वतःच्या प्रादेशिक आणि राष्ट्रीय संदर्भांमध्ये RRA महत्त्वाकांक्षेसाठी कार्य करण्यासाठी आणि प्रभावाचे मूल्यांकन करण्यासाठी प्रभावी मूल्यमापन फ्रेमवर्क विकसित करण्यासाठी प्रोत्साहन देत आहे (स्पष्टीकरणात्मक व्हिडिओ येथे [७३]). आरआरए (आरआरए) वर कार्यरत पेपर सुरू करणेकरी एट अल., २०२० [७४]), जीआरसीने आपल्या सदस्यांना आरआरए तत्त्वे अंतर्भूत करण्यासाठी आणि त्यांची पूर्तता करण्यासाठी ठोस कृती करण्यासाठी आणि चांगल्या सरावाच्या सहकार्याने आणि सामायिकरणाद्वारे एकमेकांकडून शिकण्याचे आवाहन केले. अ आंतरराष्ट्रीय कार्यरत गट [७५] GRC सदस्यांना मार्गदर्शन आणि समर्थन पुरवत आहे, त्यांना चळवळीतून कृतीकडे जाण्यास मदत करत आहे.

GYA च्या प्रयत्नांद्वारे मोठ्या प्रमाणात, ECR देखील या अजेंड्याभोवती स्वत: ला एकत्र करू लागले आहेत. त्याची वैज्ञानिक उत्कृष्टतेवर कार्यरत गट [७६] 'विज्ञानातील कुतूहल आणि सर्जनशीलता मुक्त करण्यासाठी आणि विविधता आणि समावेशाद्वारे मानवी क्षमतेच्या विकासाला चालना देण्यासाठी' अनुकूल संशोधन वातावरण ओळखण्यासाठी काम करत आहे. त्यांचे कार्य ECR समुदायाला त्यांच्या संस्थांद्वारे वापरल्या जाणाऱ्या 'उत्कृष्टतेच्या' व्याख्येला आव्हान देण्यासाठी, संशोधन मूल्यमापन सुधारण्याच्या उपक्रमांमध्ये सहभागी होण्यासाठी आणि यंग अकादमी चळवळीत सामील होण्याचे आवाहन करते. हे संशोधन मूल्यमापन वादविवादांमध्ये ECR चा समावेश करण्यासाठी निधी आणि कामावर घेणाऱ्या संस्थांना देखील आवाहन करते आणि संशोधनातील योगदान आणि करिअरमधील व्यापक विविधता मान्य करते.

जरी काही विद्यापीठे आणि इतर HEI DORA वर स्वाक्षरी करत आहेत आणि/किंवा युरोपियन चळवळीत सामील होत आहेत (खाली वर्णन केले आहे), ते इतर प्रमुख घटकांप्रमाणे संशोधन मूल्यांकनाभोवती एकत्रितपणे संघटित होत असल्याचे दिसत नाही.

मूल्यमापन प्रणालींद्वारे निर्माण झालेल्या समस्या ज्या जवळजवळ केवळ परिमाणात्मक असतात त्या मोठ्या प्रमाणावर 'ग्लोबल नॉर्थ' दृष्टीकोनातून पाहिल्या जातात आणि निदान केल्या जातात, 'ग्लोबल साउथ'ला कॅच-अप खेळण्याचा धोका असतो. अति-सामान्यीकरणाच्या जोखमीवर, 'ग्लोबल नॉर्थ' मध्ये मूल्यमापन प्रणालींद्वारे वाढलेल्या विविधता, समानता आणि समावेशाच्या अभावाभोवती प्रमुख प्रणालीगत समस्या आहेत. 'ग्लोबल साउथ' मध्ये, 'गुणवत्ता' आणि 'प्रभाव' कशासाठी बनते याची स्थानिक आणि प्रादेशिक व्याख्येची कमतरता आहे, मोठ्या प्रमाणावर भिन्न मूल्यमापन प्रणाली (अगदी एकाच विद्यापीठातील विभागांमध्ये देखील) आणि आव्हानाच्या मार्गात तुलनेने कमी आहे. स्थिती जगभरात, परिमाणवाचक निर्देशकांवर जास्त भर देणे, मूल्यमापन आणि संसाधन वाटप यांच्यातील दुवा, अत्यंत स्पर्धात्मक निधी व्यवस्था आणि प्रकाशित करण्याचा दबाव, आणि संशोधन आणि शैक्षणिक जीवनातील इतर, कमी परिमाण करण्यायोग्य आयामांकडे दुर्लक्ष यामुळे समस्या उद्भवतात.

संशोधन मूल्यमापन सुधारणेच्या तुलनात्मक अभ्यासावर सह-पुनरावलोकन केलेले साहित्य विरळ आहे. सहा भिन्न भौगोलिक (ऑस्ट्रेलिया, कॅनडा, जर्मनी, हाँगकाँग, न्यूझीलंड आणि यूके) मधील संशोधन मूल्यमापन हस्तक्षेपांची तुलना हा एक दुर्मिळ अपवाद आहे, ज्याचे निरीक्षण आहे की सर्व सहा जणांची अनुक्रमित कामगिरी अनेक प्रकारच्या हस्तक्षेपानंतर सुधारत असल्याचे दिसून येते (किमान पारंपारिक बिब्लियोमेट्रिक संकेतकांचा वापर करून) (ISI, 2022 [७७]). DORA त्याच्या वेबपृष्ठावर (मोठ्या प्रमाणावर संस्थात्मक) केस स्टडी प्रदान करते (डोरा [७८]) आणि एका अहवालात (डोरा, २०१२ [७९]) इतरांना कृती करण्यास प्रेरित करण्यासाठी डिझाइन केलेले, परंतु ही प्रामुख्याने युरोपियन उदाहरणे आहेत.

येथे, लेखक प्रादेशिक विहंगावलोकन आणि पुढील अंतर्दृष्टीसाठी प्रयोग आणि सुधारणेची राष्ट्रीय उदाहरणे देतात – हे सर्वसमावेशक किंवा सर्वसमावेशक असण्याचा हेतू नाही.

The रिफॉर्मिंग रिसर्च असेसमेंट वर EU गठबंधन [८०], किंवा CoARA, जुलै 80 मध्ये मंजूर, हा जगातील संशोधन मूल्यमापन सुधारणांवरील सर्वात मोठा उपक्रम आहे. युरोपियन युनिव्हर्सिटी असोसिएशन आणि सायन्स युरोप (महाद्वीपातील विज्ञान निधी देणारे आणि अकादमींचे नेटवर्क) 2022 (मोठ्या प्रमाणात युरोपियन) देशांमधील 350 संस्थांनी तयार आणि विकसित केलेल्या चार वर्षांमध्ये, युरोपियन कमिशनसोबत एक करार किंवा सेट विकसित केला आहे. तत्त्वांचे (a'सुधारणा प्रवास'), अधिक समावेशक आणि जबाबदार संशोधन मूल्यांकनासाठी (CoARA, 2022 [८१]). करार तीन स्तरांच्या मूल्यांकनावर केंद्रित आहे: संस्था, वैयक्तिक संशोधक आणि स्वतः संशोधन. युरोपियन भागीदारांद्वारे शासित असताना, युतीची जागतिक बनण्याची महत्त्वाकांक्षा आहे आणि DORA आणि GYA दोघेही आधीच स्वाक्षरी करणारे आहेत. स्वाक्षरीकर्ते संशोधन मूल्यमापन सुधारण्यासाठी, मूल्यमापनासाठी नवीन निकष आणि साधने विकसित करण्यासाठी, आणि जागरूकता वाढवण्यासाठी आणि संशोधन मूल्यमापनावर प्रशिक्षण देण्यासाठी (उदा. समीक्षकांना) संसाधने देण्याचे वचन देतात. या विकासाचे वर्णन 'वास्तविक बदलाचे अद्याप सर्वात आशादायक चिन्ह' असे केले आहे (निसर्ग, 2022 [२८]).

EU संशोधन मूल्यमापन सुधारणांना समर्थन देण्यासाठी डिझाइन केलेल्या काही रोमांचक नवीन उपक्रमांना देखील निधी देत ​​आहे: विशेषतः, मुक्त आणि वैश्विक विज्ञान (स्वतंत्र गीतरचना [८३]) - अनेक संशोधन प्रक्रिया आणि आउटपुटमध्ये निर्देशकांचा 'सर्वसमावेशक संच' विकसित करणे आणि त्याद्वारे युरोपियन संशोधकांना मुक्त विज्ञान - आणि मुक्त विज्ञान मूल्यांकन डेटास्पेसचा सराव करण्यास प्रोत्साहन देणे Graspos [८४] - संशोधन मूल्यमापनासाठी धोरण सुधारणांना समर्थन देण्यासाठी खुले डेटास्पेस तयार करणे.

युरोपियन रिसर्च कौन्सिल (ERC), जी सर्व क्षेत्रांतील सीमावर्ती संशोधनास समर्थन देते (16-2021 साठी €2027 अब्ज बजेटसह) ने CoARA वर स्वाक्षरी केली आहे आणि कमी लेखासहित अधिक वर्णनात्मक वर्णन तयार करण्यासाठी त्याचे मूल्यमापन फॉर्म आणि प्रक्रियांमध्ये सुधारणा केल्या आहेत. पारंपारिक करिअर मार्ग आणि संशोधन समुदायासाठी 'अपवादात्मक योगदान'. अर्जदाराच्या मागील कामगिरीपेक्षा त्यांच्या गुणवत्तेनुसार प्रस्तावांचे अधिक मूल्यांकन केले जाईल आणि वैज्ञानिक उत्कृष्टतेचा एकमेव निकष वापरून अग्रगण्य विद्वानांनी बनलेल्या समवयस्क पुनरावलोकन पॅनेलद्वारे त्यांचे मूल्यांकन केले जाईल (ERC, 2022 [२८]).

काही युरोपियन अकादमी देखील गुंतलेल्या आहेत. चे मंडळ ALLEA [86], ४० युरोपीय देशांमधील ५० हून अधिक राष्ट्रीय अकादमींपैकी नऊचे प्रतिनिधित्व करणाऱ्या युरोपियन फेडरेशन ऑफ अकादमी ऑफ सायन्सेस अँड ह्युमॅनिटीजने CoARA चळवळीला मान्यता दिली आहे. ALLEA ने नवीन अकादमीला प्रवेश देण्यासाठी चांगल्या पद्धती गोळा करण्यासाठी, देवाणघेवाण करण्यासाठी आणि प्रोत्साहन देण्यासाठी एक समर्पित टास्क फोर्स स्थापन करण्याचे काम हाती घेतले आहे. Fellows आणि गुणवत्ता, अखंडता, विविधता आणि मोकळेपणा या तत्त्वांवर आधारित संशोधन मूल्यांकनाच्या 'अर्थपूर्ण सांस्कृतिक देवाणघेवाणीत' योगदान देणे. त्याच्यामध्ये 2022 ऑक्टोबरचे निवेदन , ALLEA सदस्य अकादमींना पुढील गोष्टी करण्याचे आवाहन करते:

1. संशोधनाच्या गरजा आणि स्वरूपाच्या अनुषंगाने संशोधनातील योगदान आणि करिअरमधील विविधता ओळखणे; अकादमी फेलोच्या बाबतीत, निवड प्रक्रियेने (१) लिंग संतुलन आणि करिअरच्या सुरुवातीच्या संशोधकांची अनोखी आव्हाने विचारात घेतली पाहिजेत, (२) संस्कृती आणि विषयांच्या विविधतेचे समर्थन केले पाहिजे, (३) विविध प्रकारच्या सक्षमता क्षेत्रे आणि प्रतिभांना महत्त्व दिले पाहिजे, आणि (1) आंतरविषय आणि बहुभाषिकतेला प्रोत्साहन द्या.

2. मुख्यतः गुणात्मक मूल्यमापनावर आधारभूत संशोधन मूल्यांकन ज्यासाठी समवयस्क पुनरावलोकन केंद्रस्थानी आहे, परिमाणवाचक निर्देशकांच्या जबाबदार वापराद्वारे समर्थित; उमेदवार फेलोच्या कामाबद्दल उत्कृष्टतेचे आणि प्रभावाचे मूल्यांकन हे गुणात्मक समीक्षकांच्या पुनरावलोकनावर आधारित असावे जे कठोरता आणि पारदर्शकतेच्या मूलभूत तत्त्वांची पूर्तता करते आणि वैज्ञानिक शिस्तीचे विशिष्ट स्वरूप विचारात घेते.

3. संशोधन मूल्यांकनामध्ये जर्नल- आणि प्रकाशन-आधारित मेट्रिक्सचा अयोग्य वापर सोडून द्या; विशेषतः, याचा अर्थ जर्नल इम्पॅक्ट फॅक्टर (JIF), आर्टिकल इन्फ्लुएंस स्कोअर (AIS) आणि h-index यासारख्या मेट्रिक्सचा वापर गुणवत्ता आणि प्रभावासाठी प्रबळ प्रॉक्सी म्हणून करण्यापासून दूर जाणे.

युरोपियन अकादमींमध्ये संशोधन मूल्यांकन सुधारण्यावर अल्ला विधान

त्यांच्यामध्ये संयुक्त प्रतिसाद [८७] EU करार आणि CoARA गठबंधन, GYA मधील ECR समुदायाने देखील या वचनबद्धतेचे स्वागत केले आहे आणि त्याच्या तत्त्वांची अंमलबजावणी करण्याचे मार्ग ऑफर केले आहेत. यामध्ये सर्वसमावेशक अशा पद्धतींचा समावेश आहे ज्यात राष्ट्रीय विशिष्टता आणि विषयांची वैविध्यता दिसून येते, सर्व करिअर टप्प्यांच्या संशोधकांना प्रशिक्षण, प्रोत्साहन आणि बक्षिसे मिळतात, संशोधक, कर्मचारी आणि समिती सदस्यांसाठी मुक्त विज्ञानावरील अनिवार्य प्रशिक्षण आवश्यक आहे.

'बहुआयामी' संशोधन करिअरचा मार्ग म्हणून संशोधन मूल्यमापनात सुधारणा करण्यामागे युरोपमधील संशोधन-केंद्रित विद्यापीठेही मागे पडली आहेत.ओव्हरलेट, बी., २०२२ [८८]). संशोधन, शिक्षण आणि समाजाच्या सेवेतील योगदानाची विविधता ओळखण्यासाठी त्यांनी विद्यापीठांना प्रेरणा आणि समर्थन देण्यासाठी एक समान फ्रेमवर्क विकसित केले आहे.

राष्ट्रीय स्तरावर, अनेक देश आता विविध मूल्यमापन मॉडेल्स चालवत आहेत: उदाहरणार्थ, राष्ट्रीय निधी संस्था बेल्जियम, नेदरलँड, स्वित्झर्लंड आणि UK सर्व 'कथित CVs' वापरत आहेत. कथनात्मक सीव्ही शैक्षणिक कामगिरीकडे अधिक समग्रपणे पाहतात: ज्ञानाच्या निर्मितीसाठी, व्यक्तींच्या विकासासाठी, व्यापक संशोधन समुदायासाठी आणि व्यापक समाजासाठी योगदान (रॉयल सोसायटी [८९]). या प्रकारच्या CVs साठी समर्थन वाढवत असताना, अशी काही चिंता देखील आहे की ते शैक्षणिकांना प्रत्येक गोष्टीत चांगले असण्यास भाग पाडतात आणि त्यामुळे अष्टपैलू दर्जाच्या शोधात सखोल तज्ञाशी तडजोड करण्याचा धोका असतो (ग्रोव्ह, जे., २०२१ [एक्सएनयूएमएक्स]).

करिअर-देणारं शैक्षणिक मूल्यमापनांमध्ये देशव्यापी सुधारणांचे समन्वय करणाऱ्या राष्ट्रीय संशोधन प्रणालींची चार उदाहरणे खालील मजकूर बॉक्समध्ये समाविष्ट केली आहेत.

राष्ट्रीय उदाहरण: यूके

यूके रिसर्च इव्हॅल्युएशन फ्रेमवर्क (आरईएफ) दोन आयामांद्वारे संशोधन प्रभाव मोजते: 'महत्त्व' (प्रकल्पात होणारा मूर्त फरक) आणि 'पोहोचणे' (ते असे करते त्या प्रमाणात) (यूकेआरआय). येथे प्रभाव म्हणजे 'अर्थव्यवस्था, समाज, संस्कृती, सार्वजनिक धोरण किंवा सेवा, आरोग्य, पर्यावरण किंवा जीवनाचा दर्जा यावर परिणाम, बदल किंवा फायदा, शैक्षणिक क्षेत्रापलीकडे' अशी व्याख्या केली आहे, परंतु त्यापलीकडे ते अतिशय मुक्त, शिस्त- परिवर्तनीय आणि वादातीतपणे संदिग्ध, सार्वजनिक सहभागासाठी पुरेसे खाते देण्यात अयशस्वी, उदाहरणार्थ.

UK च्या REF चे 2022-2023 मध्ये मूल्यांकन केले जात आहे भविष्यातील संशोधन मूल्यांकन कार्यक्रम UK उच्च शिक्षण संशोधन कार्यक्षमतेचे मूल्यांकन करण्यासाठी संभाव्य नवीन दृष्टीकोन शोधण्यासाठी आणि आंतरराष्ट्रीय संशोधन मूल्यमापन सराव समजून घेणे समाविष्ट आहे. REF ची पुढील पुनरावृत्ती कदाचित अधिक वैविध्यपूर्ण आउटपुटसाठी खाते असेल आणि कदाचित त्यांना जोडलेले महत्त्व कमी करेल. सध्याचे मॉडेल आउटपुटला 60%, संशोधन प्रभावाला 25% आणि संशोधन संस्कृती/पर्यावरणाला 15% महत्त्व देते. जर ते अधिक समान रीतीने भारित केले गेले असते, तर REF खूप वेगळे दिसेल, ज्यामध्ये संशोधन संस्कृती, संशोधन अखंडता आणि टीम वर्किंग (ग्रोव्ह, 2020).

राष्ट्रीय उदाहरण: फिनलंड

2020 मध्ये, फिनलंडच्या फेडरेशन ऑफ लर्नड सोसायटीने संशोधन निधी, विद्यापीठे आणि युनियन्सच्या टास्क फोर्सचे समन्वयन केले ज्याने विधान प्रकाशित केले संशोधन मूल्यमापन मध्ये चांगला सराव. हे मूल्यमापनाच्या पाच सामान्य तत्त्वांसह वैयक्तिक शैक्षणिक मूल्यांकनासाठी जबाबदार प्रक्रियेचे अनुसरण करण्यासाठी मार्गदर्शन करते: पारदर्शकता, सचोटी, निष्पक्षता, सक्षमता आणि विविधता. संशोधन मूल्यमापनातील चांगल्या सरावामुळे संशोधनाची एकात्मता, शिक्षण आणि मार्गदर्शन आणि वैज्ञानिक सेवा (उदा. समवयस्क पुनरावलोकन) यांना व्यक्तींच्या शैक्षणिक योगदानाचे अधिक चांगले मूल्यांकन करणे आवश्यक आहे. विधान मूल्यांकनांना केवळ सारांशात्मक निर्णय तयार करण्याबद्दल नाही असे म्हणून पाहते: ते मूल्यांकनकर्त्यांना अभिप्राय आणि शिकणे सुलभ करण्यासाठी मूल्यांकन केलेल्या व्यक्तींसह अभिप्राय सामायिक करण्यास प्रोत्साहित करते.

संशोधन कार्य करणाऱ्या संस्था आणि संशोधन निधी देणाऱ्या संस्था सर्वांनी संशोधन मूल्यमापनात चांगला सराव लागू करण्यासाठी आणि मार्गदर्शनावर त्यांचे स्वतःचे स्थानिक भिन्नता निर्माण करण्यासाठी वचनबद्ध केले आहे आणि राष्ट्रीय संशोधक पोर्टफोलिओ सीव्ही मॉडेल विकसित केले जात आहे. संशोधन मूल्यमापनातील चांगला सराव नियमित पुनरावलोकने आणि परिष्करण करण्यासाठी वचनबद्ध आहे.

राष्ट्रीय उदाहरण: नेदरलँड

नेदरलँड्समध्ये, राष्ट्रीय ओळख आणि पुरस्कार कार्यक्रम 2019 मध्ये पोझिशन स्टेटमेंटच्या प्रकाशनासह सुरू झाला. प्रत्येकाच्या प्रतिभेसाठी खोली. रॉयल नेदरलँड्स ॲकॅडमी ऑफ आर्ट्स अँड सायन्सेस (KNAW - एक IAP आणि ISC सदस्य), संशोधन निधी देणारे, विद्यापीठे आणि वैद्यकीय केंद्रे यांच्यातील हे राष्ट्रव्यापी सहकार्य असे म्हणते की संशोधन मूल्यमापन संस्कृतींचे प्रणाली-व्यापी आधुनिकीकरण होणे आवश्यक आहे. असे करताना, मूल्यमापन प्रक्रियेतील बदलासाठी पाच महत्त्वाकांक्षा मांडल्या आहेत: करिअर मार्गाची अधिक विविधता, वैयक्तिक आणि सांघिक कामगिरी ओळखणे, परिमाणात्मक निर्देशकांपेक्षा कामाच्या गुणवत्तेला प्राधान्य देणे, मुक्त विज्ञान आणि शैक्षणिक नेतृत्व.

2019 पासून, डच विद्यापीठे राष्ट्रीय व्हिजन स्टेटमेंटचे स्वतःचे स्थानिक भाषांतर लागू करण्यासाठी पुढे सरसावले आहेत. त्याच बरोबर, निधी देणाऱ्या एजन्सींनी आणखी 'नॅरेटिव्ह सीव्ही' फॉरमॅट्स सुरू केले आहेत आणि सॅन फ्रान्सिस्को DORA ला प्रेरणा म्हणून उद्धृत करून बायबलियोमेट्रिक माहितीची विनंती करणे बंद केले आहे. डच रिसर्च कौन्सिलने अलीकडेच एक 'पुरावा-आधारित' CV ज्यामध्ये काही परिमाणात्मक माहिती वापरली जाऊ शकते. KNAW ने देखील स्वतःचा विकास केला तीन वर्षांची योजना ओळख आणि पुरस्कार अजेंडा अंतर्गत अंमलबजावणी करण्यासाठी. ओळख आणि बक्षिसे सुधार कार्यक्रम सुलभ करण्यासाठी एक पूर्ण-वेळ कार्यक्रम व्यवस्थापक आणि संघ नियुक्त केला गेला आहे आणि समुदाय-व्यापी शिक्षणास समर्थन देण्यासाठी प्रमुख सुधारणा भागधारकांमध्ये दरवर्षी 'ओळख आणि पुरस्कार महोत्सव' आयोजित केला जातो.

शेवटी, DORA कम्युनिटी एंगेजमेंट ग्रँटद्वारे निधी, द पीएचडी विद्यार्थ्यांसाठी संक्रमण उपक्रमातील तरुण वैज्ञानिक, Utrecht मध्ये आधारित, संशोधन संस्कृती बदलण्याच्या प्रयत्नात, PhD साठी नवीन मूल्यमापन मार्गदर्शक विकसित केले आहे.

राष्ट्रीय उदाहरण: नॉर्वे

2021 मध्ये, नॉर्वे, विद्यापीठे नॉर्वे आणि नॉर्वेजियन संशोधन परिषद प्रकाशित NOR-CAM - शैक्षणिक मूल्यमापनांमध्ये ओळख आणि पुरस्कारांसाठी एक टूलबॉक्स. NOR-CAM पारदर्शकता सुधारण्यासाठी आणि संशोधन आणि संशोधकांचे मूल्यमापन विस्तृत करण्यासाठी संकुचित बिब्लियोमेट्रिक-माहिती निर्देशकांपासून दूर एक मॅट्रिक्स फ्रेमवर्क प्रदान करते. NOR-CAM म्हणजे नॉर्वेजियन करिअर असेसमेंट मॅट्रिक्स, आणि 2017 पासून रुपांतरित केले गेले अहवाल युरोपियन कमिशनद्वारे ज्याने ओपन सायन्स करिअर असेसमेंट मॅट्रिक्स सादर केले. त्याच्या युरोपियन पूर्ववर्ती प्रमाणे, NOR-CAM देखील मुल्यांकनांमध्ये मुक्त विज्ञान पद्धतींचे अधिक चांगले समाकलित करण्याचे मार्ग तयार करते. मॅट्रिक्सचे उद्दिष्ट मूल्यमापनकर्त्यांना आणि शैक्षणिक पदांसाठी उमेदवारांना मार्गदर्शन करणे, संशोधन निधी अर्ज आणि नॉर्वेजियन संशोधन आणि शिक्षणाचे मूल्यमापन करणारे राष्ट्रीय मूल्यांकनकर्ते आहे. वैयक्तिक करिअरच्या विकासासाठी सामान्य मार्गदर्शक म्हणून काम करण्याचाही हेतू आहे.

मॅट्रिक्समध्ये सक्षमतेची सहा मुख्य क्षेत्रे समाविष्ट आहेत: संशोधन आउटपुट, संशोधन प्रक्रिया, शैक्षणिक क्षमता, प्रभाव आणि नवीनता, नेतृत्व आणि इतर क्षमता. मॅट्रिक्स नंतर प्रत्येक निकषांभोवती करिअर नियोजन आणि मूल्यांकन ओळख सक्षम करण्यासाठी सूचना प्रदान करते - परिणाम आणि कौशल्यांची उदाहरणे, दस्तऐवजीकरणाची साधने आणि प्रत्येक निकषाबद्दल प्रतिबिंबित करण्यासाठी सूचना. सर्व निकषांवर उमेदवारांनी समान कामगिरी करणे अपेक्षित नाही.

NOR-CAM हे संशोधन कार्य करणाऱ्या आणि निधी देणाऱ्या संस्थेच्या भागधारकांच्या कार्यगटाने तयार केले होते, युनिव्हर्सिटीज नॉर्वेने समन्वयित केले होते, म्हणजे तत्त्वतः सर्व नॉर्वेजियन विद्यापीठांच्या सदस्यांकडून खरेदी-इन केले जाते. नियुक्ती आणि पदोन्नती मूल्यांकन प्रक्रियेमध्ये NOR-CAM समाकलित करण्याचे मार्ग विकसित करण्यासाठी नंतर नॉर्वेजियन विद्यापीठांचा समावेश असलेल्या कार्यशाळा आयोजित केल्या गेल्या आहेत आणि प्रशासकीय कमी करण्यासाठी अनेक राष्ट्रीय आणि आंतरराष्ट्रीय स्त्रोतांकडून डेटा पुनर्प्राप्त करण्यासाठी 'स्वयंचलित' CV प्रणाली विकसित केली जात आहे. ओझे उपरोक्त तीन राष्ट्रीय-स्तरीय सुधारणा योजनांचे समन्वयक त्यांच्या अनुभवांची देवाणघेवाण आणि सामायिक शिकण्यासाठी नियमितपणे भेटतात.

लॅटिन अमेरिका आणि कॅरिबियन (एलएसी) जगाच्या इतर भागांपेक्षा अनेक प्रकारे भिन्न आहेत. येथे, विज्ञान हे जागतिक सार्वजनिक चांगले मानले जाते आणि त्याचे संशोधन आणि शैक्षणिक प्रकाशन प्रणाली आणि पायाभूत सुविधा सार्वजनिक मालकीच्या (निधी) आणि गैर-व्यावसायिक आहेत: परंतु या प्रादेशिक सामर्थ्य आणि परंपरा अद्याप मूल्यमापन प्रणालींमध्ये प्रतिबिंबित झालेल्या नाहीत. राष्ट्रीय संशोधन परिषद, विज्ञान मंत्रालये आणि मुख्य संशोधन विद्यापीठे हे बदल घडवून आणणारे प्रमुख भागधारक आहेत - 60% पेक्षा जास्त संशोधक विद्यापीठांमध्ये आहेत हे लक्षात घेता HEI ची भूमिका महत्त्वाची आहे (RiCyT, 2020 [९१]). SDGs आणि मुक्त विज्ञान आणि नागरिक विज्ञान चळवळींसह मूल्यमापन प्रणाली अधिक जवळून संरेखित करण्याची क्षमता आहे, ज्याची या प्रदेशात समृद्ध परंपरा आहे.

सध्या, राष्ट्रीय, स्थानिक आणि संस्थात्मकदृष्ट्या संशोधन मूल्यमापन प्रणालीचे उच्च खंडित झाले आहे, जे संशोधनाला अध्यापन, विस्तार आणि सह-उत्पादन यासारख्या इतर कार्यांशी स्पर्धा करत आहे. LAC मधील संशोधन मूल्यमापन आणि संशोधक पुरस्कार प्रणाली सामान्यत: 'ग्लोबल नॉर्थ' च्या कार्यपद्धतींमध्ये उत्कृष्टतेच्या कल्पनेला अनुकूल असतात, केवळ जर्नल्स आणि विद्यापीठाच्या रँकिंगच्या प्रभाव घटकावर आधारित (CLACSO, 2020 [९२]). ज्ञान निर्मिती आणि संप्रेषणाच्या विविध प्रकारांची ओळख, आणि शैक्षणिक कारकीर्दीची बहुलता (उदा. अध्यापन, प्रशिक्षण आणि मार्गदर्शन, नागरिक विज्ञान आणि विज्ञानाचे सार्वजनिक संप्रेषण) संशोधन मूल्यमापन पद्धतींमध्ये मोठ्या प्रमाणात अनुपस्थित आहेत. हे विशेषतः सामाजिक विज्ञान आणि मानवतेच्या संशोधकांसाठी समस्याप्रधान आहे, जेथे मोनोग्राफ आणि स्थानिक भाषा मोठ्या प्रमाणात वापरल्या जातात (CLACSO, 2021 [९३]). अशा मूल्यमापन प्रक्रियेमध्ये प्रादेशिक जर्नल्स आणि निर्देशकांचे अवमूल्यन केले जाते किंवा त्यांना मान्यता दिली जात नाही. हे सर्व कमकुवत माहिती प्रणाली आणि (विशेषत: समुदायाच्या मालकीच्या) पायाभूत सुविधांच्या कमकुवत इंटरऑपरेबिलिटीमुळे वाढले आहे, कमी निधी कारण कमी निधी ओपन ऍक्सेस जर्नल्ससाठी APC पेमेंटसाठी निर्देशित केला जातो.

असे असले तरी, या प्रदेशातील काही विद्यापीठे गुणात्मक आणि परिमाणवाचक पद्धतींचे संयोजन, विशेषत: संशोधक आणि मिशन-केंद्रित संशोधनाच्या मूल्यांकनामध्ये (ग्रास, २०२२ [९४]). अधिक व्यापक संशोधन मूल्यमापन योजनांच्या संक्रमणासाठी अधिक गुणात्मक निकषांच्या सह-डिझाइनची आवश्यकता असेल; परिमाणात्मक डेटाचा जबाबदार वापर आणि समवयस्क पुनरावलोकन प्रक्रिया मजबूत करणे; वाढीव बदल जे जबाबदार संशोधन मूल्यांकन आणि मुक्त विज्ञान वरील सामायिक तत्त्वांच्या दिशेने धोरणे आणि कार्यपद्धतींमध्ये सामंजस्य आणि समन्वय साधतात; आंतर/पारंपारिक विज्ञान, पर्यावरणीय आणि स्थानिक समस्यांचे चांगले मूल्यांकन करण्यासाठी नवीन पद्धती आणि डेटा; ग्रंथविविधता आणि बहुभाषिकतेला समर्थन देणाऱ्या सामायिक, इंटरऑपरेबल, शाश्वत, संघटित पायाभूत सुविधा; आणि सहभागी, बॉटम-अप डिझाईन्स जे नागरिक आणि सामाजिक चळवळींचा सहभाग वाढवतात आणि कमी प्रतिनिधित्व केलेल्या संशोधन गटांचा समावेश करतात.

या आव्हानांना तोंड देण्यासाठी, प्रदेशाने संशोधन मूल्यमापनासाठी तत्त्वे आणि मार्गदर्शक तत्त्वांचा संच स्वीकारला आहे. द CLACSO-FOLEC संशोधन मूल्यांकनासाठी तत्त्वांची घोषणा [९५], जून 95 मध्ये मंजूर, गुणवत्ता आणि सामाजिकदृष्ट्या संबंधित विज्ञानाची हमी आणि संरक्षण करण्यासाठी आणि DORA आणि मुक्त विज्ञान, संशोधन आउटपुट आणि संशोधन करिअरची विविधता, प्रादेशिक जर्नल्स आणि अनुक्रमणिका सेवांचे मूल्य, आणि आंतरविषय, स्थानिक भाषा आणि स्थानिक ज्ञान. आजपर्यंत, त्याचे 2022 पेक्षा जास्त अनुयायी आहेत आणि जबाबदार संशोधन मूल्यांकन आणि सुधारणेची उदाहरणे आधीपासूनच सकारात्मक ट्रेंड आहेत. खालील मजकूर बॉक्समध्ये काही राष्ट्रीय उदाहरणे दिली आहेत.

राष्ट्रीय उदाहरण: कोलंबिया

DORA कम्युनिटी एंगेजमेंट अवॉर्डद्वारे निधी प्राप्त, कोलंबियन असोसिएशन ऑफ युनिव्हर्सिटीज, युनिव्हर्सिटी पब्लिशर्स, रिसर्च मॅनेजर आणि विज्ञान आणि तंत्रज्ञान व्यवस्थापनाचे नेटवर्क, कोलंबियामधील जबाबदार मेट्रिक्सच्या संधी आणि आव्हानांवर एकत्र काम करत आहेत. बेंचमार्क म्हणून आंतरराष्ट्रीय संस्थांसह कार्यशाळा आणि सल्लामसलतांच्या मालिकेद्वारे, त्यांनी कोलंबियन संस्थांना त्यांचे स्वतःचे REF डिझाइन करण्यात मदत करण्यासाठी रुब्रिक विकसित केले आहे. हे रूब्रिक स्थानिक स्तरावर ओळखल्या जाणाऱ्या आव्हानांचा लेखाजोखा मांडण्याचा प्रयत्न करते, ज्यात – HEI साठी – संशोधन मूल्यमापन पर्यायांवरील ज्ञानाचा अभाव, राष्ट्रीय संशोधन मूल्यमापन परिसंस्थेचे स्वरूप आणि बदलास प्रतिकार यांचा समावेश होतो. ए समर्पित वेबसाइट संशोधकांना मदत करण्यासाठी इन्फोग्राफिक्ससह विकसित केले गेले आहे आणि देशभरात प्रसार आणि शिक्षण सामायिक केले जात आहे.

अधिक माहिती: कोलंबियन जबाबदार मेट्रिक्स प्रकल्प: संशोधन मूल्यांकनासाठी कोलंबियन संस्थात्मक, पद्धतशीर साधनाकडे | DORA (sfdora.org)

राष्ट्रीय उदाहरण: अर्जेंटिना

मध्ये सुधारणा करण्याचा एक मनोरंजक प्रयत्न राष्ट्रीय वैज्ञानिक आणि तांत्रिक संशोधन परिषद (Consejo Nacional de Investigaciones Científicas y Técnicas – CONICET) ही सामाजिक आणि मानवी विज्ञानांसाठी एक विशेष संकल्पना तयार केली गेली आहे जी मुख्य प्रवाहाच्या सर्किटमध्ये अनुक्रमित नियतकालिकांना समान पातळीवर ठेवते जसे की प्रादेशिक आधारांमध्ये अनुक्रमित जर्नल्स SciELO, रेडिलेक or लॅटिनडेक्स-कॅटालोगो. त्याच्या अंमलबजावणीतील काही संदिग्धता स्पष्ट करण्यासाठी आणि त्याचे निकष विस्तृत करण्यासाठी, नियमन सध्या पुनरावलोकनाधीन आहे. या बदल्यात, 2022 मध्ये, CONICET च्या संचालक मंडळाने सॅन फ्रान्सिस्को DORA चे पालन केले, मूल्यांकन मजबूत करून आणि त्याच्या प्रक्रियांमध्ये सतत सुधारणा करून संशोधन सुधारण्यासाठी आपली वचनबद्धता जाहीरपणे मान्य केली.

The नॅशनल एजन्सी फॉर प्रमोशन ऑफ रिसर्च, टेक्नॉलॉजिकल डेव्हलपमेंट आणि इनोव्हेशन (Agencia Nacional de Promoción de la Investigación, el Desarrollo Tecnológico y la Innovavión – AGENCIA I+D+i), अंतर्गत विज्ञान, तंत्रज्ञान आणि नाविन्य मंत्रालय, त्याच्या उच्च स्पर्धात्मक कॉल्सच्या विविधतेमुळे आणि व्याप्तीमुळे देशातील मुख्य संशोधन निधी आहे. सध्या, AGENCIA राबवत आहे a कार्यक्रम त्यांच्या मुख्य आर्थिक निधीमध्ये संशोधन मूल्यांकन प्रक्रिया मजबूत करण्यासाठी. सध्याच्या सुधारणांमध्ये या प्रक्रियांसह त्यांच्या वचनबद्धतेला उत्तेजन देण्यासाठी समीक्षकांचे मोबदला समाविष्ट आहे, प्रकल्पाचे परिणाम सार्वजनिक डोमेनवर प्रकाशने किंवा ओपन सर्कुलेशनच्या दस्तऐवजांद्वारे निश्चित केले जावेत म्हणून प्रवेश उघडण्यासाठी प्रोत्साहन ('च्या दायित्वांनुसार'प्रवेश संस्थात्मक डिजिटल भांडार उघडा' राष्ट्रीय कायदा 26.899) आणि संशोधन मूल्यांकन प्रक्रियेत लिंग, अप्रस्तुत जनरेशनल गट आणि/किंवा संस्थात्मक बळकटीकरण समतुल्य यंत्रणेद्वारे इक्विटी आणि समावेशकता परिमाणांचा समावेश. तरीही, विविध अनुशासनात्मक समित्यांमध्ये, प्रस्तावांसाठी जबाबदार असलेल्या अग्रगण्य संशोधकांच्या अभ्यासक्रमाच्या पार्श्वभूमीचे त्यांच्या समवयस्कांकडून उद्धरण प्रभाव निर्देशक वापरून मूल्यांकन केले जाते.

शेवटी, DORA कम्युनिटी एंगेजमेंट ग्रँटद्वारे निधी, युनिव्हर्सिडॅड नॅसिओनल दे ला प्लाटा येथील मानसशास्त्र विद्याशाखेने आभासी कार्यक्रम सप्टेंबर 2022 मध्ये मानसशास्त्र आणि सामाजिक विज्ञानातील मूल्यांकनावर 640 देशांमधून 12 पेक्षा जास्त (मोठ्या प्रमाणात पदवीधर) आकर्षित झाले, ज्याने खंडातील तरुण लोकांची आवड दर्शविली. या कार्यक्रमाने प्राध्यापकांच्या चार वर्षांच्या व्यवस्थापन योजनेला आकार देण्यास मदत केली आहे आणि स्पॅनिश-भाषिक संदर्भात शैक्षणिक मूल्यमापनाच्या सुधारणेवर एक पुस्तक सूचित करेल.

राष्ट्रीय उदाहरण: ब्राझील

संशोधन मूल्यमापनावर ब्राझीलमध्ये संशोधन संस्था आणि संशोधकांमध्ये जोरदार चर्चा आहे, जर राज्य आणि संघराज्य सरकारे नाहीत. तथापि, जगात DORA साठी संस्थात्मक स्वाक्षरी करणाऱ्यांची संख्या सर्वाधिक असूनही, संशोधन मूल्यमापन सुधारणांची उदाहरणे आश्चर्यकारकपणे कमी आहेत. देशांतर्गत DORA स्वाक्षरी, संस्थात्मक सल्लामसलत आणि सार्वजनिक कार्यक्रमाच्या सर्वेक्षणानंतर, DORA कम्युनिटी एंगेजमेंट ग्रँटद्वारे निधी दिला जातो, मार्गदर्शन जबाबदार मूल्यमापन पद्धती एक्सप्लोर करण्यासाठी विद्यापीठ नेत्यांसाठी तयार केले गेले आहे.

मार्गदर्शक तीन मुख्य कृतींवर लक्ष केंद्रित करते: (1) सर्व प्रकारात जबाबदार मूल्यमापनाची जागरुकता वाढवणे; (2) मूल्यांकनकर्त्यांचे प्रशिक्षण आणि क्षमता वाढवणे आणि ज्यांचे मूल्यांकन केले जात आहे; आणि (3) अंमलबजावणी आणि मूल्यांकन. मूल्यमापन पद्धती आणि प्रायोगिक संदर्भ-संवेदनशील मॉडेल्समध्ये बदल घडवून आणण्यासाठी आणि शेवटी बदल घडवून आणू इच्छिणाऱ्या ब्राझिलियन संस्थांसाठी रोडमॅप विकसित करण्यासाठी अभ्यासकांचे नेटवर्क - किंवा दहा विद्यापीठ गुप्तचर कार्यालये - तयार करणे हे पुढील चरण आहेत.

Projeto Métricas (2022). ब्राझिलियन उच्च शिक्षणातील जबाबदार मूल्यमापनासाठी संस्थात्मक आव्हाने आणि दृष्टीकोन: Projeto Métricas DORA भागीदारी निष्कर्षांचा सारांश. साओ पाउलो विद्यापीठ, ब्राझील.

उत्तर अमेरिकेत पूर्णपणे परिमाणात्मक निर्देशकांपासून दूर जात आहे, मुक्त विज्ञान अजेंडामुळे वेग वाढला आहे. मुक्त विज्ञान आणि मुक्त पुनरावलोकन मूल्यमापन पद्धती अधिक पारदर्शक बनविण्यात मदत करत आहेत, आत्म-चिंतन आणि समस्यांना तोंड देण्यासाठी संधी प्रदान करतात, उदा. स्व-उद्धरण आणि नियुक्ती, प्रमोशन आणि पीअर रिव्ह्यू पॅनेल, तसेच जन्मजात लिंग आणि इतर पूर्वाग्रह. मूलभूत विज्ञान (प्रगत ज्ञान) आणि उपयोजित विज्ञान (सामाजिक प्रभाव) प्रदान करणाऱ्या मूल्यांकनाच्या संकरित, अभिसरण मॉडेलच्या संभाव्यतेसह, हुशार, बुद्धिमान निर्देशक आणि मूल्यांकनाच्या मिश्र पद्धती विकसित करण्याच्या आवश्यकतेबद्दल वादविवाद चालू आहेत.

कोणत्याही 'फर्स्ट मूव्हर गैरसोय'शिवाय, विद्यापीठांना ते सध्या मूल्यमापनासाठी वापरत असलेल्या साधनांपासून मुक्त होण्यासाठी शैक्षणिक जागा आणि स्वातंत्र्य आवश्यक आहे आणि वापरकर्ता समुदायाने मूल्यमापन प्रक्रियेचा एक भाग असला पाहिजे हे देखील एक मान्यता आहे. ज्ञान, त्याचा ग्रहण आणि प्रभाव. परंतु संशोधन परिसंस्थेच्या वरच्या आणि खालच्या बाजूने बदलासाठी ('इच्छापूर्ण अंधत्व') एक आकस्मिक प्रतिकार देखील आहे - ज्यांना स्थितीचा फायदा होतो आणि ज्यांनी अलीकडेच प्रवेश केला आहे. फार कमी यूएस विद्यापीठांनी DORA वर स्वाक्षरी केली आहे आणि एक नवीन DORA प्रकल्प असे का आहे हे समजून घेण्याचा प्रयत्न करत आहे (तारा). तरीसुद्धा, कॅनडा आणि यूएसए या दोन्ही देशांमध्ये पद्धतशीर बदल घडवून आणण्यासाठी डिझाइन केलेल्या राष्ट्रीय आणि संस्थात्मक उपक्रमांची काही मनोरंजक उदाहरणे आहेत (खालील मजकूर बॉक्स पहा).

राष्ट्रीय उदाहरण: यूएसए

यूएस मध्ये, नॅशनल सायन्स फाऊंडेशन ही तिच्या माध्यमातून बदलासाठी एक अग्रगण्य आवाज आहे समाजात संशोधन प्रभाव प्रगत कार्यक्रम आणि सोबत व्यापक प्रभाव टूलकिट संशोधक आणि मूल्यांकनकर्त्यांसाठी. स्वदेशी आणि पारंपारिकपणे उपेक्षित समुदायांना गुंतवून ठेवण्यासह समता, विविधता आणि समावेश हे प्रमुख चालक आहेत. आयएपी आणि आयएससी सदस्य, यूएस नॅशनल ॲकॅडमी ऑफ सायन्सेस देखील व्यापक सुधारणांना चालना देण्याचा विचार करत आहे, माहितीची देवाणघेवाण करण्यासाठी आणि पारंपारिक संशोधक सीव्ही (NAS स्ट्रॅटेजिक कौन्सिल, 2022). यूएस अकादमींच्या कार्यातून जन्माला आले, द खुल्या शिष्यवृत्तीसाठी उच्च शैक्षणिक नेतृत्व पुढाकार 60 पेक्षा जास्त महाविद्यालये आणि विद्यापीठे यांचा समूह आहे ज्यात खुली शिष्यवृत्ती वाढवण्यासाठी सामूहिक कृती करण्यास वचनबद्ध आहे, ज्यात मोकळेपणा आणि पारदर्शकतेसाठी संशोधन मूल्यमापनाचा पुनर्विचार करणे समाविष्ट आहे.

नॅशनल इन्स्टिट्यूट फॉर हेल्थ, उदाहरणार्थ, एक नवीन डिझाइन केले बायोस्केच (SciENcv) अनुदान अर्जातील कर्मचाऱ्यांसाठी पद्धतशीर पूर्वाग्रह आणि अहवालाचे ओझे कमी करण्यासाठी आणि त्याच वेळी अधिक प्रभाव-चालित होण्यासाठी.

राष्ट्रीय उदाहरण: कॅनडा

कॅनडामध्ये, DORA द्वारे चालविलेल्या संशोधन मूल्यमापनाच्या सुधारणेबद्दल अनेक संभाषणे आहेत; तीनही फेडरल रिसर्च कौन्सिल स्वाक्षरी आहेत. नैसर्गिक विज्ञान आणि अभियांत्रिकी परिषद आहे संशोधन गुणवत्तेसाठी पुन्हा परिभाषित निकष, बिब्लियोमेट्रिक्स, उद्धरण आणि एच-इंडेक्ससह वितरण, DORA तत्त्वांच्या अनुषंगाने: गुणवत्ता मेट्रिक्समध्ये आता चांगला संशोधन डेटा आणि डेटा ऍक्सेस व्यवस्थापन, इक्विटी, विविधता आणि समावेश आणि प्रशिक्षण जबाबदाऱ्या समाविष्ट आहेत. इतर दोन संशोधन परिषदांचे अनुकरण होण्याची शक्यता आहे.

कॅनेडियन संशोधकांचा कल 'नॉलेज मोबिलायझेशन' वर लक्ष केंद्रित करणे, संशोधनाचा सामाजिक प्रभाव वाढवण्याचा हेतुपुरस्सर प्रयत्न, वापरकर्ता समुदायांसह सह-उत्पादनाद्वारे (ISI, 2022). संशोधन प्रभाव कॅनडा हे 20 हून अधिक विद्यापीठांचे नेटवर्क आहे ज्याचे उद्दिष्ट प्रभाव साक्षरतेद्वारे संस्थात्मक क्षमता निर्माण करणे, किंवा 'योग्य प्रभाव लक्ष्ये आणि निर्देशक ओळखणे, प्रभाव मार्गांचे समीक्षक मूल्यांकन करणे आणि ऑप्टिमाइझ करणे आणि संदर्भांमधील दृष्टिकोन तयार करण्यासाठी आवश्यक कौशल्ये प्रतिबिंबित करणे' सार्वजनिक हितासाठी संशोधनाचा जास्तीत जास्त प्रभाव.

हे लक्षात घेण्यासारखे आहे की खूप कमी कॅनेडियन विद्यापीठांनी DORA वर स्वाक्षरी केली आहे. कोणत्याही बदलासाठी मुख्य प्रेरक स्वदेशी शिष्यवृत्ती स्वीकारण्याची शक्यता आहे: हे कॅनडामध्ये नैतिक अत्यावश्यक बनले आहे.

आफ्रिकेतील संशोधन प्रोत्साहन आणि बक्षीस प्रणाली 'आंतरराष्ट्रीय', प्रामुख्याने पाश्चात्य, नियम आणि परंपरा प्रतिबिंबित करतात. आफ्रिकन संस्था संशोधनात 'गुणवत्ता' आणि 'उत्कृष्टता' कडे त्यांचा दृष्टिकोन विकसित करताना त्यांचे अनुसरण करण्याचा प्रयत्न करतात परंतु ते स्थानिक ज्ञान आणि गरजांसाठी नेहमीच योग्य नसतात. संशोधन 'गुणवत्ता', 'उत्कृष्टता' आणि 'परिणाम' खंडावर चांगल्या प्रकारे परिभाषित केलेले नाहीत आणि काही संशोधकांना 'संशोधन प्रभाव' संस्कृतीची सवय नाही.

आफ्रिकेतील मूल्यमापन प्रणाली सामाजिक फायद्यासाठी, अध्यापन, क्षमता-निर्मिती, संशोधन प्रशासन आणि व्यवस्थापनासाठी संशोधनासाठी जबाबदार नाहीत. APCs आफ्रिकन संशोधन आउटपुटमध्ये अडथळे निर्माण करून, प्रकाशन मॉडेल संदर्भ-संवेदनशील नसतात. संशोधन मूल्यमापन प्रणालीतील सुधारणा आफ्रिकन संशोधन सामाजिक आव्हानांमध्ये योगदान देऊ शकणाऱ्या विषमता सुधारण्यास मदत करू शकतात, तसेच आफ्रिकन संशोधन समुदायाला हे करण्यात मदत करण्यासाठी संसाधनांमध्ये प्रवेश सुधारू शकतात. आफ्रिकेसाठी संशोधन गुणवत्ता काय आहे याचा अर्थ लावण्यात मदत करण्यासाठी दृश्ये आणि ज्ञान प्रणालींची विविधता सक्षम करण्यासाठी क्रॉस-सेक्टरल आणि क्रॉस-डिसिप्लिनरी सहकार्यातील अडथळे दूर करणे अत्यावश्यक आहे. संशोधनाच्या गुणवत्तेचे आणि उत्कृष्टतेच्या मूल्यांकनाबाबत स्थानिक, स्वदेशी आणि 'पारंपारिक' जागतिक दृश्ये एकत्रित करणाऱ्या यंत्रणांचा विचार कोणत्याही सुधारणांमध्ये करणे आवश्यक आहे.

खंडात RRA च्या आसपास मजबूत भागीदारी तयार केली जात आहे. डेव्हलपमेंट एजन्सीच्या आंतरराष्ट्रीय संघाद्वारे निधी दिला जातो, द विज्ञान अनुदान परिषद पुढाकार (SGCI) (टिजसेन आणि क्रेमर-म्बुला, २०१७ [९७], [९८]). उप-सहारा आफ्रिकेतील संशोधन उत्कृष्टतेचा मुद्दा आणि प्रकाशनांच्या पलीकडे उत्कृष्टतेच्या कल्पनेचा विस्तार करणाऱ्या दृष्टीकोनाची गरज याचा शोध घेतला.टिजसेन आणि क्रेमर-म्बुला, २०१७ [९९]); संशोधन स्पर्धांच्या अंमलबजावणीतील चांगल्या पद्धतींबद्दल मार्गदर्शक तत्त्वे दस्तऐवज तयार करणे, जे सध्या अद्यतनित केले जात आहे (SGCI [१००]). 100 मधील वर्ल्ड सायन्स फोरममध्ये, SGCI आणि GRC च्या संयुक्त विद्यमाने, दक्षिण आफ्रिकेचे नॅशनल रिसर्च फाउंडेशन (एनआरएफ) आणि विज्ञान आणि नवोपक्रम विभागाने RRA ची प्रगती करण्यासाठी निधी एजन्सींच्या भूमिकेवर चर्चा करण्यासाठी आणि अनुभव सामायिक करण्यासाठी, चांगल्या सरावासाठी आणि क्षमता-बांधणी आणि सहयोगातील प्रगतीचे मूल्यांकन करण्यासाठी आंतरराष्ट्रीय आणि स्थानिक भागीदारांना बोलावले (NRF, 2022 [101]).

The आफ्रिकन पुरावा नेटवर्क [१०२], एका पॅन-आफ्रिकन, 102 हून अधिक प्रॅक्टिशनर्सच्या क्रॉस-सेक्टरल नेटवर्कने ट्रान्सडिसिप्लिनरी रिसर्चच्या मूल्यांकनावर काही काम केले आहे (आफ्रिकन पुरावा नेटवर्क [१०३]) परंतु हे राष्ट्रीय आणि प्रादेशिक मूल्यांकन प्रणालींमध्ये किती प्रमाणात समाविष्ट केले गेले आहे हे अद्याप स्पष्ट नाही. द आफ्रिका संशोधन आणि प्रभाव नेटवर्क [१०३] आफ्रिकेतील विज्ञान, तंत्रज्ञान आणि नवोपक्रम (STI) मूल्यांकनाच्या गुणवत्तेचे मूल्यांकन करण्यासाठी निर्देशकांच्या संग्रहाचा समावेश असलेल्या स्कोअरकार्डवर काम करत आहे, ज्याला STI गुंतवणूक निर्णयांना मार्गदर्शन करण्यासाठी वेब-आधारित निर्णय घेण्याच्या साधनात विकसित होण्याची आशा आहे. .

राष्ट्रीय स्तरावर, वाढीव बदल सुरू झाले आहेत – काही उदाहरणे खालील मजकूर बॉक्समध्ये दिली आहेत. संशोधन निधी एजन्सी पुढाकार घेत असलेल्या इतर देशांमध्ये टांझानिया (COSTECH), मोझांबिक (FNI) आणि बुर्किना फासो (FONRID) यांचा समावेश आहे. GRC चा RRA उपक्रम महाद्वीपातील बदलासाठी एक महत्त्वाचे व्यासपीठ ठरत आहे, जसे की आंतरराष्ट्रीय विकास क्षेत्रातून शिकत आहे, विशेष म्हणजे IDRC च्या संशोधन गुणवत्ता प्लस (RQ+) असेसमेंट फ्रेमवर्क [१०४], या वेगळेपणासह की ते आधीच लागू केले गेले आहे, अभ्यासले गेले आहे आणि सुधारित केले आहे. आफ्रिका-आधारित आंतरराष्ट्रीय मूल्यमापन अकादमी [१०५] एक मनोरंजक संधी देखील प्रदान करू शकते.

राष्ट्रीय उदाहरण: कोट डी'आयव्होर

कोट डी'आयव्होअरच्या मध्यभागी कार्यक्रम Appui Strategique à la Recherche Scientifique (PASRES) (स्ट्रॅटेजिक सपोर्ट प्रोग्राम फॉर सायंटिफिक रिसर्च) हा असा विश्वास आहे की संशोधनातील उत्कृष्टतेने संशोधन प्रकाशनांच्या संख्येच्या पलीकडे जाणे आवश्यक आहे आणि 'संशोधन अपटेक' परिमाण समाविष्ट करणे आवश्यक आहे. राष्ट्रीय संदर्भाशी जुळवून घेत, संशोधन मूल्यमापन प्रक्रिया वैज्ञानिक आणि सामाजिक प्रासंगिकता, भागीदारांचा सहभाग, विद्यार्थी प्रशिक्षण, ज्ञान एकत्रित करणे आणि व्यवहार्यता या निकषांवर आधारित आहे. मूल्यमापन पॅनेलमध्ये वैज्ञानिक तज्ञ (संशोधनाच्या गुणवत्तेचा न्याय करण्यासाठी), खाजगी क्षेत्र (आर्थिक समृद्धीचा न्याय करण्यासाठी) आणि इतर संस्था (संशोधनाची सांस्कृतिक आणि सामाजिक क्षमता मोजण्यासाठी) यांचा समावेश असतो.

PASRES ने दोन स्थानिक नियतकालिकांची स्थापना केली आहे (एक सामाजिक विज्ञान आणि भाषाशास्त्र आणि दुसरी पर्यावरण आणि जैवविविधतेसाठी) आणि त्यांच्या प्रकाशनाचा संपूर्ण खर्च भागवते. शेवटी, संशोधकांना त्यांचे संशोधन खाजगी क्षेत्र आणि नागरी समाजासमोर सादर करण्यास सक्षम करण्यासाठी PASRES क्षमता-निर्माण क्रियाकलाप आणि थीमॅटिक कॉन्फरन्सना निधी देते.

अधिक माहिती: Ouattara, A. and Sangaré, Y. 2020. कोट डी'आयव्होअरमधील संशोधनाला सहाय्यक: प्रकल्प निवडण्यासाठी आणि मूल्यांकन करण्यासाठी प्रक्रिया. ई. क्रेमर-म्बुला, आर. टिजसेन, एमएल वॉलेस, आर. मॅक्लीन (एड्स.), आफ्रिकन माइंड्स, पृ. 138-146

पासरेस || कार्यक्रम d'Appui Strategique Recherche Scientifique (csrs.ch)

राष्ट्रीय उदाहरण: दक्षिण आफ्रिका

दक्षिण आफ्रिका (SA) मधील संशोधन मूल्यमापन प्रामुख्याने बिब्लियोमेट्रिक्सवर केंद्रित आहे. 1986 पासून, जेव्हा उच्च शिक्षण विभागाने (DHET) मान्यताप्राप्त निर्देशांकांच्या जर्नल्समध्ये प्रकाशित होणाऱ्या संशोधन प्रकाशनांसाठी विद्यापीठांना अनुदान देण्याचे धोरण आणले तेव्हा विद्यापीठ संशोधन प्रकाशन उत्पादन प्रति प्रकाशन प्रदान केलेल्या रँड मूल्याबरोबरच वाढले. संशोधन निधी सुरक्षित करण्यासाठी आणि त्यांचे करिअर पुढे नेण्याच्या प्रयत्नात, SA संशोधकांनी शक्य तितक्या लवकर लेख प्रकाशित केले, ज्यामुळे विकृत आणि अनपेक्षित परिणाम निर्माण झाले.

अकादमी ऑफ सायन्स ऑफ साउथ आफ्रिकेने (ASSAf) देशातील विद्वत्तापूर्ण प्रकाशनाचा अहवाल तयार केला (2005-2014) आणि त्यात शंकास्पद संपादकीय पद्धती आणि शिकारी प्रकाशनाचे संकेत आढळले (ASSAf, 2019). वर्गीकरणाच्या सूक्ष्म प्रणालीचा वापर करून, गेल्या दहा वर्षांतील एकूण लेखांपैकी 3.4% लेखांचा अंदाजे आकडा हिंसक असल्याचे ठरवण्यात आले, 2011 पासून आकडेवारी अधिक तीव्रतेने वाढली. भक्षक म्हणून ठरवण्यात आलेल्या जर्नल्सचा DHET वर 'निधीसाठी स्वीकार्य' समावेश करण्यात आला. सर्व SA विद्यापीठांमधील यादी आणि शैक्षणिक सहभागी असल्याचे आढळले (माउटन आणि व्हॅलेंटाइन, 2017).

ASSAf अहवालाने पद्धतशीर, संस्थात्मक आणि वैयक्तिक स्तरावर शिफारशी केल्या आहेत आणि DHET, NRF आणि काही विद्यापीठांद्वारे पुढील उपाययोजनांमुळे SA शैक्षणिक अभ्यासांद्वारे (DHET मान्यताप्राप्त जर्नल्समध्ये) हिंसक प्रकाशनाच्या घटनांसह SA मध्ये भक्षक प्रथा रोखल्या गेल्याचे दिसून येते. 2014 आणि त्यानंतर घट होत आहे. संशोधकांमध्ये अशीही चिंता होती की SA मधील DHET धोरणांनी सहकार्याला परावृत्त केले आणि मोठ्या संशोधन संघांमधील व्यक्तींचे योगदान ओळखण्यात अयशस्वी ठरले, ज्यासाठी कामगिरी मूल्यांकन/संशोधन मूल्यमापन योजनांचे पुनरावृत्ती आवश्यक आहे. प्रकाशन युनिट प्रणालीचा वापर आता संशोधन गुणवत्ता आणि उत्पादकतेचे मूल्यांकन आणि शैक्षणिक निवड आणि प्रोत्साहन यासाठी एक खराब प्रॉक्सी म्हणून ओळखला जातो.

अधिक माहिती:

दक्षिण आफ्रिका विज्ञान अकादमी (एएसएसएएफ). 2019. बारा वर्षे: दक्षिण आफ्रिकेतील संशोधन प्रकाशनावरील दुसरा ASSAf अहवाल. प्रिटोरिया, एएसएसएएफ.

माउटन, जे. आणि व्हॅलेंटाईन, ए. 2017. शिकारी जर्नल्समध्ये दक्षिण आफ्रिकन लेखकांच्या लेखांची व्याप्ती. दक्षिण आफ्रिकन जर्नल ऑफ सायन्स, व्हॉल. 113, क्रमांक 7/8, पृ. 1-9.

माउटन, जे. आणि इतर. 2019. दक्षिण आफ्रिकेच्या संशोधन प्रकाशनांची गुणवत्ता. स्टेलेनबॉश.

2019_assaf_collaborative_research_report.pdf

राष्ट्रीय उदाहरण: नायजेरिया

नायजेरियातील विद्यापीठे तीन मुख्य क्षेत्रांमध्ये संशोधकांचे मूल्यांकन करतात: अध्यापन, संशोधन उत्पादकता आणि समुदाय सेवा. यापैकी, संशोधन उत्पादकता अधिक वजनदार आहे, ज्यामध्ये प्रकाशित पीअर-पुनरावलोकन केलेल्या संशोधन लेखांवर भर दिला जातो आणि या प्रकाशनांमधील लेखकांची संख्या आणि भूमिका (प्रथम लेखकत्व आणि/किंवा संबंधित लेखकत्व) विचारात घेतल्या जातात. जागतिक स्तरावर अधिक स्पर्धात्मक बनण्याच्या प्रयत्नात, बहुतेक विद्यापीठे गुणवत्ता आणि आंतरराष्ट्रीय सहकार्यावर अधिक भर देण्यासाठी आंतरराष्ट्रीय वैज्ञानिक अनुक्रमणिका किंवा SCOPUS द्वारे अनुक्रमित नियतकालिकांना अधिक महत्त्व देतात; आणि या जर्नल्समधील लेखांची टक्केवारी जाहिरात निकष म्हणून वापरा.

याचा एक दुर्दैवी परिणाम असा आहे की अनेक संशोधक, विशेषत: मानवतेतील, या जर्नल्समध्ये प्रकाशित करण्यासाठी पुरेसा निधी आणि/किंवा क्षमता नाही. त्याऐवजी, ते संशोधन लेखांऐवजी अधिक पुनरावलोकने प्रकाशित करतात किंवा बौद्धिक योगदानाऐवजी त्यांच्या आर्थिक योगदानामुळे प्रभावशाली, वरिष्ठ सहकाऱ्यांना सह-लेखक म्हणून समाविष्ट करण्यास भाग पाडतात. शिकारी प्रकाशनांप्रमाणेच साहित्यिक चोरी वाढते. तथापि, नायजेरियन विद्यापीठांच्या एकूण जागतिक क्रमवारीत वाढ झाली आहे, ज्यामुळे सरकार आणि निधी एजन्सींना समाधान मिळाले आहे आणि ते यशस्वी म्हणून पाहिले जात आहे. या बाबतीत नायजेरिया एकटा नाही.

नायजेरियन अकादमी ऑफ सायन्सने स्वतःचे पीअर-रिव्ह्यू केलेले जर्नल फ्लॅगशिप जर्नल म्हणून पुन्हा स्थापित केले आहे ज्यामध्ये शैक्षणिक प्रकाशित करू शकतात (सध्या विनामूल्य) आणि त्यांच्या संस्थांद्वारे उच्च रेट केले जाऊ शकतात.

उच्च स्पर्धात्मक, परिमाणात्मक मेट्रिक्स-चालित मूल्यमापन प्रणाली या प्रदेशावर वर्चस्व गाजवतात, एंग्लोफोन देश विशेषत: मूल्यांकन फ्रेमवर्कला आकार देतात आणि इतर देश अनुसरतात. ऑस्ट्रेलियामध्ये, उदाहरणार्थ, बिब्लियोमेट्रिक्स आणि युनिव्हर्सिटी रँकिंगवर आधारित स्पर्धात्मक निधी व्यवस्था आहे: 'एसडीजी देखील कार्यप्रदर्शन निर्देशकांमध्ये बदलले जात आहेत'. मलेशिया आणि थायलंडमध्येही अशीच आव्हाने आहेत आणि इतर आसियान देशही त्याचे अनुसरण करतील. एक महत्त्वाचा अपवाद हा चीन आहे जिथे सरकार मोठ्या प्रणालीगत बदल घडवण्यात महत्त्वाची भूमिका बजावत आहे आणि ज्याचे जागतिक स्तरावर गंभीर परिणाम होऊ शकतात (पाहा मजकूर बॉक्स).

उत्साहवर्धकपणे, सध्याच्या संशोधन मूल्यमापन प्रणालींच्या मर्यादा आणि संशोधनाच्या अखंडतेला त्यांचा धोका याबद्दल या प्रदेशातील संशोधन समुदायामध्ये जागरूकता आणि चिंता वाढत आहे. नॅशनल यंग अकादमी आणि ASEAN यंग सायंटिस्ट्सच्या नेटवर्कसह, तळागाळातील हालचालींसह ECRs, या मुद्द्यावर वाढत्या प्रमाणात गुंतत असले तरी, ते ऐकण्यासाठी धडपडत आहेत. विद्यापीठाच्या नेतृत्वासह सरकार आणि निधी देणारे समुदाय चर्चेत मोठ्या प्रमाणात अनुपस्थित आहेत: ते परिमाणवाचक मेट्रिक्सला महत्त्व देतात परंतु संशोधनाच्या परिणामांची प्रशंसा करत नाहीत. खरंच, सल्लागारांनी अहवाल दिला आहे की अधिक परिमाणात्मक निकष जोडले जात आहेत, ज्या प्रमाणात संस्था आणि संशोधक प्रणालीशी खेळ करू लागले आहेत, संशोधन गैरवर्तनाला चालना देत आहेत.

परंतु पुढील मजकूर बॉक्समध्ये उदाहरण दिल्याप्रमाणे बदलाच्या महत्त्वपूर्ण संधी आहेत.

राष्ट्रीय उदाहरण: चीन

आता जगातील सर्वात संशोधन-उत्पादक देश (टोलेफसन, 2018; स्टिस्टा, एक्सएनयूएमएक्स), आणि दुसरे संशोधन गुंतवणूकीच्या बाबतीत (OECD, 2020), चीनमध्ये जे घडते त्यात वास्तविक प्रणालीगत बदल होण्याची क्षमता असते. नवीन राज्य-स्तरीय धोरणाचे उद्दिष्ट संशोधनाची 'वैज्ञानिक भावना, नावीन्यपूर्ण गुणवत्ता आणि सेवा योगदान' पुनर्संचयित करणे आणि 'विद्यापीठांना त्यांच्या मूळ शैक्षणिक उद्दिष्टांकडे परत आणण्यासाठी प्रोत्साहन देणे' (सर्वाधिक, २०२०). वेब ऑफ सायन्स इंडिकेटर यापुढे मूल्यमापन किंवा निधीच्या निर्णयासाठी प्रमुख घटक असणार नाहीत किंवा प्रकाशने आणि JIF ची संख्या देखील असणार नाही. उच्च-गुणवत्तेच्या चीनी जर्नल्समधील प्रकाशनांना प्रोत्साहन दिले जाईल आणि त्यांच्या विकासास समर्थन दिले जाईल. 'प्रातिनिधिक प्रकाशने' - संपूर्ण सूचीऐवजी 5-10 निवडपत्रे - मूल्यमापन पॅनेलमध्ये शोधली जात आहेत, ज्यात महत्त्वपूर्ण वैज्ञानिक प्रश्नांचे निराकरण करण्यासाठी, नवीन वैज्ञानिक ज्ञान प्रदान करण्यासाठी किंवा नवीन संशोधनांचा परिचय करून देण्यासाठी आणि वास्तविक प्रगती करण्यासाठी केलेल्या योगदानाचे मूल्यांकन करणारे निकष आहेत. च्या, विशिष्ट क्षेत्र.

संशोधन गुणवत्ता आणि उत्कृष्टता मूल्यमापन प्रणाली स्वतःच्या गरजेनुसार विकसित करताना, मूलभूत संशोधनासाठी चीनची सर्वात मोठी निधी देणारी संस्था, नॅशनल नॅचरल सायन्स फाउंडेशन ऑफ चायना (NSFC) ने 2018 पासून विज्ञानातील बदल प्रतिबिंबित करण्यासाठी पद्धतशीर सुधारणा केल्या आहेत: जागतिक बदल विज्ञान लँडस्केप, ट्रान्सडिसिप्लिनरिटीचे महत्त्व, उपयोजित आणि मूलभूत संशोधनाचे संयोजन आणि संशोधन आणि नवकल्पना यांच्यातील परस्परसंवाद (मॅनफ्रेड हॉर्व्हट, 2018), बायबलियोमेट्रिक्सपासून दूर जात चीनमधील संशोधनाची स्थानिक प्रासंगिकता मजबूत करणाऱ्या प्रणालीकडे (झांग आणि सिव्हर्टसेन, 2020). जिज्ञासा-संचालित व्यत्यय आणणारे संशोधन, संशोधनाच्या सीमेवर ज्वलंत समस्या, आर्थिक आणि सामाजिक मागण्यांवर लागू केलेले उत्कृष्ट विज्ञान आणि मोठ्या आव्हानांना सामोरे जाणाऱ्या ट्रान्सडिसिप्लिनरी संशोधनासाठी प्रस्ताव मूल्यमापनासाठी त्याची समवयस्क पुनरावलोकन प्रणाली सुधारली आहे. 2021 मध्ये, या श्रेणींचा वापर करून 85% प्रस्ताव सबमिट केले गेले आणि त्यांचे पुनरावलोकन केले गेले. अलीकडे, नोव्हेंबर 2022 मध्ये, विज्ञान आणि तंत्रज्ञान प्रतिभा मूल्यमापनासाठी दोन वर्षांची पायलट सुधारणा योजना जाहीर करण्यात आली, ज्यामध्ये आठ मंत्रालये, बारा संशोधन संस्था, नऊ विद्यापीठे आणि सहा स्थानिक सरकारे यांचा समावेश होता. नावीन्यपूर्ण प्रणालीच्या विविध भागांमध्ये गुंतलेल्या विज्ञान आणि तंत्रज्ञान प्रतिभांसाठी मूल्यमापन निर्देशक आणि पद्धतींचा शोध घेणे हे त्याचे उद्दिष्ट असेल.

उपप्रादेशिक उदाहरणः ऑस्ट्रेलिया आणि न्यूझीलंड

ऑस्ट्रेलिया आणि न्यूझीलंड हे दोन्ही देश सध्या महत्त्वाच्या टप्प्यावर आहेत. ऑस्ट्रेलियामध्ये, ऑस्ट्रेलियन रिसर्च कौन्सिलचे चालू समवर्ती पुनरावलोकने, ऑस्ट्रेलियातील संशोधनातील उत्कृष्टता आणि गोल्ड ओपन ऍक्सेस वाटाघाटी एकत्रितपणे संधीची विंडो सादर करतात (रॉस, 2022).

विज्ञान निधीच्या भविष्याबद्दल सार्वजनिक सल्लामसलत केल्यानंतर, न्यूझीलंड एक नवीन विकसित करत आहे पद्धतशीर कार्यक्रम त्याच्या राष्ट्रीय संशोधन आणि नवकल्पना प्रणालीच्या भविष्यासाठी. ऑस्ट्रेलिया आणि न्यूझीलंड या दोन्ही देशांनी त्यांच्या स्वदेशी संशोधन गटांसाठी मेट्रिक्स प्रणाली विकसित करण्यात योगदान दिले आहे (काळजीची तत्त्वे).

राष्ट्रीय उदाहरण: भारत

डिपार्टमेंट ऑफ सायन्स अँड टेक्नॉलॉजीच्या सेंटर फॉर पॉलिसी रिसर्च (DST-CPR) ने भारतातील संशोधन मूल्यमापन आणि त्याच्या सुधारणांवर अलीकडील अभ्यास, प्रमुख भागधारकांसह (राष्ट्रीय निधी संस्था, संशोधन संस्था आणि अकादमी), मुलाखती आणि सर्वेक्षणे यांच्या प्रमुख कार्यशाळा आयोजित केल्या आहेत. असे आढळून आले आहे की, विद्यापीठे आणि राष्ट्रीय धोरण महत्त्वाच्या अनेक संस्था (जसे की कृषी) जवळजवळ केवळ परिमाणात्मक मेट्रिक्सवर लक्ष केंद्रित करतात, काही निधी संस्था आणि भारतीय तंत्रज्ञान संस्था सारख्या संस्था देखील अधिक गुणात्मक उपायांचा अवलंब करत आहेत. उच्च-स्तरीय संस्थांमधील हा अधिक गुणात्मक दृष्टीकोन आधीच राष्ट्रीय प्राधान्यांवरील संशोधनाकडे अधिक निधी वळवण्यासाठी सेवा देत आहे, जरी संशोधनाच्या गुणवत्तेवर आणि परिणामांवर त्याचा काही परिमाणवाचक परिणाम होत आहे की नाही हे सांगणे खूप लवकर आहे.

मूल्यांकनासाठी प्राथमिक बेंचमार्क तज्ज्ञ समितीच्या मतावर आधारित समवयस्क पुनरावलोकन आहे, परंतु केवळ परिमाणवाचक मेट्रिक्सवर आधारित अर्जांच्या प्रारंभिक स्क्रीनिंगनंतरच. या समित्यांसह मूलभूत आव्हाने देखील अस्तित्वात आहेत: विविधतेचा अभाव आणि मुक्त विज्ञान पद्धतींची समज, संशोधनाच्या सामाजिक प्रभावांचा थोडासा विचार आणि खराब क्षमता आणि पूर्वाग्रह. या समस्या आणि मूल्यमापनाच्या पद्धती सामान्यत: कमी समजल्या जातात आणि या विषयावरील मार्गदर्शक तत्त्वे आणि साहित्याची कमतरता आहे.

असे असले तरी, संशोधन मूल्यमापनात सुधारणा करण्याच्या गरजेबद्दल जागरूकता वाढत आहे. DORA समुदाय प्रतिबद्धता अनुदानाद्वारे निधी प्राप्त, इंडियन नॅशनल यंग अकॅडमी ऑफ सायन्सेसने भारतीय विज्ञान संस्था (IISc) आणि DST-CPR सोबत संशोधनाचे मूल्यांकन सुधारले जाऊ शकते अशा मार्गांचा शोध घेण्यासाठी भागीदारी केली – त्यांची चर्चा मुख्य भागधारकांसह सामायिक केली गेली आहे. भारताच्या संशोधन संस्कृतीत सुधारणा करण्याच्या आणि शेवटी बदल करण्याच्या गरजेवर राष्ट्रीय संभाषण उत्तेजित करण्याचा दृष्टीकोन जेणेकरून त्याचे संशोधन अधिक नाविन्यपूर्ण आणि/किंवा सामाजिकदृष्ट्या संबंधित असेल. DST-CPR संशोधन उत्कृष्टतेसाठी एक फ्रेमवर्क विकसित करण्याची अपेक्षा करते जी त्याच्या राष्ट्रीय संस्थात्मक रँकिंग फ्रेमवर्कमध्ये समाकलित केली जाऊ शकते.

अधिक माहिती:

बट्टाचार्जी, एस. २०२२. भारत ज्या पद्धतीने आपल्या संशोधनाचे मूल्यांकन करतो ते आपले काम करत आहे का? - वायर सायन्स

DORA_IdeasForAction.pdf (dstcpriisc.org).

सुचिरादिप्ता, बी. आणि कोले, एम. 2022. भारतातील संशोधन मूल्यांकन: काय राहावे, काय चांगले असू शकते? DST-CPR, IISc.

राष्ट्रीय उदाहरण: जपान

जपानमध्ये संशोधन मूल्यमापन प्रोटोकॉल अत्यंत विकसित आहेत: कॅबिनेट कार्यालयाच्या विज्ञान, तंत्रज्ञान आणि नवोपक्रम परिषदेने जारी केलेल्या 'आर अँड डी मूल्यमापनासाठी राष्ट्रीय मार्गदर्शक तत्त्वे' असताना, शिक्षण, संस्कृती, क्रीडा, विज्ञान आणि तंत्रज्ञान मंत्रालय (MEXT) आणि इतर मंत्रालयांनी त्यांची स्वतःची मार्गदर्शक तत्त्वे देखील विकसित केली आहेत. या सर्वात वर, विद्यापीठे आणि संशोधन संस्थांमध्ये संशोधन आणि संशोधकांसाठी त्यांच्या स्वत: च्या संशोधन मूल्यमापन प्रणाली आहेत, ज्या - जगाच्या अनेक भागांप्रमाणे - संस्थात्मक कामगिरी आणि अर्थसंकल्पीय वाटपाशी जोडल्या गेल्या आहेत.

परिमाणवाचक मूल्यमापनावर अत्याधिक अवलंबनाबद्दल चिंता वाढत आहे. त्याला उत्तर म्हणून जपानच्या विज्ञान परिषदेने तयार केले आहे जपानमधील संशोधन मूल्यमापनाच्या भविष्याबद्दल शिफारस (2022) परिमाणवाचकांवर कमी आणि गुणात्मक उपायांवर अधिक भर, संशोधन मूल्यमापनातील संशोधनातील विविधतेची अधिक ओळख आणि जबाबदारी आणि संशोधन मूल्यमापन पद्धतींच्या सुधारणांमध्ये आंतरराष्ट्रीय ट्रेंडचे निरीक्षण करण्याचे आवाहन. सरतेशेवटी, संशोधनाच्या मूल्यमापनाच्या केंद्रस्थानी संशोधन स्वारस्ये आणि प्रोत्साहन असायला हवे आणि संशोधकांवर थकवा, निरुत्साह आणि जास्त दबाव टाळण्यासाठी केलेले सर्व प्रयत्न.

MEXT ने मूल्यमापन संकेतकांवर केलेल्या सर्वेक्षणात असे आढळून आले की JIF हे अनेक निर्देशकांपैकी एक आहे आणि जपानी संशोधनावर त्याचा फारसा प्रभाव पडलेला नाही, जरी हे शिस्तीवर अवलंबून आहे: उदाहरणार्थ, JIF चा वापर वैद्यकीय शास्त्रांमध्ये जास्त आहे – आणि कमी-पारंपारिक संशोधन क्रियाकलाप, जसे की खुल्या डेटाचे मूल्यमापन होण्याची शक्यता कमी आहे.

अधिक माहिती: शिफारस – विज्ञानाच्या प्रगतीसाठी संशोधन मूल्यमापनाकडे: इष्ट संशोधन मूल्यमापनासाठी आव्हाने आणि संभावना (scj.go.jp)

शेवटी, काही प्रदेश, देश आणि संस्थांमध्ये संशोधन मूल्यमापनाच्या सुधारणेसाठी वाढती गती आहे. येथे स्पष्ट केलेल्या उदाहरणांमध्ये देशव्यापी सुधारणा, बदल शोधणाऱ्या समविचारी संस्थांचे संघटन किंवा युती, विशिष्ट क्षेत्रांचे लक्ष्यीकरण/सुकाणू आणि विकृत प्रोत्साहन आणि वर्तनांना सामोरे जाण्यासाठी हस्तक्षेप यांचा समावेश आहे.

हे अद्याप एक सुसंगत आणि सर्वसमावेशक जागतिक संभाषण नाही किंवा सराव आणि अंतर्दृष्टी उघडपणे सामायिक करणे आवश्यक नाही. काही GYA, IAP आणि ISC सदस्य आधीच या जागेत सक्रिय आहेत आणि त्यांना त्यांचे शिक्षण आणि चांगला सराव एकमेकांशी आणि व्यापक सदस्यत्वासह सामायिक करण्यात मदत करण्यासाठी उपयुक्तपणे संधी शोधल्या जाऊ शकतात. रिसर्च ऑन रिसर्च इन्स्टिट्यूट (RoRI) द्वारे 2023 नंतर ग्लोबल ऑब्झर्व्हेटरी ऑफ रिस्पॉन्सिबल रिसर्च असेसमेंट (AGORRA) लाँच केल्याने शिक्षण सामायिक करण्यासाठी, राष्ट्रीय आणि आंतरराष्ट्रीय सुधारणा प्रणालींच्या तुलनात्मक विश्लेषणासाठी आणि दोन- या प्रणालींमध्ये चांगल्या कल्पनांची देवाणघेवाण आणि चाचणी.

या पेपरने संशोधन मूल्यमापन सुधारणेसाठी प्रमुख चालक, संधी आणि आव्हाने मांडली आहेत आणि जागतिक, प्रादेशिक, राष्ट्रीय आणि संस्थात्मक स्तरावर होत असलेल्या बदलांची उदाहरणे एकत्रित केली आहेत. GYA, IAP आणि ISC आणि त्यांच्या संबंधित सदस्यांना जागतिक संशोधन परिसंस्थेतील महत्त्वाचे घटक म्हणून एकत्रित करणे हा यामागचा उद्देश आहे.

गेल्या दशकातील वैज्ञानिक साहित्य आणि वकिलीच्या कार्यावर आधारित, पाच मुख्य निष्कर्ष आहेत.

1. संशोधन व्यक्ती, संस्था आणि आउटपुटचे मूल्यांकन ज्या पद्धतीने केले जाते त्यावर पुनर्विचार करणे अत्यावश्यक आहे. संशोधनाची अखंडता आणि गुणवत्ता राखणे, वैविध्यपूर्ण, सर्वसमावेशक आणि भेदभावरहित विज्ञान वाढवणे आणि जागतिक सार्वजनिक हितासाठी विज्ञान अनुकूल करणे हे प्रमुख चालक आहेत, जे वेगाने बदलणाऱ्या जगाच्या संदर्भात सेट केले गेले आहेत.

2. ज्या पद्धतीने संशोधन कार्यान्वित, निधी, वितरित आणि संप्रेषण केले जाते ते वेगाने विकसित होत आहे. मिशन-ओरिएंटेड आणि ट्रान्सडिसिप्लिनरी सायन्स, ओपन सायन्स फ्रेमवर्क, पीअर रिव्ह्यूची विकसित मॉडेल्स, एआय आणि मशीन लर्निंगचा वापर आणि सोशल मीडियाचा झपाट्याने वाढ यामुळे संशोधन करण्याच्या आणि संप्रेषणाच्या पारंपरिक पद्धती बदलत आहेत, संशोधन मूल्यमापन प्रणालींवर नवीन विचार करण्याची आवश्यकता आहे. आणि मेट्रिक्स आणि समवयस्क पुनरावलोकन प्रक्रिया त्यास आधार देतात. या प्रणालींना भविष्यात सिद्ध करण्यासाठी अधिक, आणि तातडीने संशोधन आवश्यक आहे.

3. परिमाणवाचक आणि गुणात्मक दोन्ही निर्देशकांसह अधिक संतुलित संशोधन मूल्यमापन प्रणालीसाठी आवश्यक आहे जे संशोधन आउटपुट, प्रक्रिया आणि क्रियाकलापांच्या अनेक प्रकारांना महत्त्व देतात. तथापि, गुणात्मक समवयस्क पुनरावलोकन प्रक्रिया किमान तितक्या महत्त्वाच्या आहेत, हे सांगणे हे बिब्लियोमेट्रिक्स इतके सरळ नाही आणि जगाच्या विविध भागांमध्ये त्यांची मूल्यांकन प्रणाली विकसित करण्याच्या वेगवेगळ्या टप्प्यांवर असल्याने ती आणखी गुंतागुंतीची आहे: काहींमध्ये, संशोधन मूल्यमापन सुधारणांवरील वादविवाद खूप प्रगत आहेत, इतरांमध्ये ते नवजात किंवा अनुपस्थित आहेत.

4. संशोधनाचे मूल्यांकन आणि निधी देण्याच्या सुसंगत मार्गांचा विकास आणि अंमलबजावणी करण्यासाठी मुख्य भागधारक समुदायांना एकत्रित करण्यासाठी एकत्रित आणि वास्तविक जागतिक आणि सर्वसमावेशक पुढाकार आवश्यक आहे; एकमेकांकडून आणि इतर क्षेत्रांकडून शिकणे (विशेषतः संशोधन निधी आणि विकास संस्था). परिवर्तनात्मक बदलाच्या दिशेने सामूहिक, सर्वसमावेशक कृतीसाठी आंतरराष्ट्रीयीकरण किंवा सार्वत्रिकीकरणापेक्षा परस्परसंबंध ओळखणे आवश्यक आहे, म्हणजे संदर्भ-संवेदनशील असणे, जगाच्या विविध भागांसमोरील विविध आव्हाने आणि संशोधन परिसंस्थेची समृद्ध विषमता याची जाणीव असणे आणि त्याच वेळी पुरेशी खात्री करणे. विचलन आणि विखंडन कमी करण्यासाठी सुसंगत संशोधन आणि निधी प्रणाली आणि संशोधक गतिशीलता सक्षम करण्यासाठी एकजिनसीपणा. आंशिक, अनन्य संभाषण ज्यांना ऐतिहासिकरित्या वगळण्यात आले आहे त्यांना आणखी पक्षपाती आणि गैरसोय होण्याचा धोका असतो.

5. सर्व स्तरांवर - जागतिक, प्रादेशिक, राष्ट्रीय आणि संस्थात्मक - बदल आवश्यक आहेत कारण मेट्रिक्स संपूर्ण संशोधन परिसंस्थेद्वारे कॅस्केड करतात आणि हे सर्व स्तर एकमेकांशी जोडलेले आहेत. सर्व भागधारकांनी भागीदार म्हणून त्यांची भूमिका निभावणे आवश्यक आहे विरोधक नव्हे - निधीधारक, विद्यापीठे, विद्यापीठ आणि संशोधन संस्था संघटना, आंतरसरकारी संस्था (IGO), सरकारे आणि सरकारी नेटवर्क, अकादमी, विज्ञान धोरण निर्माते, संशोधन आणि नवोपक्रम व्यवस्थापक आणि वैयक्तिक संशोधक. GYA, IAP आणि ISC सदस्यत्व, एकत्रितपणे, या समृद्ध लँडस्केपचा मोठा भाग व्यापते (आकृती 1, परिशिष्ट C).

आकृती 1: GYA, IAP आणि ISC सदस्यत्वाशी संबंधित भागधारक नकाशा (पाहण्यासाठी क्लिक करा)

GYA, IAP आणि ISC सारख्या संस्थांची संयोजक शक्ती संशोधन परिसंस्थेतील बहुतेक सर्व दृश्ये आणि अनुभवांची विविधता एकत्र आणण्यास मदत करू शकते: विद्यमान आणि नवीन उपक्रमांसह प्रयोग करणे, त्यांच्याकडून शिकणे आणि तयार करणे. गंभीरपणे, ते अभिनेत्यांच्या आर्किटेक्चरला एकत्रित करण्यात मदत करण्यासाठी - सरकार, संशोधन निधी आणि विद्यापीठे आणि DORA सारख्या महत्त्वाच्या जागतिक चळवळी - बदलांना उत्तेजन देणाऱ्या प्रमुख भागधारकांशी संपर्क साधू शकतात. एकत्रितपणे, ते असे करू शकतात:

● अधिवक्ता – त्यांचे सदस्य (i) कनिष्ठ सहकाऱ्यांचे मार्गदर्शक आणि पर्यवेक्षक, (ii) HEI चे नेते, (iii) निधी आणि प्रकाशन प्रशासकीय संस्थांचे बोर्ड सदस्य आणि ( iv) धोरणकर्त्यांना सल्लागार;

● नवोन्मेषक – सर्वसमावेशक आणि नाविन्यपूर्ण मार्गांनी मूलभूत आणि उपयोजित संशोधनाचे मूल्यमापन करण्यासाठी विविध पध्दतींचा शोध घेणे;

● उदाहरणे – त्यांची स्वतःची संस्थात्मक संस्कृती बदलणे – त्यांचे सदस्यत्व, पुरस्कार, प्रकाशन आणि कॉन्फरन्सिंग पद्धती रीफ्रेश करणे, आणि उदाहरणाद्वारे नेतृत्व करणे;

● मूल्यांकनकर्ते – संस्थात्मक आणि वैयक्तिक अशा दोन्ही स्तरांवर सदस्यांच्या भूमिकेचे भांडवल करून ज्यांचे व्यवसाय संशोधक, संशोधन आणि संस्थांचे मूल्यांकन करणे आहे आणि ज्यांच्याकडे प्रकाशन, संपादकीय आणि समीक्षण भूमिका आहेत;

● निधी देणारे – ISC मध्ये प्रतिनिधित्व करणाऱ्या निधी एजन्सी, विशेषतः, आणि मोठ्या राष्ट्रीय आणि आंतरराष्ट्रीय अनुदानांचे व्यवस्थापन आणि वितरण करणारे सदस्य;

● सहयोगी – सुधारणेसाठी आधीच स्थापन केलेल्या मोहिमांना समर्थन देणे, उदा. DORA, EU चे CoARA आणि UNESCO ची मुक्त विज्ञान वचनबद्धता.

या पेपरचे लेखक GYA, IAP आणि ISC आणि त्यांच्यासारख्या संस्थांना पुढील मार्गांनी गुंतण्यासाठी प्रोत्साहित करतात:

कृती 1: शिकणे आणि चांगला सराव सामायिक करा

हा पेपर जगभरातील हस्तक्षेप आणि नवकल्पनांची उदाहरणे हायलाइट करतो. अनुभवांची देवाणघेवाण करण्यासाठी आणि एक मजबूत आणि सर्वसमावेशक 'इच्छुकांची युती' तयार करण्यासाठी जागा महत्त्वाची आहे.

1.1: या जागेत आधीपासूनच सक्रिय असलेल्या सदस्यांना त्यांचे शिक्षण सामायिक करण्यासाठी आणि विशेषत: राष्ट्रीय स्तरावर धोरणात्मक संबंध निर्माण करण्यासाठी व्यासपीठ प्रदान करा. लोकसंख्या मदत करण्यासाठी ही उदाहरणे वापरा DORA चा डॅशबोर्ड [१०६] शिकणे आणि चांगला सराव.

1.2: संस्थात्मक, राष्ट्रीय आणि प्रादेशिक दृष्टीकोन ओळखण्यासाठी आणि चांगले सराव शोधण्यासाठी आणि सामायिक करण्यासाठी संशोधन मूल्यमापन सुधारणांमध्ये सदस्यांच्या नेतृत्वाखालील घडामोडींचे सर्वेक्षण आणि नकाशा. संपूर्ण सदस्यत्वामध्ये वकिली आणि शिक्षण तयार करण्यासाठी ज्यांनी याआधीच प्रमुख राष्ट्रीय आणि आंतरराष्ट्रीय उपक्रमांचे नेतृत्व/गुंतवलं आहे त्यांना बोलावा.

कृती 2: उदाहरणाद्वारे पुढे जा

GYA, IAP आणि ISC सदस्यत्व संशोधन परिसंस्थेच्या अनेक भागांचा समावेश करते आणि प्रत्येक एक शास्त्रज्ञ म्हणून यश कसे दिसते हे ठरवण्यात महत्त्वाची भूमिका बजावू शकते.

2.1: व्यापक सदस्यत्वामध्ये अधिक प्रगतीशील संशोधन मूल्यमापन पद्धतींमध्ये संक्रमण. DORA आणि GRC कडून शिकत असताना त्यांच्या स्वतःच्या सदस्यत्व तत्त्वज्ञान आणि पद्धतींद्वारे संशोधन मूल्यमापनाची संस्कृती बदलण्यास मदत करा. अकादमींना, पारंपारिकपणे उच्चभ्रू संस्था म्हणून, येथे एक विशिष्ट भूमिका बजावायची आहे - त्यांना संशोधन गुणवत्ता आणि प्रभावाची व्यापक आणि अधिक बहुवचन समज प्रतिबिंबित करण्यासाठी निवडणूक आणि निवडीसाठी त्यांचे स्वतःचे निकष विस्तृत करण्यासाठी प्रोत्साहित केले पाहिजे (आणि यासह हे त्यांच्या सदस्यत्वामध्ये अधिक समावेश आणि विविधता आहे.

2.2: प्रादेशिक सहकार्य आणि नेतृत्व उत्तेजित करा. GYA सदस्यांचे प्रादेशिक नेटवर्क आणि राष्ट्रीय तरुण अकादमी, IAP च्या प्रादेशिक अकादमी नेटवर्क आणि ISC च्या प्रादेशिक फोकल पॉइंट्सना ALLEA बोर्डाचे अनुकरण करण्याचा विचार करण्यासाठी प्रोत्साहित करा. पुढाकार, त्यांच्या स्वतःच्या संदर्भानुसार तयार केलेले.

कृती 3: प्रमुख मतदारसंघांसह धोरणात्मक भागीदारी तयार करा.

संशोधन मूल्यमापन सुधारणांना चालना देण्यासाठी जबाबदार असलेले तीन प्राथमिक अभिनेते म्हणजे सरकार, संशोधन निधी आणि विद्यापीठे. GYA, IAP आणि ISC प्रत्येक संशोधन समुदायाला सुधारण्यासाठी आणि सध्या अस्तित्वात असलेले डिस्कनेक्ट दूर करण्यासाठी त्यांच्या प्रयत्नांमध्ये आणण्यास मदत करू शकतात.

3.1: एकत्र काम करण्याचे मार्ग शोधण्यासाठी GRC नेतृत्वाशी संलग्न व्हा - मूलत: सदस्यांना आणि त्यांच्या संबंधित GRC राष्ट्रीय प्रतिनिधींना त्यांचे संशोधन समुदाय कसे सहभागी होऊ शकतात हे शोधण्यासाठी उत्तेजित करण्यासाठी.

3.2: संशोधन समुदायासाठी नवीन प्रशिक्षण साधने विकसित करण्यासाठी विद्यापीठांच्या जागतिक आणि प्रादेशिक नेटवर्क, जसे की इंटरनॅशनल असोसिएशन ऑफ युनिव्हर्सिटीज (IAU) सह व्यस्त रहा; अधिवक्ता म्हणून GYA, IAP आणि ISC च्या सामूहिक सदस्यत्वामध्ये HEI नेतृत्वाचा वापर करा.

3.3: DORA अनुदान देणाऱ्या देशांमध्ये (अर्जेंटिना, ऑस्ट्रेलिया, ब्राझील, कोलंबिया, भारत, जपान, नेदरलँड्स, युगांडा आणि व्हेनेझुएला) सदस्य संस्थांना DORA अनुदानासह कनेक्ट करा-यामुळे कल्पना सामायिक करा आणि या स्थानिक उपक्रमांची संभाव्यता वाढवा.

3.4: आघाडीच्या आंतरराष्ट्रीय विकास संस्थांशी संबंध निर्माण करा जे कमी आणि मध्यम उत्पन्न असलेल्या देशांमध्ये आणि कमी विकसित देशांमध्ये संशोधन मूल्यमापनासाठी नाविन्यपूर्ण आणि प्रभावी धोरणे आधीच तैनात करत आहेत.

3.5: UNESCO अंतर्गत राष्ट्रीय संशोधन मूल्यमापन वचनबद्धतेला आकार देण्यासाठी UNESCO सोबत काम करा मुक्त विज्ञान वर शिफारस.

कृती 4: संशोधन मूल्यमापनाच्या भविष्यावर बौद्धिक नेतृत्व प्रदान करा.

संशोधन मूल्यमापन सुधारणेसाठी विशिष्ट आणि तातडीच्या आव्हानांवर लक्ष केंद्रित करणे अत्यावश्यक आहे. GYA, IAP आणि ISC आणि त्यांच्यासारखे आंतरराष्ट्रीय नेटवर्क, त्यांच्या संबंधित संयोजक शक्ती, त्यांच्या सदस्यांचे बौद्धिक वजन आणि प्रभाव आणि प्रमुख मतदारसंघांशी असलेले संबंध यावर लक्ष केंद्रित करू शकतात.

4.1: संशोधन मूल्यमापन सुधारणेचा पुनर्विचार आणि अंमलबजावणी करण्यासाठी प्रमुख मतदारसंघांसोबत सह-संमेलन करा किंवा 'ट्रान्सफॉर्मेशन लॅब्स' च्या मालिका करा - HEI आणि त्यांचे जागतिक (उदा. IAU आणि IARU) आणि प्रादेशिक नेटवर्क (उदा. LERU आणि AAU) च्या नेत्यांना गुंतवून ठेवा. ]), संशोधन निधी देणारे (GRC राष्ट्रीय प्रतिनिधींसह), आंतरराष्ट्रीय विकास संस्था आणि आघाडीचे प्रकाशक, इतरांसह. या कामाला निधी देण्यासाठी नवीन संसाधने उभारा किंवा विद्यमान संसाधने तैनात करा (काही प्राथमिक कल्पनांसाठी परिशिष्ट डी पहा).

4.2: संशोधन मूल्यमापनाच्या भविष्यातील विकासाच्या महत्त्वाच्या पैलूवर एक नवीन अभ्यास विकसित करा जसे की (1) संशोधन मूल्यमापन आणि समवयस्क पुनरावलोकनावर तांत्रिक प्रगतीचा प्रभाव (वापर आणि गैरवापर या दोन्हीसह), आणि हे भविष्यात कसे विकसित होऊ शकतात आणि ( २) पीअर रिव्ह्यू सिस्टममध्ये अधिक व्यापकपणे सुधारणा करणे (त्याच्या पारदर्शकता, मोकळेपणा, क्षमता, ओळख आणि प्रशिक्षण या दृष्टीने). ज्ञानाची विश्वासार्हता आणि विज्ञानाच्या विश्वासार्हतेसाठी दोन्ही मुद्दे अविभाज्य आहेत.

या सर्व प्रयत्नांच्या केंद्रस्थानी तीन मूलभूत गोष्टी असाव्यात:

• संशोधनाचा सामाजिक परिणाम मोजू शकणाऱ्या परिमाणवाचक निकषांसह, संशोधन आउटपुट आणि कार्याचे अनेक प्रकार समाविष्ट करण्यासाठी पारंपारिक शैक्षणिक मेट्रिक्सच्या पलीकडे वैज्ञानिक संशोधन आणि संशोधकांसाठी मूल्यमापन निकषांचा विस्तार करणे.

• HEI आणि संशोधन निधी देणाऱ्या नेत्यांना संशोधन गुणवत्ता आणि मूल्याचे उपाय म्हणून या नवीन मूल्यमापन निकषांचा अवलंब करण्यासाठी आणि प्रोत्साहन देण्यासाठी प्रोत्साहित करणे.

• संशोधकांच्या भावी पिढ्यांसाठी जागरूकता वाढवण्याच्या आणि प्रशिक्षणाच्या नवीन प्रकारांवर या नेत्यांसोबत काम करणे आणि त्यांना धोरणकर्ते, जनता आणि इतर प्रमुख घटकांशी प्रभावीपणे संवाद साधण्यासाठी आणि गुंतण्यासाठी आवश्यक कौशल्ये सुसज्ज करणे; आणि संशोधन उपक्रमात विविधता आणि समावेश वाढवणे.

या पेपरच्या लेखकांनी असा निष्कर्ष काढला आहे की GYA, IAP आणि ISC सारखे नेटवर्क, इतर प्रमुख घटकांसह आणि समर्थन देणारे, या अजेंडाभोवती संशोधन समुदाय, विद्यापीठे आणि इतर HEI ला एकत्रित करण्यासाठी एक सुसंगत, सहभागी, जागतिक पुढाकार तयार करण्यात मदत करू शकतात आणि विचारात घेऊ शकतात. संशोधन अधिक कार्यक्षम, निष्पक्ष, सर्वसमावेशक आणि प्रभावशाली बनवण्यासाठी मूल्यांकन आणि निधीचे नवीन मार्ग कसे कार्यान्वित करावे.

डाउनलोड

हा पेपर GYA-IAP-ISC स्कोपिंग ग्रुपच्या सदस्यांनी लिहिला होता, ज्यांनी मे 2021 ते फेब्रुवारी 2023 दरम्यान अधूनमधून काम केले (परिशिष्ट A मध्ये अधिक तपशील):

• सारा डी रिजके (चेअर, नेदरलँड)

• क्लेमेन्सिया कोसेंटिनो (यूएसए)

• रॉबिन क्रेवे (दक्षिण आफ्रिका)

• कार्लो डी'इपोलिती (इटली)

• शाहीन मोताला-तिमोल (मॉरिशस)

• नूरसादाह बिंती ए रहमान (मलेशिया)

• लॉरा रोवेली (अर्जेंटिना)

• डेव्हिड वोक्स (ऑस्ट्रेलिया)

• याओ युपेंग (चीन)

कार्यगट ट्रेसी इलियट (ISC वरिष्ठ सल्लागार) यांचे समन्वय आणि मसुदा तयार करण्याच्या कामासाठी आभारी आहे. अतिरिक्त इनपुट आणि समर्थनासाठी ॲलेक्स रशफोर्थ (सेंटर फॉर सायन्स अँड टेक्नॉलॉजी स्टडीज (CWTS), लीडेन युनिव्हर्सिटी, नेदरलँड्स) आणि सारा मूर (ISC) यांना देखील धन्यवाद.

या पेपरच्या (परिशिष्ट ब) तयारीमध्ये ज्यांचा सल्ला घेण्यात आला, त्या सर्वांचाही कार्यगट आभारी आहे, ज्यांनी आपला वेळ दिला आणि आपापल्या देशांत आणि प्रदेशांमधील संशोधन मूल्यमापनावर आपले दृष्टिकोन सामायिक केले आणि GYA द्वारे नामनिर्देशित केलेल्या समीक्षकांचे, IAP आणि ISC:

• करीना बॅथ्यानी, कार्यकारी संचालक, लॅटिन अमेरिकन कौन्सिल ऑफ सोशल सायन्सेस (CLACSO) (उरुग्वे)

• रिचर्ड कॅटलो, संशोधन प्राध्यापक, युनिव्हर्सिटी कॉलेज लंडन (यूके)

• सिबेल एकर, सहाय्यक प्राध्यापक, रॅडबाउंड विद्यापीठ (नेदरलँड)

• एनसीह एरफानी, वैज्ञानिक संशोधक, आंतरराष्ट्रीय सैद्धांतिक भौतिकी केंद्र (इराण, इटली)

• मोटोको कोटानी, कार्यकारी उपाध्यक्ष, रिकेन (जपान)

• प्रदीप कुमार, प्राध्यापक आणि वरिष्ठ संशोधक, विटवॉटरसँड विद्यापीठ (दक्षिण आफ्रिका)

• बून हान लिम, सहयोगी प्राध्यापक, टिंकू अब्दुल रहमान विद्यापीठ (UTAR) (मलेशिया)

• प्रिस्किला कोलिबिया मांटे, वरिष्ठ व्याख्याता, क्वामे एनक्रुमाह विज्ञान आणि तंत्रज्ञान विद्यापीठ (KNUST) (घाना)

• अल्मा हर्नांडेझ-मॉन्ड्रागन, अध्यक्ष, मेक्सिकन असोसिएशन फॉर द ॲडव्हान्समेंट ऑफ सायन्स (AMEXAC) (मेक्सिको)

• खतिजाह मोहम्मद युसूफ, वरिष्ठ प्राध्यापक, पुत्रा मलेशिया विद्यापीठ (UPM) (मलेशिया)

1. युनेस्को. 2021. युनेस्को सायन्स रिपोर्ट: द रेस अगेन्स्ट टाइम फॉर स्मार्ट डेव्हलपमेंट (धडा 1). युनेस्को. https://unesdoc.unesco.org/ark://48223/pf0000377250

2. रॉयल सोसायटी. (2012). एक मुक्त उपक्रम म्हणून विज्ञान. रॉयल सोसायटी सायन्स पॉलिसी सेंटर. https://royalsociety.org/~/media/policy/projects/sape/2012-06-20-saoe.pdf

3. हॉस्टीन, एस. आणि लारिव्हिएर, व्ही. 2014. संशोधनाचे मूल्यांकन करण्यासाठी बिब्लियोमेट्रिक्सचा वापर: शक्यता, मर्यादा आणि प्रतिकूल परिणाम. I. वेल्पे, जे. वॉलरशेम, एस. रिंगेलहान, एम. ऑस्टरलोह (सं.), प्रोत्साहन आणि कार्यप्रदर्शन, चाम, स्प्रिंगर, pp. 121-139.

4. Macleod, M., Michie, S., Roberts, I., Dirnagi, U., Chalmers, I., Ioadnnidis, J., Al-Shi Salman, R., Chan., AW and Glasziou, P. 2014 बायोमेडिकल संशोधन: मूल्य वाढवणे, कचरा कमी करणे. द लॅन्सेट, व्हॉल. 383, क्रमांक 9912, पृ. 101-104.

5. Bol, T., de Vaan, M. आणि van de Rijt, A. 2018. द मॅथ्यू इफेक्ट इन सायन्स फंडिंग. युनायटेड स्टेट्स ऑफ अमेरिकाच्या नॅशनल ॲकॅडमी ऑफ सायन्सेसची कार्यवाही, व्हॉल. 115, क्रमांक 19, पृ. 4887–4890.

6. आंतरराष्ट्रीय विज्ञान परिषद. 2021. विज्ञानाचा रेकॉर्ड उघडणे: डिजिटल युगात विज्ञानासाठी विद्वत्तापूर्ण प्रकाशन कार्य करणे. पॅरिस, फ्रान्स, ISC. https://doi.org/10.24948/2021.01

7. म्युलर, आर. आणि डी रिक, एस. 2017. निर्देशकांसह विचार करणे. जीवन विज्ञानातील शैक्षणिक कार्यप्रदर्शन निर्देशकांच्या ज्ञानविषयक प्रभावांचे अन्वेषण करणे. संशोधन मूल्यमापन, खंड. 26, क्रमांक 3, पृ. 157-168.

8. Ansede, M. 2023. जगातील सर्वात उद्धृत शास्त्रज्ञांपैकी एक, Rafael Luque, 13 वर्षांसाठी वेतनाशिवाय निलंबित. एल पेस. https://english.elpais.com/science-tech/2023-04-02/one-of-the-worlds-most-cited-scientists-rafael-luque-suspended-without-pay-for-13-years. html

9. IAP. 2022. शिकारी शैक्षणिक जर्नल्स आणि कॉन्फरन्सचा सामना करणे. ट्रायस्टे, इटली, IAP. https://www.interacademies.org/publication/predatory-practices-report-English

10. Elliott, T., Fazeen, B., Asrat, A., Cetto, AM., Eriksson, S., Looi, LM आणि Negra, D. 2022. शिकारी शैक्षणिक जर्नल्स आणि कॉन्फरन्सच्या प्रसार आणि प्रभावावरील धारणा: संशोधकांचे जागतिक सर्वेक्षण. शिकलेले प्रकाशन, खंड. 3, क्रमांक 4, पृ. 516-528.

11. कॉलियर, TA 2019. 'सलामी स्लाइसिंग' करिअरला मदत करते पण विज्ञानाला हानी पोहोचवते. निसर्ग मानवी वर्तन, खंड. 3, पृ. 1005-1006.

12. आबाद-गार्सिया, एमएफ 2019. साहित्यिक चोरी आणि शिकारी जर्नल्स: वैज्ञानिक अखंडतेला धोका. Anales De Pediatria (इंग्रजी संस्करण), Vol. 90, क्रमांक 1, पृ. 57.e1–57.e8.

13. Omobowale, AO, Akanle, O., Adeniran, AI आणि Adegboyega, K. 2013. परिधीय शिष्यवृत्ती आणि नायजेरियामध्ये परदेशी सशुल्क प्रकाशनाचा संदर्भ. वर्तमान समाजशास्त्र, खंड. ६२, क्र. ५, पृ. ६६६–६८४.

14. ऑर्डवे, डी.-एम. 2021. शैक्षणिक जर्नल्स, पत्रकार संशोधन मागे घेणे हाताळण्यासाठी चुकीची माहिती कायम ठेवतात. पत्रकारांचे संसाधन. https://journalistsresource.org/home/retraction-research-fake-peer-review/

15. Curry, S., de Rijcke, S., Hatch, A., Pillay, D., van der Weijden, I. आणि Wilsdon, J. 2020. जबाबदार संशोधन मूल्यांकनातील निधीची बदलती भूमिका: प्रगती, अडथळे आणि पुढे मार्ग. लंडन, यूके, संशोधन संस्था संशोधन.

16. ग्लोबल नॉर्थ सामान्यत: औद्योगिक किंवा विकसित अर्थव्यवस्थांचा संदर्भ देते, संयुक्त राष्ट्रसंघाने (2021) परिभाषित केल्यानुसार, तर ग्लोबल साउथ, नव्याने औद्योगिकीकरण झालेल्या किंवा औद्योगिकीकरणाच्या किंवा विकासाच्या प्रक्रियेत असलेल्या आणि वारंवार चालू असलेल्या अर्थव्यवस्थांचा संदर्भ देते. किंवा वसाहतवादाचे पूर्वीचे विषय.

17. इंटरॲकॅडमी भागीदारी. सत्र 12: ग्रेटर इन्क्लूजनमधून विजय: विविधता आणि शैक्षणिक संस्कृती यांच्यातील संबंध. आयएपी https://www.interacademies.org/page/session-12-winning-greater-inclusion-relation-between-diversity-and-academic-culture

18. ग्लोबल यंग अकादमी. वैज्ञानिक उत्कृष्टता कार्य गट. बर्लिन, जर्मनी, GYA. https://globalyoungacademy.net/activities/scientific-excellence/

19. ISC. 2021. अनलीशिंग सायन्स: डिलिव्हरिंग मिशन फॉर सस्टेनेबिलिटी. पॅरिस, फ्रान्स, ISC. doi: 10.24948/2021.04

२०. आयएससी. २०२२. मधील एक उतारा Peter ग्लुकमन यांचे एंडलेस फ्रंटियर सिम्पोजियममधील भाषण. पॅरिस, फ्रान्स. आयएससी. https://council.science/current/blog/an-extract-from-peter-gluckmans-speech-to-the-endless-frontier-symposium/

21. बेल्चर, बी., क्लॉ, आर., डेवेल, आर., जोन्स, एस. आणि पिंटो, डी. 2021. ट्रान्सडिसिप्लिनरी रिसर्च प्लॅनिंग आणि मूल्यांकनासाठी एक साधन. एकत्रीकरण आणि अंमलबजावणी अंतर्दृष्टी. https://i2insights.org/2021/09/02/transdisciplinary-research-evaluation/

22. Belcher, BM, Rasmussen, KE, Kemshaw, MR आणि Zornes, DA 2016. ट्रान्सडिसिप्लिनरी संदर्भात संशोधन गुणवत्तेची व्याख्या आणि मूल्यांकन. संशोधन मूल्यमापन, खंड. 25, क्रमांक 1, पृ. 1-17.

23. विल्सडन, जे. आणि इतर. 2015. द मेट्रिक टाइड: संशोधन मूल्यांकन आणि व्यवस्थापनातील मेट्रिक्सच्या भूमिकेच्या स्वतंत्र पुनरावलोकनाचा अहवाल. HEFCE.

24. युनेस्को. मुक्त विज्ञानावर युनेस्कोची शिफारस. पॅरिस, फ्रान्स, युनेस्को. https://unesdoc.unesco.org/ark://48223/pf0000379949

25. युनेस्कोच्या एका स्रोताने उघड केले की हे काम सध्या थांबलेले आहे कारण वादविवादावर केवळ काही लोकांचे वर्चस्व आहे आणि ते अनेकांशी जुळणे आवश्यक नाही: शिफारशींच्या विकासापूर्वी व्यापक संवाद असणे आवश्यक आहे.

26. बॅरोगा, ई. 2020. समवयस्क पुनरावलोकनासाठी नाविन्यपूर्ण धोरणे. जर्नल ऑफ कोरियन मेडिकल सायन्स, व्हॉल. 35, क्रमांक 20, pp. e138.

27. वुड्स, एचबी, इत्यादी. 2022. विद्वत्तापूर्ण प्रकाशनातील समवयस्क पुनरावलोकनातील नवकल्पना: एक मेटा-सारांश. SocArXiv, doi: 10.31235/osf.io/qaksd

28. Kaltenbrunner, W., Pinfield, S., Waltman, L., Woods, HB आणि Brumberg, J. 2022. नवोदित पीअर रिव्ह्यू, विद्वत्तापूर्ण संप्रेषणाची पुनर्रचना: चालू असलेल्या पीअर रिव्ह्यू इनोव्हेशन क्रियाकलापांचे विश्लेषणात्मक विहंगावलोकन. SocArXiv, doi: 10.31235/osf.io/8hdxu

29. Holm, J., Waltman, L., Newman-Griffis, D. and Wilsdon, J. 2022. संशोधन निधी संस्थांद्वारे मशीन लर्निंग आणि AI च्या वापरात चांगला सराव: कार्यशाळा मालिकेतील अंतर्दृष्टी. लंडन, यूके, संशोधन संस्थेवर संशोधन. https://doi.org/10.6084/m9.figshare.21710015.v1

30. प्रॉक्टर, आर., ग्लोव्हर, बी. आणि जोन्स, ई. 2020. संशोधन 4.0 ऑटोमेशनच्या युगात संशोधन. लंडन, यूके, डेमोस.

31. बेकर, एम. 2015. स्मार्ट सॉफ्टवेअर मानसशास्त्राच्या पेपर्समधील सांख्यिकीय त्रुटी शोधते. निसर्ग, https://doi.org/10.1038/nature.2015.18657

32. व्हॅन नूर्डन, आर. 2022. पीअर रिव्ह्यूचे विश्लेषण करण्यासाठी AI वापरणारे संशोधक. निसर्ग 609, 455.

33. सेवेरिन, एन., स्ट्रिन्झेल, एम., एगर, एम., बॅरोस, टी., सोकोलोव्ह, ए., मौट, जे. आणि मुलर, एस. 2022. अर्क्सिव,

34. Gadd, E. 2022. AI-आधारित उद्धरण मूल्यमापन साधने: चांगले, वाईट किंवा कुरूप? बिब्लियोमॅजिशियन. https://thebibliomagician.wordpress.com/2020/07/23/ai-based-citation-evaluation-tools-good-bad-or-ugly/

35. Foltýnek, T., Meuschke, N. आणि Gipp, B. 2020. शैक्षणिक साहित्यिक चोरीचा शोध: एक पद्धतशीर साहित्य पुनरावलोकन. ACM संगणन सर्वेक्षण, Vol. 52, क्रमांक 6, पृ. 1-42.

36. Quach, K. 2022. प्रकाशक AI चा वापर खराब वैज्ञानिक डॉक्टरिंग डेटा पकडण्यासाठी करतात. रजिस्टर. https://www.theregister.com/2022/09/12/academic_publishers_are_using_ai/

37. व्हॅन डिस, ई., बोलेन, जे., झुइडेमा., व्हॅन रुजी, आर आणि बॉकिंग, सी. 2023. ChatGPT: संशोधनासाठी पाच प्राधान्ये. निसर्ग, खंड. 614, पृ. 224-226.

38. चावला, डी. 2022. संशोधन गुणवत्तेचे मूल्यांकन करण्यात एआयची भूमिका असावी का? निसर्ग, https://doi.org/10.1038/d41586-022-03294-3

39. Cyranoski, D. 2019. कृत्रिम बुद्धिमत्ता चीनमध्ये अनुदान समीक्षकांची निवड करत आहे. निसर्ग, खंड. ५६९, पृ. ३१६–३१७.

40. माईक, टी. 2022. प्रकाशित शैक्षणिक जर्नल लेखांच्या गुणवत्तेचे मशीन लर्निंगद्वारे मूल्यांकन केले जाऊ शकते का? परिमाणात्मक विज्ञान अभ्यास, खंड. 3, क्रमांक 1, पृ. 208-226.

41. चॉम्स्की, एन., रॉबर्ट्स, आय. आणि वाटुमुल, जे. 2023. चॅटजीपीटीचे खोटे वचन. दि न्यूयॉर्क टाईम्स. https://www.nytimes.com/2023/03/08/opinion/noam-chomsky-chatgpt-ai.html

42. स्पष्टीकरण. 2022. संशोधन मूल्यांकन: उत्पत्ती, उत्क्रांती, परिणाम. स्पष्टीकरण. https://clarivate.com/lp/research-assessment-origins-evolutions-outcomes/

43. ब्लाउथ, TF, Gstrein, OJ आणि Zwitter, A. 2022. कृत्रिम बुद्धिमत्ता गुन्हा: AI च्या दुर्भावनापूर्ण वापर आणि दुरुपयोगाचे विहंगावलोकन. IEEE Access, Vol. 10, पृ. 77110–77122.

44. Castelvecchi, D. 2019. AI पायनियर: 'दुरुपयोगाचे धोके अगदी वास्तविक आहेत'. निसर्ग, doi: https://doi.org/10.1038/d41586-019-00505-2

45. जॉर्डन, के. 2022. सोशल मीडिया प्लॅटफॉर्मवरील परस्परसंवादांद्वारे संशोधन प्रभाव आणि प्रतिबद्धता याविषयी शैक्षणिक समज. शिक्षण, मीडिया आणि तंत्रज्ञान, doi: 10.1080/17439884.2022.2065298

46. ​​Wouters, P., Zahedi, Z. आणि Costas, R. 2019. नवीन संशोधन मूल्यमापनासाठी सोशल मीडिया मेट्रिक्स. Glänzel, W., Moed, HF, Schmoch U., Thelwall, M. (eds.), Springer Handbook of Science and Technology Indicators. स्प्रिंगरलिंक.

47. Rafols, I. आणि Stirling, A. 2020. मूल्यमापन उघडण्यासाठी निर्देशकांची रचना करणे. संशोधन मूल्यमापन पासून अंतर्दृष्टी. ResearchGate, doi: 10.31235/osf.io/h2fxp

48. Rich, A., Xuereb, A., Wrobel, B., Kerr, J., Tietjen, K., Mendisu, B., Farjalla, V., Xu, J., Dominik, M., Wuite, G. ., Hod, O. आणि Baul, J. 2022. मूलभूत गोष्टींकडे परत. हॅले, जर्मनी, ग्लोबल यंग अकादमी.

49. जोंग, एल., फ्रॅन्सेन, टी. आणि पिनफिल्ड, एस. 2021. रिसर्च इकोसिस्टममध्ये उत्कृष्टता: एक साहित्य पुनरावलोकन. लंडन, यूके, संशोधन संस्थेवर संशोधन.

50. हॅच, ए. आणि करी, एस. 2020. संशोधन संस्कृती: आपण संशोधनाचे मूल्यमापन कसे करतो ते बदलणे कठीण आहे, परंतु अशक्य नाही. eLife, Vol. 9, पी. e58654.

51. IAP. 2022. शिकारी शैक्षणिक जर्नल्स आणि कॉन्फरन्सचा सामना करणे. ट्रायस्टे, इटली, IAP.

52. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. and Rafols, I. 2015. Bibliometrics: The Leiden Manifesto for Research Metrics. निसर्ग, खंड. ५२०, पृ. ४२९–४३१.

53. पब्लॉन्स. 2018. ग्लोबल स्टेट ऑफ पीअर रिव्ह्यू. लंडन, यूके, क्लेरिव्हेट. https://doi.org/10.14322

54. कोव्हानिस, एम., पोर्चर, आर., रेवॉड, पी. आणि ट्रिनक्वार्ट, एल. 2016. बायोमेडिकल साहित्यात जर्नल पीअर रिव्ह्यूचा जागतिक भार: सामूहिक उपक्रमात मजबूत असंतुलन. PLOS ONE, Vol. 11, क्रमांक 11, पी. e0166387.

55. फॉरेस्टर, बी. 2023. मेटाकुटीला आले आणि जळून खाक झाले: 'शांतता सोडणे' हा शैक्षणिक क्षेत्राला धक्का बसला. निसर्ग, खंड. 615, पृ. 751-753.

56. हॅच, ए. आणि करी, एस. 2020. संशोधन संस्कृती: आपण संशोधनाचे मूल्यमापन कसे करतो ते बदलणे कठीण आहे, परंतु अशक्य नाही. eLife, Vol. 9, पी. e58654.

57. मोहर, डी., ब्यूटर, एल., क्लेइनर्ट, एस., ग्लासझिओ, पी., हर शाम, एम., बार्बर, व्ही., कोरिअट, एएम, फोएगर, एन. आणि दिरनागी, यू. 2020. द हाँग संशोधकांचे मूल्यांकन करण्यासाठी काँग तत्त्वे: संशोधन अखंडता वाढवणे. पीएलओएस जीवशास्त्र, व्हॉल. 18, क्रमांक 7, पी. e3000737.

58. विल्सडन, जे., ऍलन, एल., बेलफिओर, ई., कॅम्पबेल, पी., करी, एस., हिल, एस., जोन्स, आर., केन, आर. आणि केरिज, एस. 2015. द मेट्रिक टाइड: संशोधन मूल्यांकन आणि व्यवस्थापनातील मेट्रिक्सच्या भूमिकेच्या स्वतंत्र पुनरावलोकनाचा अहवाल. doi:10.13140/RG.2.1.4929.1363

59. करी, एस., गॅड, ई. आणि विल्सडन, जे. 2022. मेट्रिक टाइड हार्नेसिंग: यूके रिस्पॉन्सिबल रिसर्च असेसमेंटसाठी निर्देशक, पायाभूत सुविधा आणि प्राधान्यक्रम. लंडन, यूके, संशोधन संस्था संशोधन.

60. निसर्ग संपादकीय. 2022. जबाबदार संशोधन मूल्यांकनासाठी युरोपच्या धाडसी दृष्टीकोनाचे समर्थन करा. निसर्ग, खंड. 607, पी. ६३६.

61. संशोधन मूल्यांकन (DORA) वर घोषणा. https://sfdora.org/about-dora/

62. Hicks, D., Wouters, P., Waltman, L., de Rijcke, S. and Rafols, I. 2015. Bibliometrics: The Leiden Manifesto for Research Metrics. निसर्ग, खंड. ५२०, पृ. ४२९–४३१.

63. करी, एस., गॅड, ई. आणि विल्सडन, जे. 2022. मेट्रिक टाइड हार्नेसिंग: यूके रिस्पॉन्सिबल रिसर्च असेसमेंटसाठी निर्देशक, पायाभूत सुविधा आणि प्राधान्यक्रम. लंडन, यूके, संशोधन संस्था संशोधन. https://rori.figshare.com/articles/report/Harnessing_the_Metric_Tide/21701624

64. DORA. संशोधन मूल्यांकनावर सॅन फ्रान्सिस्को घोषणा. https://sfdora.org/read/

65. DORA. संशोधन मूल्यमापन प्रगत करण्यासाठी साधने. डोरा. https://sfdora.org/project-tara/

66. DORA. DORA कम्युनिटी एंगेजमेंट ग्रँट्स: सपोर्टिंग ॲकॅडमिक असेसमेंट रिफॉर्म https://sfdora.org/dora-community-engagement-grants-supporting-academic-assessment-reform/

67. इनॉर्म्स. संशोधन मूल्यमापनासाठी स्कोप फ्रेमवर्क. https://inorms.net/scope-framework-for-research-evaluation/

68. इनॉर्म्स. स्कोप फ्रेमवर्क. https://inorms.net/scope-framework-for-research-evaluation/

69. टॉरफिन, एस. 2018. संशोधन गुणवत्ता प्लस. आंतरराष्ट्रीय विकास संशोधन केंद्र. https://www.idrc.ca/en/rqplus

70. रीड, सी., कॅलिया, सी., गुएरा, सी. आणि ग्रँट, एल. 2019. ग्लोबल रिसर्चमधील नैतिक कृती: एक टूलकिट. एडिनबर्ग, स्कॉटलंड, एडिनबर्ग विद्यापीठ. https://www.ethical-global-research.ed.ac.uk/

71. वाल्टर्स, सी. 2014. आंतरराष्ट्रीय विकासातील बदलाचे सिद्धांत: संप्रेषण, शिक्षण किंवा जबाबदारी? एशिया फाउंडेशन. https://www.alnap.org/system/files/content/resource/files/main/jsrp17-valters.pdf

72. फ्रेझर, सी., निनाल्टोव्स्की, एमएच, गॉफ, केपी, फर्थ, सी., शर्मन, बी., ब्राइट, एम. आणि डायस, एसएम 2021. रिस्पॉन्सिबल रिसर्च असेसमेंट. जागतिक संशोधन परिषद. https://globalresearchcouncil.org/news/responsible-research-assessment/

73. जागतिक संशोधन परिषद. GRC जबाबदार संशोधन मूल्यांकन. YouTube. https://www.youtube.com/watch?v=CnsqDYHGdDo

74. Curry, S., de Rijcke, S., Hatch, A., Dorsamy, P., van der Weijden, I. आणि Wilsdon, J. 2020. जबाबदार संशोधन मूल्यांकनातील निधीची बदलती भूमिका. लंडन, यूके, संशोधन संस्था संशोधन. https://doi.org/10.6084/m9.figshare.13227914.v1

75. जागतिक संशोधन परिषद. जबाबदार संशोधन मूल्यांकन कार्य गट. GRC. https://globalresearchcouncil.org/about/responsible-research-assessment-working-group/

76. ग्लोबल यंग अकादमी. वैज्ञानिक उत्कृष्टता. GYA. https://globalyoungacademy.net/activities/scientific-excellence/

77. ॲडम्स, जे., बियर्डस्ले, आर., बोर्नमन, एल., ग्रँट, जे., स्झोमझोर, एम. आणि विल्यम्स, के. 2022. संशोधन मूल्यांकन: उत्पत्ती, उत्क्रांती, परिणाम. वैज्ञानिक माहितीसाठी संस्था. https://clarivate.com/ISI-Research-Assessment-Report-v5b-Spreads.pdf

78. DORA. संसाधन लायब्ररी. https://sfdora.org/resource-library

79. सेनेन, बी., हॅच, ए., करी, एस., प्रॉडमॅन, व्ही. आणि लाकोडुक, ए. 2021. शैक्षणिक करिअर मूल्यांकनाची पुनर्कल्पना: इनोव्हेशन आणि चेंजच्या कथा. डोरा. https://eua.eu/downloads/publications/eua-dora-sparc_case%20study%20report.pdf

80. ॲडव्हान्सिंग रिसर्च असेसमेंटसाठी युती (CoARA). https://coara.eu/

81. CoARA. 2022. रिफॉर्मिंग रिसर्च असेसमेंट वर करार. https://coara.eu/app/uploads/2022/09/2022_07_19_rra_agreement_final.pdf

82. निसर्ग संपादकीय. 2022. जबाबदार संशोधन मूल्यांकनासाठी युरोपच्या धाडसी दृष्टीकोनाचे समर्थन करा. निसर्ग, खंड. 607, पी. ६३६.

83. मुक्त आणि वैश्विक विज्ञान. ओपस होम - ओपन अँड युनिव्हर्सल सायन्स (ओपस) प्रकल्प. https://opusproject.eu/

84. Vergoulis, T. 2023. GraspOS अधिक जबाबदार संशोधन मुल्यांकनाकडे पुढे जात आहे. OpenAIRE. https://www.openaire.eu/graspos-moving-forward-to-a-more-responsible-research-assessment

85. युरोपियन संशोधन परिषद. 2022. ERC वैज्ञानिक परिषद 2024 कॉल्ससाठी मूल्यांकन फॉर्म आणि प्रक्रियांमध्ये बदल ठरवते. ERC. https://erc.europa.eu/news-events/news/erc-scientific-council-decides-changes-evaluation-forms-and-processes-2024-calls

86. सर्व युरोपियन अकादमी. 2022. युरोपियन अकादमींमध्ये रिफॉर्मिंग रिसर्च असेसमेंटवर ALLEA स्टेटमेंट. ALLEA. https://allea.org/wp-content/uploads/2022/10/ALLEA-Statement-RRA-in-the-Academies.pdf

87. Eurodoc, MCAA, YAE, ICoRSA आणि GYA. 2022. रिसर्च असेसमेंट आणि ओपन सायन्सच्या अंमलबजावणीवर EU कौन्सिलच्या निष्कर्षांवर संयुक्त विधान. Zenodo, doi: 10.5282/zenodo.7066807.

88. ओव्हरलेट, बी. 2022. बहुआयामी शैक्षणिक करिअरकडे एक मार्ग - संशोधकांच्या मूल्यांकनासाठी एक LERU फ्रेमवर्क. LERU, Leuven, बेल्जियम. https://www.leru.org/files/Publications/LERU_PositionPaper_Framework-for-the-Assessment-of-Researchers.pdf

89. रॉयल सोसायटी. संशोधकांसाठी रेझ्युमे. https://royalsociety.org/topics-policy/projects/research-culture/tools-for-support/resume-for-researchers/

90. ग्रोव्ह, जे. 2021. वर्णनात्मक सीव्ही योग्य कथा सांगतात का? टाइम्स हायर एज्युकेशन (THE). https://www.timeshighereducation.com/depth/do-narrative-cvs-tell-right-story

91. RICYT. रोजगार क्षेत्रातील संशोधक (FTE) 2011-2020. app.ricyt.org/ui/v3/comparative.html?indicator=INVESTEJCSEPER&start_year=2011&end_year=2020

92. CLACSO. 2020. वैज्ञानिक संशोधन मूल्यांकनाचे मूल्यांकन. लॅटिन अमेरिकन फोरम फॉर रिसर्च असेसमेंट (FOLEC) कडून लॅटिन अमेरिका आणि कॅरिबियन मालिकेतील वैज्ञानिक संशोधन मूल्यांकनाच्या परिवर्तनाकडे. CLACSO, ब्यूनस आयर्स, अर्जेंटिना. https://www.clacso.org/wp-content/uploads/2020/05/FOLEC-DIAGNOSTICO-INGLES.pdf

93. CLACSO. 2021. लॅटिन अमेरिका आणि कॅरिबियनमधील मूल्यमापन प्रणालीच्या परिवर्तनाकडे, नवीन मूल्यमापन धोरणांना प्रोत्साहन देण्यासाठी साधने. लॅटिन अमेरिकन फोरम फॉर रिसर्च असेसमेंट (FOLEC) ची मालिका. CLACSO, ब्यूनस आयर्स, अर्जेंटिना. https://www.clacso.org/wp-content/uploads/2022/02/Documento-HERRAMIENTA-2-ENG.pdf

94. ग्रास, एन. 2022. विकासाच्या समस्यांवर आधारित संशोधन मूल्यांकनाचे स्वरूप. लॅटिन अमेरिका आणि कॅरिबियनमधील राष्ट्रीय विज्ञान आणि तंत्रज्ञान संस्था आणि उच्च शिक्षण संस्थांकडून सराव आणि दृष्टीकोन. FOLEC. CLACSO, ब्यूनस आयर्स, अर्जेंटिना. 2022-07-27_Report Forms-of-research-assessment.pdf ENG.pdf (dspacedirect.org)

95. CLACSO ही प्रदेशातील सामाजिक विज्ञान परिषद आहे आणि सामाजिकदृष्ट्या संबंधित आणि जबाबदार विज्ञानासाठी अग्रगण्य चॅम्पियन आहे. लॅटिन अमेरिकन फोरम ऑन रिसर्च असेसमेंट (एफओएलईसी) हे वादविवाद आणि चांगल्या सराव सामायिकरणासाठी एक प्रादेशिक जागा आहे आणि या तत्त्वांना समर्थन देण्यासाठी संशोधन मूल्यांकनासाठी प्रादेशिक मार्गदर्शक तत्त्वे विकसित करत आहे. दोन्ही मजबूत प्रादेशिक नेतृत्व प्रदान करतात.

96. SGCI. सब-सहारा आफ्रिकेतील विज्ञान अनुदान परिषद पुढाकार (SGCI). https://sgciafrica.org/

97. SGCI. Tijssen, R. आणि Kraemer-Mbula, E. 2017. पॉलिसी ब्रीफ: ग्लोबल साउथमधील संशोधन उत्कृष्टतेवर दृष्टीकोन - विकसनशील देशांच्या संदर्भांमध्ये मूल्यांकन, देखरेख आणि मूल्यांकन. SGCI. https://sgciafrica.org/wp-content/uploads/2022/03/Policy-Brief-Perspectives-on-research-excellence-in-the-Global-South_-Assessment-monitoring-and-evaluation-in-developing- country-contexts.pdf

98. टिजसेन, आर. आणि क्रेमर-म्बुला, ई. 2018. आफ्रिकेतील संशोधन उत्कृष्टता: धोरणे, धारणा आणि कार्यप्रदर्शन. SGCI. https://sgciafrica.org/research-excellence-in-africa-policies-perceptions-and-performance/

99. तिजसेन, आर. आणि क्रेमर-म्बुला, ई. 2018. आफ्रिकेतील संशोधन उत्कृष्टता: धोरणे, धारणा आणि कार्यप्रदर्शन. विज्ञान आणि सार्वजनिक धोरण, खंड. ४५ क्रमांक ३, पृष्ठ ३९२–४०३. https://doi.org/45/scipol/scx3

100. SGCI. संशोधन स्पर्धांच्या गुणवत्तेवर चांगले सराव मार्गदर्शक तत्त्वे. https://sgciafrica.org/eng-good-practice-guideline-on-the-quality-of-research-competitions/

101. NRF. NRF आफ्रिकेतील संशोधन भागीदारी प्रगत करण्यासाठी धोरणात्मक बैठकांचे आयोजन करते - नॅशनल रिसर्च फाउंडेशन

102. Belcher, BM, Rasmussen, KE, Kemshaw, MR आणि Zornes, DA 2016. ट्रान्सडिसिप्लिनरी संदर्भात संशोधन गुणवत्तेची व्याख्या आणि मूल्यांकन, संशोधन मूल्यमापन, खंड. 25, pp: 1–17, https://doi.org/10.1093/reseval/rvv025

103. ARIN. 2020. सायन्स टेक्नॉलॉजी आणि इनोव्हेशन (STI) मेट्रिक्स – आफ्रिका संशोधन आणि प्रभाव नेटवर्क (arin-africa.org)

104. McLean R., Ofir Z., Etherington A., Acevedo M. and Feinstein O. 2022. रिसर्च क्वालिटी प्लस (RQ+) - संशोधनाचे वेगळ्या पद्धतीने मूल्यांकन करणे. ओटावा, आंतरराष्ट्रीय विकास संशोधन केंद्र. https://idl-bnc-idrc.dspacedirect.org/bitstream/handle/10625/60945/IDL-60945.pdf?sequence=2&isAllowed=y

105. देखरेख आणि मूल्यमापनासाठी आंतरराष्ट्रीय अकादमी

106. DORA. तारा डॅशबोर्ड. https://sfdora.org/tara-landing-page/

107. IARU, इंटरनॅशनल असोसिएशन ऑफ रिसर्च-इंटेन्सिव्ह युनिव्हर्सिटी; LERU, युरोपियन संशोधन विद्यापीठांची लीग; AAU, आफ्रिकन असोसिएशन ऑफ युनिव्हर्सिटीज