Metódy merania výskumu; EWSTranslate
Aj keď sú mladí vedci v oblasti IT informovaní o tom, že potrebujú výsledky výskumu, nie sú presne stanovené ich požiadavky. Namiesto toho sa vedcom zvyčajne dáva neurčité povzbudenie, aby získali niečo „významné“ alebo „mali vysokokvalitné publikácie“ bez presného vysvetlenia toho, čo to znamená.
Vedúcemu výskumnému pracovníkovi sa môže zdať, že medzi staršími ľuďmi existuje sprisahanie - že majú tajnú metódu hodnotenia výskumu, ale nie sú ochotní ju odhaliť. Koniec koncov, môžete počuť nejasné tvrdenie, napríklad: „Výskum jednoducho znamená zhromažďovanie vedomostí“ alebo menej inteligentné: „Je ťažké to definovať, ale dobrý výskum poznám, keď ho vidím.“.
Dôvod, prečo nižší zamestnanec nemôže získať presnejšie vysvetlenie spôsobu merania výskumu, je ten, že neexistuje jediné vysvetlenie. Namiesto toho existuje celý rad opatrení - každá skupina má tendenciu používať opatrenie, ktoré maximalizuje ciele. Niekto chce skutočne poukázať na osobu alebo proti nej, zvolí opatrenie, ktorým pomôže.
Ak ste mladší vedecký pracovník, táto príručka je pre vás. Uvádza zoznam opatrení, vysvetľuje každú z nich a uvádza skutočné fakty. Poznanie tohto zoznamu vám pomôže zapôsobiť na ostatných, keď hovoríte o výskume, a pomôže vám vyhnúť sa nástrahám.
Prístup denného papiera
(uprednostňujú redaktori časopisov)
Opatrenie: N, celkový počet publikovaných prác.
Motivácia: Vedec, ktorý vytvorí novú myšlienku, napíše príspevok, ktorý potom posúdia kolegovia a uverejní v archívnom časopise. Počet prác je teda mierou produktivity.
Fakty: Normy pre publikácie sa veľmi líšia, niektoré konferencie a časopisy akceptujú všetky komentáre a iné iba niekoľko. Dôležitejšie je, že takmer všetok výskum je zbytočný; nikto neprečíta dokumenty. (Jedna štúdia odhaduje, že daný výskumný dokument v priemere prečíta 0,5 ľudí, pričom počet sa nakloní smerom nahor o niekoľko prečítaných papierov).
Varovania: Mandátové výbory, aj keď argumentujú inak, používajú toto opatrenie, pretože je oveľa jednoduchšie spočítať dokumenty ako posúdiť ich vecnú stránku. Majte na pamäti, že toto opatrenie obzvlášť miluje ľudí so šedými vlasmi, pretože zarábajú citovaním - ich osobná hodnota je oveľa vyššia ako hodnota mladého výskumníka. Pri použití tohto opatrenia sa nechváľte spoluautormi, pretože kredit má znížený, ak má dielo viac autorov.
Blíži sa tempo publikovania
(uprednostňujú mladí vedci)
Opatrenie: N/T, celkový pomer publikovaných prác do času vydania.
Zdôvodnenie: počet článkov je nedostatočný, pretože nemeria produktivitu - ak vedecký pracovník publikuje 10 článkov za rok, je to mimoriadne produktívne, ale ak publikuje 10 článkov za život, sú mimoriadne neproduktívne.
Fakty: Miera publikácie výskumného pracovníka sa časom líši; skutočné vrcholy sa objavia tesne predtým, ako sa uvažuje o povýšení jednotlivca, a miera zvyčajne dramaticky klesá v rokoch pred dôchodkom. Ako starý výskumník teda už nehovoria o N/T a vracajú sa k meraniu N. Upozornenie: Riadiace výbory sú znepokojené tým, že ktokoľvek toto opatrenie cituje. Navyše buďte realisti - partia hnedovlasých chlapov vás za vysokú sadzbu neodmení, keď sami čelia sadzbe, ktorá klesla.
Vážený prístup k publikácii
(uprednostňujú akreditačné agentúry)
Miesto: W, súčet váh priradených publikovaným prácam.
Zdôvodnenie: Pretože niektoré práce sú intelektuálnejším úspechom ako iné, mala by mať každá štúdia váhu zodpovedajúcu jej kvalite. Namiesto počítania papierov by sa mal použiť súčet váh. Napríklad vedecké práce môžu mať nulovú alebo takmer nulovú hmotnosť.
Fakty: Ľudia, ktorí používajú túto metódu, namiesto toho, aby hodnotili každý jednotlivý príspevok, priradia každému časopisu váhu podľa jeho prestíže a potom použijú hodnotu pre akýkoľvek príspevok, ktorý sa v denníku objaví. Samozrejme, prestíž časopisu sa časom mení a neexistuje časopis, v ktorom by boli všetky diela jednotnej kvality, ale zdá sa, že to nemá význam. Krása tohto opatrenia je, že vzhľadom na súbor publikácií môžete zvoliť váhy, aby bol zoznam dobrý alebo zlý.
Upozornenie: Pri diskusii o tomto opatrení nezabúdajte, že výber váh je ľubovoľný a že aj keď osoba môže predložiť dôkazy odôvodňujúce jej výber, nakoniec sa zdá, že každý uprednostňuje váhu, ktorá dáva osobnej reklame vysoké hodnotenie.
Milióny prístupov opíc
(uprednostňujú vládne grantové agentúry)
Opatrenie: G, celková suma peňazí daňových poplatníkov rozdelená na výskum.
Motivácia: Vzhľadom na dostatočne dlhý čas náhodná skupina výskumníkov, ktorá udrie na klávesy, nakoniec napíše príspevok o niečom, čo bude pre krajinu prospešné. Vláda s cieľom stimulovať viac výskumných pracovníkov k produkcii väčšieho počtu papierov zhromažďuje návrhy a dáva peniaze najlepšiemu percentuálnemu podielu. “Poskytnutie väčšieho množstva peňazí teda stimuluje viac papierov, čo zvýši úžitok krajiny.
Fakty: Grantový systém má bližšie k lotérii ako k národným výhodám. Aby sa zabezpečilo, že všetko je „rovnaké“, vládne agentúry sa často riadia politickou agendou, čo znamená, že pravdepodobnosť získania grantu môže závisieť od faktorov, ako je veľkosť inštitúcie, geografické umiestnenie, rasa a pohlavie. V extrémnych prípadoch dostane žiadateľ list, v ktorom ho informuje, že bol vybraný pre grant, musí však svoj návrh preskúmať, pretože vedecký obsah je neprijateľný.
Upozornenie: Neberte to tak či onak osobne - vládny grant nemusí nutne znamenať, že máte skvelý nápad, ani odmietnutie vládneho grantu neznamená, že tento nápad nemá žiadnu hodnotu.
Prístup priameho financovania
(uprednostňujú vedúci oddelení)
Opatrenie: D, celkové nenávratné finančné prostriedky získané výskumným pracovníkom.
Zdôvodnenie: Vedci, ktorým sa udeľujú granty na výskum, musia mať dobré nápady (inak by grantová agentúra nezískala peniaze). Viac peňazí teda musí znamenať viac nápadov.
Skutočné fakty: Vedúcim katedier záleží iba na zapôsobení na dekanov a vedúcim katedier na iných inštitúciách - radi sa chvália celkovou výškou nenávratných finančných prostriedkov, ktorú priniesli všetci členovia ich katedry. Bohužiaľ, výška nenávratných finančných prostriedkov, ktoré je možné zhromaždiť, závisí viac od dostupnej sumy ako od kvality navrhovaného výskumu. Vlády dajú viac, keď im pretečú hruď (alebo keď majú nejakú politickú výhodu); priemysel ponúka oveľa viac, keď sú zisky vysoké (alebo keď môžu získať oslobodenie od dane).
Upozornenie: Opäť nečítajte príliš veľa v grantoch - bez ohľadu na to, kto hovorí, že množstvo peňazí, ktoré dostanete (menej alebo menej), nie je vždy úmerné kvalite vašich nápadov.
Metóda nepriameho financovania
(uprednostňujú správcovia univerzity)
Opatrenie: Ó, celkové vygenerované doláre.
Odôvodnenie: Ak je výskumnému pracovníkovi pridelených vládne peniaze v hodnote N dolárov, 1/3 z nich je označená ako „nepriame náklady“ alebo „režijné náklady“, ktoré hradia kancelárske priestory, elektrinu a účtovanie vzniknutých výdavkov. Režijné náklady sú mierou objemu výskumného pracovníka v inštitúcii.
Fakty: Potrebné sú kancelárske priestory s grantom alebo bez grantu a veľké výskumné inštitúcie už majú účtovné postupy a systémy. Nepriame náklady sú teda iba jedným zo spôsobov, ako môže inštitúcia vyberať peniaze z výskumných fondov.
Upozornenie: Dotácie na vybavenie sú vyňaté z nepriamych nákladov, takže sa nechváľte na administrátora veľkým grantom na vybavenie - neurobí to dojem. Majte tiež na pamäti, že nepriame náklady sa generujú vtedy, keď sa peniaze minú, nie keď sa dajú. Ak teda peniaze miniete v januári, namiesto decembra sa výdavky zahrnú do nového a nie do starého roku.
Prístup spodného riadku
(uprednostňujú priemyselné výskumné laboratóriá)
Opatrenie: P, zisk z patentov alebo výrobkov získaných z výskumu.
Motivácia: Priemysel vytvára výskumné laboratórium v prospech obchodných jednotiek, nielen ako spôsob vynakladania nadmerných ziskov. V priemyselnom svete je teda logické merať výskum podľa toho, ako pomáha v konečnom dôsledku.
Skutočné fakty: Takmer žiadny výskum nemá žiadny skutočný vplyv na zisky spoločnosti. Aj keď sa výskumná myšlienka zmení na produkt, generovaný výnos závisí oveľa viac od marketingu ako od kvality základnej myšlienky (existujú dokonca dôkazy o inverznom vzťahu medzi kvalitou produktu a ziskom).
Upozornenie: Príjem je strašnou mierou kvality výskumu, pretože hlúpe alebo triviálne nápady často vytvárajú najväčší zisk; nepredpokladajte, že myšlienka má vedecké opodstatnenie len preto, že zarába peniaze, a neznamená to inak, ak nie.
Hodnotenie dopadového prístupu
(uprednostňujú výskumníci, ktorí skutočne niečo robia)
Záver
Ak váš výskum nevyzerá v súčasnom meradle dobre, možno je čas opatrenie zmeniť!