De beslissingen voor benoemingen voor het ZAP zijn voor dit jaar genomen, en vermoedelijk zijn de meeste collega's reeds voor een bespreking bij hun respectievelijke decanen langsgeweest. Een van de aspecten waar naar gekeken wordt in de beoordeling van dossiers is de wetenschappelijke output. Dat meet zich natuurlijk in aantallen papers in journals, conferenties e.d., maar evengoed in citaties (anderen die naar jouw papers refereren). Dit klinkt allemaal zeer aannemelijk, maar er zitten toch enkele adders onder het gras, die het niet makkelijk maken om verschillende dossiers met elkaar te vergelijken. Ik wil hier niet ingaan op het beslissingsproces zelf (het is niet gemakkelijk om appels met peren en met citroenen te vergelijken), maar wel op de manier waarop men nagaat hoeveel citaties behaald zijn.
Zo werd gevraagd aan kandidaten om citaties van hun eigen papers te geven die gerapporteerd worden via Citeseer. Citeseer is, ten minste voor computerwetenschappen, al enkele jaren niet meer ge-updeet. Mijn meest recente publicatie die door Citeseer gerapporteerd wordt dateert van 2003. Niet erg relevant voor een snel evoluerend domein als computerwetenschappen. Ik hoop dan ook dat de beoordelingscommissie de Citeseer resultaten met een grote korrel zout nemen.
Heel wat betrouwbaarder (en waar trouwens ook naar gevraagd werd), en zeker voor computer graphics waar ongeveer alle papers online beschikbaar zijn, is Google Scholar. Een goede tool om te zoeken a.d.h.v. data in Google Scholar is Publish or Perish. Niet enkel worden de aantallen citaties weergegeven, maar ook allerlei indicatoren zoals de h-factor of g-factor van een wetenschapper. Een h-factor die gelijk is aan x, betekent dat je x papers gepubliceerd hebt die elk tenminste x citaties halen. De achterliggende redenering is dat veel papers publiceren goed is, maar die moeten ook gerefereerd worden. Een boel papers die elk slechts eenmaal gerefereerd worden stellen weinig voor.
Het is vrij leuk om eens te spelen met de Publish or Perish tool en na te gaan hoeveel citaties collega's effectief halen. Perceptie en realiteit liggen soms ver van elkaar verwijderd ...
Geen opmerkingen:
Een reactie posten