notulen 08.06.10.doc INTERN DOCUMENT KONINKLIJKE ACADEMIE VOOR OVERZEESE WETENSCHAPPEN Werkgroep Evaluatie van het onderzoek voor ontwikkeling Vergadering van 8 juni 2010 De vergadering wordt om 14 u. 30 geopend door Ivan Beghin. Aanwezig: Raf Dekeyser (KU-Leuven), Isabelle Gérard (KMMA), Georges Stoops, Danielle Swinne, Honoré Vinck en Michèle Wilmet (Dramaix). Verontschuldigd: Jean Berlamont, Paule Bouvier, Ann Debbaut (KMMA), Morgan De Dapper, Danielle de Lame, Herman Diels (VLIR-UOS), Stanny Geerts, Philippe Goyens, André Ozer, Jan Rammeloo, Christian Sturtewagen, Eric Thys, Eric Van Ranst en Yola Verhasselt. Notulen: Els Dereymaeker. Inleiding De bedoeling van deze vergadering is de werkgroep in te lichten over wat er sedert de eerste vergadering (24 februari 2010) in de subgroepen Bibliometric Project en Guidelines is gebeurd. In beide groepen is er de voorbije vier maanden substantiële vooruitgang geboekt en is er eensgezindheid over welke richting de werkzaamheden moeten uitgaan. Het realiseren van de geplande taken zal gebeuren door twee tot drie vrijwilligers per taak. Het Bureau UOS van de VLIR heeft zes medewerkers aangewezen die VLIR-UOS in de verschillende groepen zullen vertegenwoordigen: Bibliometric Project: Roel Merckx (prof. KU-Leuven) en Luc Janssens (VLIR-UOS); Guidelines: Stefaan Marysse (prof. UA) en Herman Diels (VLIR-UOS); Reflection Group for VLIR-UOS Study on Societal Impact: Patrick Sorgeloos (prof. UGent) en Kristien Verbrugghen (directeur VLIR-UOS). Het Koninklijk Museum voor Midden-Afrika heeft twee vertegenwoordigers aangewezen: Bibliometric Project: Isabelle Gérard (hoofd publicatiedienst); Guidelines: Ann Debbaut (Prijs Belgische Ontwikkelingssamenwerking). Raf Dekeyser (prof. KU-Leuven) is lid van de werkgroep en van beide subgroepen. De CIUF-CUD moet de namen van zijn afgevaardigden nog bekendmaken. Ivan Beghin wijst erop dat verschillende leden van de werkgroep zich voor de vergadering van vandaag lieten verontschuldigen, maar dat dit geenszins betekent dat zij geen interesse meer hebben voor het project. 11.06.2010 1
De werkgroep is op zoek naar een rapporteur die, complementair aan het algemene verslag van de vergaderingen, de technische aspecten (technical issues) kan samenvatten. De dagorde wordt goedgekeurd. Goedkeuring van de dagorde De notulen worden goedgekeurd. Goedkeuring van de notulen van de vergadering van 24 februari 2010 Verslag-Stoops Bibliometric Project Georges Stoops heeft de leden van de werkgroep vόόr de vergadering een verslag bezorgd van de eerste vergadering (4 juni 2010) van de subgroep. Hij licht de grote lijnen toe. De opzet van de subgroep was een overzicht op te stellen van wetenschappelijke tijdschriften die niet in de SCI voorkomen, ten behoeve van vorsers uit het Zuiden die, om diverse redenen, geen toegang hebben tot de SCI-tijdschriften. De opmerkingen van Raf Dekeyser, Steven Dessein en Isabelle Gérard m.b.t. de beschikbaarheid van nieuwe evaluatiemogelijkheden (internet, open access repositories, e.a.) leidden tot een boeiende bespreking. Het werd duidelijk dat het oorspronkelijke project moet bijgestuurd worden. Het nieuwe voorstel bestaat erin alle mogelijke informatiebronnen te verzamelen en op grond daarvan aanbevelingen te doen die nuttig en bruikbaar kunnen zijn voor de VLIR- UOS, de CIUF-CUD, Belgische wetenschappelijke instellingen (KMMA, Plantentuin, e.a.) en tijdschriften (Tropicultura, Geo-Eco-Trop) en instellingen in het Zuiden bij de begeleiding van vorsers uit het Zuiden. Georges Stoops vraagt ten slotte dat een gewoon lid zijn taak aan het hoofd van de subgroep zou overnemen (Steven Dessein? Pierre Ozer?). Bespreking Bedoeling van het Bibliometric Project is in ieder geval onderzoekers uit het Zuiden competitief te leren worden (artikels en boeken leren schrijven, web leren gebruiken, e.a.). Vertrekkend van de criteria waaraan goede artikels moeten beantwoorden (hiervoor zou iemand van de VLIR kunnen aangezocht worden), kan aan een ranking van informatiebronnen gewerkt worden. De ranking die de subgroep aanbiedt moet enerzijds voor het Zuiden toegankelijk zijn en anderzijds een forum bieden aan nuttig onderzoek dat in het Zuiden plaatsvindt en voor het Zuiden relevant is (en niet in SCI terechtkomt). Isabelle Gérard is bereid een eerste draft op te stellen. Via Eric Thys zal ook nagegaan worden of Dirk Schoonbaert, bibliothecaris van het ITG, geen interesse heeft om hieraan mee te werken. 11.06.2010 2
Iedereen is het erover eens dat coachen van vorsers uit het Zuiden een must is, maar uit de bespreking blijkt dat er meestal heel veel inspanningen nodig zijn om deze onderzoekers uiteindelijk zonder begeleiding kwalitatief werk te doen afleveren. Het resultaat is in de verschillende continenten (Afrika, Azië, Zuid-Amerika) overigens ook anders. Wel is ondertussen gebleken dat vorsers die coaching kregen hun kennis vaak spontaan doorgeven aan de volgende lichting vorsers. De werkgroep gaat akkoord met het nieuwe project van deze subgroep en wijst erop dat er nood is aan iemand die de komende maanden een stand van zaken van de beschikbare internetevaluatiebronnen kan opstellen. Er wordt echter opgemerkt dat de problematiek van de ontwikkelingslanden in de bronnen op het internet slechts zelden onderstreept wordt. Taakverdeling De leden van de werkgroep die aan de werkzaamheden van deze subgroep wensen deel te nemen kruisen dit op de hiertoe voorziene tabel aan. Gezien de geringe opkomst voor deze vergadering, moet de tabel via andere kanalen (e-mail) aangevuld worden. Kalender Tegen zijn volgende vergadering verwacht de werkgroep van deze subgroep een conrete invulling van het nieuwe project: aanwijzingen over hoe tewerk zal worden gegaan en een taakverdeling. Verslag-Beghin Guidelines Ivan Beghin brengt verslag uit over de twee vergaderingen (29 maart en 10 mei 2010) van deze subgroep en overloopt daarbij de verschillende documenten die de leden van de werkgroep hebben ontvangen. Er is duidelijk vooruitgang geboekt; de vooropgestelde algemene structuur blijkt geschikt voor toepassing en nuttig om de inhoudstafel van de guidelines op te stellen. De oorspronkelijke bijlagen evenals hun nummering worden voorlopig behouden, maar bijlage 4.4 kreeg een meer gedetailleerde onderverdeling. De huidige versie van de algemene inleiding (Guidelines.Introduction.IB_3.6.10) is van Hugues Legros en volstaat voorlopig; iedereen die aan een hoofdstuk werkt kan ze gebruiken. Een verbeterde versie zal er pas komen nadat de werkzaamheden goed gevorderd zijn. Opdat de verschillende hoofdstukken zich op een gelijklopende manier zouden ontwikkelen werd overeengekomen uit te gaan van het hoofdstuk ex-postevaluatie van onderzoeksprojecten, en het, waar nodig, aan te passen. Het is duidelijk dat bij de evaluatie van het onderzoek de wetenschappelijke kwaliteiten een doorslaggevende rol spelen; basisdocumenten voor de auteur van elk hoofdstuk zijn de nota van Raf Dekeyser en de tekst van Jean Berlamont. Het spreekt vanzelf dat de subgroep Guidelines in grote mate afhankelijk is van de vooruitgang die door de subgroep Bibliometric Project geboekt wordt en dat een groot aantal medewerkers die idealiter een zo groot mogelijke waaier aan disciplines vertegenwoordigen en een zo ruim mogelijke ervaring hebben nodig zal zijn. 11.06.2010 3
Ivan Beghin vraagt hulp voor het classificeren van de documenten. Bespreking Er wordt voorgesteld hoofdstuk 4 van de bijlage Guidelines. N 1.Content.IB_1.6.10 als volgt aan te passen: Chapter 4. Evaluation of scientific publications ; het gaat immers niet enkel om tijdschriften. Het voorstel wordt door iedereen bijgetreden. De werkgroep is het eens met de opmerking dat op de documenten die door de subgroepen ter beschikking worden gesteld datum en paginering moeten voorkomen. Er moet iemand gevonden worden om te helpen bij het ordenen van de documenten. Oproep voor vrijwilligers Per deeltaak zijn twee tot drie vrijwilligers nodig, onder wie, bij voorkeur, een lid en een niet-lid van de Academie, liefst uit verschillende disciplines. Ivan Beghin heeft reeds een aantal namen genoteerd van leden die zich voor welbepaalde opdrachten kandidaat stelden, en Georges Stoops heeft een lijst van personen die aan het Bibliometric Project meewerken. De leden van de werkgroep maken hun keuze op de daartoe voorziene tabel bekend. De afwezige leden zullen per e-mail gecontacteerd worden. Werkwijze De werkzaamheden binnen de subgroepen moeten verdergezet worden in functie van de volgende vergadering van de werkgroep. Concrete deadlines zullen in de subgroepen zelf bepaald worden. Het is de bedoeling dat er binnen de verschillende Klassen aan de (bij voorkeur nog niet op rust zijnde) leden gevraagd wordt wie waaraan wil meewerken. Ivan Beghin zal een draft opstellen ten behoeve van de kleine groepen om duidelijk te maken wat er van hen verwacht wordt. Hij zal de leden ook vragen voorbeelden van evaluatierichtlijnen te sprokkelen. Varia Er moet voor gezorgd worden dat de VLIR-UOS en de CIUF-CUD op de volgende vergaderingen vertegenwoordigd zijn. Volgende vergadering De werkgroep vergadert opnieuw op dinsdag 23 november 2010 om 10 uur op het secretariaat van de Academie, Louizalaan 231, 1050 Brussel. De vergadering wordt om 17 u. 10 geheven. 11.06.2010 4
Bijlage: documenten KMMA i.v.m. de Prijs Belgische Ontwikkelingssamenwerking, bezorgd door Ann Debbaut. 11.06.2010 5