In juni 2006 kwamen sleutelfiguren van hogescholen en universiteiten in een expertmeeting bijeen om ervaringen uit te wisselen over het beoordelen 1 van (competenties van) docenten. Deelnemers bogen zich over ‘good practices’ uit zowel hbo als wo. In dit artikel worden de portfoliobeoordelingsprocedures van vier van deze voorbeeldinstellingen beschreven en vergeleken aan de hand van relevante topics. Vervolgens worden de beoordelingsprocedures zelf beoordeeld aan de hand van kwaliteitscriteria. Er wordt afgesloten met conclusies en aanbevelingen. Met dit artikel hopen we onze ervaringen gesystematiseerd toegankelijk te maken voor andere ho-instellingen. We hopen tevens een bijdrage te leveren aan de discussie over het ontwikkelen en beoordelen van docentcompetenties en aan de verdere kwaliteitsverbetering van portfoliobeoordeling.
Dit artikel gaat in op het ontwikkelen van een beoordelingsprocedure voor het afstudeeronderzoek bij de hbo-opleiding Huidtherapie. Het team van deze opleiding heeft een beoordelingsprocedure en rubrics ontwikkeld die zowel voor summatieve als voor formatieve toetsing gebruikt kunnen worden. Alle docenten van het team die betrokken zijn bij de beoordeling van het afstudeerrapport, stemmen twee keer per jaar met elkaar af, door hetzelfde afstudeerrapport te beoordelen en te bespreken. Juist het bespreken lijkt goed te werken en te leiden tot meer overeenstemming tussen beoordelaars.
In de periode januari – juli 2020 heeft een onafhankelijke externe commissie, in opdracht van de Nederlandse Organisatie voor Wetenschappelijk Onderzoek (NWO), het Nationaal Regieorgaan Praktijkgericht Onderzoek SIA (Regieorgaan SIA) geëvalueerd. De evaluatie richt zich op de vraag in hoeverre Regieorgaan SIA de doelstellingen zoals verwoord in het Convenant bereikt, dan wel in hoeverre het aannemelijk is dat Regieorgaan SIA de doelstellingen binnen de convenantsperiode1 zal bereiken. Een laatste evaluatie staatgepland eind 2022. Ter beantwoording van deze vraag heeft de commissie kennisgenomen van de zelfevaluatie en een reeks van rapporten, gesproken met stakeholders en met bestuur en medewerkers van het regieorgaan.De commissie heeft veel waardering ontmoet voor het werk van Regieorgaan SIA en oordeelt zelf ook positief. Tegelijkertijd stelt de commissie vast dat er nog veel te doen is voordat het praktijkgericht onderzoek in Nederland een volwaardige positie heeft in de kennisketen. De evaluatiecommissie acht het noodzakelijk dat Regieorgaan SIA vanuit een einddoel duidelijkemijlpalen formuleert en deze vervolgens operationaliseert. Pas dan kan bepaald worden hoe en met welk instrumentarium scherp gestuurd kan worden op het behalen van deze mijlpalen. Op basis van de evaluatievragen komt de commissie met de volgende aanbevelingen:• De aanbeveling uit 2017 omtrent inhoudelijke sturing blijft geldig en verdient continue strategische aandacht en een kritische zelfblik van organisatie en management. Een scherpere operationalisering van het einddoel is vereist om krachtig te kunnen sturen op de realisatie ervan.• Bevorder het leereffect bij aanvragers. Verbind de criteria waarop wordt beoordeeld helder aan de doelstellingen van het regieorgaan.• Maak een helder onderscheid tussen het verbeteren van de efficiëntie van de eigen organisatie (interne verbetertrajecten) versus het in beeld brengen van de impact van de activiteiten van Regieorgaan SIA op het verbeteren van de positie van het praktijkgericht onderzoek (externe verbetertrajecten).• Formuleer heldere mijlpalen die de stappen markeren naar het beoogde einddoel: het structureel inbedden van het praktijkgericht onderzoek in de publieke kennisinfrastructuur en het creëren van een volwaardige tweede geldstroom voor praktijkgericht onderzoek. Zorg daarnaast dat zowel resultaat als impact van projecten tastbaar en zichtbaar worden.Het einddoel ligt niet binnen de convenantsperiode, de mijlpalen liggen zowel hierbinnen als hierna.• Definieer de beoogde impact en kies voor een instrumentarium dat sterk stuurt op de structurele inbedding en een volwaardige positie van het praktijkgericht onderzoek binnen hogescholen en de kennisketen.• Richt het bestuur in op basis van de gewenste achtergrond en capaciteiten vanbestuursleden, met een persoonlijk profiel en competenties passend bij de overkoepelende visie (ook voorbij de huidige convenantsperiode) van Regieorgaan SIA. Neem een afgevaardigde van het NWO-bestuur op in de bestuurlijke organisatie van Regieorgaan SIA om bestuurlijke wrijving weg te nemen. Kies een voorzitter die fungeert als boegbeeldvoor het praktijkgericht onderzoek.• Houd het projectmatig werken vast en vertaal dit door naar externe processen.• Formuleer een meerjarenstrategie met een einddoel en duidelijke mijlpalen. Stuur en monitor van daaruit op meetbare resultaten op projectniveau.Daarnaast heeft de commissie een viertal aanbevelingen op grond van de bevindingen tijdens de evaluatie:• De naam Regieorgaan SIA verwijst naar de regierol die aan deze organisatie is toegekend. Wees helder over hoe deze rol wordt ingevuld en op welk vlak, en waar niet.• Stem in het kader van het leereffect waar mogelijk de procedures af op de Europese procedures.• Overweeg de rol van het mbo in de kennisketen bij het vormgeven van het vervolg na de convenantsperiode.• Gebruik succesverhalen om de toegevoegde waarde van praktijkgericht onderzoek te laten zien en positief af te laten stralen op zowel het hbo als Regieorgaan SIA.
MULTIFILE
