from the article: "The purpose of this paper is to design a rubric instrument for assessing oral presentation performance in higher education and to test its validity with an expert group. Design/methodology/approach This study, using mixed methods, focusses on: designing a rubric by identifying assessment instruments in previous presentation research and implementing essential design characteristics in a preliminary developed rubric; and testing the validity of the constructed instrument with an expert group of higher educational professionals (n=38). Findings The result of this study is a validated rubric instrument consisting of 11 presentation criteria, their related levels in performance, and a five-point scoring scale. These adopted criteria correspond to the widely accepted main criteria for presentations, in both literature and educational practice, regarding aspects as content of the presentation, structure of the presentation, interaction with the audience and presentation delivery. Practical implications Implications for the use of the rubric instrument in educational practice refer to the extent to which the identified criteria should be adapted to the requirements of presenting in a certain domain and whether the amount and complexity of the information in the rubric, as criteria, levels and scales, can be used in an adequate manner within formative assessment processes. Originality/value This instrument offers the opportunity to formatively assess students’ oral presentation performance, since rubrics explicate criteria and expectations. Furthermore, such an instrument also facilitates feedback and self-assessment processes. Finally, the rubric, resulting from this study, could be used in future quasi-experimental studies to measure students’ development in presentation performance in a pre-and post-test situation."
LINK
The main purpose of the research was the development and testing of an assessment tool for the grading of Dutch students' performance in information problem solving during their study tasks. Scholarly literature suggests that an analytical scoring rubric would be a good tool for this.Described in this article are the construction process of such a scoring rubric and the evaluation of the prototype based on the assessment of its usefulness in educational practice, the efficiency in use and the reliability of the rubric. To test this last point, the rubric was used by two professors when they graded the same set of student products. 'Interrater reliability' for the professors' gradings was estimated by calculating absolute agreement of the scores, adjacent agreement and decision consistency. An English version of the scoring rubric has been added to this journal article as an appendix. This rubric can be used in various discipline-based courses in Higher Education in which information problem solving is one of the learning activities. After evaluating the prototype it was concluded that the rubric is particularly useful to graders as it keeps them focussed on relevant aspects during the grading process. If the rubric is used for summative evaluation of credit bearing student work, it is strongly recommended to use the scoring scheme as a whole and to let the grading work be done by at least two different markers. [Jos van Helvoort & the Chartered Institute of Library and Information Professionals-Information Literacy Group]
The aim of this research was to gain evidence based arguments for the use of the scoring rubric for performance assessment of information literacy [1] in Dutch Universities of Applied Sciences. Faculty members from four different departments of The Hague University were interviewed on the ways in which they use the scoring rubric and their arguments for it. A fifth lecturer answered the main question by email. The topic list, which has been used as a guide for the interviews, was based on subject analysis of scholar literature on rubric use. Four of the five respondents used (parts of) the rubric for the measurement of students’ performances in information use but none of them used the rubric as it is. What the faculty staff told the researcher is that the rubric helped them to improve the grading criteria for existing assignments. Only one respondent used the rubric itself, but this lecturer extended it with some new criteria on writing skills. It was also discovered that the rubric is not only used for grading but also for the development of new learning content on research skills. [De hier gepubliceerde versie is het 'accepted paper' van het origineel dat is gepubliceerd op www.springerlink.com . De officiële publicatie kan worden gedownload op http://link.springer.com/chapter/10.1007/978-3-319-03919-0_58]
Werknemers en werkgevers in de Groen Grond Infra (GGI) sector krijgen een steeds grotere rol in de natuurinclusieve transitie binnen de agrarische sector en GGI. Deze groene transitie vereist verschillende soorten kennis, investeringen en inzet van loonwerkers. De betrokken loonwerkers moeten nu niet alleen taken uitvoeren maar ook meedenken over hoe die taken uit te voeren om bij te dragen aan de groene transitie. Een belangrijk onderdeel van deze verandering is dat werknemers als "change agents" gaan optreden. Dit betekent dat ze, dankzij hun kennis en houding, helpen om de groene transitie te realiseren. De GGI-sector omvat veel verschillende werkterreinen, zoals cultuurtechniek, agrarisch loonwerk en beheer van groene ruimtes. Om studenten op te leiden voor de arbeidsmarkt in deze diverse sector, is een nieuwe aanpak nodig. Deze aanpak moet de diversiteit van de sector bedienen en studenten stimuleren om een ondernemende en duurzame rol aan te nemen. Bedrijven, studenten, docenten, onderzoekers en andere betrokkenen gaan in een praktijkonderzoek een leeromgeving creëren die opleidt voor deze "change agents". In dit pilot-onderzoek werken studenten, bedrijven, een docent-onderzoeker, een practor en lector samen met vraaggestuurd onderwijs. Dit betekent dat de leerbehoeften van de studenten centraal staan, binnen kaders van duurzaamheid en natuurinclusiviteit. Het bedrijfsleven en het onderwijs faciliteren het leerproces, bewaken de kaders en reflecteren met de studenten op hun toekomstige rol als "change agents" in de GGI-sector. Het doel van dit pilot-onderzoek is dat studenten GGI(loonwerk) vaardigheden en tools ontwikkelen om mee te denken binnen de groene transitie. Door middel van interviews, Situational Judgement Tests en rubrics wordt inzicht verkregen in dit proces. De onderzoeksvraag is: Hoe kan vraaggestuurd onderwijs, vormgegeven door studenten, bedrijfsleven en Terra MBO, bijdragen aan een ondernemende houding bij GGI-studenten, zodat zij beter kunnen functioneren als "change agents" in toekomstbestendig loonwerk?
Het SIA Raak project Van Goeden Huize helpt controllers aan adviezen en instrumenten om te gaan met hun rol als financiële professional met een wettelijke taak om onafhankelijk toezicht te houden in een complexe omgeving (de zogenoemde onafhankelijke controllersfunctie). Met deze resultaten kunnen zij en hun corporaties bepalen welke persoonlijke competenties kunnen worden versterkt, hoe hun positie moet worden ingebed in de organisatie en welk beleid dit vraagt van de verschillende corporaties.
Het kunnen voeren van een ‘goed’ gesprek vraagt om veel ervaring en kost veel tijd. Door te oefenen en feedback te krijgen op de eigen gespreksvoering, doet de student deze ervaring op. Een online VR-leeromgeving biedt deze mogelijkheid èn komt tegemoet aan de behoefte om in de eigen tijd te leren en niet afhankelijk te zijn van een fysieke setting: het tijd- en plaatsonafhankelijk leren. Het oefenen van sociale vaardigheden met behulp van digitale middelen blijkt effectief te zijn: onderzoek heeft aangetoond dat het positieve impact heeft op de ontwikkeling van kennis en vaardigheden van communiceren. Aansluiting bij strategisch thema Dit project sluit aan op de strategische thema’s ‘horizontaal samenwerken intern’ en ‘samenwerken extern’. Vier partijen zijn betrokken: Instituut Archimedes (initiatiefnemer); lectoraat Communicatie in Digitale Transitie (onderzoek); lectoraat Digitaal Betekenisvol Innoveren (onderzoek) en DEVcake (software). Inzet van digitale middelen om gespreksvaardigheid te oefenen past binnen de HU-ambitie Digitalisering gericht op mens en cultuur. Doel Het doel van dit project is een online VR-leeromgeving te ontwikkelen waarmee een gespreksomgeving wordt gesimuleerd binnen de domeinen: Educatie en Zorg. Inzichten uit het veld van de van pedagogische gespreksvoering in docent-leerling interactie en discoursanalytische inzichten in zorgprofessional-patiënt interactie worden gebruikt om de oefentool, gericht op het voeren van slechtnieuwsgesprekken, te ontwerpen. Resultaten Het project heeft een online VR-leeromgeving opgeleverd, ontwikkelt met het werkveld: docenten en zorgprofessionals. Ontwerp, inhoud en effectiviteit van de tool zijn gevalideerd en getest in samenwerking met de praktijk binnen demo-sessies. Hierin zijn de opgeleverde Rubric, Interactieve PDF en online leeromgeving getest. Daarbij bleek uit de interviews dat een weergave van de verschillende fasen van gespreksvoering niet eerder op deze manier in het onderwijs zijn toegepast. Er volgt nog een wetenschappelijk artikel over het project. Doorwerking in het onderwijsDe tool wordt daarom gezien als een toegevoegde waarde voor het onderwijs, waarbij de docent/fysiotherapeut handelingsrichtlijnen krijgt. De resultaten zijn daarom ook gedeeld met verschillende insitituten binnen Hogeschool Utrecht. Hieronder vallen zowel docenten als studenten van het Insitituut voor Bewegingsstudies, voor Communicatie en Archimedes, instituut Social Work en Ecologische Pedagogiek en de lectoraten Betekenisvol Digitaal Innoveren en Communicatie in Digitale Transitie. Looptijd 01 februari 2020 - 30 december 2021 Aanpak Op basis van een literatuurstudie naar slechtnieuwsgesprekken binnen de twee domeinen Educatie en Zorg worden rubrics ontwikkeld. Deze rubrics zijn gevalideerd met behulp van 25 professionals (docenten en zorgprofessionals). De inhoud van de rubrics vormt – samen met resultaten uit promotieonderzoek - de basis voor de dialogen die in VR-video’s zijn opgenomen. Feedbackmessages zijn opgenomen in de tool. De VR-tool wordt getest onder educatie- en zorgprofessionals. In het laatste stadium van het project worden pilots opgezet binnen de domeinen Educatie en Zorg om de leereffecten te meten.
