Deel 17: facultair toetsbeleid

Uitgangspunt

- Dit is een kerntaak van de CKO en OC’s en een cruciaal element bij de komende visitatie: op welke manier worden beoogde competenties daadwerkelijk getoetst?

- Er is nood aan een overzicht (hoe en wat toetsen we?). Het gaat in eerste instantie om de vorm (hoe communiceer je dit naar de studenten, criteria). Daarnaast zal ook de inhoud worden bekeken in het kader van horizontale en/of verticale samenhang van het programma (leerlijnen).

- Goeie praktijken benadrukken. Vaak nog niet zichtbaar genoeg => meer reflectie dan controle. De faculteit wil meedenken over het toetsbeleid, niet controleren.

- Enkele concrete issues hebben het thema nog meer op de voorgrond geplaatst: lage slaagcijfers bij sommige vakken (bijv. in hogere jaren), discrepantie in punten bij beoordeling papers (onderzoekspaper/masterproef), gebrek aan transparantie voor studenten (bv mondelinge examens: hoe wordt dit precies beoordeeld?), multiple choice en giscorrecties, gebrek aan inzicht in lokale academische cultuur voor gast- en nieuwe docenten…

- Er wordt een overkoepelende facultaire toetscommissie opgericht, en een toetscommissie per opleidingscommissie, om een en ander op te volgen en te coördineren. Aan de lesgevers zal gevraagd worden om informatie over hun toetspraktijk (incl. examenvragen) mee te delen. Ook studenten zullen meer diepgaand bevraagd worden over de toetspraktijk.

In deze nota:

(1) Beknopte achtergrond over het UGent-toetsbeleid
(2) Een voorstel voor Facultair Toetsconcept
(3) Een voorstel voor oprichting Facultaire Toetscommissie + werkwijze
(4) Een voorstel voor oprichting Opleidingsspecifieke Toetscommissies + werkwijze

Beknopte achtergrond UGent-toetsbeleid

Toetsbeleid UGent = samenhangend geheel van maatregelen en voorzieningen om de kwaliteit van toetsing te bewaken en te bevorderen. UGent opteert voor een toetsmodel bestaande uit drie fasen (nastreven, meten en borgen) en drie betrokkenheidsniveaus (docenten, opleidingen en de universiteit). In een eerste fase wordt een visie op kwalitatief toetsen geëxpliciteerd. Dit is de fase NASTREVEN. Vervolgens wordt in een tweede fase regelmatig nagegaan of die vooropgestelde kwaliteit daadwerkelijk gerealiseerd wordt (cf. METEN). Tenslotte wordt in een derde fase de toetskwaliteitgegarandeerd (cf. BORGEN) in afspraken en reglementen, in de organisatie en planning van de evaluaties en door het ondersteunen van lesgevers en opleidingen.

UGent toetsconcept: Onderwijskundige vertaling van ‘Durf denken’ op het vlak van toetsing. Het UGent-toetsconcept ‘Meten van Geïntegreerde Kenniscompetenties’ geeft aan waar onze instelling de nadruk op wil leggen bij de verdere ontwikkeling van toetsing. Met het toetsconcept willen we ook de eigenheid van toetsing aan de UGent meer onderwijskundig karakteriseren.

Meer concreet:

  1. Valide toetsing vertrekt vanuit beoogde competenties
  2. Integratie toetst ook kennis
  3. Authentiek toetsen in diverse contexten bevordert transfer
  4. Discipline overstijgend toetsen stimuleert kritische zin
  5. Feedback stimuleert creativiteit
  6. Actie en interactie vereisen de hoogste betrouwbaarheid
  7. Transparantie installeert vertrouwen in toetsing
  8. Zelfreflectie is basis voor levenslang leren
  9. Gevarieerde toetspraktijk respecteert diversiteit

Toetsvisie faculteit PSW, gebaseerd op het toetsconcept van de UGent

De kwaliteitsbewaking van de toetsing gebeurt op verschillende niveaus, namelijk binnen de opleiding zelf door de toetsingscommissie en de opleidingscommissie en buiten de opleiding door de examencommissie en de kwaliteitscel onderwijs.

Facultair Toetsconcept

Valide toetsing vertrekt vanuit beoogde competenties

Eén van de meest cruciale kwaliteitskenmerken voor toetsing is validiteit: Evaluatie moet betekenisvol, bruikbaar en geldig zijn om uitspraak te doen over het bereiken van de vooropgestelde competenties door de student(en). De faculteit herschreef in 2013-14 de opleidingscompetenties die we bij studenten beogen. Deze uitgeschreven competenties vormen de basis voor doordachte keuzes wat betreft evaluatie. De evaluatievorm moet steeds geschikt zijn om de beoogde competenties op een bepaald moment te meten. De Facultaire Toetscommissie zal een jaarlijkse evaluatie doen aan de hand van onze competentiematrixen per opleiding: zijn de gebruikte evaluatievormen in relatie tot de beoogde leerresultaten (examens en werkstukken) voor de Bachelor en Masteropleiding ? Naast dit globaal overzicht van de toetsingsvormen voor de volledige Bachelor – en Masteropleidingen wordt er tevens een analyse gemaakt van de toetsingsvormen voor de individuele leerresultatenblokken.

Grote diversiteit aan evaluatievormen vanuit onderwijs vernieuwend perspectief

Onze opleidingen gebruiken klassieke evaluatievormen (schriftelijke en mondelinge examens) om na te gaan of studenten voldoende academische kennisbagage hebben verworven. We willen echter nog meer inzetten op diverse vernieuwende evaluatievormen waarmee hogere, ruimere en/of meer complexe competenties geëvalueerd worden. In ons toetsbeleid wensen we hierop sterker de nadruk te leggen door de bestaande good practices op dit vlak in kaart te brengen en ruimer te verspreiden in onze opleidingen. Hierbij willen we er ook over waken dat deze meer onderwijsvernieuwende evaluatievormen (o.a. peer-assessment, papers, ...) op een zo kwaliteitsvol mogelijk en voor studenten en lesgevers transparante manier worden ingevuld en in de praktijk toegepast. De kwaliteitscel onderwijs reikt hiervoor ook bepaalde tools aan (bvb beoordelingsmatrixen, infonamiddagen, enz.)

Feedback stimuleert creativiteit

De faculteit wil inzetten op kwaliteitsvolle feedback! Vooral tussentijdse of niet-periodegebonden evaluaties met onmiddellijke feedback vormen één van de meest krachtige stimuli tot leren. Deze sporen studenten aan om regelmatig bezig te zijn met hun studies, verspreid over de hele duur van een opleidingsonderdeel. De faculteit wil het potentieel aan efficiënte feedbackmogelijkheden zo maximaal mogelijk benutten en zet in op al dan niet geautomatiseerde feedback, individuele of collectieve feedback, peerfeedback etc. Het meer collectief en repetitief organiseren van klassieke feedback is optie (klassieke feedback kun je hergebruiken want zelfde opmerkingen komen terug). Belangrijk om medewerkers te coördineren op dat vlak. Om de betrouwbaarheid van de toetsing en de kwaliteit van de feedback te garanderen, is het gebruik van heldere evaluatiecriteria van cruciaal belang.

Transparantie en communicatie

Transparantie en communicatie van de toetsing is essentieel. De facultaire toetscommissie wil dan ook richtlijnen meegeven hieromtrent. Interne communicatie onder PSWlesgevers over hun toetsing is cruciaal om tot een kwalitatief hoogstaand toetsbeleid te komen. We willen dit waarborgen door:

- Jaarlijkse controle studiefiches door facultaire toetscommissie, deze beschrijven in een eenduidige terminologie de evaluatievormen, -momenten en voorwaarden tot slagen. Criteria zijn niet alleen nodig omwille van de transparantie, maar dienen ook als leidraad voor studenten om bij te leren (bvb. te verduidelijken wat een hoog niveau is). Studenten de juiste tools geven!

- De lesgevers wijzen op het belang van:

  • Toelichting van studiefiche in eerste les
  • studiefiche in cursus opnemen (bvb vooraan in de cursus)
  • Werkstukken en dergelijke die meetellen voor punten worden op fiche vermeld + deelpunten via persoonlijke communicatie bezorgen aan student (zie ook nieuwe tool in Minerva, gradebook)
  • Voorzien van voorbeeldvragen
  • Lesgevers aanraden om soort inlichtingenfiche over de opzet van het vak op te maken die bij eerste les wordt meegegeven: wanneer en waar, leermateriaal, lesvoorbereiding, examen, communicatie (bvb via minerva), lesschema en/of literatuurlijst
  • Persoonlijke feedback na het examen. Er kan naar gesteefd worden om voor de high stake vakken systematisch feedback te voorzien (bvb. zoals bij MP, onderzoekspaper, papers, …)

Zelfreflectie draagt bij tot persoonlijke ontwikkeling in het kader van levenslang leren

Hoewel toetsing meestal als beoordelingsinstrument dient kan evalueren ook als middel tot leren ingezet worden (= op individueel niveau, zelfreflectie). Met het oog op levenslange kennisontwikkeling, is het van belang dat studenten tijdens hun UGent-periode reflecteren op hun eigen leerproces. De student kan dit doen via de onderwijsevaluaties, de ombudspersoon en via zijn vertegenwoordigers in de opleidingscommissies en CKO.

Goede planning en spreiding bij examinering als onderdeel van kwaliteitsvolle en eerlijke toetsing

Er wordt over gewaakt dat er sprake is van een goede programmering voor de toetsing. Er wordt gestreefd naar vaste examenroosters voor alle jaren (uitzonderingen natuurlijk bij programmawijzigingen, onbeschikbare auditoria, feestdagen, …. Studenten en lesgevers worden geconsulteerd. Gebruik van Centauro moet duidelijkheid naar student ook ten goede komen.

Toetscommissies als duurzame kwaliteitswaarborg

Binnen de faculteit worden er een facultaire en opleidingsspecifieke toetscommissies opgericht, met de volgende doelstellingen:

a. Het bewerkstelligen van een consistente kwaliteitsborging van elke vorm van toetsing in de opleiding die kadert binnen de globale visie op toetsing van de opleiding

b. Het stimuleren van validiteit, betrouwbaarheid en transparantie van toetsing (tussentijdse en eindevaluaties) en duidelijke communicatie/feedback naar de docenten en studenten van de opleiding toe.

c. Het bewerkstellingen van een coherente toetspraktijk binnen elke opleiding waarin alle vooropgestelde opleidingscompetenties op een valide manier worden bereikt en afgetoetst.

Facultaire Toetscommissie (FTC): samenstelling & werkwijze

1. Opgericht in het AJ 2013/14, in de schoot van de KCO

2. Wie?

  • OD (zit voor), Vz OC, ombudspersoon, 1 AAP, 1 CKO, medewerker onderwijsinnovatie, 1 student
  • op uitnodiging iemand van DOWA, curriculummanager (voor examenroosters)

3. Frequentie: twee maal per jaar

  • September: bij het begin van het academiejaar
  • eind mei : net voor de examens op eind van het tweede semester

4. Kwaliteitsborgingscontrole door Facultaire Toetscommisie:

  • FTC maakt template examenvragen op (met onder andere naam OO, richting, jaar, zittijd, examinator, duur examen, materiaal bruikbaar tijdens examen, meerkeuze (wel/geen giscorrectie, soort giscorrectie, naam student, ruimte om per vraag punten te geven + feedback )
  • FTC maakt kwaliteitschecklist voor docenten: lijst op basis waarvan de lesgever tijdens en na het opstellen van de examenvragen kan checken of er voldaan is aan de verschillende aspecten van de kwaliteitsborging van de examenvragen (denk maar aan de driedeling validiteit, betrouwbaarheid en transparantie + items rond vorm van examen, denk maar aan MC, open vragen, open boek, …).
  • FTC stelt een screeningsmatrix op die gebruikt zal worden door de Opleidingsspecifieke Toetscommissies
  • Jaarlijkse evaluatie aan de hand van onze competentiematrixen per opleiding: worden de vooropgestelde opleidingscompetenties voldoende bereikt en afdoende getoetst?
  • De FTC fungeert tevens als toetscommissie eerste lijn (werking opleidingsspecifieke) voor de gemeenschappelijke vakken uit 1e Bachelor
  • Kwaliteitscontrole Masterproef (om de vier jaar) in schoot van facultaire toetscommissie (bvb. beoordelingsmatrix)
  • Algemene problematieken zoals slaagcijfers of GIS correctie
  • Roostering van examens (deadlines van bekendmaken)
  • De Opleidingsspecifieke Toetscommissies rapporteren minstens 1x per jaar aan de Facultaire Toetscommissie over hun werking. Op basis van alle rapporten worden globale adviezen opgemaakt die teruggekoppeld worden naar de OC’s (good & bad practices oplijsten om op die manier het toekomstig toetsbeleid te stofferen).

Opleidingsspecifieke Toetscommissies (OTC): samenstelling & werkwijze

1. Opgericht in het AJ 2013/14, in de schoot van de OC’s

2. Wie?

  • Vz OC (zit voor), 2 extra ZAP (bij voorkeur diegene die verantwoordelijk is voor luik toetsing in ZER/vakgroepvz), 1 AAP, 1 CKO + 1 student wordt bij de werking van de OTC betrokken
  • Op uitnodiging kunnen er andere medewerkers (eventueel externen) de bijeenkomsten bijwonen.

3. Kwaliteitsborgingscontrole door Opleidingsspecifieke Toetscommisies:

A. Voor examens van individuele opleidingsonderdelen

Jaarlijkse controle studiefiches (rubriek evaluatie + eindscoreberekening) Zie facultair toetsconcept (punt 4 transparantie en communicatie)

Screenen van vakken

Welke vakken?

  • Nieuwe vakken altijd
  • Als uit onderwijsevaluaties blijkt dat er problemen zijn of op vraag van studenten
  • Als slaagcijfers extreem pieken of dalen (uitschieters)

Wanneer?

  • Voor nieuwe vakken/nieuwe lesgevers : Lesweek 13 (1ste + 2de semester) (reden: pro actieve supervisie)
  • Voor andere vakken (week na afsluiten examenperiode)

Wat?

  • Laatste examenvragen (vragen op zich, wie stelt ze op/intervisie opstellen vragen, spreiding over de cursus/representativiteit?, …)
  • Examenorganisatie (Hoeveel tijd? Wie verbetert er?...)
  • Beoordelingscriteria, verbetersleutel (indien van toepassing)
  • Er wordt gebruik gemaakt van een screeningsmatrix die door FTC wordt opgesteld:
    • Evaluatievorm en organisatie
    • Toetsvisie: hoe toetsen we de beoogde eindcompetentie, en wat is de link met de opleidingscompetentie? Cruciale onderdelen zijn hierbij:
      o Doelstelling (vakcompetentie), duiding van de relatie van de vakcompetentie met de opleidingscompetentie
      o Scoringsmethode: oplijsten criteria en koppeling van die criteria aan puntenniveaus
      o Formuleren link tussen eindcompetentie en de puntenniveaus (overzichtstabel – zie beoordelingsmatrix masterproef, onderzoekspaper)
    • Toetscommunicatie (ECTS, syllabus, feedback,…)
    • Coördinatie (instructie van medewerkers inzake toetsing, intervisie bij opstellen examen)
    • Acties en conclusies
  • Scoringsdistributie: lesgevers ontvangen hun scoredistributie voor het desbetreffende vak. Dit geeft een statistische weergave van de examencijfers berekend per academiejaar (OASIS).
  • Geïnteresseerden kunnen ook gebruik maken van de ‘toetsmatrijs’ (onderwijstip: http://onderwijstips.ugent.be/tips/stel-een-toetsmatrijs-op-voor-een-valide-beoordeli/ ). Bij het opstellen van een examen is het belangrijk dat de verschillende doelstellingen en/of onderdelen van het opleidingsonderdeel op een evenwichtige manier zijn vertegenwoordigd. Het gebruik van een toetsmatrijs is vooral bedoeld voor evaluaties waarin representativiteit wordt nagestreefd, maar zeker ook zinvol om een doordachte kijk te krijgen op een ‘gewoon’ examen.

De OTC bespreekt de verschillende dossiers, en brengt ze ook in verband met de slaagcijfers. Er wordt – voor zover technisch mogelijk – ook nagegaan in hoeverre examenresultaten samenhangen met de examenresultaten op andere vakken. (wat niet per definitie betekent dat een gebrekkige samenhang met examenresultaten van andere vakken problematisch is)

Adviezen voor OC

  • op basis van alle ingediende dossiers globale adviezen opstellen
  • hoogdringendheid en meer specifiek advies bij probleemvakken

B. onderzoekspaper en werkstukken (minstens om de vier jaar)

onderzoekspaper: bvb opstellen beoordelingsmatrix naar analogie met beoordelingsmatrix MP

werkstukken:

  • verdeling werkstukken binnen het modeltraject over de Bachelorjaren en Master heen (met het oog op de opbouw van diverse leerlijnen)
  • beoordelingscriteria bij permanente evaluatie

Pro Memorie:

OC: leden van TC zitten vaak ook in OC, zaken die daar gemeld worden (bvb door studenten) kunnen zo teruggekoppeld worden naar TC

Examencommissie: waken over volledigheid en correctheid van de punten … ook hier kunnen problemen gesignaleerd worden

CKO:

  • onderwijsevaluaties, ook hier wordt toetsing bevraagd (CKO kan op zoek gaan naar goeie praktijken, alsook probleemvakken)
  • kan scoredistributietabellen voorzien (kan uit OASIS gehaald worden) (statistische weergave van de examencijfers berekend per AJ – loopt over periode van 5 jaar)
  • slaagcijfers per vak

Activiteiten & instrumenten voor OC’s en/of TC’s om de kwaliteit van toetsing te bewaken Geïntegreerd binnen PSW

Basisactiviteiten

ActiviteitToelichting, richtvragen, tools en good
1 Er op toezien dat de facultaire of opleidingsspecifieke toetsvisie actueel blijft en desgevallend aanpassingen Een toetsvisie is geen statisch of op zichzelf staand gegeven. De Facultaire toetscommissie engageert er zich toe om jaarlijks de facultaire nota
2 De taakverdeling tussen CKO, OC, eventuele TC, faculteitsraad en lesgevers bepalen, regelmatig Zie ‘samenstelling en werkwijze FTC en OTC’s’
3 Een tijdlijn opmaken met inplanning van recurrente en ad hoc activiteiten i.f.v. toetskwaliteit in de OC/TC Om de toetskwaliteit op een systematische manier te bewaken, is een tijdlijn met activiteiten voor de OC/TC onontbeerlijk: Zie ‘samenstelling en
4 De afstemming tussen evaluaties en opleidingscompetenties bewaken (cf. constructive alignment binnen de opleiding) Eén van de belangrijkste aandachtspunten in een toetsbeleid, is het nagaan of de evaluatievormen voldoende aansluiten bij de opleidingscompetenties, of ze sporen met het toetsbeleid van de UGent en met de visie van de faculteit/opleiding. Dit houdt ook in dat er nagegaan wordt of de evaluatie doorheen de opleiding goed opgebouwd is: zie jaarlijkse analyse van onze ‘competentiematrices’. Richtvragen hierbij zijn: • Wordt elke opleidingscompetentie in min 2 vakken doorheen de opleiding getoetst? (bij ons: min 3) Wordt een opleidingscompetentie voldoende gedekt door het geheel
5 Reflecteren over de aard, samenhang, plaats in de opleiding en variatie van de evaluatievormen en - momenten (PGE en NPGE) Reflectie kan aan de hand van het analyseren van frequenties, samenhang, timing in de opleiding van evaluatievormen en evaluatiemomenten op basis van de informatie in de studiefiches: zie jaarlijkse analyse van onze ‘competentiematrices’ + tweejaarlijkse oefening ‘werk- en examenvormen’ Richtvragen hierbij zijn: Is er een evenwichtige variatie van evaluatievormen en -momenten in elk modeltrajectjaar?
6 Analyseren van de spreiding van examencijfers, slaagcijfers en studieduurgegevens Doel is zaken die opvallen bespreken en nagaan of er logische verklaringen kunnen gegeven worden voor afwijkende distributies en of er al dan niet acties nodig zijn. Zie scoredistributies van examencijfers en jaarlijkse slaagcijferanalyse.

Richtvragen hierbij zijn: • Komen de slaagcijfers en scoredistributies van de opleidingsonderdelen overeen met wat verwacht kan worden gezien de aard, plaats in het curriculum, vereiste voorkennis, … van die opleidingsonderdelen? Correspondeert het percentage geslaagden per jaar van het modeltraject met
7 Opleidingsevaluaties, onderwijsevaluaties en lesgeversbevragingen opvolgen Hierbij worden de resultaten van de onderwijs- en opleidingsevaluaties en lesgeversbevragingen op regelmatige basis geanalyseerd i.f.v. de kwaliteit van toetsing binnen de opleidingsonderdelen en opleiding. De onderwijsevaluaties bieden informatie over hoe studenten de betrouwbaarheid en validiteit van de toetsing binnen de afzonderlijke opleidingsonderdelen ervaren en de opleidingsevaluaties bieden informatie over hoe studenten de variatie in de evaluatievormen, de transparantie en validiteit van toetsing en mate van feedback in de opleiding inschatten. In de lesgeversbevragingen rapporteren lesgevers zelf over hun toetspraktijk. Aan de faculteit PSW gebeurt dit zowel in CKO als OC’s.

Richtvragen hierbij zijn: In welke mate komen de onderwijsevaluaties van vergelijkbare opleidingsonderdelen overeen?
8 De kwaliteit van het eindniveau van de afgestudeerden benchmarken Om te kunnen garanderen dat afgestudeerden de beoogde competenties hebben verworven, is het nodig dat opleidingen niet alleen de toetsprocessen maar ook het behaalde eindniveau in kaart brengen. Dit gebeurt via alumni- en werkveldbevragingen, analyses van de kwaliteit van masterproeven.
9 Analyseren en in kaart brengen van (tussentijdse) feedback in het programma Het is nodig om als opleiding zicht te hebben op de feedbackcultuur, deze te benoemen en waar wenselijk bij te sturen. De resultaten op de vragen in opleidingsevaluaties (“Je kreeg voldoende tussentijdse feedback op de opdrachten en werkstukken”) en onderwijsevaluaties (“De feedback over de evaluaties was nuttig en relevant”) geven een eerste, zij het wel beperkt, beeld van de feedbackcultuur.

Aandachtspunt voor 2017/18!

Het kan zinvol zijn om meer specifieke informatie te verzamelen rond enkele feedbacktopics.

Voorbeelden hiervan zijn: • In welke mate wordt er naast de door het OER voorgeschreven feedbackmomenten feedback voorzien doorheen de opleiding? • Op welke momenten wordt tussentijdse (versus na de evaluatie) feedback aangeboden? Ontvangen de studenten deze feedback tijdig? Zijn er bepaalde high stakes opleidingsonderdelen (waarin bv. complexe opleidingscompetenties getoetst worden) waar het wenselijk is om tussentijdse en/of
10 Teamoverleg binnen de opleiding organiseren over examens Essentieel voor een kwalitatieve toetsing en een coherent toetsbeleid in de opleiding is onderlinge afstemming tussen de verschillende lesgevers. Kwaliteitsvol toetsen gebeurt immers vanuit een gedeelde toetsvisie en verantwoordelijkheid. Iedereen in de opleiding moet betrokken zijn bij het toetsbeleid binnen de opleiding. Samenzitten en inzoomen op voor de opleiding relevante topics, evaluaties of evaluatievormen is zeker zinvol, maar absoluut nodig wanneer deze belangrijk, prioritair, samenhangend of prangend zijn. Het kan dan bijvoorbeeld gaan over een teamoverleg van lesgevers van opleidingsonderdelen die voor of na elkaar komen, van alle lesgevers die schrijf- of presentatieopdrachten geven, van alle lesgevers van Ba1.

Richtvragen hierbij zijn:
• Welke essentiële zaken worden op welke manier en op welk niveau in een voorgaand opleidingsonderdeel getoetst? Op welke criteria worden studenten op een schrijf- of presentatieopdracht beoordeeld in de verschillende betrokken opleidingsonderdelen? Is het zinvol om een gemeenschappelijke beoordelingslijst te ontwikkelen?
11 Facultaire of opleidingsgebonden richtlijnen over de modaliteiten van evaluaties formuleren (bovenop de centrale richtlijnen) waar wenselijk Faculteiten of opleidingen kunnen bijkomende richtlijnen formuleren wanneer dat wenselijk of nodig is. Deze bijkomende richtlijnen kunnen naargelang van de opleidingsspecifieke accenten in de toetsvisie gericht zijn op validiteit, betrouwbaarheid, transparantie, feedback, fraudebestrijding, … en kunnen al dan niet behoren tot de facultaire OERs.

Good practice bij ons: Binnen de 4 weken na het indienen van papers wordt er feedback voorzien. • Studenten krijgen minstens 2 voorbeeldexamenvragen te zien. Er zijn de proefexamens in Ba1 + de vele proefexamens op minerva. • Itemanalyse is standaard na afloop van meerkeuze- examens. • Voor de masterproef/stage wordt een gestandaardiseerde criterialijst gebruikt door de verschillende beoordelaars. Zie F-OER. • Bij (meeste) mondelinge examens wordt met een schriftelijke voorbereiding gewerkt. Voor elk schriftelijk examen met >200 studenten wordt een zitplan opgemaakt waarbij studenten optimaal gespreid worden over het auditorium. Gebeurt in de praktijk.

Andere mogelijke voorbeelden (niet ex-haustief):
• Bij meerkeuze-examens wordt er altijd een toetsmatrijs opgesteld. Bij grootschalige opdrachten of
12 Toezien op de toepassing van het 4-ogenprincipe Dit betekent dat lesgevers er aan herinnerd worden om het 4-ogen principe toe te passen voorafgaand aan de examenafname. Er wordt op toegezien dat afspraken die binnen de opleiding of faculteit gemaakt zijn over de toepassing van het 4-ogen principe (bv. op het vlak van onderling uitwisselen van info over evaluaties binnen vakken) nageleefd worden. nagaan hoe we hierop facultair kunnen toezien (bv. opnemen in screeningsmatrix of kwaliteitschecklist docenten?)
13 De toetskwaliteit in opleidingsonderdelen screenen Faculteiten/opleidingen kunnen zelf de samenstelling van het uitvoerend orgaan, de selectie van opleidingsonderdelen, de planning en frequentie, de focus (welke aspecten van toetsing worden gescreend?) en opvolging van screenings van de kwaliteit van toetsing binnen de opleidingsonderdelen bepalen

• Deze screening gebeurt bij ons door de FTC en OTC’s (met OD, VZ OC, VZ VGR, docenten, student, CKO medewerker). De screening kan al dan niet in het bijzijn van de verantwoordelijk lesgever(s) en/of meerdere lesgevers van opleidingsonderdelen met een bepaalde samenhang gebeuren. • De selectie van de opleidingsonderdelen gebeurt op basis van het ‘item’ evaluatie in de onderwijsevaluaties of opleidingsevaluaties, of op basis van opleidingsspecifieke aandachtspunten (bv. evaluaties in ba1, evaluaties aan de hand van specifieke evaluatievormen, opleidingsonderdelen die bepaalde eindcompetenties toetsen of die behoren tot een bepaald leer- of toetslijn,…) en ad hoc bij problemen. Planning en frequentie: 2X/jaar

Optionele activiteiten

Naast de bovenstaande basisactiviteiten, is het aangewezen om te werken rond bepaalde aspecten van evaluatie naargelang van de opleidings- of faculteitsspecifieke prioriteiten/accenten of occasionele problemen of vraagstukken.
Hieronder een niet-exhaustieve lijst van voorbeelden van dergelijke optionele acties waarvan wij er als opleiding al heel wat verwezenlijken:

ActiviteitToelichting, richtvragen, tools en good practices
14 Documenteren en consulteerbaar maken van examens en bijhorende tools Wij doen dit via de screeningsmatrix voor OO die op de TC’s passeren (toetsvorm en organisatie, toetsvisie, toetscommunicatie, coördinatie). Verdere leveren zij ook de laatste examenvragen en een verbetersleutel
15 Analyseren van de organiseerbaarheid van de toetsing in de opleiding Sowieso wordt bij ons gestreefd naar vaste examenroosters (FSA).

Belangrijk is om de toetsing van complexe competenties niet louter en alleen naar het laatste of laatste jaren van een opleiding door te sturen, maar om eerder in de opleiding evaluaties in te
16 Uitwerken van leer- en/of toetslijnen in de opleiding en teamoverleg organiseren over examens binnen een leer- en/of toetslijn Leerlijnen en/of toetslijnen verduidelijken hoe de student doorheen het programma geleidelijk competenties verwerft en waar en wanneer die getoetst worden. Het is belangrijk om het niveau van het onderwijs en toetsing geleidelijk aan op te bouwen.

Leerlijnen en/of toetslijnen maken deze opbouw
17 Toezien op voldoende Toetsprofessionalisering van de examinatoren (en de betrokkenen bij de kwaliteitsbewaking van toetsing) Professionalisering is essentieel in functie van de toetsdeskundigheid van examinatoren en andere betrokkenen bij de kwaliteitsbewaking van toetsing.

Verschillende mogelijkheden om hier aan te werken zijn: • Deelnamecijfers aan centrale basistrainingen (voor nieuwe docenten verplicht) en specifieke trainingen rond evalueren opvolgen. Lesgevers collectief of gericht aansporen om bepaalde basistrainingen of specifieke trainingen rond evalueren uit het centrale aanbod te volgen (bv. streefcijfer dat
18 Analyseren van de masterproef- en/of stagebeoordelingen Dit houdt de screening in van de bestaande praktijken qua toetsing in de masterproef en stage. Ook het bijsturen van de beoordelingsprocedure en - criteria
19 De aard, het aantal en de spreiding van PGE en NPGE analyseren i.f.v. een optimale studeerbaarheid voor studenten Hiertoe kan het interessant zijn om een tijdlijn van alle evaluatiemomenten en de geschatte voorbereidingstijd voor studenten op te maken. Hierbij kan ook nagaan worden of de studeerbaarheid voor studenten optimaal is. Richtvraag hierbij is bijvoorbeeld: Staan d
20 Fraudebestrijdingsbeleid uittekenen, evalueren en bijsturen Zie plagiaatreglement in F-OER + plagiaatsoftware Ephorus https://icto.ugent.be/nl/manual/Minerva/Ephorus
21 Quoteringsafspraken maken in het lesgeversteam (bv. wat betekent 10/20, 18/20,…) Doel hiervan is standaardisering waarbij er gezorgd wordt dat gelijkwaardige prestaties dezelfde score krijgen. Dit is eveneens een mogelijkheid om te werken rond excellentie: hoe excellente prestaties van studenten valoriseren?

Good practice: Binnen onze faculteit bestaat een beoordelingssysteem voor examencijfers en de beoordeling van masterproeven. Dit systeem maakt duidelijk wat als excellent beschouwd wordt en
22 Analyseren van bijzondere voorwaarden tot slagen binnen de verschillende opleidingsonderdelen in een deliberatiepakket Het is zinvol om na te kijken of de bijzondere voorwaarden die in elk van de individuele opleidingsonderdelen ingebouwd zijn, redelijk zijn en of ze als geheel binnen bepaalde delen van het modeltraject wenselijk zijn. Zie bvb de regel in sommige OO waarbij je voor beide delen (PE en NPE

Bijlagen

deel17-bijlage1-screeningsmatrix.docx