Feedback in plaats van quotering (4)

Mijn experiment om gequoteerde opdrachten te vervangen door opdrachten met snellere feedback (maar dan zonder quotering) loopt nog steeds. We zitten in een 2de opdracht met nieuwe milestones, en het deelnamepercentage ligt voorlopig lager dan bij de eerste reeks milestones, maar goed, alles loopt nog. Ondertussen werk ik aan een derde en laatste reeks milestones, die de studenten binnenkort ter beschikking krijgen.

De laatste weken heb ik wat meer informele feedback van studenten gekregen:

• Een student vertelde me dat hij niet alle milestones had ingediend, maar ze wel maakte. Hij vond het beter en rustiger zo, en kon daardoor zich meer richten op verwerking van de leerstof. Hij diende niet altijd in, omdat hij wist dat hij de leerstof onder de knie had.
  
• Een andere student - die het bewuste vak een tweede keer opneemt - vertelde me dat het aangenamer werken was. Minder druk.
• Nog een andere student vertelde me dat hij de milestones niet op tijd kon indienen, maar dat niet erg vond. Hij kong steeds bezig zijn met de opdrachten zonder een schuldgevoel te hebben.

Alhoewel deze getuigenissen natuurlijk anekdotisch zijn, geven ze me wel een bevestiging van het gehele opzet: studenten op een aangenamere en betere manier laten omgaan met de leerstof.

De laatste weken ben ik ook wat relaxer geworden over al dan niet deelname. Uiteindelijk hebben studenten ook de vrije keuze om al dan niet de lessen te volgen, of de oefenzittingen mee te volgen e.d. Waarom dan niet de opdrachten aanbieden, maar het open laten of je er aan wil deelnemen of niet? Zoalng de bedoelingen duidelijk gejaderd zijn, en wat men er al dan niet mee kan leren in functie van het finale examan, is het een volwassener manier om een goed leerproces op te zetten.

Feedback in plaats van quotering (3)

Eerder beschreef ik de aanpak die ik dit semester hanteer voor de praktische opdrachten in een 1ste bachelorvak met 185 studenten, door af te stappen van quoteringen en meer in te zetten op directe en individuele feedback. Zie o.a. hier en hier. 

De eerste opdracht is ondertussen afgelopen. Het opzet is om een bevraging te houden bij studenten op het einde van dit semester (de tweede opdracht loopt op dit ogenblik, en normaliter volgt er nog een derde), maar toch reeds enkele ervaringen:

• De opdracht bestond uit 5 kleine milestones, elk individueel in te dienen, met 3 milestones die konden ontsloten worden als een eerdere milestone tot een goed einde werde gebracht. De 5 milestones waren samen de volledige opdracht zoals we die vorig jaar nog vroegen aan studenten, maar nu konden studenten dus deelopdrachten indienen, waarop dan binnen enkele dagen feedback kwam.
  Voor de specialisten: De 4 milestones vroegen telkens om het aantal vergelijkingen tussen elementen na te gaan in een sorteeralgoritme, (respectievelijk Selection Sort, Insertion Sort, Merge Sort en Quick Sort), en te toetsen aan de theoretische modellen zoals behandeld in de les en oefenzittingen. De vijfde milestone vroeg om alle grafieken samen te brengen. Telkens gaven we ook aan dat er maximaal 1A4 mocht ingediend worden. De 3 "geavanceerde" milestones gingen verder in op meer speciale analyses voor specifieke situaties van sorteeralgoritmen.
  In totaal werden 3 weken voorzien gedurende dewelke studenten oplossingen konden indienen. Gedurende de daaropvolgende week organiseerden we een collectieve feedbacksessie, die dus kwam bovenop de individuele feedback.
  
• Hoeveel studenten dienden in? Aanvankelijk kwam één en ander traag op gang, maar naarmate de finale deadline in zicht kwam stroomden er meer inzendingen binnen. Vooral het laatste weekend zag plots een sterke toename.
  Op 185 studenten:
• Milestone 1.1 Selection Sort: 43 ingediende oplossingen (23%)
  
• Milestone 1.2 Insertion Sort: 36 ingediende oplossingen (19%)
  
• Milestone 1.3 Merge Sort: 28 ingediende oplossingen (15%)
  
• Milestone 1.4 Quick Sort: 25 ingediende oplossingen (14%)
  
• Milestone 1.5 Breng alles samen: 14 ingediende oplossingen (8%)
  
• Geavanceerde milestones: geen inzendingen.
• Ter vergelijking: vorig academiejaar (dus met quotering) dienden 68% studenten de opdracht in.
  In zekere zin hadden we een terugval natuurlijk verwacht. Ook hadden we aangegeven dat indienen niet verplicht was, dat je kon samenwerken (en dus maar 1 indiening had), etc. Ondanks dat, denk ik dat de % toch wat te laag zijn, en dat we moeten streven naar 25%, zeker omdat 1.2 en 1.4 de belangrijkste inzichten opleverden voor studenten. We hebben dit alleszins meegenomen naar de 2de opdracht en daar de diverse milestones wat beter gekaderd wat betreft relatieve belangrijkheid.
  
• De individuele feedback per milestone werd steeds gegeven binnen enkele dagen, en de idee was dat studenten de feedback konden meenemen naar een volgende milestone. De feedback had als bedoeling de student meer inzicht te geven in wat goed was, eventueel slecht was, wat beter kon, e.d. In functie daarvan werd een score van 2 (alles in orde), 1 (verbeteringen mogelijk), of 0 (je hebt de bal misgeslagen) gegeven. Eventueel konden studenten een nieuwe oplossing indienen, maar dit werd slechts in beperkte mate gedaan. Op zich is dit ook niet erg, zolang een student leert uit de feedback.
  Er waren ook enkele studenten die *alle* milestones in gelijktijdig indienden. Op zich ok, maar dat beperkt natuurlijk het leerproces dat een student kan doormaken. Echter, dit is een keuze van de student.
  
• De assistenten die de rapportjes doornamen, verzamelden ook "goede" en "minder goede" antwoorden (grafiekjes, stukken tekst, ...) die we samenbrachten in een slideset voor de collectieve feedbacksessie. De collectieve sessie werd dan opgevat als een discussiesessie, waarbij we vroegen aan studenten wat ze goed of slecht vonden aan een getoonde indiening. Ook gingen we wat dieper in op de geavanceerde milestones en wat daar goede of minder goede antwoorden hadden kunnen zijn. 

Het is nog te vroeg om harde conclusies te trekken (het vak loopt nog ...), maar onze eerste ervaringen en informele commentaar van studenten is alleszins positief. Een student zei me dat dit systeem minder stress gaf en meer vrijheid om te focussen op het begrijpen van de inhoud - wat natuurlijk deels de bedoeling was.

Het is uiteraard nog af te wachten wat de effecten zullen zijn op de finale quotering in juni, en wat de correlatie is tussen al dan niet meedoen met de milestones en het behaalde resultaat. Ter info, hieronder is de correlatie van vorig academiejaar tussen de punten behaald op de opdrachten (toen alles nog gequoteerd werd), en de punten behaald op het examen zonder verdere verekening van de opdrachten voor een finale score op het vak.