Learning Analytics

Lezingen op de Onderwijsdagen 2011
1. Erik Duval, hoogleraar computerwetenschappen – Katholieke Universiteit Leuven. Titel: Learning with open eyes: The role of learning analytics
2. Presentatie John Doove, SURF-projectmanager over ondermeer de innovatieregeling Learning Analytics

Om ‘het probleem’ duidelijk te maken introduceert Duval de Mooc: een massive online open course. Hij heeft een mooc die door 2500 studenten wordt gevolgd. De vraag dringt zich dan op hoe je hier zicht op houdt. Enter the learning analytics (LA). Terzijde: al vanaf 12 studenten kun je overwegen LA te gebruiken. Het concept legt Duval uit aan de hand van een programma als Runkeeper: die houdt een renner aan het rennen door feedback te geven o.b.v zijn/haar renprestaties. Runkeeper koppelt je ook aan andere renners met een soortgelijk (ren-)profiel. Er bestaan soortgelijke programma’s die je laptop gebruik monitoren en je aan het einde van de dag een spiegel voorhouden van wat je hebt gedaan. Dan kun je ook doelen stellen: ik wil maximaal een uur mailen. Het programma gaat je dan waarschuwen als je bij die zelf ingestelde limiet komt. Het helpt je je eigen belofte te houden. Je kunt hierin heerlijk doorschieten: quantified Self: je monitort dan ALLES wat je doet in 24 uur. En sommigen zetten dat dan ook nog online. Met wie je spreekt, wat je eet.. om greep te krijgen op je leven. Nouja.
De overstap naar LA: wat is de efficiëntie en effectiviteit van het leren van studenten? Daar kan LA een rol in spelen. Duval presenteert de app Streamy: een leerdashboard die aangeeft, o.b.v. je eigen instellingen, in hoeverre je op schema ligt. Alle informatie daarover komt samen in één wijzer die loopt van niet op schema, tot goed op schema. Ze zijn ook als widget te gebruiken. De docent kan per groep een widget samenstellen en zo monitoren hoe het met hun vorderingen staat.
Werkt het nu? Helpt het de docent bij zijn taak? Duval meldt dat de respondenten heel positief zijn. Zowel docenten als studenten hebben een beter idee van wat er gebeurt.
Duval stelt ook een belangrijke aspect aan de orde: wat ga je eigenlijk meten? Wat zijn eigenlijk de goede knopjes als we het over leren hebben. Je gaat natuurlijk de tijdsbesteding meten, maar is een hoge tijdsbesteding nu goed of slecht? Waar ligt een grens? En hoe zit het met privacy? Je kunt hier niet alles onder privacy laten vallen en dus tegenhouden. Bij de doktoer zeg je ook niet meteen: dat is privé. Privacy hangt samen met het doel dat je nastreeft: het is niet iets wat absoluut is. Dat geldt ook voor LA. Maar uiteindelijk is er geen enkele reden om er niet mee te gaan experimenteren. We willen het tenslotte morgen beter doen.

In de eerste workshopronde gaat John Doove, medewerk van SURF, door op het onderwerp Learning Analytics. Doove meldt dat het over vier tot vijf jaar een volwassen tool is, aldus het Horizon Report 2001 van Educause. Dan is de exacte leerbehoefte van de student ermee te identificeren.
Doove laat een stoplichtentool zien van Perdue university. LA is nu in de fase dat er een analyse van gegevens gemaakt kan worden die laat zien hoe de vlag erbij hangt. Signaleren dus. Het is nog te vroeg om daar valide conclusies uit af te leiden.
N.a.v. twee getoonde voorbeelden ontstaat er een discussie. De stelling die wordt geformuleerd, luidt: door kwantitatieve informatie te verzamelen kun je toch geen beeld van de kwaliteit van het leren? Voorstanders betogen dat je de student wel een signaal kunt afgeven, het is een middel.
Nog een dilemma: is de informatiehuishouding van een instelling voldoende op orde om dergelijke data te genereren? Je moet daarbij ook nog eens data gaan koppelen.
En nog een dilemma: hoe moet je de data interpreteren? Je moet een grafische weergave geven.
De valkuil: verwissel correlatie niet met causaliteit. Je ziet een relatie, maar je weet daarmee nog niet hoe oorzaak-gevolg ligt.
Doove introduceert (en lanceert!) de innovatieregeling Learning Analytics. Het gaat om kleinschalige projecten met korte looptijd (6 maanden) en klein budget (projectbudget € 10.000,- waarvan 50% door instelling moet worden gematcht). Doel ervan is te onderzoeken wat werkt en wat niet. SURF hoopt hiermee good-practices te verzamelen. Dat is input voor een gesprek over een groter programmaplan. Vandaag (!) is de lancering. 20 december is deadline voor indiening van de eerste versie van projectaanvragen. De projecten starten op 29 februari 2012. Meer informatie via www.surffoundation.nl/learninganalytics