Goede start met Learning Analitics bij Noorderpoort

(bron: http://learntech.rwth-aachen.de/LA-EDM_1213)

Het Noorderpoort heeft in samenwerking met Sambo-ICT en Kennisnet de uitdaging opgepakt om aan de slag te gaan met het thema 'learning analitics'. Kort gezegd komt dat er op neer dat je als onderwijsinstelling probeert causale verbanden te ontdekken uit een enorme berg beschikbare gegevens (big data). Dat kan leiden tot inzicht in bepaalde relaties of trends. Het rapport kun je downloaden bij Kennisnet

In dit project ging het om ervaring op te doen met het learning analytics door te gaan zoeken naar de relatie tussen bepaalde gegevens, die beschikbaar zijn bij de aanmelding en het studiesucces van een student. Wanneer je zo'n relatie kunt aantonen, biedt dat veel mogelijkheden voor een gericht studieadvies of (extra) begeleiding tijdens het studietraject.

Het rapport gaat vooral over de aanpak en de ervaring, die dat heeft opgeleverd bij de casus Noorderpoort.

Nadat ik het rapport had gelezen, was ik bijzonder positief over een aantal aspecten, al heb ik wat kanttekeningen bij de opzet en sommige formuleringen. Tegelijkertijd ben ik ook wel een beetje teleurgesteld over de concrete resultaten. Nu zou het natuurlijk heel bijzonder zijn als er meteen heel duidelijke resultaten naar voren zouden komen. We hebben immers met zijn allen nog heel veel te leren over de aanpak van zo'n traject. Mijn teleurstelling heeft dan ook niet zozeer te maken met het beperkte resultaat maar met het oppoetsgehalte in de beschrijving van die resultaten. Sommige resultaten worden naar mijn idee wat mooier voorgesteld dan ze in werkelijkheid zijn. 

Eerst wat sterke punten:

• Al meteen in de inleiding maakt het rapport duidelijk, dat onderwijsinstellingen wat stappen overslaan bij veranderingen in processen. Zo worden stappen als een duidelijke probleemdefinitie en oplossingsdefinitie vaak overgeslagen. In de praktijk wordt een veranderingstraject dan ook vaak ingezet op basis van wat aannames. Heel herkenbaar. 
• De opbouw van het rapport, waarbij eerst de acht stappen duidelijk worden beschreven en met de casus Noorderpoort worden verhelderd. De stappen zijn achtereenvolgens:
• Relevante vraagstukken bepalen.
• Ethiek en professionaliteit van de docent bezien
• Onderzoeksteam inzetten
• Literatuuronderzoek uitvoeren
• Processen inventariseren
• Data analyseren
• Resultaten presenteren
• Procesaanpassingen ontwerpen.

(De eerste 3 stappen vormen de voorbereidingsfase, de overige stappen vallen onder de uitvoeringsfase.)

• Definitie van studiesucces. Het begrip studiesucces is voor de meeste mensen een duidelijk begrip. Totdat je moet aangeven, wat je er wel en niet onder verstaat. In dit project is gekozen voor eenvoudige maar duidelijk criteria: diploma, opleidingsduur en het switchen van opleiding. De verschillende factoren zijn getoetst op elk van deze criteria. 
• De verschillende schema's en modellen bieden een goed inzicht.

Maar ook een paar kanttekeningen:

Er zitten wat onvolkomenheden in een aantal beschrijvingen. Misschien geen zwaarwegende dingen, maar mij stoort het nu eenmaal als dingen niet goed worden neergezet. Neem nu het voorbeeld hiernaast. Het is de beschrijving van een probleem, een mogelijke oplossing en een onderzoeksvraag. Alleen, wat hier staat als mogelijke oplossing is helemaal geen mogelijke oplossing. Staat niet in zo'n rapport.
Een mogelijke oplossing zou kunnen zijn: een vroegtijdige signalering kan helpen bij het het verbeteren van het studiesucces.

Wat betreft de uitkomsten: daar staan zeker interessante dingen in. Bij een paar uitkomsten heb ik toch wel wat bedenkingen. Daar had ik op zijn minst wat extra toelichting bij verwacht. Zie onderstaand voorbeeld: Als het eindniveau 2 niveaus verschilt van het beginniveau kan het niet anders dan dat een leerling is geswitched. Om dan te concluderen dat die mensen 89% meer kans hebben op een switch, dat voegt niets toe. Dat vind ik een beetje jammer...

Alles bij elkaar toch een goede start van een veelbelovend en boeiend nieuw terrein!