In de presentatie ging Steve Carson van MIT in hoe MIT de evaluatie doet. De belangrijkste vraag hier is wie gebruikt het en hoe doet ie dat?
Toen MIT begon hadden ze eigenlijk nog geen idee van wie hun eindgebruikers zouden zijn. Of zoals zoals de quote van Tim Berners-Lee:
“80% of the value of the Web is how people make use of it in an unanticipated way”
De doelen van MIT zijn opgedeeld in drie delen:
- Publication: hoeveelheid materiaal
- Outreach: wat is het bereik van ons materiaal
- Sustainable: zorgen voor een goede organisatie e.d.
Het evaluatie framework is vrij standaard:
Om de data te verzamelen maken ze gebruik van de volgende zaken:
- Webserver statistieken
- Enquetes
- Interviews
- E-mail
- Others
Opvallende uitkomst hierbij is dat veel docenten aangeven dat ze OCW vooral gebruikte om zich iets te leren en niet speciaal om het in hun eigen onderwijs te gebruiken. Door gebruik te maken van een open en gesloten vragen, hebben ze de surveys steeds verder uitgebreid en halen ze er steeds meer info uit. Dit is een proces dat een aantal jaren duurt.
Na het verzamelen en verwerken van alle data maken ze elk jaar een dik boekwerk met de resultaten. Dit wordt echter door weinigen gelezen. Daarom verzamelen ze ook veel quotes en teksten om het aantrekkelijk te maken. Of zoals Steve zei: "Stories are better then numbers".
Alle info over hun evaluatie is terug te vinden op
Ocw.mit.edu/OcwWeb/web/about/stats/index.htm