Digital Badges zur Dokumentation von Kompetenzen

Klassifikation und Umsetzung am Beispiel des Saxon Open Online Courses (SOOC)

Anja Lorenz Technische Universität Chemnitz

Stefan Meier Technische Universität Chemnitz

Was sind Badges? Eine (kurze) Einführung

Digital Badges

• Ursprung: Militär [Hal12]

• Bewährt als „Game Interface Design Pattern“ [DDKN11]

• Kennzeichnen Leistungen und Erfahrungen des Trägers

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 6

Was sind Digital Badges?

Potential der Mozilla Open Badges Infrastruktur (MOBI)

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 13

[Wec13]

[Rob13] [Geb13]

Badges zur Dokumentation von Kompetenzen Ein Klassifikationsschema

Was sind Kompetenzen?

Verbindung zwischen Wissen und Können [Klie14]

• Fachliche Kenntnisse und Fähigkeiten • Aber auch: soziale und emotionale Komponenten

[Kan05]

Können auch außerhalb von Bildungsinstitutionen erworben werden Nachweis schwierig [Neß05]

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 19

Welche Kompetenzen können mit Digital Badges dokumentiert werden?

Vorgehen 1. Literaturrecherche 2. Plattformanalyse Ergebnis: Klassifikationsschema • Dimensionen (traditioneller) Assessments • Erweiterung um technische Aspekte

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 20

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 21

begrenzt unbegrenzt Gültigkeitsdauer

Selbsteinschätzung Zertifizierung Beurteilung Teilnahme-bestätigung Bescheinigung

personal aktivitäts- und um-setzungsorientiert

fachlich-methodisch

sozial-kommunikativ Kompetenz

diagnostisch summativ formativ Assessment

international sonstige Domänenschranken regional Geltungsbereich

offen beschränkt Portabilität

vorhanden Nicht vorhanden Level-Support

Expertin/Experte Community Automat Aussteller/in

nominal ordinal metrisch Skalenniveau

[Cri07]

[ER07]

[Gna03]

[Gna03]

[Neß05]

[Cle03]

[PJ08]

[Moz12]

[Gol12]

Validierung des Schemas (Siehe Workshop-Beitrag oder Anhang auf Slideshare)

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 22

…

Badges im Saxon Open Online Course 2013/14 (#SOOC1314)

Der Saxon Open Online Course #SOOC1314

cMOOC veranstaltet von der • Technischen Universität Chemnitz • Technischen Universität Dresden • Universität Siegen

http://www.sooc1314.de/

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 24

Zielstellung: Sichtbarkeit von Bewertungen verbessern

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 25

Ergebnis der Abschlussbefragung vom SOOC13: fehlendes Feedback Lernende unsicher, ob sie die ECTS-CP erhalten werden Andere MOOCs hatten schon Badge-Systeme

Das Badge-Konzept für den SOOC1314 Vorgehen 1. Befragung (Online-Fragebogen) der SOOC13-Teilnehmenden

zur Akzeptanz des geplanten Badge-Konzepts 2. Analyse der Leistungsbewertung im SOOC13:

Welche Kompetenzen sollen die Badges dokumentieren? (Grundlage: Klassifizierungsschema)

3. Analyse der technischen Umsetzbarkeit 4. Evaluation über Expertenbefragung (Veranstaltende, Lernende,

Referenten) Ergebnis: Smaller & Larger Badges

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 26

Smaller Badges

• Beurteilung zu jedem Eintrag im Portfolioformular • 3 Stufen, zusätzlich Verbalurteil • Interne Umsetzung im Wordpress-Formular • http://www.sooc1314.de/programm/portfolio-beitraege/

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 27

Bronze = gut Silber = toll Gold = super

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 28

begrenzt unbegrenzt Gültigkeitsdauer

Selbsteinschätzung Zertifizierung Beurteilung Teilnahme-bestätigung Bescheinigung

personal aktivitäts- und um-setzungsorientiert

fachlich-methodisch

sozial-kommunikativ Kompetenz

diagnostisch summativ formativ Assessment

international sonstige Domänenschranken regional Geltungsbereich

offen beschränkt Portabilität

vorhanden Nicht vorhanden Level-Support

Expertin/Experte Community Automat Aussteller/in

nominal ordinal metrisch Skalenniveau

Larger Badges (freiwillig) SOOCie

• „Probelauf“ für Mozilla Open Badges • Motivationaler/viraler Einsatz • Ausstellung via Badge.us

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 29

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 30

begrenzt unbegrenzt Gültigkeitsdauer

Selbsteinschätzung Zertifizierung Beurteilung Teilnahme-bestätigung Bescheinigung

personal aktivitäts- und um-setzungsorientiert

fachlich-methodisch

sozial-kommunikativ Kompetenz

diagnostisch summativ formativ Assessment

international sonstige Domänenschranken regional Geltungsbereich

offen beschränkt Portabilität

vorhanden Nicht vorhanden Level-Support

Expertin/Experte Community Automat Aussteller/in

nominal ordinal metrisch Skalenniveau

Larger Badges (freiwillig) SOOCling, SOOComer, SOOCializer & SOOCerhero

• Entsprechend der Leistungen für 1,5; 2; 3 & 4 CPs • Nach abgeschlossener Bewertung • Ausstellung via Badge.us

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 31

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 32

begrenzt unbegrenzt Gültigkeitsdauer

Selbsteinschätzung Zertifizierung Beurteilung Teilnahme-bestätigung Bescheinigung

personal aktivitäts- und um-setzungsorientiert

fachlich-methodisch

sozial-kommunikativ Kompetenz

diagnostisch summativ formativ Assessment

international sonstige Domänenschranken regional Geltungsbereich

offen beschränkt Portabilität

vorhanden Nicht vorhanden Level-Support

Expertin/Experte Community Automat Aussteller/in

nominal ordinal metrisch Skalenniveau

Feedback der Teilnehmenden

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 33

„Es war schön nachvollziehbar, auch gut, dass man die Badges der anderen einsehen konnte. (…) Das Sehen der Badges regt übrigens noch mehr zum Anstrengen an!“

Fazit zum Badge-Konzept des SOOC1314

• Besseres Feedback im SOOC1314 • Vereinfachung der Bewertung für E-Tutoren • Anreiz durch Badges als Spielelement? Aber: Hindernisse durch Datenschutzbestimmungen an deutschen Hochschulen

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 34

Fazit zu Badges als Mittel zur Dokumentation von Kompetenzen

• Vielfältiges Spektrum, kombinierbare Ansätze • Vielversprechende motivationale Wirkung • Probleme aus analogen Settings bleiben, insb.

– subjektive Bewertungen – wirksamer Kopierschutz

• Anerkennung durch Unternehmen und Hochschulen fraglich

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 35

Danke für Ihre Aufmerksamkeit!

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 36

Danke

Kontakt Anja Lorenz @anjalorenz http://about.me/anjalorenz

Referenzen 1|2

[Cle03] Ute Clement.. Der Europäische Qualifikationsrahmen – mögliche Konsequenzen für Deutschland. Kassel, 2003.

[Cri07] Geoffrey Crisp. The e-assessment handbook. Continuum, London, 2007. [DDKN11] Sebastian Deterding, Dan Dixon, Rilla Khaled und Lennart Nacke. From Game Design Elements to

Gamefulness: Defining "Gamification". In Proceedings of the 15th International Academic MindTrek Conference on Envisioning Future Media Environments – MindTrek ’11, Seiten 9–15, New York, New York, USA, 2011. ACM Press.

[ER07] John Erpenbeck und Lutz von Rosenstiel. Handbuch Kompetenzmessung. Schäffer-Poeschel Verlag, Stuttgart, 2007.

[Geb13] Philipp Gebhardt. Open Badges – Bausteine fürs digitale Lernprofil. http://brainbits.parcode.net/blog/archive/476, 2013. Stand: 28. Juli 2014.

[Gna03] Dieter Gnahs. Literatur- und Forschungsreport Weiterbildung: Zertifikate, Seiten 88–96, Bertelsmann Verlag, Bielefeld, 2003.

[Gol12] Emily Goligoski. Motivating the Learner: Mozilla ’ s Open Badges Program, 4:1–8, 2012. [Hal12] Alexander M C Halavais. A Genealogy of Badges: Inherited meaning and monstrous moral hybrids.

Information, Communication & Society, 15(3):354–373, 2012. [Kan05] Uwe Peter Kanning. Soziale Kompetenzen – Entstehung, Diagnose und Förderung. Hogrefe, Göttingen,

2005.

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 37

Referenzen 2|2

[Kli04] Eckhard Klieme. Was sind Kompetenzen und wie lassen sie sich messen? Pädagogik, 56(6):10–13, 2004. [Moz12] The Mozilla Foundation, 2012. [Neß05] Harry Neß. Einschätzungen zur Erfassung informell erworbener Kompetenzen: Das Projekt

„Weiterbildungspass“. Trends in Bildung international, 10:1–11, 2005. [PJ08] Dwayne E. Paré und Steve Joordens. Peering into large lectures: examining peer and expert mark

agreement using peerScholar, an online peer assessment tool. Journal of Computer Assisted Learning, 24:526–540, 2008.

[Rob13] Jochen Robes. Mozilla’s Debuts Open Badges To Showcase Out-of-School Learning and Skills. http://www.weiterbildungsblog.de/2013/03/26/mozillas-debuts-open-badges-to-showcase-out-of-school-learning-and-skills/, 2013. Stand: 28. Juli 2014.

[Wec13] Ulrich Wechselberger. Open Badges: Gamification für den Lebenslauf? http://www.wechselberger.org/blog/open-badges-gamification-fur-den-lebenslauf, 2013. Stand: 28. Juli 2014.

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 38

Bildquellen

Lancero Badge von The U.S. Army (CC BY 2.0). https://www.flickr.com/photos/soldiersmediacenter/11307311885 BSA Troop 614 April 15 Court of Honor von Richard Masoner (CC BY-SA 2.0).

https://www.flickr.com/photos/bike/3448472173/in/photostream/ Trivial von Janet McKnight Folgen (CC BY 2.0). https://www.flickr.com/photos/janetmck/3223011302 Alexander Gerst sports the fourth star von NASA (Pubic Domain).

http://commons.wikimedia.org/wiki/File:Alexander_Gerst_sports_the_fourth_star.jpg Settlers of Catan von Eric Skiff (CC BY-SA 2.0). https://www.flickr.com/photos/ericskiff/2291909248/ Foursquare Badges from Anja Lorenz (Screenshot vom 15.08.2014). https://de.foursquare.com/anjalorenz/badges Mozilla Open Badges (Screenshot vom 15.08.2014). http://www.openbadges.org/ Open Badges - Freie Abzeichen von Jörg Lohrer (CC BY 2.0). https://www.flickr.com/photos/empeiria/9141558603/

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 39

Validierung des Schemas 1|4

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 40

…

Dimension Ausprägung XING

opco

12

Goog

le N

ews

Stac

k Ov

erflo

w

Offe

ne S

yste

me

Assessment Summativ Diagnostisch Formativ

■

□

□

■

□

■

■

□

□

■

■

□

■

■

■

Kompetenz

Personal aktivitäts- & umsetzungsorientiert fachlich-methodisch sozial-kommunikativ

■

■

■

■

■

■

■

■

□ ■

■

□

□ ■

■

■

■

■

■

■

Validierung des Schemas 2|4

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 41

…

Dimension Ausprägung XING

opco

12

Goog

le N

ews

Stac

k Ov

erflo

w

Offe

ne S

yste

me

Bescheinigung

Selbsteinschätzung Zertifizierung Beurteilung Teilnahmebestätigung

■

□

■

□

■

□

□

■

□

□

□

■

□

■

□

□

■

■

■

■

Skalenniveau Nominal Ordinal Metrisch

■

■

□

■

□

□

■

■

□

□ ■

□

■

■

■

Validierung des Schemas 3|4

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 42

…

Dimension Ausprägung XING

opco

12

Goog

le N

ews

Stac

k Ov

erflo

w

Offe

ne S

yste

me

Gültigkeitsdauer Unbegrenzt Begrenzt

■

□ ■

□

■

□

■

□

■

■

Geltungsbereich International National Sonstige Domänenbeschränkung

■

□

□

■

□

□

■

□

□

■

□

□

■

■

■

Validierung des Schemas 4|4

15.09.2014 Anja Lorenz & Stefan Meier: „Digital Badges zur Dokumentation von Kompetenzen“ 43

…

Dimension Ausprägung XING

opco

12

Goog

le N

ews

Stac

k Ov

erflo

w

Offe

ne S

yste

me

Aussteller Experte Community Automat

■

■

□

■

□

□

□

□

■

□

■

■

■

■

■

Level-Support Vorhanden ■ □ ■ □ ■

Portabilität unbegrenzt □ □ □ □ ■