Evaluation von E-Learning in Unternehmen – Erfolg erfolgreich messen.

Evaluation von E-Learning in Unternehmen – Erfolg erfolgreich messen.

Johannes Moskaliuk 01.10.2015 | Ludwigsburg

Wie gefällt Ihnen die Veranstaltung bis jetzt? 2

sehr hervorragend äußerst hervorragendhervorragendgeht so

5

in Ordnung

1234

3

90% der Teilnehmenden sagen: hervorragend!

3

80% der Teilnehmenden unter 30 Jahren finden die Veranstaltung ganz hervorragend!

90% der Teilnehmenden sagen: hervorragend!

3

80% der Teilnehmenden unter 30 Jahren finden die Veranstaltung ganz hervorragend!

Expertinnen bewerten die Veranstaltung mit der Note 1.

90% der Teilnehmenden sagen: hervorragend!

3

?80% der Teilnehmenden unter 30 Jahren finden die Veranstaltung ganz hervorragend!

Expertinnen bewerten die Veranstaltung mit der Note 1.

90% der Teilnehmenden sagen: hervorragend!

Besser als gut? 4

Vorher/Nachher

Zielwerte

Vergleich Ist / Soll

Was ist eine Evaluation? 5

Ein notwendiges Übel.Ein Verkaufsargument.

Standard.

Was ist eine Evaluation? 5

Ein notwendiges Übel.Ein Verkaufsargument.

Standard.

Bewertung der Ergebnisse von Projekten oder Prozessen.

Erfolg erfolgreich messen – in 8 Schritten. 6

Ziele der Projekts

Kriterien

Messmethode

Stakeholder

intern / extern

Interpretation

Kosten / Nutzen

rechtliche Aspekte

1. Welche Ziele hat das Projekt?

7

2. Was sind Kriterien für Erfolg? 8

Zufriedenheitsubjektive Einschätzung

LernenWissen

VerhaltenKompetenz

Ergebnisseunternehmerisch

Kirkpatrick, 1959

2. Was sind Kriterien für Erfolg? 9

Zufriedenheit Lernen

Wissen

Verhalten

Kompetenz

Ergebnisse

unternehmerisch

Kirkpatrick, 1959

subjektive Einschätzung

2. Was sind Kriterien für Erfolg? 9

Zufriedenheit Lernen

Wissen

Verhalten

Kompetenz

Vermutlich ein Grund, warum wir z.T. lernpsychologischvöllig unsinnige Werkzeuge und Methoden einsetzen.

Ergebnisse

unternehmerisch

Kirkpatrick, 1959

subjektive Einschätzung

3. Welche Messmethoden werden eingesetzt? 10

subjektiv objektiv

Befragung Beobachtung

externe Kriterien

Kennzahlen

4. Wer ist von der Maßnahme betroffen?

Mitarbeitende Führungskräfte BewerberInnen Kunden Konkurrenz Geschäftspartner Geldgeber 11

und der Evaluation

5. Wird die Evaluation intern oder extern durchgeführt? 12

+ enge Einbindung in den Projektverlauf unmittelbare Umsetzung von Veränderungen „Feldkompetenz“ – Was ist wirklich wichtig?

intern

+extern Sicht von Außen objektiver und unvoreingenommen

nach innen überzeugender

6. Wer interpretiert die Ergebnisse?

■ Was ist eine relevante Verbesserung?

■ Sind die Ziele erreicht? ■ Wer wird über die

Ergebnisse informiert? ■ Werden die

Ergebnisse publiziert?13

7. Bestehen ethische und rechtliche Bedenken? 14

Betriebsrat

Belastungen / Gefährdungen Nachteile für die Kontrollgruppe

Datenschutz

8. Lohnt sich eine Evaluation?

15

ViPOL – Virtuelles Training für Polizeikräfte 16

•  Teamarbeit •  unterschiedliche Ausrüstung •  unterschiedliche Kompetenzen

•  Rollen •  Hierarchie •  Kommunikation und Koordination

•  komplexe, dynamische Situationen •  keine fest definierten Abläufe •  flexibles Reagieren unter Stress

•  Situation, die im Berufsalltag jeder Zeit auftreten kann

•  lebensgefährlich

Fahndung nach flüchtigem Bankräuber

Verkehrskontrolle

Kooperationspartner

ViPOL – Virtuelles Training für Polizeikräfte 17

Standard-Training Virtuelles Training Verhaltensempfehlung

Wissenstest

Subjektive Maße

Wissenstest

Transfertest

geistreich.de – Austausch von Handlungswissen 18

Kooperationspartner

geistreich.de – Austausch von Handlungswissen 19

Fokusgruppen Erhebung des Bedarfs Erwartungen an die Plattform

Befragung Bewertung des Umsetzung Nutzung

Logfile-Analyse objektive Daten zur Nutzung

Begleitforschung Experimentelle Erhebungen zur Rahmenbedingungen

Vielen Dank für Ihr Interesse. 20

Prof. Dr. Johannes Moskaliuk http://www.moskaliuk.com [email protected]