Die Wirksamskeitskontrolle ist eine Zusatzfunktion für kursbezogenes, nicht anonymes Folgefeedback. Sie dient dazu, zu bewerten, ob das Gelernte nach erfolgreichem Abschluss eines Kurses in die Praxis am Arbeitsplatz übertragen wurde. Der Arbeitsablauf basiert auf Formularen für das Transfer-Feedback und bietet Lernenden und Vorgesetzten einen eigenen Dashboard-Zugang, ergänzt durch Reporting-Funktionen für Administratoren, Tutoren und Lernmanager.
Umfang der Funktion
Der nachstehende Funktionsumfang spiegelt die implementierten Standardfunktionen sowie spätere Standarderweiterungen wider. Tickets mit dem Status „Ablehnen“ werden nicht berücksichtigt.
Zweck und Funktionskonzept
Die Wirksamskeitskontrolle erweitert das Standard-Feedback, indem sie die einzelnen Lernenden und – je nach Konfiguration – die zuständigen Vorgesetzten in den Mittelpunkt stellt. Im Gegensatz zu anonymem Kursfeedback soll die Wirksamskeitskontrolle eine nachvollziehbare Bewertung des Lerntransfers, der Verhaltensänderung oder der formellen Bestätigung nach dem Training ermöglichen.
Die Funktion basiert auf Feedback-Formularen, die für die nicht-anonyme Nutzung konfiguriert sind. Diese Formulare werden über ein spezielles Panel für die Wirksamskeitskontrolle bereitgestellt und können zudem anhand spezifischer Reports bewertet werden.
-
Unterstützt die Bewertung nach dem Training auf Lerner-Level
-
Nutzt Feedback-Formulare als Rückgrat des Prozesses
-
Bietet einen eigenen Zugang zum Portal für ausstehende und erfolgreich abgeschlossene Aktionen
-
Ermöglicht die Erstellung von Reports zum Einreichungs- und Begutachtungsstatus
-
Kann sowohl vergleichende Feedback-Workflows als auch Workflows zum Bestätigen unterstützen
Konfiguration und Voraussetzungen
Für die Wirksamskeitskontrolle ist die spezielle Lizenz für das Feedback zur Wirksamskeitskontrolle notwendig. Das implementierte Lizenzkonzept stellt die entsprechenden Einstellungen und Funktionen im System zur Verfügung.
Das zentrale Objekt für die Konfiguration ist das Formular für Feedback zum Wechsel. Diese Vorlage dient zur Erstellung von nicht-anonymen Feedback-Formularen für Szenarien der Wirksamskeitskontrolle.
Voraussetzungen für die Konfiguration
Für den Workflow zur Wirksamskeitskontrolle sind nur Feedback-Formulare relevant, die für eine nicht-anonyme Übermittlung gekennzeichnet sind. Maßnahmen in Bezug auf Vorgesetzte sind nur verfügbar, wenn die Formularkonfiguration diese ausdrücklich unterstützt und die entsprechende Lizenz aktiviert ist.
Im Laufe der Zeit wurden die folgenden Optionen für die Konfiguration implementiert:
-
Anzeige der Wirksamskeitskontrollen in speziellen Lerner- und Vorgesetzten-Panels
-
Auswahl der Personen, die das Feedback einreichen dürfen
-
Einreichung ausschließlich durch Lerner
-
Einreichung durch Lerner und Vorgesetzten
-
Einreichung des Lernenden mit Bestätigung durch den Vorgesetzten
Bei Workflows, die den Vorgesetzten betreffen, werden im Bereich der Wirksamskeitskontrolle nur Formulare angezeigt, die für nicht-anonyme Rückmeldungen vorgesehen sind. Je nach Konfiguration kann der Vorgesetzte entweder eigenes Feedback geben oder die Einreichung des Lernenden bewerten und bestätigen.
Einstellungen zur Wirksamkeit
|
Schauplatz |
Was bewirkt diese Einstellung? |
|---|---|
|
Anzeige in nicht-anonymen Reports |
Die Antworten, die im Rahmen von Feedback-Formularen abgegeben wurden und in nicht-anonymen Berichten als verfügbar markiert sind, werden in den Berichten zur Wirksamskeitskontrolle zusammen mit dem Namen der Person angezeigt, die die Antworten eingereicht hat. Damit der Lerner die Feedback-Formulare im Bereich zur Überprüfung der Lernwirksamkeit einsehen kann, muss diese Option für das jeweilige Formular aktiviert sein. |
|
Personen, die ein Feedback einreichen dürfen |
Legt fest, wer Beiträge zur Wirksamskeitskontrolle leisten darf. Dem Vorgesetzten kann entweder gestattet werden, das Feedback selbst einzureichen, das vom Lerner eingereichte Feedback zur Bewertung zu prüfen und zu bestätigen, oder es kann keine Aktion vorgesehen sein. Nur Formulare, die in nicht-anonymen Berichten als verfügbar markiert sind und bei denen der Vorgesetzte entweder Feedback geben oder eine Bestätigung vornehmen kann, werden im Bereich „Wirksamskeitskontrolle“ des Vorgesetzten angezeigt. Das vom Vorgesetzten für die Schulungsaktivität eines Lernenden gegebene Feedback ist im Report „Feedbackauswertung“ verfügbar, der über die Kursbetreuung zugänglich ist, sowie im speziellen Report „Wirksamskeitskontrolle“. Wichtiger Hinweis: Wenn nur der Vorgesetzte nominiert ist, wird kein Feedback an den Lerner gesendet. |
Verhalten des Dashboard-Panels
Mit der ersten Standardimplementierung wurde eine spezielle Armaturenbrett mit zwei Betriebsmodi: Lerner und Vorgesetzter. Die Einrichtung des Backends, die API-Unterstützung, die Konfiguration der Panels, die Berechtigungsverwaltung und das Verhalten der Benutzeroberfläche wurden im Rahmen der ersten Lieferung umgesetzt.
Lerner-Modus
Im Lernendenmodus bietet das Panel Zugriff auf relevante Formulare für die Wirksamskeitskontrolle aus den Kursen des Lernenden. Der Lernende kann ausstehende Formulare bearbeiten und bereits eingereichte Formulare zur Bewertung einsehen.
-
Zeigt ausstehende und erfolgreich abgeschlossene Wirksamskeitskontrollen an
-
Zeigt den Kurs und den Kontext des Feedbacks an
-
Ermöglicht den Zugriff auf das Feedback über das Portal
-
Gibt den Status des Einreichungs-Workflows wieder
Im Rahmen der anschließenden Implementierungsarbeiten wurde das Lernererlebnis weiter optimiert, unter anderem durch das Entfernen überflüssiger Statuselemente sowie durch Korrekturen hinsichtlich der Darstellung, der Namen, des Ladeverhaltens und des Überprüfungsverhaltens.
Vorgesetzter-Modus
Der Vorgesetztenmodus wurde als spezielle Ansicht für Vorgesetzte implementiert, um die Wirksamskeitskontrollen ihrer Mitarbeiter zu bearbeiten. Das Panel unterstützt Such- und Filterfunktionen, den Zugriff auf die eingereichten Arbeiten der Lernenden sowie die Nachverfolgung von Arbeitsabläufen.
-
Zeigt für betreute Lernende relevante Wirksamskeitskontrollen an
-
Zeigt an, ob eine Maßnahme des Vorgesetzten notwendig ist
-
Unterstützt das Öffnen des Lernerkontexts und des Feedback-Formulars
-
Unterscheidet ausstehende Aufgaben von bereits abgeschlossenen Aufgaben
Der Zugriff für Vorgesetzte war notwendig für die Implementierung des Backends, der Datenbank, der API und des Frontends. Zudem wurden Anpassungen an den Berechtigungen und den Freigaben für das Panel vorgenommen, um sicherzustellen, dass der Vorgesetzte die Wirksamskeitskontrollen durchführen kann, ohne wie die Lerner regelmäßig auf den Kurs zugreifen zu müssen.
Unterstützte Arbeitsabläufe
1. Ablauf des Feedbackprozesses zwischen Lernenden und Vorgesetzten
Der ursprüngliche Standard-Workflow ermöglicht es sowohl dem Lerner als auch – sofern entsprechend konfiguriert – dem Vorgesetzten, zur Wirksamskeitskontrolle beizutragen. In diesem Modus kann der Vorgesetzte über das Bedienfeld auf die lernendebezogene Wirksamskeitskontrolle zugreifen, das Formular im Kontext öffnen und Feedback übermitteln. Diese Übermittlung steht für eine spätere Überprüfung und Reporting zur Verfügung.
Die durchgeführten Arbeiten umfassten:
-
Zugriff auf das Feedback-Formular für Vorgesetzte über das Dashboard
-
Frontend- und Backend-Unterstützung für die Einreichung über den Vorgesetzten
-
Datenbank- und API-Unterstützung zum Speichern und Bereitstellen von Antworten von Vorgesetzten
-
Vergleichende Auswertung der Antworten von Lernenden und Vorgesetzten
2. Einreichung durch den Lerner mit Bestätigung durch den Vorgesetzten
Ein Bestätigungsworkflow, bei dem der Lerner die Wirksamskeitskontrolle einreicht und der Vorgesetzte keine separaten Antworten gibt. Stattdessen überprüft der Vorgesetzte die Eingaben des Lernenden und bestätigt diese, gegebenenfalls mit einem Kommentar, je nach Konfiguration.
Wann dieser Arbeitsablauf sinnvoll ist
Dieser Modus eignet sich für Situationen, in denen vom Vorgesetzten erwartet wird, dass er die Einreichung des Lerners bestätigt oder validiert, anstatt eine zusätzliche Bewertung durchzuführen.
Der implementierte Workflow zum Bestätigen umfasst:
-
Zusätzliche Modi für die Konfiguration von Formularen zur Bestätigung durch den Vorgesetzten
-
Statusanzeige im Lerner-Panel, z. B. „Ausstehend für die Bewertung“ und „überprüft“
-
Transparenz des Bestätigungsbedarfs im Panel des Vorgesetzten
-
Einschränkung, dass der Vorgesetzte die Arbeit erst nach Einreichung durch den Lerner zur Bewertung prüfen kann
-
Verschieben geprüfter Elemente aus dem Aufgabenbereich in den Verlauf
-
Report zur Verbesserung mit Status des Vorgesetzten zum Bestätigen
Reporting und Analytik
Es stehen ein Statusbericht zu anstehenden Wirksamskeitskontrollen sowie eine Erweiterung des Berichts zur Wirksamskeitskontrolle zur Verfügung. Dadurch wurde Transparenz hinsichtlich offener Bearbeitungsschritte und des Fortschritts bei der Einreichung geschaffen.
The reporting scope includes two essential levels:
-
Operatives Reporting für ausstehende Wirksamskeitskontrollen und den Workflow-Status
-
Analytische Reporting zur Bewertung der Wirksamskeit der Kontrollmaßnahmen
Operational Reporting
Die Implementierung der Statusberichterstattung unterstützt die Nachverfolgung ausstehender Wirksamkeitskontrollen. Im Rahmen späterer Erweiterungen wurden Informationen zum Überprüfungsstatus hinzugefügt, sodass in den Berichten genauer zwischen dem Status der von den Lernenden eingereichten Arbeiten und dem Status der Überprüfung durch die Vorgesetzten unterschieden werden kann.
Analytische Reporting
The analytical reporting was significantly expanded through Learning Analytics Unterstützung. Durch die implementierten Verbesserungen wurde die Datengrundlage für die Analyse der Wirksamskeitskontrolle hinzugefügt und es wurden Kennzahlen für die Bewertung verschiedener Fragetypen eingeführt.
Zu diesen Analysefunktionen gehören:
-
Detailansichten auf Level-Ebene
-
Durchschnittliche Wirksamkeitsbewertung (Ansichten)
-
Trendanalyse im Zeitverlauf
-
Ansichten zum Kursvergleich
-
Bewertungstool für Ja/Nein-, Einzelantwort-, Multiple-Choice-, Matrix-, Freitext- und Ordnungsfragen
-
Konfigurierbare, auf Abweichungen und Schwellenwerten basierende KPIs