KI Audit
KI Audit macht die Nutzung von Moodles zentralem KI-Subsystem nachvollziehbar. Es trennt technische Betriebsdaten von didaktischen Hinweisen.
Für wen und typische Einsatzszenarien
Abschnitt betitelt „Für wen und typische Einsatzszenarien“KI Audit richtet sich an Moodle-Administratoren, Datenschutz- und Governance-Verantwortliche sowie technischen Support. Es hilft beispielsweise bei der Untersuchung fehlgeschlagener KI-Aufrufe, beim Vergleich verwendeter Provider, bei der Beobachtung von Tokenwerten und bei der Frage, welche KI-Aktionen in welchen Kurskontexten genutzt werden.
Die didaktische Sicht kann zusätzlich auf Bereiche mit vielen Erklär- oder Zusammenfassungsanfragen hinweisen. Solche Signale sind ein Anlass zur qualitativen Prüfung, keine automatische Bewertung von Lehrenden oder Kursen.
Voraussetzungen und Einrichtung
Abschnitt betitelt „Voraussetzungen und Einrichtung“- Richten Sie Moodles zentrales KI-Subsystem und mindestens einen Provider ein.
- Installieren und öffnen Sie die KI-Suite als Administrator.
- Vergeben Sie die Berechtigung zur Einsicht nur an einen klar begrenzten Personenkreis.
- Legen Sie fest, ob Namen, Prompts, Antworten, Fehlerdetails und Tokenwerte angezeigt werden dürfen.
- Prüfen Sie die Filter und einen CSV-Export zunächst mit Testdaten.
Audit-Daten entstehen nur, wenn KI-Aktionen über Moodles core_ai-Subsystem
laufen und dort protokolliert werden. Externe Aufrufe außerhalb dieses Pfads
erscheinen nicht automatisch.
Zugriff
Abschnitt betitelt „Zugriff“Der Zugriff wird von der Moodle-Administration festgelegt:
- über die zentrale Berechtigung zur Einsicht in KI-Nutzungsberichte oder
- ausschließlich für Website-Administratoren.
Ohne Berechtigung erscheinen weder Audit-Karte noch Audit-Navigation.
Übersicht
Abschnitt betitelt „Übersicht“Die Startseite zeigt zwei Wege:
- Technisches Audit für Requests, Provider, Modelle, Fehler und Tokens.
- Didaktisches Audit für Kursbereiche mit häufigen Erklär- oder Zusammenfassungsanfragen.
Die didaktische Sicht ist ein Hinweis auf möglichen Unterstützungsbedarf, keine automatische Qualitätsbewertung eines Kurses.
Technisches Audit verwenden
Abschnitt betitelt „Technisches Audit verwenden“- Öffnen Sie Technisches Audit.
- Nutzen Sie Schnellfilter, zum Beispiel nur Fehler oder eine bestimmte KI-Aktion.
- Öffnen Sie lange Prompts und Antworten über das Augen-Symbol.
- Grenzen Sie Ergebnisse bei Bedarf über Provider, Zeitraum, Person oder Erfolg ein.
- Exportieren Sie die gefilterten Daten bei Bedarf als CSV.
Der Export wandelt Anzeigeelemente in lesbaren Text um und kürzt lange Inhalte, damit die Datei in Tabellenkalkulationen nutzbar bleibt.
Datenschutz und Governance-Einstellungen
Abschnitt betitelt „Datenschutz und Governance-Einstellungen“Administratoren können festlegen, ob Namen anonymisiert und ob Prompts, Antworten, Fehlerdetails oder Tokenwerte angezeigt werden. Dieselben Schalter wirken auch auf den Export.
Didaktisches Audit einordnen
Abschnitt betitelt „Didaktisches Audit einordnen“Viele Erklär- oder Zusammenfassungsanfragen können auf schwierige Inhalte, fehlende Beispiele oder unklare Struktur hinweisen. Prüfen Sie den Kurskontext und sprechen Sie mit Lehrenden, bevor Sie Maßnahmen ableiten.
Datenquelle
Abschnitt betitelt „Datenquelle“Die Auswertung liest die Protokolle von Moodles core_ai-Subsystem. KI Audit
führt dafür keine parallele eigene Request-Historie.
Grenzen und richtige Interpretation
Abschnitt betitelt „Grenzen und richtige Interpretation“- Das Audit zeigt technische Ereignisse, aber nicht automatisch deren fachliche Qualität oder Rechtmäßigkeit.
- Anonymisierte Anzeigenamen entfernen keine personenbezogenen Inhalte aus freien Prompt- und Antworttexten.
- Tokenangaben können je Provider fehlen oder unterschiedlich interpretiert werden.
- Nicht über
core_aiausgeführte KI-Aufrufe sind außerhalb des Erfassungsbereichs. - Häufige Nutzung ist weder ein Qualitätsnachweis noch ein Fehlersignal.
Bewerten Sie Auffälligkeiten immer zusammen mit Kurskontext, Providerstatus, organisatorischen Regeln und den verantwortlichen Lehrenden.
Fehlerbehebung und FAQ
Abschnitt betitelt „Fehlerbehebung und FAQ“Warum ist das Audit leer?
Abschnitt betitelt „Warum ist das Audit leer?“Prüfen Sie, ob KI-Aktionen tatsächlich über das zentrale Moodle-KI-Subsystem ausgeführt wurden und ob der gewählte Zeitraum sowie die Filter passen.
Warum sehe ich keine Prompts oder Antworten?
Abschnitt betitelt „Warum sehe ich keine Prompts oder Antworten?“Die Anzeige kann aus Datenschutzgründen global deaktiviert sein. Diese Einstellung wirkt ebenfalls auf den Export und sollte nicht nur zur Fehleranalyse kurzfristig umgangen werden.
Warum unterscheiden sich Tabellenansicht und CSV?
Abschnitt betitelt „Warum unterscheiden sich Tabellenansicht und CSV?“Der Export wandelt Anzeigeelemente in Text um und begrenzt lange Inhalte, damit die Datei in Tabellenkalkulationen sicher nutzbar bleibt.
Kann das didaktische Audit automatisch Maßnahmen auslösen?
Abschnitt betitelt „Kann das didaktische Audit automatisch Maßnahmen auslösen?“Nein. Es liefert Hinweise für eine anschließende Prüfung und ein Gespräch mit den verantwortlichen Personen.