Observablen
Qualitätslevels A bis D
Tech. Maßnahmen - Daten Die in DA 1.2 definierten Datenqualitätscharakteristiken müssen unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks getestet und bewertet werden. Dies beinhaltet:
- Tests und Metriken zum Nachweis der Datenqualitätscharakteristiken
- Mindestens müssen Vollständigkeit, Aktualität und Korrektheit betrachtet werden
Die ausgewählten Metriken und Tests sollten möglichst die folgenden Merkmale aufweisen:
- wenn durch die Auswahl begründet, sollten die Metriken und Tests sowohl wichtige Basismethoden als auch möglichst fortgeschrittene Methoden (hinsichtlich Komplexität, Informationsgehalt, Implementierungsaufwand, z.B. umfangreiches Prüfwerkzeug) umfassen
- die ausgewählten Metriken und Tests sollten wenn möglich durch einen hohen Grad der Automatisierung eine kontinuierliche Evaluation der KI-Modelle erlauben
- Festlegung von Schwellenwerten (als Mindestanforderungen an die Funktionalität/Leistung) und Begründung der Schwellenwerte unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks
- falls anwendbar: Abstufung der Metriken und Schwellenwerte nach unterschiedlichen Einsatzszenarien mit Bezug zur Definition des Anwendungsbereichs
Tech. Maßnahmen - Daten Die in DA 1.2 definierten Datenqualitätscharakteristiken müssen unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks getestet und bewertet werden. Dies beinhaltet:
- Tests und Metriken zum Nachweis der Datenqualitätscharakteristiken
- Mindestens müssen Vollständigkeit und Korrektheit betrachtet werden
Die ausgewählten Metriken und Tests sollten möglichst die folgenden Merkmale aufweisen:
- wenn durch die Auswahl begründet, sollten die Metriken und Tests sowohl wichtige Basismethoden als auch möglichst fortgeschrittene Methoden (hinsichtlich Komplexität, Informationsgehalt, Implementierungsaufwand, z.B. umfangreiches Prüfwerkzeug) umfassen
- Festlegung von Schwellenwerten (als Mindestanforderungen an die Funktionalität/Leistung) und Begründung der Schwellenwerte unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks
Tech. Maßnahmen - Daten Die in DA 1.2 definierten Datenqualitätscharakteristiken müssen unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks getestet und bewertet werden. Dies beinhaltet:
- Tests und Metriken zum Nachweis der Datenqualitätscharakteristiken
Die ausgewählten Metriken und Tests sollten möglichst die folgenden Merkmale aufweisen: -es genügen Basismethoden (hinsichtlich Komplexität, Informationsgehalt, Implementierungsaufwand, z.B. eine simple Metrik)
- Festlegung von Schwellenwerten (als Mindestanforderungen an die Funktionalität/Leistung) und Begründung der Schwellenwerte unter Berücksichtigung des Anwendungsbereichs und Verwendungszwecks
Es wurde kein Nachweis geführt, dass der Datensatz dem Zweck des KI-Systems und den Datenqualitätsanforderungen entspricht