Zum Inhalt springen
Search the hub
Model- und Dataset-Cards die betrieben werden

Model- und Dataset-Cards die betrieben werden

Model- und Dataset-Cards als Pflicht-Betriebsartefakte an die Registry binden — keine optionalen PDFs nach Go-Live.

Category
Data Governance
Reading time
5 min
Published
Tags
data-governance ai-governance model-card training-data stewardship mlops
Download PDF

Modell- und Datensatzbeschreibungen helfen nur, wenn sie zur tatsächlich eingesetzten Version gehören und vor der Produktivsetzung geprüft werden. Diese Story zeigt, wie zulässige Nutzung, Herkunft, Testergebnisse und bekannte Grenzen direkt mit dem technischen Register verbunden werden.

Was aus dem vorherigen Schritt ankommt

Übernimm Pfad-ID, Zweck und Prüfbedarf. Model- und Dataset-Card müssen jetzt die tatsächlich betriebene Modell- und Datenversion beschreiben.

Ausgangspunkt: AI Act als Operating Model.

Begriffe vor dem Lesen

  • Data Owner — Fachlich verantwortliche Rolle für Zweck, Bedeutung, Risikoakzeptanz und Freigabe.

  • Data Steward — Rolle, die Definitionen, Prüfungen, Konflikte und Nachweise im Alltag pflegt.

  • Data Custodian — Technische Rolle, die Zugriffe, Laufzeit, Sperren und Protokollierung umsetzt.

  • Freigegebener KI-Nutzungspfad — Eine konkrete Kombination aus Zweck, Werkzeug, Datenklassen, verantwortlichen Rollen und technischen Kontrollen.

  • RAG (Retrieval-Augmented Generation) — Das System sucht vor einer Antwort freigegebene Quellen und stellt sie dem Sprachmodell als Kontext bereit.

  • HITL (Human in the Loop) — Eine benannte Person prüft oder genehmigt eine Aktion, bevor sie wirksam wird.

  • Waiver / befristete Ausnahme — Zeitlich begrenzte Abweichung mit Grund, Risiko, kompensierender Maßnahme und Ablaufdatum.

  • Model Card / Dataset Card — Versionierte Beschreibung von Modell beziehungsweise Datensatz, zulässiger Nutzung, Herkunft, Tests und Grenzen.

  • Corpus — Die kontrollierte Sammlung von Dokumenten oder Daten, aus der ein KI-System sucht oder lernt.

Entscheidung

Die nachfolgenden Hard-Fail-/Warnregeln und Risikolabels sind eine interne Gate-Policy, keine allgemeingültige gesetzliche KI-Klassifikation. Eine dokumentierte Ausnahme braucht Mandat, Scope und Frist; sie setzt bindende Anforderungen nicht außer Kraft. Ein Snapshot-Verweis identifiziert den Datenstand und verlangt keine zusätzliche ungeschützte Rohdatenkopie.

Bevor eine Version einen freigegebenen KI-Nutzungspfad bedienen darf:

  1. eine Minimum Model Card (Model-/Versions-ID, Intended Use und Nicht-Ziele, Training/Base-Lineage, Eval-Summary-Link aus Teil 6, Risikoklasse, Owner, Known Limitations, Rollback-Version);
  2. eine Minimum Dataset Card (Corpus-/Snapshot-ID, Zweck retrieval / training / eval, Quellen, Sensitivität, Hygiene-/AI-Gate-Status, License/Rechte, Steward, Refresh/Rebuild-Trigger);
  3. ein Registry-Gate: Promote nur bei vollständigen Cards (limited/high Hard Fail; minimal Warn mit Ablauf);
  4. einen Owner für Semantik und Risiko, einen Steward für Vollständigkeit, einen Custodian für Registry-Durchsetzung;
  5. einen Ausnahmeweg mit Freigeber und Ablauf — nie stilles Promote ohne Card.

Daten- und Model-Governance-Ablauf: Model Card, Dataset Card, Gate vor Produktion und laufende Re-Evaluation.

Metadata-Prep allein blockt nicht — Metadaten für AI…. Das Gate sitzt an der Registry.

Card-Workflow

1. Cards an Versions-IDs binden

Der Owner legt fest, welche Model-Version und welcher Corpus-Snapshot den Path bedienen. Der Steward schreibt beide IDs in die Cards; der Custodian verankert sie in Registry und Vector-Admin. Eine immergrüne Folie ohne Versions-ID ist kein Nachweis — der nächste Fine-Tune überschreibt sie still.

2. Mindestfelder füllen

Model Card nennt Use, Nicht-Ziele, Lineage, Eval-Link, Risiko, Limits und Rollback. Dataset Card nennt Zweck, Quellen, Sensitivität, Hygiene-Status und Rebuild-Trigger. Fehlt ein Feld, darf limited/high nicht promoten. Ohne Nicht-Ziele wird derselbe Corpus später für Training missbraucht.

3. Registry-Gate verdrahten

Der Custodian hängt die Templates an Promote-Jobs. limited/high hard-failen bei Lücken; minimal warnt mit Ablaufdatum. Ein Gate, das nur warnt und nie blockt, ist Dekoration — stoppen, wenn ein Promote wegen fehlender Cards fällt und einer mit IDs durchgeht.

4. Live-Pfade nachziehen

Der Steward ergänzt nachträglich Cards für bereits live freigegebene KI-Nutzungspfade und hängt sie an die Prüfrhythmus für Nachweise aus Teil 2. Ohne Nachzug bleibt Produktion das Schlupfloch: neue Versionen haben Cards, der laufende Bot nicht.

5. Review bei Wechsel

Owner bestätigt Risiko erneut bei Use-Erweiterung oder Corpus-Delta. Steward triggert Review bei Embedding-Wechsel, Re-Index oder Incident. Custodian prüft, dass Pack-ID und Versions-Pin noch zusammenpassen. Eine Card nach Go-Live optional machen heißt, den nächsten Rollback ohne Nachweise zu fahren.

Handoffs

Von An Artefakt
verantwortliche Person des Nutzungspfads Steward Card Minimum Spec + Versions-IDs
Steward Custodian / Registry vollständige Cards + Promote-Regel
Steward Eval-Owner Eval-Summary-Link (Teil 6)
verantwortliche Person des Nutzungspfads Privacy / Risk Risikoklasse + Ausnahme mit Ablauf
Custodian Operations Registry Gate Policy an sanctioned-paths-v1

Anti-Patterns

  • Cards als optionales PDF nach Produktivstart ablegen
  • Produktion-Endpoint auf unbenannten Fine-Tune zeigen
  • Retrieval-Dokumentbestand ohne Dataset Card indexieren
  • Eine immergrüne Card für alle Versionen führen
  • Metadata-Prep haben, aber Promote nie blocken

Erster Praxistest

  1. Feld-Templates für Model- und Dataset-Card festlegen und an einen Registry-Promote hängen.
  2. Cards für einen live freigegebenen KI-Nutzungspfad nachziehen (IDs, Zweck, Rollback).
  3. Ein Promote mit fehlender Card blocken und den Fail als Nachweise speichern.
  4. Review-Trigger an Prüfrhythmus für Nachweise aus Teil 2 koppeln.

Die Übergabe am konkreten Fall prüfen

Vergleiche den konfigurierten Endpunkt mit Modellkennung und Snapshot in den Karten. Versuche im Test, eine Version ohne passende Karte bereitzustellen; dokumentiere den vereinbarten Block. Prüfe auch eine vollständige Karte mit falscher Versionsreferenz, damit bloße Feldvollständigkeit nicht genügt.

Wenn die Probe nicht trägt: Eine gepflegte Karte ist keine bestandene Evaluation. Veraltete oder unpassende Karten gehen zur Versions- und Zweckklärung zurück.

Stand nach der Probe Passender Anschluss
Ergebnis und verbleibende Grenzen sind geprüft und übergabefähig Synthetic Data für AI und Nonprod
Eine Grundlage für die Entscheidung bleibt offen AI Act als Operating Model – offene Frage mit Zuständigkeit zurückgeben.

Die Prüfung beschreibt einen Beispielfall. Halte bei der eigenen Umsetzung fest, was tatsächlich geprüft wurde und welche Abweichungen noch offen sind.

Sanctioned AI Ops

Part 3 of 8

View series

Knowledge check

Tour