Zusammenfassung
In diesem Codemuster erfahren Sie, wie Sie mit dem Cortex Certifai Toolkit Scans erstellen, um die Leistung mehrerer Vorhersagemodelle mit IBM Watson Studio zu bewerten.
Beschreibung
Die Erklärbarkeit von KI-Modellen ist eine schwierige Aufgabe, die durch Cortex Certifai vereinfacht wird. Das Cortex Certifai Tookit bewertet KI-Modelle auf Robustheit, Fairness und Erklärbarkeit und ermöglicht Benutzern den Vergleich verschiedener Modelle oder Modellversionen für diese Eigenschaften. Certifai kann auf jedes Black-Box-Modell angewendet werden, einschließlich maschineller Lernmodelle und Vorhersagemodelle, und funktioniert mit einer Vielzahl von Eingabedatensätzen.
Datenwissenschaftler können Modell-Scan-Definitionen erstellen, die aus trainierten Modellen bestehen, die Sie für die folgenden Parameter bewerten möchten:
- Leistungsmetrik (z. B. Genauigkeit)
- Robustheit: Wie das Modell auf neue Daten verallgemeinert
- Fairness nach Gruppen, die die Verzerrung in den Daten misst
- Erklärbarkeit, die die Erklärungen misst, die für jedes Modell bereitgestellt werden
- Erläuterungen, in denen die Änderung angezeigt wird, die in einem Datensatz mit bestimmten Einschränkungen vorgenommen werden muss, um ein anderes Ergebnis zu erzielen
Unternehmensentscheider können den Bewertungsvergleich anhand von Visualisierungen und Bewertungen anzeigen, um die besten Modelle für Geschäftsziele auszuwählen und festzustellen, ob Modelle Schwellenwerte für Robustheit, Fairness und Erklärbarkeit erfüllen. Datenwissenschaftler können die Bewertungsergebnisse zur Analyse verwenden, um vertrauenswürdigere KI-Modelle bereitzustellen.
Dieses Codemuster zeigt, wie mit dem Certifai Toolkit Scans erstellt werden, um die Leistung mehrerer Vorhersagemodelle mithilfe der IBM Watson Studio-Plattform zu bewerten.
Flow
- Melden Sie sich bei IBM Watson Studio mit Spark an, initiieren Sie IBM Cloud Object Storage und erstellen Sie ein Projekt.
- Laden Sie die CSV-Datendatei in IBM Cloud Object Storage hoch.
- Laden Sie die Datendatei in das Watson Studio-Notizbuch.
- Installieren Sie das Cortex Certifai Toolkit im Watson Studio-Notizbuch.
- Holen Sie sich eine Visualisierung zur Erklärbarkeit und Interpretierbarkeit des KI-Modells für die drei verschiedenen Benutzertypen.
Anweisungen
Die detaillierten Schritte finden Sie in der README Datei. Diese Schritte erklären, wie man:
- Erstellen Sie ein Konto bei IBM Cloud.
- Erstellen Sie ein neues Watson Studio-Projekt.
- Daten hinzufügen.
- Erstellen Sie das Notizbuch.
- Fügen Sie die Daten als DataFrame ein.
- Führen Sie das Notizbuch aus.
- Analysieren Sie die Ergebnisse.
- Konto
- AI
- Analyse
- BESTE
- Flugschreiber
- Körper
- Geschäft
- Übernehmen
- Cloud
- Code
- Inhalt
- technische Daten
- Datensatz
- Erklärbarkeit
- Fluss
- Gruppe an
- Ultraschall
- Hilfe
- HTTPS
- IBM
- IBM Cloud
- IBM Watson
- identifizieren
- Einschließlich
- LERNEN
- lernen
- Maschinelles Lernen
- Modell
- Objektspeicher
- Schnittmuster
- Leistung
- Plattform
- Projekt
- Die Ergebnisse
- Scan
- Wissenschaftler
- kompensieren
- Lagerung
- Nutzer
- Anzeigen
- Visualisierung
- Watson
- Watson-Studio
- Werk