
Digital AI Testing & Evaluation Expert
Kursnummer: UA1088
KI ist in diesem Kurs Bestandteil des Systems: Es geht um intelligente, KI-basierte Systeme, nicht nur um KI-Unterstützung bei der Produktentwicklung. Aufbauend auf UA1018 (CPUX-F, HCAIX Level 1) erwerben die Teilnehmenden auf Advanced-Niveau die Kompetenzen, digitale Produkte und Systeme mit künstlicher Intelligenz (KI) menschzentriert zu testen und zu evaluieren. Der Bereich des HCAIX-Zertifizierungssystems Level 2 ist Testing & Evaluation (Inhalte CPUX-UT). Sie führen Usability-Inspektionen und moderierte sowie unmoderierte Remote-Usability-Tests durch, befragen Nutzende, prüfen die Barrierefreiheit, evaluieren KI-Funktionen (Fehlerarten, Fehlerrate, Vertrauen, Wizard-of-Oz) und werten Aufzeichnungen mit KI (Claude) aus.
Warum dieser Kurs?
- 160 UE in 4 Wochen (20 Tage)
- 20 Tage à 8 UE (UE à 45 Min.)
- Zertifikat: Digital AI Testing & Evaluation Expert
- HCAIX Level 2: Testing & Evaluation
- Aufbau auf UA1018 oder gleichwertige Kenntnisse
- 38 UE Theorie live mit Trainer
- 36 UE Übungen mit Trainerbetreuung, 12 UE Coaching
- KI als Bestandteil des Systems - nicht nur Werkzeug
- LIVE ONLINE mit V-Classroom-XL
- Förderung über Bildungsgutschein beantragt
Zielgruppe
- UX-, UI- und Interaction-Designer, Usability-Fachleute, Produktverantwortliche
Kursformat
- 4 Wochen: 20 Tage à 8 UE
- bis zu 49% Selbststudium ohne Präsenz
- LIVE ONLINE V-Classroom-XL
- 12 Teilnehmende maximal - viel Zeit für individuelle Fragen
- Theorie, Übungen mit Trainerbetreuung und Coaching
Preis
Preis: 3.012,01 € netto Förderung über Bildungsgutschein beantragt

Pizza Projekt
Projektsituation: Pizzeria möchte keine Provisionen mehr verleieren und lieber weitere Kunden mit eigener mobilen Lösung gewinnen

Nutzungskontextanalyse
Brain Storming Nutzungskontext um sich einen ersten Überblick zu verschaffen

Persona
Der fiktive Besitzer in Form einer Persona

Benutzer
Der fiktive Benutzer in Form einer Persona

Low Fidelity Prototype
Nach mehreren Iterationen gibt es erste Entwürfe als Low Fidelity Prototype

Wireframe
Nach mehereren Prototypen und WireFlows wird das Design über einen Wireframe harmonisiert

Figma oder Axure Prototyp
Nach weiteren Iterationen gibt es einen High Fidelity Prototypen

Usability Testing & Evaluation

Usability Testing mit Videoaufzeichnung
Kursinhalte & Themenblöcke – Digital AI Testing & Evaluation Expert
1.1 TE 1 Grundlagen, Evaluationsmethoden und Methodenauswahl (HCAIX-TE Kap. TE 1 (Inhalte CPUX-UT Kap. 1)) – 4 UE
- HCAIX-TE-Begriffe (Terms & Definitions 2025): menschzentrierte Gestaltung, iterativer Prozess, HCD-Reife, Usability mit Effektivität, Effizienz und Zufriedenstellung, menschzentrierte Qualität, User Experience, Barrierefreiheit, Vermeidung von Schäden
- Nutzungskontext: Benutzer, Benutzergruppenprofil, Persona, Ziel, Aufgabe und Teilaufgabe, Aufgabenmodell, Aufgabenobjekt, Umgebung, Ressource (abgestimmt mit CPUX-UT, IREB, JTBD und DDD)
- Evaluationsmethoden im Überblick: Usability-Evaluierung, formativ und summativ, Usability-Test (qualitativ, quantitativ, moderiert, remote, unmoderiert), Eye-Tracking, Retrospective Recall, A/B-Test, Tree-Test, Card Sorting, Inspektion, Cognitive Walkthrough, Benutzerbefragung (SUS, UEQ, NPS, CSAT)
- Methodenauswahl und Methodenmix; Usability-Evaluierungs- und Testplan (etwa eine Seite): Auflistung aller Methoden und Ressourcen wie Zeit, Dauer, Personen, Budget; Auswahlkriterien einschließlich HCD-Reife; Inspektion vor Test
- Rolle der Usability-Evaluierung in der menschzentrierten Gestaltung; Test, Inspektion und Benutzerbefragung unterscheiden und passend wählen
- Qualitätskriterien einer Evaluierung, agile Evaluierung, Evaluierung von UX und Barrierefreiheit
- Evaluierung von KI-Funktionen: Fehlerarten, Fehlerrate, Vertrauen (HCAIX-TE)
(Fortsetzung) 1.1 TE 1 Grundlagen, Evaluationsmethoden und Methodenauswahl
- Testobjekte: real existierende Websites, die die Teilnehmenden selbst wählen; KI-Funktionen dort (Chatbot, Empfehlungen, Suche) als Beispiele für Fehlerarten
- Methodenvergleich Mensch und KI (Blatt „Methoden Mensch und KI“): je Aufgabe klassisches Vorgehen, KI-Vorgehen, Modus (etabliert, gleichwertig, Alternative, Ergänzung, Ersatz), Vor- und Nachteile
- Entscheidungsregel: KI ersetzt eine klassische Methode nur, wenn sie an einer Stichprobe validiert ist, wenig Schaden anrichten kann, umkehrbar ist und dokumentiert wird; sonst gleichberechtigt oder als Ergänzung
- Berichtsbeispiele des Kurses: Pizza-Hut-Website, Testbericht deutsch und englisch (Methoden: Inspektion nach ISO 9241-110, moderierter und unmoderierter Remote-Test)
- Vertiefung Evaluationsplanung: Evaluierungsziele, Hypothesen, Stichprobe, Ressourcen und Risiken; Zusammenspiel von Inspektion, Test und Befragung im Methodenmix
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 1 – 12 UE
- Lehrmaterial Testing & Evaluation (Inhalte CPUX-UT Kapitel 1), Lehrtext, Quiz, Lerntagebuch
- Claude Code einrichten (Installation, Berechtigungen, CLAUDE.md, erste Aufgabe): Vorlage für Evaluierungsprotokoll erzeugen und prüfen
- HCAIX-TE: KI-Funktionen evaluieren
- Lesen: Lehrmaterial TE Kap. 1, Terms & Definitions (Grundbegriffe), Kuckartz-Anleitung nur überfliegen
- Projektübung: Claude erkunden – Konto, Projekte, Dateien hochladen, erste Prompts zur Kaffeemaschine
- Kostenlos: Anthropic Academy (anthropic.skilljar.com, Englisch; deutsche Oberfläche per Browser-Übersetzung): 'Claude 101' (ca. 2,5 Std., ohne Vorkenntnisse) und 'AI Fluency: Framework & Foundations' (ca. 4 Std.)
1.2 TE 2 Usability-Inspektion nach ISO 9241-110 (HCAIX-TE Kap. TE 2 (Inhalte CPUX-UT Kap. 2)) – 3 UE
- HCAIX-TE-Begriffe: Usability-Inspektion, Interaktionsprinzip (früher Dialogprinzip), Heuristik, Heuristische Evaluierung, Expert Review, Gestaltungsrichtlinie, Styleguide, Designmuster, Grundsätze der Informationsdarstellung; häufige Fehler bei Inspektionen
- Vorgehen der Usability-Inspektion, Inspektionskriterien, Gutachterteam
- ISO 9241-110 (Interaktionsprinzipien) in der ausführlichen Fassung der Norm: Prinzipien und Prüfkriterien je Prinzip, Prüfung Kriterium für Kriterium; führt zu klareren, nachvollziehbaren Befunden; Einordnung: heuristische Evaluierung nach Nielsen als bekannte Alternative, im Kurs durch die Normkriterien ersetzt
- Cognitive Walkthrough und andere Inspektionsmethoden im Überblick
- Befunde: Beschreibung, Fundstelle, verletztes Prinzip und Kriterium, Schweregrad, Konsolidierung im Team
- KI-Inspektion: mehrere KI-Gutachter prüfen Bildschirme und Abläufe mit denselben Normkriterien; Befunde werden am Prototyp bestätigt (Trefferquote), Konsens bleibt beim Menschen
- Barrierefreiheit: automatische Prüfwerkzeuge ersetzen regelbasierte Prüfpunkte (Kontrast, Struktur, Beschriftung); Urteil und Nutzerprüfung bleiben menschlich
Praktische Übungen: Praxisübung 1 – Usability-Inspektion nach ISO 9241-110: selbst gewählte Website – 6 UE
- Aufgabe: Usability-Inspektion der selbst gewählten Website in Zweierteams anhand der Prinzipien und Prüfkriterien der ISO 9241-110; Befunde je Kriterium mit Schweregrad
- Methodenwahl an Fallbeispielen (Test, Inspektion, Befragung) begründen
- Befunde konsolidieren: Claude erstellt einen Entwurf, die Teilnehmenden prüfen Befund für Befund gegen den Prototyp (Gegenprüfung)
- Fehlerarten von KI-Funktionen der Website sammeln, falls vorhanden (falsche Empfehlung, Missverständnis, Halluzination)
- Ergebnis: Inspektionsbericht mit priorisierter Befundliste je Prinzip
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 2 – 8 UE
- Lehrmaterial Testing & Evaluation (Inhalte CPUX-UT Kapitel 2), Quiz TE 1+2
- Usability-Inspektion nach ISO 9241-110 an einem zweiten Beispiel (Bestell-App eines Wettbewerbers) allein durchführen
- Lesen: Lehrmaterial TE Kap. 2, ISO 9241-110 (Dialoggrundsätze) in eigenen Worten zusammenfassen
- Projektübung: Inspektion der Kaffeemaschinen-Oberfläche vorbereiten, Befunde in der Befundliste sammeln
- Kostenlos: Anthropic Academy (anthropic.skilljar.com, Englisch; deutsche Oberfläche per Browser-Übersetzung): 'AI Fluency' fortsetzen (Delegation, Description, Discernment)
1.3 TE 3 Usability-Test vorbereiten (HCAIX-TE Kap. TE 3 (Inhalte CPUX-UT Kap. 3.1)) – 3 UE
- HCAIX-TE-Begriffe: Usability-Evaluierungs- und Testplan, Evaluator und Tester, Testteilnehmer, Rekrutierung, Testort, Testsitzung, Pilotsitzung, Testskript, Briefing, Geheimhaltungsvereinbarung, Einwilligung, Testszenario, Testaufgabe, Interview vor und nach der Sitzung
- Auswahl des Evaluationsgegenstands: real existierende Website, von den Teilnehmenden gewählt; Auswahlkriterien (öffentlich zugänglich, keine vertraulichen Inhalte, Zielgruppe erreichbar, Test mit Einwilligung); Hinweis zu Rechten und Veröffentlichung der Ergebnisse
- Testziele, Testplan, Testaufgaben und Szenarien
- Testteilnehmende, Rekrutierung, Testumgebung, Pilottest
- Testplan (eine Seite) und Testskript (der aufwendige Teil) mit Claude entwerfen und prüfen
- KI-Entwurf von Screener, Aufgaben und Skript mit Prüfung auf Hinweise und Suggestivformulierungen; synthetische Testdaten; Pilot mit Menschen bleibt
- Aufgabenobjekte als Referenz: Testaufgaben je Aufgabenobjekt und Tätigkeit (erstellen, ansehen, ändern); Befunde später nach Aufgabenobjekt gruppieren
- Moderierte Remote-Tests (2–4 Teilnehmende) und unmoderierte Tests planen: Plattform, Aufzeichnung von Bild und Ton, Aufgabenversand
- Testskript nach der Kursvorlage: Begrüßung, Vorstellung, Einwilligung und Geheimhaltung, Briefing, Interview vor der Sitzung, Technik-Setup, Szenario, Aufgaben, Interview nach der Sitzung, Abschluss
(Fortsetzung) 1.3 TE 3 Usability-Test vorbereiten
- Neue Methoden mit KI (Buchentwurf 2025): Nutzungsszenarien schreiben, Personas entwickeln, Rekrutierung unterstützen; jeweils Entwurf durch KI, Prüfung durch den Menschen
- Testskript als eigentliche Herausforderung: Aufgabenformulierung neutral und aus Sicht des Benutzers im Szenario, ohne Begriffe der Oberfläche und ohne Lösungsweg; Aufgabenzeit je Aufgabe ermitteln (Pilot, Expertenlauf); je Aufgabe Vorbedingung, Nachbedingung, Erfolgskriterium und Abbruchkriterium festlegen
- Unterschied Testplan und Testskript: Der Testplan ist die Übersicht über Methoden, Ressourcen, Zeit und Dauer; das Testskript ist die Regieanweisung der einzelnen Sitzung mit Sprechtext und Aufgabenblättern
Praktische Übungen: Praxisübung 2 – Testplan, Testskript, Testaufgaben und Pilottest – 6 UE
- Aufgabe Testplan: Testplan erstellen (etwa eine Seite) und den Methodenmix beachten: Inspektion, moderierter Test, unmoderierter Test, Befragung; dazu Ressourcen, Zeit und Dauer
- Aufgabe Testskript: Testskript mit der Kursvorlage für die gewählte Website erstellen: Szenario und 5 Testaufgaben; je Aufgabe Formulierung, Aufgabenzeit, Vorbedingung, Nachbedingung, Erfolgskriterium und Abbruchkriterium
- Einwilligungs- und Geheimhaltungstext in das Skript einbauen; Pilottest im Rollenspiel: Aufgabenzeiten messen, Aufgaben und Skript anpassen
- Claude: Aufgabenentwurf und Prüfung auf Neutralität (Hinweise auf den Lösungsweg, Suggestivformulierungen); Claude Code: Testplan-Vorlage und Protokollbogen als Dateien erzeugen (CLAUDE.md mit Regeln für Neutralität der Aufgaben)
- Ergebnis: Testplan (eine Seite), Testskript mit Aufgabenblättern, Protokollbogen
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 3 – 8 UE
- Lehrmaterial Testing & Evaluation (Inhalte CPUX-UT Kapitel 3.1), Literatur zum Usability-Test, Quiz
- Testplan und Testskript überarbeiten
- Lesen: Lehrmaterial TE Kap. 3, Testskript-Vorlage (Remote-Usability-Test) komplett lesen
- Projektübung: Testplan (ca. 1 Seite) und Testskript mit Aufgabenzeiten, Vor-/Nachbedingungen und Erfolgskriterien fertigstellen, Pilottest einplanen
1.4 TE 4 Usability-Test durchführen und moderieren (HCAIX-TE Kap. TE 4 (Inhalte CPUX-UT Kap. 3.2, 3.4)) – 2 UE
- HCAIX-TE-Begriffe: Moderator, Beobachter, Protokollant, Moderationsregeln, Kommunikation, lautes Denken, Verhalten der Testteilnehmer, Affordance, mentales Modell; Hilfestellung und Zeitnahme
- Moderation, lautes Denken, neutral bleiben, Protokollieren
- Rollen im Test (Moderator, Beobachter, Protokollant)
- Wizard-of-Oz für KI-Funktionen (HCAIX-TE)
- Moderation: Mensch ist Standard; KI-Co-Moderator schlägt neutrale Rückfragen vor; KI-Moderation nur für einfache, risikoarme Tests
- Transkription: automatisch, in Echtzeit; die manuelle Mitschrift entfällt, außer wenn eine Aufnahme nicht erlaubt ist
- Zeit pro Aufgabe: automatische Ereigniserkennung statt Stoppuhr, nach Stichprobenprüfung
- Moderierter Remote-Test mit lautem Denken (Videokonferenz, Aufgaben per Chat, Zeitbegrenzung) im Vergleich zum unmoderierten Test (Plattform mit Bild- und Tonaufzeichnung)
- Durchführung nach dem Testskript: Moderator liest Szenario und Aufgaben vor, achtet auf Aufgabenzeiten, wendet Abbruchkriterien an und dokumentiert Abweichungen vom Skript
Praktische Übungen: Praxisübung 3 – Moderation und drei Testsitzungen – 6 UE
- Die Sitzungen werden nach dem Testskript aus Praxisübung 2 durchgeführt; Abweichungen werden notiert
- Aufgabe: Moderationsübung im Rollenspiel (Moderator, Testperson, Beobachter, Protokollant), anschließend drei Testsitzungen mit der gewählten Website
- Wizard-of-Oz-Demonstration durch den Trainer: Trainer spielt eine KI-Funktion, Teilnehmende beobachten und protokollieren
- Sitzungsprotokolle führen; Aufzeichnung mit Einwilligung
- Ergebnis: drei protokollierte Sitzungen
- Drei vollständige Testsitzungen im Rollenspiel (Moderation, Beobachtung, Protokoll); anschließend Peer-Feedback zur Moderation
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 4 – 8 UE
- Sitzungen nacharbeiten, Protokolle vervollständigen
- Transkripte mit Claude auswerten und an den Aufnahmen gegenprüfen
- HCAIX-TE: KI testen mit Wizard-of-Oz
- Lesen: Testskript-Vorlage (Beobachtungsbogen), Hinweise zur Moderation
- Projektübung: Testsitzungen nachbereiten, Transkripte mit Claude auswerten (Prompts im Lerntagebuch festhalten)
1.5 TE 5 Benutzerbefragung (CSAT), Ethik und Varianten (HCAIX-TE Kap. TE 5 (Inhalte CPUX-UT Kap. 3.7, 4)) – 3 UE
- HCAIX-TE-Begriffe: Benutzerbefragung, Fragebogen, Skala, CSAT, SUS, UEQ, NPS, Stichprobe, Einwilligung
- Benutzerbefragung mit CSAT: Frage und Skala gestalten, Zeitpunkt, offene Frage; Kennzahl CSAT; weitere Standard-Fragebögen (SUS, UEQ) im Überblick
- Auswertung der Befragung mit KI (Claude): CSAT-Wert, Kodierung und Clustering der offenen Antworten mit Stichprobenprüfung durch Menschen (Übereinstimmung)
- Ethische und rechtliche Aspekte: Einwilligung, DSGVO, KI-Transkription und Aufzeichnung
- Quantitativer Test, Testvarianten (remote, unmoderiert)
Praktische Übungen: Praxisübung 4 – Benutzerbefragung mit CSAT, Auswertung der CSAT, Einwilligung und Datenschutz – 3 UE
- Aufgabe: Benutzerbefragung mit CSAT zur gewählten Website aufsetzen (Frage, Skala, offene Frage, Pilot), im Kurs durchführen; optional ergänzend SUS
- Auswertung der CSAT mit Claude: CSAT-Wert berechnen, offene Antworten kodieren und clustern, Stichprobe gegen menschliche Kodierung prüfen
- Einwilligung und Datenschutz bei KI-Aufzeichnung und Transkription (Rollenspiel Datenschutzbeauftragte)
- Remote-/unmoderierte Variante planen
- Ergebnis: Befragungsauswertung mit CSAT, Einwilligungstext, Checkliste Datenschutz im Test
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 5 – 8 UE
- Quiz TE 5, CSAT-Auswertung mit Claude nacharbeiten und gegenprüfen
- HCAIX-TE: Ethik und Datenschutz bei KI-Aufzeichnung
- Lesen: Lehrmaterial TE Kap. 5 (CSAT, Befragung, Ethik/Datenschutz), Hinweise zur Einwilligung
- Projektübung: CSAT-Fragebogen finalisieren, CSAT-Wert berechnen und mit Claude gegenprüfen
1.6 TE 6 Auswertung mit KI, Clustern, Priorisieren und Usability-Testbericht (HCAIX-TE Kap. TE 6 (Inhalte CPUX-UT Kap. 3.3, 3.5–3.8)) – 3 UE
- HCAIX-TE-Begriffe: Usability-Befund, Usability-Problem, positiver Befund, Ursache, Verbesserungsvorschlag, KJ-Methode, Bewertung (Rating)
- Neue Methoden mit KI (Buchentwurf 2025): Videos und Testsitzungen transkribieren, Videos analysieren
- Auswertung der Aufzeichnungen aus moderierten Remote-Tests (2–4 Nutzer) und unmoderierten Tests: Transkription (Claude), Befundentwurf je Stelle im Video mit Beleg
- Bewertung jedes Befunds: Schweregrad (positiv, gering, schwer, kritisch, katastrophal, gute Idee) und Grad der Auswirkung, daraus eine gesamtheitliche Bewertung
- Prüfdialog Claude – Usability-Tester: Claude präsentiert die Befunde in Listenform; der Tester prüft Beschreibung und Bewertung gegen das Video und ändert oder berichtigt einzelne Befunde; Änderungen werden protokolliert, Entscheidung bleibt beim Menschen
- Geschlossene Schleife: Befund, KI-Vorschlag, Prüfung, Änderung im Prototyp, automatische Prüfung, Kurz-Retest
- Definition Grad der Auswirkung: Anteil der betroffenen Testpersonen und Aufgaben; zusammen mit dem Schweregrad ergibt sich die gesamtheitliche Bewertung (Kriterien im Kurs festgelegt)
(Fortsetzung) 1.6 TE 6 Auswertung mit KI, Clustern, Priorisieren und Usability-Testbericht
- Clustern und Priorisieren: Befunde mit Claude zu Themen clustern lassen (Vorschlag), danach im KJ-Workshop mit dem Team gemeinsam gruppieren, benennen und priorisieren; Vergleich der Cluster von Claude und Team, Priorisierung nach Schweregrad, Grad der Auswirkung und Aufwand
- HCAIX-TE-Begriffe: Kommunikation der Befunde, Evaluations- und Testbericht, Klassifikation und Schweregrade, Videozusammenfassung, Management-Summary
- Aufbau des Berichts am umfangreichen Beispiel (Pizza-Hut-Website, deutsch und englisch): Zusammenfassung mit positiven Ergebnissen, Verbesserungen und Empfehlungen; Klassifizierung der Ergebnisse; Ergebnisse nach Themen (Befund, entdeckt durch welche Methode, Empfehlung); Evaluationsgegenstand, Ziel und Methode; Testskript; Teilnehmerliste; Anhänge (Ergebnisse je Testperson, Index der Testergebnisse)
- Befunde formulieren und belegen (Fundstelle, Belegstelle im Video, Empfehlung), Priorisierung, positive Ergebnisse nicht vergessen
- KI-Berichtsentwurf aus den im Prüfdialog bestätigten Befunden mit Beleglink; Gegenlesen und Freigabe durch den Tester
- Präsentation der Ergebnisse für Auftraggeber und Team
- Evaluation von Physical-AI-Systemen: Tests in der realen Umgebung (Raststätte), Beobachtung von Gerät, Handlung und Umgebung gemeinsam, Sicherheitsaspekte in Befunden und Bericht
Praktische Übungen: Praxisübung 5 – Auswertung mit Claude, Clustern, Priorisieren (KJ-Workshop) und Usability-Testbericht – 3 UE
- Aufgabe: Aufzeichnungen aus zwei moderierten Remote-Tests und einem unmoderierten Test transkribieren; Claude erstellt den Befundentwurf mit Schweregrad, Grad der Auswirkung und Gesamtbewertung
- Prüfdialog: Befundliste mit Claude durchgehen, einzelne Befunde gegen das Video prüfen, ändern oder berichtigen; Änderungsprotokoll
- Clustern und Priorisieren: Claude clustert die Befunde und schlägt eine Priorisierung vor; danach KJ-Workshop im Team (Karten gruppieren, Cluster benennen, Priorisierung abstimmen); Vergleich mit dem Vorschlag von Claude und Entscheidung
- Usability-Testbericht nach dem Aufbau des Beispielberichts (Abschnitt 1.6) und Kurzpräsentation
- Claude Code: Auswertungsskript für die Problemliste (Häufigkeit, Schweregrad, Auswirkung) schreiben lassen, Code lesen und testen
- Ergebnis: geprüfte, geclusterte und priorisierte Befundliste sowie Usability-Testbericht zur gewählten Website (als letzte Übung des Themenblocks)
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 6 – 8 UE
- Quiz TE 6, Testbericht überarbeiten, Clustern und Priorisieren nacharbeiten, Befundliste im Dialog mit Claude nacharbeiten
- Wiederholung HCAIX-TE Testing & Evaluation: Kompetenzmodell, Probeaufgaben der Teilprüfung, Glossar
- Lesen: Lehrmaterial TE Kap. 6 (Clustern, Priorisieren, Testbericht)
- Projektübung: Befunde clustern und priorisieren (Vorbereitung für den KJ-Workshop), Testbericht-Gliederung entwerfen
1.7 TE 7 Unmoderierte Tests, Barrierefreiheitsprüfung und Testautomatisierung (HCAIX-TE Kap. TE 7 (Inhalte CPUX-UT Kap. 1–3)) – 4 UE
- Unmoderierter Remote-Test: Aufgabenformulierung ohne Moderator, Technik, Stichprobe, Datenqualität und Betrugsrisiken
- Barrierefreiheitsprüfung: Prüfpunkte, Werkzeuge, Prüfung mit Nutzern mit Einschränkungen; Grenzen automatischer Prüfung
- Testautomatisierung und KI: Aufzeichnung, Ereigniserkennung, Transkription; Stichprobenprüfung der KI-Ergebnisse
- Methodenvergleich Mensch und KI für Barrierefreiheit und unmoderierte Tests (Blatt „Methoden Mensch und KI“)
Praktische Übungen: Praxisübung 6 – Unmoderierter Test und Barrierefreiheitsprüfung – 6 UE
- Aufgabe: unmoderierten Kurztest für die selbst gewählte Website entwerfen und mit 2–3 Personen durchführen (Aufgaben, Erfolgskriterien, Aufzeichnung)
- Barrierefreiheitsprüfung mit Prüfwerkzeug und manueller Stichprobe; Vergleich der Befunde
- Claude: Auswertung der Aufzeichnungen und Befunde mit Gegenprüfung an der Aufzeichnung
- Ergebnis: Auswertung des unmoderierten Tests, Befundliste Barrierefreiheit
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 7 – 8 UE
- Ziel: Übung 6 vorbereiten und nacharbeiten
- Lesen: Lehrmaterial TE Kap. 7; WCAG-Grundlagen (Überblick); Hinweise zum unmoderierten Test
- Selbstständig arbeiten: Aufgaben für den unmoderierten Test entwerfen und mit Claude auf Hinweise und Suggestivformulierungen prüfen; Prüfwerkzeug für Barrierefreiheit ausprobieren
- Ergebnis: Aufgabenset, erste Barrierefreiheitsbefunde, Lerntagebuch
1.8 TE 8 KI-Funktionen evaluieren: Testsatz, Fehlerarten, Vertrauen und Red Teaming (HCAIX-TE Kap. TE 8 (HCAIX-TE)) – 4 UE
- Fehlerarten, Fehlerrate und Fehlerfolgen von KI-Funktionen; Vertrauen und Verlässlichkeit
- Testsatz und Eval-Harness: feste Eingaben, erwartete Ausgaben, Auswertung; LLM als Prüfinstanz und deren Grenzen
- Red Teaming, Fehlverhalten und Schaden (Bezug ISO 9241-110, Vermeidung von Schäden)
- Nutzerseitige Evaluation von KI-Funktionen im Usability-Test (Beobachtung, Fragen, Vertrauensmaß)
Praktische Übungen: Praxisübung 7 – KI-Funktion evaluieren (Testsatz, Fehlerarten, Vertrauen) – 6 UE
- Aufgabe: KI-Funktion der selbst gewählten Website oder eines Claude-Projekts mit einem Testsatz von 20 Eingaben prüfen; Fehlerarten klassifizieren
- Mit Claude einen Eval-Harness entwerfen, Ausgaben bewerten lassen und die Bewertung an einer Stichprobe gegenprüfen
- Kurze Beobachtung mit 2 Personen: Vertrauen in die KI-Antwort messen
- Ergebnis: Evaluationsbericht zur KI-Funktion mit Fehlerarten und Empfehlungen
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 8 – 10 UE
- Ziel: Übung 7 vorbereiten, TE-Inhalte festigen
- Lesen: Lehrmaterial TE Kap. 8; Quiz TE 7 und 8
- Selbstständig arbeiten: Testsatz für die KI-Funktion erstellen; Claude erkunden: Eval-Prompts und Bewertung durch Claude an einer Stichprobe nachprüfen
- Ergebnis: Testsatz, Fehlerartenliste, Lerntagebuch
Prüfungsvorbereitung HCAIX-TE (Wiederholung live) (HCAIX-TE) – 4 UE
- Wiederholung der Inhalte Testing & Evaluation, Beispielaufgaben, offene Fragen
Eigenverantwortliches Lernen: Eigenverantwortliches Lernen 27 – 4 UE
- Lerntagebuch und Projektergebnisse durchsehen, Übungen zur Prüfung TE bearbeiten, Fragen für die Wiederholung sammeln
Teilprüfung HCAIX-TE (HCAIX-TE) – 8 UE
- Eigene Prüfung der Usability Academy auf Basis des HCAIX-Kompetenzmodells (Format, Dauer und Bestehensregel noch festzulegen)
GESAMT-SUMME RAHMENPLAN – 38 UE
UE gesamt (Theorie + Trainerbetreuung + Coaching + Eigenverantwortliches Lernen)
Anteil eigenverantwortliches Lernen an UE gesamt: 50 %
Live (Theorie + Übungen + Coaching): Theorieanteil
Hinweis Prüfung: Zwei Prüfungstage (je 8 UE): Vorbereitungstag (4 UE Wiederholung live als Theorie, 4 UE eigenverantwortlich) und Prüfungstag (8 UE live, hier unter Theorie geführt). Die Teilprüfung HCAIX-TE ist eine eigene Prüfung der Usability Academy auf Basis des HCAIX-Kompetenzmodells (Format, Dauer, Bestehensregel und Termine festlegen); die Zertifizierungsstelle ist vor Einreichung zu klären.
Kursinfo – Digital AI Testing & Evaluation Expert
- 38 UE Theorie live online mit Trainer
- 36 UE Übungen mit Trainerbetreuung
- 12 UE Coaching
- 74 UE eigenverantwortliches Lernen mit Betreuung
- 20 Tage à 8 UE, UE à 45 Minuten
- Live online im V-Classroom-XL
Zertifikat der Usability Academy auf Basis des HCAIX-Kompetenzmodells (Level 2) nach bestandener Teilprüfung HCAIX-TE: Digital AI Testing & Evaluation Expert (Human-Centered AI eXperience). Der Themenblock ist zusammen mit UA1018 belegbar. Die Inhalte von CPUX-UT (UXQB) sind den Teilnehmenden bekannt; eine Vorbereitung auf die Prüfung von UXQB ist nicht Teil des Kurses. Für das HCAIX-Zertifizierungssystem ist eine eigene Organisation (Verein bzw. Verband, vergleichbar IREB und UXQB) geplant.
Personen mit Erfahrung in digitaler Produktgestaltung und Nutzerforschung, die ihr Profil auf KI-gestützte Evaluation und Usability-Testing erweitern: insbesondere UX-, UI- und Interaction-Designerinnen und -Designer, Webdesigner, Usability-Fachleute und Produktverantwortliche sowie Berufsrückkehrende und Arbeitsuchende, die sich auf Expertenniveau neu aufstellen (Internet, Software, Internet der Dinge, Produktentwicklung, Automobil, Verwaltung, Luft- und Raumfahrt, Medizintechnik). Voraussetzung ist UA1018 oder gleichwertiges Wissen.
Live-Onlinekurs mit zertifizierten Trainern
- Kurspreis 3.012,01 € netto pro Teilnehmer
- Förderung über Bildungsgutschein beantragt
- Maximal 12 Teilnehmende
- Die Förderung über Bildungsgutschein der Agentur für Arbeit ist beantragt.
- Die Zulassung des Kurses steht noch aus; die Zertifikatsnummer folgt nach der Zulassung.
- Fragen zur Förderung beantworten wir gern: Angebot & Unterlagen anfordern.
Termine – Digital AI Testing & Evaluation Expert
Wöchentlicher Start jeden Montag. Wir senden Dir die nächsten Starttermine mit Angebot und Unterlagen. Die Förderung über Bildungsgutschein ist beantragt.
| Event | Event Date - Event End Date | Individual Price | Register |
|---|---|---|---|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
04.01.2027 - 29.01.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
11.01.2027 - 05.02.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
18.01.2027 - 12.02.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
25.01.2027 - 19.02.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
01.02.2027 - 26.02.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
08.02.2027 - 05.03.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
15.02.2027 - 12.03.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
22.02.2027 - 19.03.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
01.03.2027 - 26.03.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
08.03.2027 - 02.04.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
15.03.2027 - 09.04.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
22.03.2027 - 16.04.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
29.03.2027 - 23.04.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
05.04.2027 - 30.04.2027 9:00 - 16:00 |
3,012.01€ |
|
|
UA1088 Digital AI Testing & Evaluation Expert DE LIVE ONLINE 160 UE in 4 Wochen (20 Tage)20 Tage à 8 UE (UE à 45 Min.)Zertifikat: Digital AI Testing & Evaluati... |
12.04.2027 - 07.05.2027 9:00 - 16:00 |
3,012.01€ |
Was Du lernst – Digital AI Testing & Evaluation Expert
Seminarziel
- Aufbauend auf UA1018 (CPUX-F, HCAIX Level 1) erwerben die Teilnehmenden auf Advanced-Niveau die Kompetenzen, digitale Produkte und Systeme mit künstlicher Intelligenz (KI) menschzentriert zu testen und zu evaluieren
- Der Bereich des HCAIX-Zertifizierungssystems Level 2 ist Testing & Evaluation (Inhalte CPUX-UT)
- Sie führen Usability-Inspektionen und moderierte sowie unmoderierte Remote-Usability-Tests durch, befragen Nutzende, prüfen die Barrierefreiheit, evaluieren KI-Funktionen (Fehlerarten, Fehlerrate, Vertrauen, Wizard-of-Oz) und werten Aufzeichnungen mit KI (Claude) aus
- Als durchgängiges Beispiel für Physical AI (KI, die über Sensoren wahrnimmt und in der physischen Welt handelt) dient die Kaffeemaschine, deren Oberfläche und KI-Funktionen die Teilnehmenden evaluieren
- KI wird in doppelter Weise beherrscht: als Werkzeug und Methode (Claude und Claude Code in den Arbeitsschritten) und als Gegenstand der Evaluation (KI-Funktionen des Produkts)
Inhaltsbeschreibung
- Der Kurs besteht aus dem Themenblock HCAIX-TE und der zugehörigen Prüfung (Gesamtumfang 160 UE, 20 Tage): • Themenblock HCAIX-TE (Testing & Evaluation), 144 UE, Tag 1–18: Usability-Inspektion nach ISO 9241-110, moderierte und unmoderierte Remote-Usability-Tests (Testplan, Testskript mit Aufgaben, Vor- und Nachbedingungen, Erfolgskriterien), Benutzerbefragung (CSAT; Überblick SUS, UEQ, NPS), Barrierefreiheitsprüfung, Evaluierung von KI-Funktionen, Auswertung der Aufzeichnungen mit KI (Claude) im Prüfdialog, Clustern und Priorisieren (KJ-Workshop), Usability-Testbericht (Inhalte CPUX-UT), an real existierenden Websites. • Prüfung, 16 UE, Tag 19–20: Prüfungsvorbereitung und Teilprüfung HCAIX-TE
Zielgruppe
- Personen mit Erfahrung in digitaler Produktgestaltung und Nutzerforschung, die ihr Profil auf KI-gestützte Evaluation und Usability-Testing erweitern: insbesondere UX-, UI- und Interaction-Designerinnen und -Designer, Webdesigner, Usability-Fachleute und Produktverantwortliche sowie Berufsrückkehrende und Arbeitsuchende, die sich auf Expertenniveau neu aufstellen (Internet, Software, Internet der Dinge, Produktentwicklung, Automobil, Verwaltung, Luft- und Raumfahrt, Medizintechnik)
- Voraussetzung ist UA1018 oder gleichwertiges Wissen
Voraussetzungen
- UA1018 Digital Product Design CPUX-F AI UX oder gleichwertige Kenntnisse (CPUX-F, HCAIX Level 1, Pizza-Projekt)
- Die Aufnahme erfolgt über die Eignungsfeststellung (Eignungsinterview), die auch die vorhandenen Vorkenntnisse prüft
- Deutschkenntnisse mindestens B2
Arbeitsmarktrelevanz
- Generative KI übernimmt zunehmend reine Layout- und Gestaltungsarbeit und verändert das Berufsbild von UX- und UI-Designern
- Gefragt bleiben Kompetenzen, die KI nicht ersetzt: Nutzer und Nutzungskontext verstehen, KI-Funktionen bewerten und KI-Ergebnisse prüfen
- Die Weiterbildung adressiert Stellen mit Bezug zu Usability Testing und Evaluation, Qualitätssicherung von KI-Funktionen und Barrierefreiheitsprüfung
- Die Teilnehmenden erwerben belegbare Kompetenz im Umgang mit KI-Werkzeugen (Claude, Claude Code), in der Bewertung von KI-Funktionen und ein Projektportfolio
- Die Inhalte von CPUX-UT (UXQB) sind den Teilnehmenden bekannt; eine Vorbereitung auf die UXQB-Prüfung ist nicht Teil des Kurses
Du wirst Teil einer großen Community von KI & UX Professionals

"Ich fand das Seminar insgesamt sehr gelungen. Auch die Gestaltung der Schulung als remote/online Schulung hat mir gut gefallen. Die Arbeit mit dem digitalen Whiteboard hat mir ebenfalls gut gefallen..."

"Trainer war sehr flexibel und ging sehr gut auf die Bedürfnisse der Teilnehmer ein. - auch remote sehr gute Arbeitsathmosphäre"

"Das Übersichts-PDF, das den kompletten HCD-Prozess erweitert und übersichtlich darstellt - das war wirklich hilfreich..."

"Fragen, die man jederzeit stellen durfte, wurden immer ausführlich beantwortet. Das gemeinsame Durcharbeiten von praktischen Aufgaben und den Übungsaufgaben war sehr hilfreich bei der Prüfungsvorbereitung…"
Viele Firmen setzen auf unsere Weiterbildungen















Kursformate - Projektarbeit Digitale Transformation

Intensives Training - passend wenn es schnell gehen muss

Passt auch nebenberuflich oder wenn die Kinder in der Schule sind

Passt berufsbegleitend, nebenberuflich und für Langschläfer

Für Alle, die mit Ihrer Zeit jonglieren müssen
Du hast Fragen zum UX Seminar? Lass uns mit ZOOM treffen :-)




