· seed · Aktualisiert 16.10.2026
Akzeptanzkriterien und Abbruchregeln für einen KI-Piloten
Ein Machbarkeitstest sollte eine konkrete Entscheidung ermöglichen, nicht beweisen, dass sich jedes Produktmerkmal bauen lässt. Legen Sie vor dem Prototyp Nutzeraufgabe, heutige Ausgangslage, nötige Belege für eine Fortsetzung und Abbruchbedingungen fest. Wählen Sie Kriterien für den konkreten Ablauf; ein universeller KI-Qualitätswert passt nicht zu jeder Aufgabe.
Akzeptanztest vor der Umsetzung festlegen
- Frage: Welche Unsicherheit soll der Pilot klären?
- Umfang: Welche Person, Eingaben, Ausgabe und menschliche Prüfung gehören dazu? Was bleibt außen vor?
- Ausgangslage: Wie wird die Aufgabe heute erledigt, und welche repräsentativen Beispiele lassen sich vergleichen?
- Erfolgskriterien: Welche Qualitäts-, Sicherheits-, Ablauf-, Latenz- und Kostengrenzen sind wichtig?
- Verantwortung: Wer prüft die Stichprobe und entscheidet über Fortsetzung, Eingrenzung, Wiederholung oder Abbruch?
Die Beispiele sollten Normalfälle, fehlende Angaben, Grenzfälle und einen klaren Weg „nicht beantworten“ enthalten. Lassen Sie den Testsatz beim Vergleich gleich und trennen Sie gemessene Ergebnisse von Einschätzungen. Ändern sich Aufgabe oder Daten, dokumentieren Sie einen neuen Test, statt unterschiedliche Durchläufe gleichzusetzen.
Beispiel für eine Pilotentscheidung
Das erfundene Beispiel beschreibt einen geplanten Test, kein Ergebnis und keinen allgemeinen Maßstab. Ein Team prüft einen Assistenten, der Produktbeschreibungen aus einem freigegebenen Katalog entwirft. Vor dem Bau könnte es 20 Artikel als Stichprobe festlegen, mindestens 18 Entwürfe nach dem eigenen Vollständigkeitsraster verlangen, erfundene Eigenschaften ausschließen und Zeit- sowie Ausgabenlimit setzen. Zusätzlich dokumentiert das Team den bisherigen manuellen Ablauf. Die Zahlen sind Beispiele; andere Aufgaben brauchen zum Risiko und Nutzen passende Kriterien.
Abbrechen, eingrenzen oder erneut testen
Brechen Sie ab, wenn Zeit- oder Ausgabenlimit überschritten werden, nötige Daten nicht unter freigegebenen Bedingungen genutzt werden können oder eine kritische Sicherheits- oder Genauigkeitsregel wiederholt scheitert. Grenzen Sie den Umfang ein, wenn nur eine Eingabeklasse unzuverlässig ist. Wiederholen Sie den Test nach einer benannten Änderung mit demselben repräsentativen Satz und einer separaten Prüfung des behobenen Falls. Ist die Stichprobe zu klein oder verzerrt, lautet das Ergebnis „nicht aussagekräftig“ statt „bestanden“.
Checkliste für den Machbarkeitstest
- Eine Entscheidungsfrage und klar begrenzte Nutzeraufgabe.
- Dokumentierte Ausgangslage und repräsentative Prüfbeispiele.
- Schriftliche Definitionen für bestanden, nicht bestanden, Abbruch und unklar.
- Vorab vereinbarte Grenzen zu Zeit, Kosten, Datenzugriff und menschlicher Prüfung.
- Verantwortliche Person und nächster Schritt mit den Belegen festgehalten.
Eine ausführlichere Abbruchregel bietet Abbruchkriterien für KI-Experimente. Zur Prüfmenge siehe Mindestumfang von Evaluationen, zur Eingrenzung Umfang früh begrenzen.
Für Unterstützung beim Versuchsdesign siehe unsere Leistungen.