# KI-Agenten prüfen — Arbeitsvorlage

Raphael Lugmayr · Version 1.0 · 13. September 2026
Einordnung: https://raphaellugmayr.at/gedanken/ki-agenten-pruefen

Diese Vorlage hilft, einen begrenzten Versuch vorzubereiten und dessen Ergebnis
nachvollziehbar festzuhalten. Sie ist kein Nachweis für die allgemeine Qualität
eines Systems. Für jeden Prüffall und jede Wiederholung eine eigene Kopie nutzen.

## 1. Auftrag und erwartete Übergabe

- Aufgabe in einem Satz:
- Wer verwendet das Ergebnis, wofür?
- Eingaben und deren Stand:
- Erwartetes Ergebnis und Dateiformat:
- Vergleich: Wie wird diese Aufgabe bisher erledigt?

Beispiel, ausdrücklich konstruiert: Drei Angebote anhand vorgegebener Anforderungen
vergleichen; eine Tabelle mit Quellenstellen und offenen Fragen übergeben.

## 2. Befugnisse und Grenzen

- Erlaubte Dateien, Daten und Werkzeuge:
- Erlaubte Änderungen:
- Aktionen, die eine menschliche Freigabe brauchen:
- Aktionen, die ausgeschlossen bleiben:
- Wann soll das System nachfragen oder anhalten?
- Wer kann den Versuch stoppen, wie lässt sich eine Änderung zurücknehmen?

Für den Beispielauftrag: keine Preise ergänzen, niemanden kontaktieren,
keine Daten außerhalb des vereinbarten Arbeitsbereichs ändern.

## 3. Prüffall vorab beschreiben

- Kennung des Falls:
- Normale Aufgabe oder schwieriger Fall? Was genau wird geprüft?
- Erwartetes Verhalten:
- Kriterien für ein brauchbares Ergebnis:
- Fehler, die diesen Versuch unbrauchbar machen:
- Fachlich prüfende Person:

Zusätzlich ausprobieren: fehlender Anhang, widersprüchliche Fassungen,
nicht erreichbare Quelle und ein Auftrag, der abgelehnt werden sollte.

## 4. Durchführung dokumentieren

- Datum und Wiederholung Nr.:
- Modell, Anwendung und Versionsstand:
- Auftragsformulierung und Werkzeugkonfiguration:
- Tatsächlich verwendete Eingaben:
- Dauer und beobachteter Aufwand, soweit erhoben:
- Ablage von Ergebnis und Ablaufprotokoll:

## 5. Ergebnis, Ablauf und Entscheidung getrennt festhalten

- Ergebnis: Welche Kriterien sind erfüllt? Welche nicht? Belege:
- Ablauf: Wurden Befugnisse eingehalten? Belege:
- Unsicherheit: Was blieb offen oder konnte nicht geprüft werden?
- Nacharbeit: Was musste eine Person korrigieren?
- Entscheidung: Für diesen Einsatz brauchbar / weitere Prüfung / verwerfen:
- Grenzen dieser Entscheidung und nächster Versuch:

Eine erfolgreiche Wiederholung ist noch keine belastbare Erfolgsquote. Bei einer
Zusammenfassung Anzahl, Auswahl und Wiederholungen der Fälle mit angeben.

Die Vorlage kann für die eigene Arbeit kopiert und angepasst werden. Bei einer
Weitergabe helfen Quellenlink, Versionsstand und ein Hinweis auf eigene Änderungen.