heise+ | Testautomatisierung mit KI: Agenten erkennen Lücken, aber keine Lügen
Ein QA-Agent erhält einen Bugreport: „Im QuantumSync-Modul bricht die Hyperreplikation ab, wenn man den Flux-Abgleich startet.“ Der Agent liefert sofort einen Testfall mit ID, Priorität, Klassifikation und der Vorbedingung: „Das QuantumSync-Modul ist installiert und gestartet.“ Der Reviewer überfliegt ihn: sauber formatiert. Freigabe.
- QA-Agenten erkennen fehlende Testfälle zu 100 %, sind jedoch unfähig, falsche Inhalte zu identifizieren.
- Ein Experiment mit 400 Läufen bestätigt diese Schwäche und zeigt die Gefahr für sorgfältige Teams auf.
- Fünf einfache Maßnahmen schließen die Lücke, ohne neue Plattform oder langfristige Vorbereitungen.
Es gibt nur ein Problem: Das QuantumSync-Modul existiert nicht. Wir haben es erfunden.
Konfabulation im Originalformat. Input/Output bei erfundener Komponente: 10/10 Läufen lieferten den halluzinierten Testfall; null Rückfragen
Zehn von zehn Läufen lieferten diesen Testfall, null Rückfragen. Denselben Report mit einem fehlenden Log-Anhang wiesen die Agenten dagegen in allen zehn Fällen zurück.
KioskNews shows a cleaned-up reading view extracted from the publisher’s page — the original always lives on their site, not ours.