Was eine Selbstverbesserungsschleife braucht
Ein Agent verbessert seine eigene Arbeit, wenn vier Dinge zutreffen:
- Er kann handeln: den Code schreiben, die App starten, das Formular ausfüllen.
- Er kann das Ergebnis beobachten, nicht nur seine eigene Ausgabe. „Der Code kompiliert“ ist nicht „der Nutzer hat die E-Mail bekommen“.
- Er kann vergleichen, diesen Versuch mit dem letzten, und weiß so, ob eine Änderung geholfen hat.
- Er kann behalten, was er gelernt hat, damit der nächste Versuch oder die nächste Sitzung weiter vorn beginnt.
Das Erste können Agents schon gut. Die anderen drei hängen von Werkzeugen ab.
Wo die Schleife bei der Registrierung bricht
- Das Ergebnis liegt in einem Posteingang. Der Agent sendet das Formular ab und sieht „Prüfe deine E-Mails“. Ob etwas gesendet wurde, wohin der Link führt und ob der Code funktioniert, liegt außerhalb seiner Reichweite.
- Also meldet er zu früh Erfolg. „Registrierung ist implementiert“ heißt meist, dass das Formular sich absenden lässt. Der Agent hat keinen Beleg in die eine oder andere Richtung, und du auch nicht.
- Eine erfundene Adresse kann den Ablauf nicht abschließen, und deine eigene Adresse funktioniert einmal.
- Nichts wird übernommen. Ohne Aufzeichnung des letzten Laufs kann der Agent eine Korrektur nicht von einem Zufall unterscheiden.
Die Schleife mit Proxy Mail QA
Der Agent macht jeden Schritt. Proxy Mail QA ist das, womit er prüft.
| Schritt | Der Agent | Das Werkzeug, das er nutzt |
|---|---|---|
| Handeln | Baut oder ändert den Ablauf, öffnet die Registrierungsseite | Sein eigener Editor und Browser |
| Holt eine Adresse, eine Persona und ein Passwort für das Formular | form_values oder create_address |
|
| Beobachten | Wartet nach dem Absenden auf den Code oder Link | wait_for_code, wait_for_link |
| Fragt, warum nichts kam | check_delivery |
|
| Prüft Versand, Link, Ablauf und Größe der E-Mail | check_email, count_emails |
|
| Vergleichen | Zeichnet die Sitzung auf und liest, was sich seit den letzten geändert hat | start_run, finish_run |
| Behalten | Speichert mit deiner Zustimmung, was er über das Formular gelernt hat | save_custom_field, save_signup_screen |
Ein erster Durchgang läuft oft so:
- Der Agent fügt E-Mail-Bestätigung hinzu und registriert sich mit einer neuen Testadresse.
- Das Warten findet nichts. Die Zustellprüfung sagt, dass der E-Mail-Anbieter nur an bestätigte Adressen sendet. Der Agent sieht, dass seine Arbeit nicht fertig ist, und warum.
- Er korrigiert das Setup des Anbieters und läuft erneut. Die E-Mail kommt in vier Sekunden an, aber die Prüfung sagt, dass ihr Link auf
localhostzeigt. - Er korrigiert die Site-URL und läuft erneut. Der Link öffnet Staging, das Konto ist bestätigt, und es kam eine E-Mail.
- Der Bericht des Laufs zeigt alle drei Versuche. Der Agent sagt dir, was er geändert hat, und zeigt die Belege.
Ohne den Posteingang hätte der Agent nach Schritt 1 aufgehört und gesagt, er sei fertig.
Drei Dinge, die der Agent verbessert
Seine Arbeit, in dieser Sitzung. Jede Prüfung antwortet mit dem, was fehlschlug und warum. Die nächste Änderung des Agents hat also ein Ziel. Das ist die Schleife oben.
Das Setup des Projekts, für jede spätere Sitzung. Trifft der Agent auf ein Feld, das er nicht ausfüllen kann, etwa die Unternehmensgröße, kann er dich fragen und die Antwort als benutzerdefiniertes Feld speichern. Stellt er fest, dass das Formular über mehrere Bildschirme geht, kann er diese speichern. Der nächste Agent oder die nächste Person mit der Chrome-Erweiterung füllt das Formular beim ersten Mal richtig aus. Der Agent ändert das nur, wenn du darum bittest oder zustimmst.
Seine eigenen Anweisungen, für sich selbst. Bitte den Agent, eine Sitzung damit zu beenden, dass er das Gelernte in die Datei schreibt, die er zu Beginn jeder Sitzung liest (CLAUDE.md, AGENTS.md oder ein Skill): „Der E-Mail-Anbieter von Staging braucht eine bestätigte Domain“, „der Reset-Link läuft nach 10 Minuten ab, also sofort öffnen“. Das kommt dem Wort rekursiv am nächsten: Der Agent nutzt die Belege eines Laufs, um zu ändern, wie er im nächsten arbeitet.
After each change to sign-up, login or password reset, run the auth regression pack onstaging with Proxy Mail QA. If the report shows a new failure, fix it and run again.When it passes, add one line to AGENTS.md for anything you learnt that the next sessionshould know, and show me the report.Wissen, ob es besser wurde
Eine Schleife braucht ein Maß. Das Auth-Regressionspaket macht jedes Mal dieselben Prüfungen: Registrierung, ein benutzter Link zweimal geöffnet, ein ersetzter Reset-Link, eine Einladung. Sein Bericht endet mit dem, was sich seit den letzten Läufen geändert hat: langsamere E-Mails, zusätzliche E-Mails, neue oder sporadische Fehler, neu fehlschlagende Prüfungen, ein neuer Absender oder eine neue Link-Site.
So hat der Agent ein Vorher und ein Nachher, und du hast etwas zu lesen, das der Agent nicht über sich selbst geschrieben hat.
Meldet stattdessen eine Person einen Fehler, startet dieselbe Schleife mit ihrem Bericht: siehe Fehlerberichte zu Registrierung und Login mit einem Agent sichten.
Was bei dir bleibt
- Proxy Mail QA ändert kein Modell und keinen Code. Das Verbessern ist Sache des Agents, die Fehler auch. Lies den Bericht, nicht nur die Zusammenfassung.
- Nur Test-Builds. Die Schleife läuft auf Entwicklungs-, Staging- und Preview-Sites, nie auf deiner Live-Site oder den Konten echter Nutzer.
- Dauerhafte Änderungen brauchen dein Ja. Benutzerdefinierte Felder, Sites und Registrierungsbildschirme betreffen alle im Projekt.
- Der Bericht enthält keinen E-Mail-Text. Er bewahrt Adressen, Zeiten, Prüfungen und die Site jedes Links auf und kann daher in einen Pull Request.
- Nur E-Mail. Per SMS gesendete Codes werden nicht abgedeckt.