Mark Emelianov
DE

Agenten · Compliance · Entwurf

Wie man eine AI World zum Laufen bringt und konform hält

Wer einem Agenten eine Aufgabe gibt, kann nachlesen, was er getan hat. Wer zwanzig Agenten langlaufende Schleifen gibt, dazu mehrere Hosts und eine Handvoll Menschen, die weiter die Verantwortung behalten müssen, kann nicht mehr alles lesen. Die Welt hält nur zusammen, wenn drei Dinge zutreffen: Jede Aktion durchläuft ein Gate, jeder Agent ist isoliert, und jeder Schritt hinterlässt einen Nachweis.

Die gute Nachricht: Es sind dieselben Bausteine. Die Kontrollen, die eine solche Welt funktionieren lassen, sind der Nachweis, den ein Compliance-Prüfer sehen will. Compliance ist kein zweites System obendrauf.

Eine Regel, vier Ebenen

Jede Ebene geht davon aus, dass die darüberliegende Ebene sich irren kann, und begrenzt, was ein Fehler erreichen kann.

Vertrauenszonen einer Agentenwelt Drei Zonen von links nach rechts: eine Agenten-Sandbox mit begrenzten Zugangsdaten, ein Gate mit Prüfung, Scan und Freigabe durch den Owner, und der gemeinsame Kern. Darunter kleine Hosts, die nur über per Allow-List freigegebene Befehle und signierte Nachrichten ohne eingehenden Port erreichbar sind. Ein Nachweisband darunter zeichnet jeden Übergang auf. Sandboxhier arbeiten die Agentenbegrenzte Zugangsdatenkein Ausweg aus eigener Kraft Gateunabhängige PrüfungMarker-ScanFreigabe durch den Owner Gemeinsamer KernÄnderungen kommen Branch für Branch aneine Instanz pro Organisation Kleine Hosts: freigegebene Befehle, kein eingehender Port Nachweis: Jeder Übergang hinterlässt eine Aufzeichnung, der andere folgen können
Abbildung: Vertrauenszonen einer Agentenwelt, nur in Rollen dargestellt.

Es zum Laufen bringen: harte Kontrollen, keine guten Absichten

Core und Instanzen. Ein gemeinsames Core-Repository; jede Organisation erhält eine eigene Instanz. Arbeit trifft Branch für Branch ein, sodass sich nichts an Ort und Stelle ändert.

Unabhängige Prüf-Gates. Ein Prüfer ist an genau den Commit gebunden, den er geprüft hat, sodass ausgeliefert wird, was geprüft wurde. Ein Marker-Scan verhindert, dass Organisationsdaten in den gemeinsamen Core gelangen. Der Owner gibt den Merge frei.

Ein winziger Host-Agent (ein Entwurf, noch nicht im Einsatz). Er würde kein Modell enthalten. Er würde nur Allow-List-Befehle über git und signierte Nachrichten ausführen und an keinem eingehenden Port lauschen. Ein manipulierter Agent fände dort fast nichts, was er erreichen könnte.

Vier Schleifen gegen Drift. Lange autonome Arbeit schweift ab. Getrennte Schleifen, jede mit einer messbaren Fortschrittsregel, halten sie auf Kurs.

Eine Karte der Welt. Eine in Zonen gegliederte, anklickbare Übersicht über Agenten, Hosts und Plattformen ist in Entwicklung.

Schwere Aufträge nacheinander. Aufwendige Arbeit zu serialisieren hält gemeinsame Ressourcen berechenbar.

Was ein Gate durchläuft und was nur protokolliert wird

Zu sagen, jede Aktion durchlaufe ein Gate, wäre falsch, und es würde nicht funktionieren. Die Gates richten sich nach der Art der Aktion.

Mit Gate, ein Mensch entscheidet:

Nur protokolliert, ohne dass jemand wartet:

Das Protokoll wird anschließend geprüft. Lesen und Entwürfe lassen sich leicht rückgängig machen, daher bleiben sie frei; das Gate ist für das reserviert, was sich schwer zurücknehmen lässt.

Eine Grenze: Freigabemüdigkeit. Wenn alles um Freigabe bittet, lesen Menschen nicht mehr, was sie freigeben, und klicken sich durch. Ein Gate, das immer offen ist, schützt nichts. Das Gegenmittel sind weniger, klarere Gates, nach Risiko gesetzt, die jeweils genau zeigen, was freigegeben wird, während der Rest dem Protokoll überlassen bleibt.

Der Pfad mit Gates von der Agentenarbeit bis zur Produktion Fünf Schritte in einer Reihe: Ein Agent arbeitet auf einem Branch, eine unabhängige Prüfung ist an den exakten Commit gebunden, ein Marker-Scan blockiert Organisationsdaten, der Owner genehmigt den Merge, und jeder Schritt hinterlässt eine Aufzeichnung. Agentarbeitet auf einem Branch Prüfenan den Commit gebunden Scanblockiert Org.-Daten Ownergenehmigt den Merge AufzeichnungNachweis bleibt erhalten Nichts erreicht die Produktion, ohne jedes Gate zu passieren Jeder Pfeil geht davon aus, dass der Schritt davor sich irren kann
Abbildung: der Pfad mit Gates von der Agentenarbeit bis zur Produktion.

Es konform machen: dieselben Kontrollen, als Nachweis gelesen

BausteinWas er belegtAnknüpfungspunkte zu Rahmenwerken (Richtwerte)
Vom Owner genehmigter MergeEin Mensch entscheidet, bevor eine Änderung live gehtISO 27001 Änderungsmanagement; EU AI Act menschliche Aufsicht (Hochrisiko-Systeme); NIST AI RMF Govern
Unabhängige, an einen Commit gebundene PrüfungFunktionstrennung; geprüft heißt ausgeliefertISO 27001 sichere Entwicklung; SOC 2 Änderungsmanagement
Isolation und Allow-ListsMinimale Rechte; begrenzter SchadensradiusISO 27001 Zugangssteuerung und Konfigurationsmanagement; SOC 2 logischer Zugriff
Signierte Nachrichten und ProtokolleWer hat wann was getanISO 27001 Protokollierung; EU AI Act Aufzeichnungspflichten (Hochrisiko-Systeme)
Risikoregister und AufgabenverfolgungBekannte Risiken haben Verantwortliche und TermineISO 27001 Risikobehandlung; ISO/IEC 42001; NIST AI RMF Map und Manage
Verfolgung der ReadinessLücken gegenüber dem EU AI Act und dem Cyber Resilience Act werden früh sichtbarEU AI Act; EU Cyber Resilience Act

Diese Anknüpfungspunkte sind Richtwerte, keine Zertifizierungsaussage und keine Rechtsberatung.

So fängt man an: fünf Schritte

  1. Erfassen. Jeden Agenten, jeden Host und jede Plattform auflisten und festhalten, was sie jeweils berühren können. Was man nicht sieht, kann man nicht steuern.
  2. Isolieren. Begrenzte Zugangsdaten, Sandboxes, Allow-Listen. Davon ausgehen, dass sich jeder Agent irren oder manipuliert werden kann.
  3. Mit Gate versehen. Unabhängige Prüfung und Freigabe durch den Owner, bevor etwas die Sandbox verlässt.
  4. Aufzeichnen. Nachweise zum Nebenprodukt machen: signierte Nachrichten, Commit-gebundene Prüfungen, Aufgabenverlauf.
  5. Auf Rahmenwerke abbilden. Jede Kontrolle mit der Erwartung verknüpfen, die sie beantwortet, die Readiness verfolgen und in einem festen Rhythmus prüfen.