DATONG AI大同

Kann ein KI-Agent die Arbeit eines anderen Agenten prüfen?

Ja, aber lassen Sie zwei KIs nicht einfach gegenseitig ihre Arbeit lesen und kritisieren. Wirksamer ist ein Testsystem: Was sich mit Regeln prüfen lässt, prüfen Regeln; für alles, was fachliches Urteil braucht, legen die Mitarbeitenden aus dem Tagesgeschäft die Maßstäbe fest. Verbessert wird dann anhand der Testergebnisse.

中文 English

Eine Frage aus einer Schulung

Vor Kurzem hat DATONG AI in einem Unternehmen eine Schulung gegeben. Thema: wie man KI nicht mehr nur im Chatfenster nutzt, sondern einen Agenten die Arbeit direkt erledigen lässt. Nach der praktischen Übung fragte eine Teilnehmerin aus dem Vertrieb: Kann ein zweiter Agent prüfen, was der erste gemacht hat?

Die Frage trifft den Kern. Was ein Agent abliefert, muss im Alltag geprüft werden, von einem Menschen oder durch einen festen Mechanismus. Entscheidend ist, wie.

Warum nicht einfach eine KI die andere prüfen lassen?

Wenn ein Agent die Einschätzungen, Strategien, den Code oder die Urteile eines anderen Agenten liest, passiert oft eines von zwei Dingen. Entweder sucht der Prüfer das Haar in der Suppe: Er findet immer etwas, auch wenn es kein echtes Problem gibt. Oder der geprüfte Agent baut zur Absicherung immer mehr Vorbehalte ein, und das Ergebnis wird immer vorsichtiger.

Dazu kommt: Manche Fehler erkennt eine einfache Regel sofort, etwa ob eine Zahl oder ein Format stimmt. Diese Prüfung einem teuren Modell zum „Nachdenken“ zu geben, ist Verschwendung. Ob jemand Fieber hat, zeigt das Thermometer; dafür braucht es kein Gremium aus drei Fachärzten. In unseren eigenen Projekten hat sich gezeigt: Agenten einfach gegenseitig prüfen zu lassen, kostet meist nur zusätzliche Rechenleistung.

Variante A: KIs prüfen sich gegenseitigAgent 1Agent 2findet immer etwas, auch ohne echtes Problemder geprüfte Agent wird immer vorsichtigerteures Modell „denkt“ über Regelfehler nachVariante B: erst testen, dann verbessernAgent liefert ein Ergebnis1Regeln prüfen: automatisch, jedes Mal2Checkliste: Maßstab vom Fachteam3Testergebnis als BelegAnleitung anpassen, neu testen
Zwei Arten zu prüfen: Gegenseitige Kritik dreht sich im Kreis, Tests liefern Belege zum Verbessern.

Beispiel: E-Mails an Kunden

Der Teilnehmerin ging es um Kunden-E-Mails. In der Schulung zerlegen wir das gemeinsam:

  • Was Regeln prüfen können: Stimmen Name und Firma des Kunden? Passen Preise und Liefertermine zum Angebot? Ist der Anhang dabei? Steht „Sie“, wo „Sie“ stehen muss? Das wird als Prüfregel hinterlegt und läuft bei jeder E-Mail automatisch, ohne dass ein Modell urteilen muss.
  • Was fachliches Urteil braucht: Passt der Ton? Klingt der Text nach unserem Unternehmen? Versteht der Kunde die Wörter? Wird zu viel versprochen? Das kann nur beurteilen, wer jeden Tag mit Kunden schreibt. Dafür nehmen die Teilnehmenden eigene E-Mails, die sie für gelungen halten, und machen aus „gut“ einige Punkte, die man abhaken kann.
  • Dann schreibt der Agent für eine Reihe echter Situationen, und die Ergebnisse werden Punkt für Punkt abgeglichen. Wo es immer wieder hakt, wird die Anleitung des Agenten angepasst.

Eine zweite KI kann dabei durchaus helfen, aber als jemand, der die Checkliste des Vertriebs Punkt für Punkt abhakt, nicht als freier Kritiker. Bei anspruchsvolleren Aufgaben wird in Stufen getestet: zuerst Format und Fakten, dann das fachliche Urteil, zuletzt die Wirkung im echten Ablauf.

1Format und FaktenRegelName, Preis, Liefertermin, Anhang, Sie/duals Regel hinterlegt, jede E-Mail automatisch2Fachliches UrteilMaßstab vom TeamTon, Stil, Wortwahl, nichts zu viel versprechenCheckliste vom Vertrieb; KI hakt nur ab3Echter AblaufWirkungeine Zeit lang im Alltag laufen lassenWirkung ansehen, dann gezielt verbessern
Beispiel Kunden-E-Mails: in drei Stufen testen, vom Günstigsten und Eindeutigsten zuerst.

Warum die Mitarbeitenden die Maßstäbe festlegen

Ob ein Agent zu vorsichtig arbeitet oder am eigentlichen Geschäftsziel vorbei, können nur die Menschen beurteilen, die die Arbeit täglich machen. Externe Berater, die IT oder auch die Geschäftsführung wissen nicht unbedingt besser, wie eine gute Nachfass-E-Mail aussieht. Die Logik dahinter ist nicht schwer. Viele kommen nur nicht sofort darauf, weil sie nie programmiert und noch wenig mit KI gearbeitet haben. Deshalb erarbeiten die Teilnehmenden in den Schulungen von DATONG AI diesen Schritt selbst: was getestet wird und wie.

Wann sich das nicht lohnt

Für Einmaliges, das nicht nach außen geht, etwa ein eigenes Besprechungsprotokoll, reicht ein kurzer Blick. Ein Testsystem lohnt sich für Arbeit, die sich täglich oder wöchentlich wiederholt und bei der ein Fehler Kunden oder Geld betrifft.

DATONG AI ist ein Team in Deutschland, das für kleine und mittlere Unternehmen KI-Automatisierung aufbaut, die Mitarbeitenden schult und den Betrieb nach dem Start betreut. Kontakt