Events Blog

Kritische Erfolgsfaktoren für AI Agents im Unternehmen

Die Frage, warum KI-Agenten in Unternehmen scheitern, wird meistens mit dem Betriebsmodell beantwortet, und das zu Recht: Ohne klare Zuständigkeit, Überwachung und Eskalation findet kein Agent eine institutionelle Heimat. Inzwischen haben viele Organisationen diese Hausaufgabe gemacht. Sie haben Rollen benannt, Freigabestufen definiert und ein Monitoring aufgebaut. Und trotzdem bleibt ein erheblicher Teil der Agenten wirkungslos. Der Grund liegt in Entscheidungen, die deutlich früher fallen, meist bevor überhaupt ein Werkzeug ausgewählt wurde. Vier Faktoren entscheiden in der Praxis darüber, ob aus einem Agenten Wirkung wird.

Prozessreife entscheidet vor der Technologie

Ein Agent verstärkt den Prozess, auf den er gesetzt wird. Ist der Prozess klar beschrieben, mit definierten Ein- und Ausgängen und einer nachvollziehbaren Entscheidungslogik, entsteht Entlastung. Ist er es nicht, entsteht ein System, das Unklarheit schneller produziert als vorher. Genau hier liegt der häufigste Fehlgriff bei der Auswahl: Ausgewählt wird der Prozess mit dem größten Schmerz, und der größte Schmerz entsteht meist gerade deshalb, weil der Prozess nicht beschrieben ist. Der Agent wird dann zum Werkzeug einer Prozessklärung, für die er nicht gebaut ist.

Die belastbare Reihenfolge ist unbequem, aber kurz. Vor dem Bau wird der Prozess in einer Form beschrieben, die ein neuer Mitarbeiter ohne Rückfragen ausführen könnte. Gelingt diese Beschreibung nicht, ist der Prozess nicht agentenfähig, und die richtige Maßnahme ist Prozessarbeit, nicht Technologie. Diese Prüfung kostet wenige Tage und verhindert Projekte, die nach Monaten ergebnislos beendet werden. Sie ist außerdem der einzige Schritt, dessen Ergebnis auch dann wertvoll bleibt, wenn am Ende kein Agent gebaut wird.

Datenzugang ist der häufigste stille Blocker

In nahezu jedem gescheiterten Agentenprojekt findet sich derselbe Verlauf. Der Prototyp funktioniert auf Beispieldaten, die Fachseite ist überzeugt, und dann beginnt die Klärung, unter welchen Rechten der Agent produktiv auf dieselben Daten zugreifen darf. Diese Klärung dauert regelmäßig länger als der gesamte Bau und endet häufig mit einem eingeschränkten Zugriff, unter dem der ursprüngliche Nutzen nicht mehr entsteht. Das Problem ist nicht die Sicherheitsanforderung, sondern der Zeitpunkt, zu dem sie gestellt wird.

Ein Agent handelt zudem unter einer Identität, und diese Frage ist in den meisten Berechtigungsmodellen nicht vorgesehen. Handelt er unter der Identität des Nutzers, erbt er dessen Rechte und damit auch die Unschärfen einer über Jahre gewachsenen Rechtevergabe. Handelt er unter einer eigenen technischen Identität, braucht es ein Modell dafür, wer diese Rechte verantwortet und wie ihre Nutzung nachvollziehbar bleibt. Wer diese Entscheidung an den Anfang stellt statt ans Ende, verliert einige Wochen früh und gewinnt Monate später.

Der Zuschnitt der Aufgabe bestimmt die Zuverlässigkeit

Die Erwartung an einen Agenten wird in der Regel zu breit formuliert. Ein Agent, der einen ganzen Vorgang übernehmen soll, trifft auf dem Weg dutzende Einzelentscheidungen, und die Zuverlässigkeit des Gesamtergebnisses ist das Produkt der Zuverlässigkeiten aller Schritte. Bei einer Trefferquote von fünfundneunzig Prozent je Schritt liegt ein zwanzigstufiger Vorgang unter fünfzig Prozent. Diese Rechnung erklärt, warum breit zugeschnittene Agenten in der Demonstration überzeugen und im Alltag enttäuschen, ohne dass sich am Modell etwas geändert hätte.

Wirksam sind eng zugeschnittene Agenten mit klarem Abbruchkriterium. Ein Agent, der genau einen Vorgangstyp bearbeitet und in jedem Zweifelsfall an einen Menschen übergibt, erzeugt messbare Entlastung und Vertrauen. Aus mehreren solchen Agenten lässt sich später eine Kette bauen, deren Zuverlässigkeit bekannt ist, weil jedes Glied einzeln gemessen wurde. Der umgekehrte Weg, vom breiten Agenten zur nachträglichen Eingrenzung, gelingt selten, weil die Enttäuschung im Fachbereich zu diesem Zeitpunkt bereits eingetreten ist.

Akzeptanz und Messbarkeit entstehen nicht nebenbei

Ein Agent verändert die Arbeit derjenigen, die ihn nutzen sollen, und zwar häufig in Richtung Prüfen statt Ausführen. Diese Verschiebung ist anspruchsvoller, als sie klingt, denn das Prüfen einer plausibel formulierten Ausgabe verlangt mehr Fachkenntnis als die Ausführung nach Anleitung. Wird diese Veränderung nicht benannt und begleitet, entsteht entweder Ablehnung oder das andere Extrem, nämlich ungeprüfte Übernahme. Beides macht den Agenten wirkungslos, das zweite zusätzlich riskant.

Ebenso wenig entsteht Messbarkeit von selbst. Wer den Nutzen eines Agenten belegen will, braucht eine Ausgangsmessung aus der Zeit davor, und die lässt sich im Nachhinein nicht rekonstruieren. Zwei bis drei Kennzahlen genügen, etwa Bearbeitungsdauer je Vorgang, Quote der Fälle ohne menschlichen Eingriff und Fehlerquote im Ergebnis. Ohne diese Basis endet jede Diskussion über die Fortführung in Meinungen, und in Meinungsdiskussionen verlieren Agenten regelmäßig gegen den Status quo.

Fazit und Empfehlung

Ob ein Agent Wirkung entfaltet, entscheidet sich vor dem ersten Prompt. Für die nächsten neunzig Tage empfehlen wir drei Schritte. Erstens die geplanten Anwendungsfälle gegen die Prozessreife prüfen und diejenigen zurückstellen, deren Prozess sich nicht in einer Seite beschreiben lässt. Zweitens die Frage der Identität und Berechtigung für den ersten produktiven Agenten klären, bevor gebaut wird, und das Ergebnis als Vorlage für weitere nutzen. Drittens den Zuschnitt auf einen Vorgangstyp begrenzen, ein Abbruchkriterium definieren und die Ausgangsmessung durchführen, solange der Zustand davor noch messbar ist.

ECODYNAMICS begleitet Unternehmen bei genau dieser Vorarbeit. Im Rahmen von AI Agents Solutions prüfen wir Anwendungsfälle auf Agentenfähigkeit, klären Datenzugang und Zuschnitt und bauen den ersten produktiven Agenten gemeinsam mit Ihren Teams. In der Masterclass AI-Agenten und Adaption befähigen wir Fach- und Führungskräfte, diese Beurteilung künftig selbst vorzunehmen. Wenn bei Ihnen mehrere Agenten in der Pilotphase stehen und der Sprung in den Regelbetrieb ausbleibt, sprechen Sie uns an.

← Zurück zum Blog